Это современное и полное руководство по инсталляции, настройке и обслуживанию любой системы UNIX или Linux, включая системы, предоставляющие базовую инфраструктуру Интернета и облачную инфраструктуру.
Обновленное с учетом новых дистрибутивов и облачных сред, это всестороннее руководство охватывает лучшие практики для всех аспектов системного администрирования, включая управление хранением данных, проектирование и администрирование сети, безопасность, веб-хостинг, автоматизацию, управление конфигурацией, анализ производительности, виртуализацию, DNS, безопасность и управление IT-организациями. Авторы — специалисты мирового класса — рассмотрели облачные платформы, методологию DevOps, непрерывное развертывание, контейнеризацию, мониторинг и многие другие важные темы.
Независимо от вашей роли в системах и сетях, построенных на UNIX или Linux, это понятное, хорошо написанное руководство поможет повысить эффективность и поможет решить ваши самые острые проблемы. Книга предназначена для студентов, системных администраторов и всех программистов, использующих системы FreeBSD и Linux.
Нажмите на звезду, чтобы оценить!
Прочитали: 1 643
ЭВИ НЕМЕТ, ГАРТ СНАЙДЕР, ТРЕНТ ХЕИН, БЭН УЭЙЛИ при участии Терри Морреале, Нала Мак-Клейна, Рона Якима, Дэвида Швайкерта и Тоби Отикера 4-Е ИЗДАНИЕ UNIX и LINUX РУКОВОДСТВО СИСТЕМНОГО АДМИНИСТРАТОРА
UNIX AND LINUX SYSTEM ADMINISTRATION HANDBOOK Fourth Edition Evi Nemeth Garth Snyder Trent R. Hein Ben Whaley with Terry Morreale, Ned McClain, Ron Jachim, David Schweikert, and Tobi Oetiker • • PRENTICE HALL Upper Saddle River, NJ • Boston • Indianapolis • San Francisco New York - Toronto • Montreal • London • Munich • Paris • Madrid Capetown • Sydney - Tokyo • Singapore • Mexico City
UNIX И LINUX РУКОВОДСТВО СИСТЕМНОГО АДМИНИСТРАТОРА 4-е издание Эви Немет Гарт Снайдер Трент Хейн Бэн Уэйли при участии Терри Морреале, Нэда Макклейна, Рона Якима, Дэвида Швайкерта и Тоби Отикера Москва • Санкт-Петербург • Киев 2012
£>DJS. JZ.?/ J.ZU-U1O.Z./ J H50 УДК 681.3.07 Издательский дом “Вильямс” Зав. редакцией С.Н. Тригуб Перевод с английского докт. физ.-мат. наук ДА. Илюшина и Н.М. Ручко Под редакцией докт. физ.-мат. наук Д А. Илюшина По общим вопросам обращайтесь в Издательский дом “Вильямс” по адресу: info@williamspublishing.com, http://www.williamspublishing.com Немет, Эви, Снайдер, Гарт, Хейн, Трент, Уэйли, Бэн. Н50 Unix и Linux: руководство системного администратора, 4-е изд. : Пер. с англ. — М.: ООО “И.Д. Вильямс”, 2012. — 1312 с.: ил. — Парал. тит. англ. ISBN 978-5-8459-1740-9 (рус.) ББК 32.973.26-018.2.75 Все названия программных продуктов являются зарегистрированными торговыми марками соответ- ствующих фирм. Никакая часть настоящего издания ни в каких целях не может быть воспроизведена в какой бы то ни было форме и какими бы то ни было средствами, будь то электронные или механические, включая фото- копирование и запись на магнитный носитель, если на это нет письменного разрешения издательства Prentice Hall, Inc. Authorized translation from the English language edition published by Prentice Hall, Inc., Copyright © 2011 Pearson Education, Inc. All rights reserved. No part of this book may be reproduced or transmitted in any form or by any means, elec- tronic or mechanical, including photocopying, recording or by any information storage retrieval system, without permission from the Publisher. Red Hat Enterprise Linux and the Red Hat SHADOWMAN logo are registered trademarks of Red Hat Inc., and such trademarks are used with permission. Ubuntu is a registered trademark of Canonical Limited, and is used with permission. SUSE and openSUSE are registered trademarks of Novell Inc. in the United States and other countries. Oracle Solaris and OpenSolaris are registered trademarks of Oracle and/or its affiliates. All rights reserved. HP-UX is a registered trademark of Hewlett-Packard Company. (HP-UX®) AIX is a trademark of IBM Corp., registered in the U.S. and other countries. Russian language edition published by Williams Publishing House according to the Agreement with R&I Enterprises International, Copyright © 2012 Научно-популярное издание Эви Немет, Ihpr Снайдер, Т^ент Хейн, Бэн Уэйли Unix и Linux: руководство системного администратора 4-е издание Литературный редактор ЕД. Давидян Верстка М.А. Удалов Художественный редактор В.Г. Павлютин Корректор Л. А. Гордиенко Подписано в печать 07.12.2011. Формат 70x100/16. Гарнитура limes. Печать офсетная. Усл. печ. л. 105,78. Уч.-изд. л. 96,3. Тираж 1000 экз. Заказ № 27034. Отпечатано по технологии CtP в ОАО “Первая Образцовая типография”, обособленное подразделение “Печатный двор”. 197110, Санкт-Петербург, Чкаловский пр., 15. ООО “И. Д. Вильямс”, 127055, г. Москва, ул. Лесная, д. 43, стр. 1 SBN 978-5-8459-1740-9 (рус.) © Издательский дом “Вильямс”, 2012 SBN 978-0-13-148005-6 (англ.) © Pearson Education, Inc., 2011
Оглавление Часть I. Основы администрирования 41 Глава 1. С чего начать 43 Глава 2. Сценарии и командная оболочка 70 Глава 3. Запуск и останов системы 119 Глава 4. Управление доступом: сила привилегий 145 Глава 5. Управление процессами 163 Глава 6. Файловая система 184 Глава 7. Добавление новых пользователей 218 Глава 8. Дисковая память 252 Глава 9. Периодические процессы 330 Глава 10. Резервное копирование 339 Глава 11. Система Syslog и журнальные файлы 388 Глава 12. Управление программным обеспечением и конфигурацией 412 Глава 13. Драйверы и ядро 464 Часть II. Работа в сетях 493 Глава 14. Сети TCP/IP 495 Глава 15. Маршрутизация 558 Глава 16. Сетевые аппаратные средства 577 Глава 17. Система доменных имен 597 Глава 18. Сетевой протокол Network File System 735 Глава 19. Совместное использование системных файлов 764 Глава 20. Электронная почта 787 Глава 21. Управление сетями 907 Глава 22. Безопасность 943 Глава 23. Веб-хостинг 1001 Часть III. Разное 1025 Глава 24. Виртуализация 1027 Глава 25. Система X Window System 1055 Глава 26. Печать 1076 Глава 27. Центры обработки данных 1129 Глава 28. Экологичные информационные технологии 1141 Глава 29. Анализ производительности 1157 Глава 30. Взаимодействие с системой Windows 1180 Глава 31. Последовательные устройства и терминалы 1208 Глава 32. Управление, стратегия и политика 1228 Краткая история системного администрирования 1278 В защиту AIX 1288 Предметный указатель 1291
Содержание Об авторах 34 О соавторах 35 Предисловие 3° Введение 3^ Благодарности 3^ Часть I. Основы администрирования 41 Глава 1. С чего начать 43 1.1. Основные задачи системного администратора 44 Инициализация пользователей 44 Подключение и удаление аппаратных средств 44 Резервное копирование 45 Инсталляция и обновление программ 45 Мониторинг системы 45 Поиск неисправностей 45 Ведение локальной документации 46 Слежение за безопасностью системы 46 Оказание помощи пользователям 46 1.2. Что необходимо знать 46 1.3. Взаимосвязь систем Linux и UNIX 48 1.4. Дистрибутивы Linux 49 1.5. Примеры систем, используемых в этой книге 51 Примеры Linux-дистрибутивов 51 Примеры UNIX-дистрибутивов 53 1.6. Административные средства конкретных систем 54 1.7. Типографские особенности книги 54 1.8. Единицы измерения 55 1.9. Использование справочных страниц и другой оперативной документации 56 Организация справочных страниц интерактивного руководства 56 Команда man: чтение страниц интерактивного руководства 57 Хранение страниц интерактивного руководства 58 GNU-система Texinfo 58 1.10. Другие виды официальной документации 59 Руководства по конкретным системам 59 Документация по конкретным пакетам 60 Книги 60 Документы RFC и другие интернет-ресурсы 60 Проект документации по Linux 60 1.11. Другие источники информации 61 1.12. Как инсталлировать программное обеспечение 62 Определение факта инсталляции программного обеспечения 63 Добавление новых программ 64 Сборка программного обеспечения из исходного кода 66 (1.13. Издержки профессии 67 ! 1.14. Рекомендуемая литература 67 ; Системное администрирование 68
Содержание 7 Основной инструментарий 68 1.15. Упражнения 69 Глава 2. Сценарии и командная оболочка 70 2.1. Основы работы с командной оболочки 71 Редактирование команд 71 Каналы и перенаправление потоков 72 Использование переменных и кавычек 73 Команды общих фильтров 74 2.2. Написание bash-сценариев 78 От команд к сценариям 79 Организация ввода и вывода данных 81 Функции и аргументы командной строки 82 Область видимости переменных 84 Поток управления 84 Циклы 86 Массивы и арифметика 88 2.3. Регулярные выражения 89 Процесс сопоставления 90 Литеральные символы 91 Специальные символы 91 Примеры использования регулярных выражений 92 Захваты 93 Жадность, леность и катастрофический поиск с возвратом 94 2.4. Программирование на языке Perl 96 Переменные и массивы 97 Массив и строковые литералы 97 Вызовы функций 98 Преобразования типов в выражениях 98 Раскрытие строк и устранение неоднозначности при ссылках на переменные 99 Хеши 99 Ссылки и их самооживление 101 Регулярные выражения в Perl 101 Ввод и вывод данных 102 Поток управления ЮЗ Прием входных данных и проверка их достоверности 105 Использование языка Perl в качестве фильтра 106 Модули расширения для Peri 107 2.5. Создание сценариев на языке PYTHON 108 Быстрое погружение в языковую среду Python 109 Объекты, строки, числа, списки, словари, кортежи и файлы 111 Пример контроля входных данных 112 Циклы ИЗ 2.6. Передовой опыт создания сценариев 115 2.7. Рекомендуемая литература 117 Основы работы в командной оболочке и написание сценариев в среде bash 117 Регулярные выражения 117 Написание сценариев на языке Perl 117 Написание сценариев на языке Python 117 2-8. Упражнения 118
8 Содержание Глава 3. Запуск и останов системы 119 3.1. Начальная загрузка 119 Главное — активизировать командную оболочку 120 Этапы загрузки 120 Инициализация ядра 121 Конфигурирование аппаратных средств 121 Создание процессов ядра 121 Действия оператора (только в режиме восстановления) 122 Выполнение сценариев запуска системы 123 Завершение процесса загрузки 123 3.2. Загрузка системы на персональном компьютере 124 3.3. GRUB: универсальный загрузчик 125 Параметры ядра 126 Мультисистемная загрузка 127 3.4. Загрузка в однопользовательском режиме 128 Однопользовательский режим при использовании GRUB 128 Однопользовательский режим в архитектуре SPARC 128 Однопользовательский режим на рабочих станциях HP-UX 129 Однопользовательский режим в системах AIX 129 3.5. Работа со сценариями запуска системы 129 Демон init и его уровни выполнения 130 Обзор сценариев запуска 131 Сценарии запуска в системах Red Hat 133 Сценарии запуска в системах SUSE 135 Сценарии запуска Ubuntu и демон Upstart 136 Сценарии запуска в системах HP-UX 137 Запуск систем AIX 138 3.6. Загрузка систем SOLARIS 139 Механизм управления службами в системе Solaris 139 Прекрасный новый мир: загрузка с помощью механизма SMF 142 3.7. Перезагрузка и останов системы 142 Команда shutdown: корректный способ останова системы 143 Команды halt и reboot: более простой способ останова 144 3.8. Упражнения 144 Глава 4. Управление доступом: сила привилегий 145 4.1. Традиционные методы управления доступом в системах UNIX 146 Управление доступом в файловой системе 146 Владение процессом 147 Учетная запись суперпользователя 147 Использование битов “setuid” и “setgid” 148 4.2. Современная организация управления доступом 149 Управление доступом на основе ролей 150 SELinux: Linux-системы с улучшенной безопасностью 151 Возможности POSIX (Linux) 151 Подключаемые модули аутентификации 152 Сетевой протокол криптографической аутентификации Kerberos 152 Списки управления доступом 152 4.3. Управление доступом в реальном мире 153
Содержание 9 Пароль суперпользователя 153 Регистрация под именем root 155 Команда su: замена идентификатора пользователя 155 Утилита sudo: ограниченный вариант команды su 156 Хранилища паролей и их депонирование 159 4.4. О псевдопользователях 160 4.5. Упражнения 161 Глава 5. Управление процессами 163 5.1. Атрибуты процесса 163 Идентификатор процесса (PID) 164 Идентификатор родительского процесса (PPID) 164 Идентификатор пользователя (UID) и текущий идентификатор пользователя (EUID) 165 Идентификатор группы (GID) и текущий идентификатор группы (EGID) 165 Приоритет и фактор уступчивости 166 Управляющий терминал 166 5.2. Жизненный цикл процесса 166 5.3. Сигналы 167 5.4. Отправка сигналов: команда kill 170 5.5. Состояния процесса 171 5.6. Изменение приоритета выполнения: команды nice и renice 172 5.7. Текущий контроль процессов: команда ps 173 5.8. Динамический мониторинг процессов с помощью команд top, prstat и topas 177 5.9. Файловая система /ргос 178 5.10. Отслеживание сигналов и системных вызовов: команды strace, truss и tusc 179 5.11. Процессы, вышедшие из-под контроля 181 5.12. Рекомендуемая литература 182 5.13. Упражнения 182 Глава 6. Файловая система 184 6.1. Имена файлов и каталогов 186 Абсолютные и относительные пути 186 Использование пробелов в именах файлов 186 6.2. Монтирование и демонтирование файловой системы 187 6.3. Организация файловой системы 189 6.4. Типы файлов 192 Обычные файлы 193 Каталоги 193 Файлы символьных и блочных устройств 194 Локальные сокеты 195 Именованные каналы 195 Символические ссылки 195 6.5. Атрибуть! файлов 196 Биты режима 196 Биты setuid и setgid 197 Дополнительный бит 198 Команда 1s: просмотр атрибутов файла 198 Команда chmod: изменение прав доступа 200
10 Содержание Команды chown и chgrp: смена владельца и группы 201 Команда umask: задание стандартных прав доступа 202 Дополнительные флаги в системе Linux 202 6.6. Списки контроля доступа 203 Краткий обзор развития UNIX-списков ACL 204 Реализация списков ACL 205 Системная поддержка списков ACL 205 Обзор POSIXACL 206 Списки NFSv4 ACL 210 6.7. Упражнения 216 Глава 7. Добавление новых пользователей 218 7.1. Файл /etc/passwd 219 Регистрационное имя 220 Зашифрованный пароль 223 Идентификатор пользователя 224 Идентификатор группы по умолчанию 225 Поле GECOS 226 Домашний каталог 226 Регистрационная оболочка 226 7.2. Файлы /etc/shadow и /etc/security/passwd 227 6.3. Файл /etc/group 230 7.4. Подключение пользователей: основные действия 232 Редактирование файлов passwd и group 233 Задание пароля 233 Создание домашнего каталога пользователя и инсталляция конфигурационных файлов 233 Установка прав доступа и прав собственности 235 Назначение каталога для электронной почты 235 Конфигурирование ролей и административных привилегий 235 Заключительные действия 236 7.5. Добавление пользователей с помощью программы useradd 236 Команда useradd в системе Ubuntu 237 Команда useradd в системе SUSE 238 Команда useradd в системе Red Hat 238 Команда useradd в системе Solaris 239 Команда useradd в системе HP-UX 240 Команда useradd в системе AIX 240 Пример использования команды useradd 242 7.6. Добавление пользователей “пакетом” с помощью команды newusers (Linux) 243 7.7. Удаление пользователей 243 7.6. Отключение учетной записи 245 7.9. Управление учетными записями системными средствами 246 7.10. Уменьшение риска с помощью РАМ 247 7.11. Централизация управления учетными записями 247 Протокол LDAP и служба Active Directory 247 Системы “единого входа” 248 Системы управления учетными данными 249 7.12. Рекомендуемая литература 250
Содержание 11 7.13. Упражнения 250 Глава 8. Дисковая память 252 8.1. Добавление диска 253 Инструкции для системы Linux 253 Инструкции для системы Solaris 254 Инструкции для системы HP-UX 254 Инструкции для системы AIX 255 8.2. Аппаратное обеспечение дисковой памяти 255 Жесткие диски 256 Флеш-диски 258 8.3. Интерфейсы устройств хранения данных 259 Интерфейс РАТА 261 Интерфейсы SATA 262 Параллельный интерфейс SCSI 262 Последовательный интерфейс SCSI 265 Что лучше: SCSI или SATA? 265 8.4. Программное обеспечение накопителей 266 8.5. Присоединение и низкоуровневое управление накопителями 269 Верификация инсталляции на уровне аппаратного обеспечения 269 Файлы накопителя 270 Форматирование и плохое управление блоками 273 Безопасное стирание дисков АТА 274 Команда hdparm: параметры диска и интерфейса (Linux) 275 Мониторинг жесткого диска с помощью стандарта SMART 276 8.6. Разбиение диска 278 Традиционное разбиение 279 Разбиение диска в стиле системы Windows 281 GPT: таблица разделов GUID 281 Разбиение дисков в системе Linux 282 Разбиение дисков в системе Solaris 283 Разбиение дисков в системе HP-UX 283 8.7. RAID: избыточные массивы недорогих дисков 283 Программная и аппаратная реализации системы RAID 284 Уровни системы RAID 284 Восстановление диска после сбоя 287 Недостатки конфигурации RAID 5 288 Команда mdadm: программное обеспечение RAID в системе Linux 289 8.8. Управление логическими томами 292 Реализации управления логическими томами 292 Управление логическими томами в системе Linux 294 Управление логическими томами в системе HP-UX 298 Управление логическими томами в системе AIX 300 8.9. Файловые системы 301 Файловые системы Linux: семейство ext 302 Файловые системы HP-UX: VxFS и HFS 303 Файловая система JFS2 в операционной системе AIX 303 Терминология файловой системы 303 Полиморфизм файловых систем 304 F Команда mkfs: форматирование файловых систем 305
12 Содержание Команда fsck: проверка и исправление файловых систем 305 Монтирование файловой системы 306 Настройка автоматического монтирования 307 Монтирование USB-накопителя 310 Включение подкачки 310 8.10. Файловая система ZFS: все проблемы решены 311 Архитектура ZFS 311 Пример: добавление диска в системе Solaris 312 Файловые системы и свойства 313 Наследование свойств 314 Одна файловая система на пользователя 315 Мгновенные копии и клоны 316 Неразмеченные логические тома 318 Распределение файловой системы между NFS, CIFS и SCSI 318 Управление пулом хранения 319 8.11. Сеть хранения данных 320 Сети SAN 322 Протокол iSCSI: интерфейс SCSI на основе протокола IP 323 Загрузка с тома iSCSI 324 Специфика инициаторов iSCSI от разных производителей 324 8.12. Упражнения 328 Глава 9. Периодические процессы 330 9.1. Демон сгоп: системный планировщик 330 9.2. Формат crontab-файлов 331 9.3. Управление crontab-файлами 333 9.4. Использование версии демона Vixie-cron 334 9.5. Стандартные применения демона сгоп 335 Простые напоминания 335 Чистка файловой системы 336 Распространение конфигурационных файлов по сети 337 Ротация журнальных файлов 338 9.6. Упражнения 338 Глава 10. Резервное копирование 339 10.1. Принципы резервного копирования 340 Создавайте резервные копии на центральном компьютере 340 Маркируйте носители 340 Правильно выбирайте периодичность резервного копирования 341 Будьте осмотрительны при выборе архивируемых файловых систем 341 Старайтесь умещать каждодневные архивы на одном носителе 342 Храните носители вне рабочего помещения 342 Защищайте резервные копии 343 Активность файловой системы во время создания архива должна быть низкой 343 Проверяйте состояние своих носителей 344 Определите жизненный цикл носителя 345 Компонуйте данные с учетом резервного копирования 346 Будьте готовы к худшему 346 10.2. Устройства и носители, используемые для резервного копирования 347 Оптические носители: CD_R/RW, DVD±R/RW, DVD RAM и Blu-ray 347
содержание 15 Переносные и съемные жесткие диски Магнитные ленты Малые лентопротяжные устройства: 8-миллиметровые и DDS/DAT Устройства DLT/S-DLT Устройства AIT и SAIT Устройства VXA/VXA-X Устройства LTO Системы с автоматической загрузкой носителей (автозагрузчики, ленточные массивы и библиотеки) Жесткие диски Интернет и службы облачного резервирования данных Типы носителей Что покупать Ю.З. Экономия пространства и времени с помощью инкрементного архивирования Простая схема Умеренная схема 10.4. Команда dump: настройка режима резервирования Архивирование файловых систем Команда restore: восстановление файлов из резервных копий Восстановление файловых систем Восстановление системы на новом оборудовании 10.5. Архивирование и восстановление при модификации операционной системы 10.6. Другие архиваторы Команда tar упаковка файлов Команда dd: манипулирование битами Резервирование файловых систем ZFS 10.7. Запись нескольких архивов на одну ленту 10.8. Программа Bacula Модель, используемая программой Bacula Настройка программы Bacula Установка базы данных и демонов Bacula Конфигурирование демонов Bacula Разделы конфигурации Конфигурирование демона управления: файл bacula-dir.conf Конфигурирование демона хранения: файл bacula-sd.conf Конфигурирование консоли: файл bconsole.conf Установка и конфигурирование демона управления файлами клиента Запуск демонов Bacula Добавление носителей в пулы Выполнение архивирования вручную Выполнение задания восстановления Архивирование клиентов Windows Мониторинг конфигураций программы Bacula Советы по использованию программы Bacula Альтернатива программе Bacula 10-9. Коммерческие системы резервного копирования ADSM/TSM Veritas NetBackup EMC NetWbrker Прочие программы 348 349 349 349 350 350 351 351 351 352 352 353 354 355 355 356 356 359 363 363 363 364 365 366 367 367 369 369 370 371 372 375 377 377 378 378 378 379 382 382 383 383 384 384 385 385 386
14 Содержание 10.10. Рекомендуемая литература 386 10.11. Упражнения 386 Глава 11. Система Syslog и журнальные файлы 388 11.1. Обнаружение файлов регистрации 389 Специальные журнальные файлы 390 Особенности систем 392 11.2. Syslog: система регистрации событий 393 Архитектура системы Syslog 394 Конфигурирование демона syslogd 394 Примеры конфигурационных файлов 398 Отладка системы Syslog 400 Альтернатива системе Syslog 400 Журнальная регистрация на уровне ядра и на этапе начальной загрузки 401 11.3. Регистрация сообщений и обработка ошибок в системе AIX 402 Конфигурация системы Syslog в среде AIX 404 11.4. Утилита logrotate: управление журнальными файлами 405 11.5. Поиск полезной информации в журнальных файлах 407 11.6. Методы обработки журнальных файлов 408 11.7. Упражнения 410 Глава 12. Управление программным обеспечением и конфигурацией 412 12.1. Инсталляция систем Linux и OpenSolaris 413 Загрузка по сети на персональном компьютере 413 Конфигурирование протокола РХЕ в Linux 414 Дистанционная загрузка на специализированных компьютерах 414 Использование Kickstart — автоматизированного инсталлятора Red Hat Enterprise Linux 415 Использование AutoYaST: автоматизированный инсталлятор SUSE 417 Автоматизированная инсталляция систем Ubuntu 418 12.2. Инсталляция Solaris 420 Сетевые инсталляции с помощью JumpStart 421 Сетевые инсталляции с помощью автоматизированного инсталлятора 425 12.3. Инсталляция HP-UX 426 Автоматизация инсталляций Ignite-UX 429 12.4. Инсталляция системы AIX с помощью сетевого менеджера инсталляции 429 12.5. Управление пакетами 430 12.6. Управление Linux-пакетами 431 Команда rpm: управление пакетами RPM 432 Команда dpkg: управление пакетами .deb в системе Ubuntu 433 12.7. Использование высокоуровневых систем управления пакетами в Linux 434 Хранилища пакетов 435 Служба Red Hat Network 436 APT: усовершенствованное средство управления пакетами 437 Конфигурирование apt-get 438 Создание локального зеркала хранилища 439 Автоматизация работы утилиты apt-get 440 Система yum: управление выпусками для RPM 441 Система управления пакетами Zypper для SUSE: теперь еще более мощная! 441
Содержание 15 12.8. Управление пакетами для систем UNIX 442 Управление пакетами в Solaris 443 Управление пакетами в HP-UX 444 Управление программами в AIX 446 12.9. Управление изменениями 446 Создание резервных файлов 447 Формальные системы управления изменениями 447 Система Subversion 448 Система Git 450 12.10. Локализация и конфигурирование программного обеспечения 454 Организация локализации 454 Тестирование 456 Локальная компиляция 456 Распространение локализаций 457 12.11. Использование средств управления конфигурацией 458 Утилита cfengine: компьютерная иммунная система 458 LCFG: крупномасштабная система конфигурирования 459 Template Tree 2: помощник cfengine 459 DMTF/CIM: общая информационная модель 460 12.12. Организация совместного использования программ через nfs 460 Пространства имен пакетов 461 Управление зависимостями 462 Сценарии упаковщика 462 12.13. Рекомендуемая литература 463 12.14. Упражнения 463 Глава 13. Драйверы и ядро 464 13.1. Адаптация ядра 465 13.2. Драйверы и файлы устройств 466 Файлы и номера устройств 467 Создание файлов устройств 468 Соглашения об именовании устройств 469 Сравнение пользовательских ядер с загружаемыми модулями 469 13.3. Конфигурирование ядра Linux 470 Конфигурирование параметров ядра linux 470 Сборка ядра Linux 472 Не чините то, что еще не поломано 472 Конфигурирование параметров ядра 472 Компиляция ядра 47 3 Добавление драйвера устройства в Linux 474 13.4. Конфигурирование ядра Solaris 475 Пространство ядра Solaris 476 Конфигурирование ядра с помощью файла /etc/system 477 Добавление в систему Solaris драйверов устройств 478 Отладка Solaris-конфигурации 478 13.5. Конфигурирование ядра HP-UX 480 13.6. Управление ядром AIX 480 Администратор объектных данных 481 Настройка ядра 482 13.7. Загружаемые модули ядра 483
16 Содержание Загружаемые модули ядра в Linux 483 Загружаемые модули ядра в Solaris 485 13.8. Linux-менеджер устройств udev — полезно и приятно 486 Файловая система sysfs: доступ к “сердцу” устройств в Linux 486 Исследование устройств с помощью команды udevadm 487 Создание правил и постоянных имен 488 13.9. Рекомендуемая литература 491 13.10. Упражнения 492 Часть II. Работа в сетях 493 Глава 14. Сети ТСРДР 495 14.1. Система TCP/IP и Интернет 495 Кто сегодня управляет Интернетом 496 Сетевые стандарты и документация 497 14.2. Дорожная карта сети 498 Версии IPv4 и IPv6 499 Пакеты и их инкапсуляция 500 Стандарты формирования фреймов Ethernet 501 14.3. Адресация пакетов 502 Аппаратная адресация (МАС) 502 IP-адресация 503 “Адресация” имен машин 504 Порты 504 Типы адресов 504 14.4. IP-адреса 505 Классы адресов в протоколе IPv4 505 Подсети 506 Трюки и инструменты для арифметических вычислений, связанных с подсетями 507 CIDR: протокол бесклассовой междоменной маршрутизации 508 Выделение адресов 509 Частные адреса и система NAT 510 Адресация в стандарте IPv6 511 14.5. Маршрутизация 513 Таблицы маршрутизации 513 Директивы переадресации протокола ICMP 515 14.6. ARP: протокол преобразования адресов 515 14.7. DHCP: протокол динамического конфигурирования узлов 516 Программное обеспечение DHCP 517 Схема работы DHCP 518 Программное обеспечение DHCP, созданное организацией ISC 518 14.8. Вопросы безопасности 520 Перенаправление IP-пакетов 520 Директивы переадресации протокола ICMP 520 Маршрутизация “от источника” 520 Широковещательные ICMP-пакеты и другие виды направленных широковещательных сообщений 521 Подмена IP-адресов 521 Встроенные брандмауэры 522 Виртуальные частные сети 522
Содержание 17 14.9. PPP: протокол двухточечного соединения 523 14.10. Основы конфигурирования сети 524 Присвоение сетевых имен и IP-адресов 525 Команда ifconfig: конфигурирование сетевых интерфейсов 526 Параметры сетевого оборудования 528 Команда route: конфигурирование статических маршрутов 529 Конфигурирование DNS 530 14.11. Сетевое конфигурирование в различных системах 531 14.12. Сетевое конфигурирование в системе Linux 532 Демон NetworkManager 532 Сетевое конфигурирование в системе Ubuntu 533 Сетевое конфигурирование в системе SUSE 534 Сетевое конфигурирование в системе Red Hat 535 Настройка сетевого оборудования в системе Linux 536 Опции протокола Linux TCP/IP 537 Переменные ядра, связанные с безопасностью 540 Система Linux NAT и фильтрация пакетов 540 14.13. Работа в сети под управлением системы Solaris 541 Основная сетевая конфигурация системы Solaris 541 Примеры конфигураций системы Solaris 543 Конфигурирование протокола DHCP в системе Solaris 544 Команда ndd: протокол TCP/IP и настройка интерфейса в системе Solaris 545 Безопасность в системе Solaris 546 Брандмауэры и фильтрация в системе Solaris 546 Механизм NAT в системе Solaris 547 Особенности сетевого конфигурирования 548 14.14. Работа в сети под управлением системы HP-UX 548 Базовое конфигурирование сетей в системе HP-UX 548 Примеры конфигураций в системе HP-UX 549 Конфигурирование протокола DHCP в системе HP-UX 551 Динамическое переконфигурирование и настройка в системе HP-UX 551 14.15. Работа в сети под управлением системы AIX 553 Команда по: настройка сетевых параметров в системе AIX 555 14.16. Рекомендуемая литература 555 14.17. Упражнения 557 Кгава 15. Маршрутизация $58 15.1. Подробнее о маршрутизации пакетов 555 15.2. Демоны и протоколы маршрутизации 561 Дистанционно-векторные протоколы 562 Топологические протоколы 563 Метрики стоимости 563 Внутренние и внешние протоколы 564 15.3. Основные протоколы маршрутизации 564 Протоколы RIP и RIPng 565 Протокол OSPF 566 Протокол EIGRP 566 IS-IS: протокол маршрутизации между промежуточными системами 567 Протоколы RDP и NDP 567 Протокол BGP 567
18 Содержание 15.4. Выбор стратегии маршрутизации 567 15.5. Демоны маршрутизации 569 Демон route: устаревшая реализация в протоколе RIP 569 Демон gated: первый многопротокольный демон маршрутизации 570 Пакет Quagga: основной демон маршрутизации 570 Демон ramd: многопротокольная система маршрутизации для HP-UX 571 Маршрутизатор XORP 571 Специфика поставщиков 572 15.6. Маршрутизаторы Cisco 572 15.7. Рекомендуемая литература 575 15.8. Упражнения 576 Глава 16. Сетевые аппаратные средства 577 16.1. Технология Ethernet: сетевая панацея 578 Как работает Ethernet 579 Топология Ethernet 580 Неэкранированная витая пара 580 Оптическое волокно 582 Соединение и расширение сетей Ethernet 583 16.2. Беспроводной стандарт: локальная сеть для кочевников 587 Беспроводные коммутаторы и облегченные точки беспроводного доступа 589 16.3. DSL и кабельные модемы: “последняя миля” 589 16.4. Тестирование и отладка сетей 590 16.5. Прокладка кабелей 591 Неэкранированная витая пара 591 Офисные точки подключения 591 Стандарты кабельных систем 592 16.6. Проектирование сетей 593 Структура сети и архитектура здания 593 Расширение сетей 594 Перегрузка 594 Обслуживание и документирование 594 16.7. Управление сетью 594 16.8. Рекомендуемые поставщики 595 Кабели и разъемные соединения 595 Тестовые приборы 596 Маршрутизаторы/коммутаторы 596 16.9. Рекомендуемая литература 596 16.10. Упражнения 596 Глава 17. Система доменных имен 597 17.1. Основные задачи системы DNS 598 Управление системой DNS 599 17.2. Как работает система DNS 599 Записи о ресурсах 600 Делегирование 600 Кеширование и эффективность 601 Неоднозначные ответы 602 17.3. DNS для нетерпеливых: подключение нового компьютера 602
содержание 19 Добавление новой машины в систему DNS Настройка конфигурации клиента DNS 602 605 17.4. Серверы имен 607 Авторитетные и кеширующие серверы 608 Рекурсивные и нерекурсивные серверы 609 17.5. Пространство имен DNS 610 Регистрация домена второго уровня 611 Создание собственных поддоменов 612 17.6. Разработка собственной среды DNS 612 Управление пространством имен 612 Авторитетные серверы 613 Кеширующие серверы 614 Требования к аппаратному обеспечению 614 Безопасность 615 Итоги 615 17.7. Что нового в системе DNS 616 17.8. База данных DNS 618 Команды в файлах зон 619 Записи о ресурсах 620 Запись SOA 623 Записи NS Записи А 625 6М Записи PTR 626 Записи MX 627 Записи CNAME 628 Специальное применение записей CNAME 629 Записи SRV 630 Записи TXT 632 Записи ресурсов IPv6 632 Записи SPF 633 Записи DKIM и ADSP 635 Записи о ресурсах SSHFP 638 Записи о ресурсах DNSSEC 639 Связующие записи: связи между зонами 639 17.9. Программное обеспечение системы BIND 641 Определение версии 641 Компоненты системы BIND 643 Файлы конфигурации 643 Инструкция include 645 Инструкция options 646 Инструкция acl 652 Инструкция key (TSIG) 653 Инструкция trusted-keys 653 Инструкция server 654 Инструкция masters 655 Инструкция logging 655 Инструкция statistics 655 Инструкция zone 656 Инструкция controls для команды rdnc 659 Расщепление DNS и инструкция view 660
20 Содержание 17.10. Примеры конфигурации системы BIND 661 Зона локального узла 662 Небольшая компания, предоставляющая консалтинговые услуги в области безопасности 663 Консорциум The Internet Systems Consortium (isc.org) 666 17.11. Программное обеспечение NSD/Unbound 668 Инсталляция и конфигурирование системы NSD 668 Пример конфигурации системы NSD 670 Запуск демона nsd 675 Инсталляция и конфигурирование сервера Unbound 676 17.12. Обновление файлов зон 682 Передача зоны 683 Динамические обновления в системе BIND 684 17.13. Вопросы безопасности 686 Еще раз о списках управления доступом в сервере BIND 687 Открытые распознаватели 688 Работа в виртуальном окружении chroot 689 Безопасные межсерверные взаимодействия посредством технологий TSIG и TKEY689 Настройка технологии TSIG для сервера BIND 690 Механизм TSIG на сервере NSD 692 Технология DNSSEC 692 Правила протокола DNSSEC 696 Записи о ресурсах DNSSEC 697 Настройка протокола DNSSEC 698 Генерирование пар ключей 699 Подписание зоны 701 Цепочка доверия в протоколе DNSSEC 704 Сервер DLV: динамическая проверка доменов 705 Смена ключей DNSSEC 706 Инструменты DNSSEC 707 Отладка протокола DNSSEC 709 17.14. Microsoft и DNS 711 17.15. Тестирование и отладка 711 Журнальная регистрация в пакете BIND 712 Журнальная регистрация в пакетах NSD и Unbound 717 Управляющие программы сервера имен 718 Сбор статистических данных 720 Отладка с помощью команды dig 721 Некорректное делегирование 722 Инструменты для проверки корректности системы DNS 723 Производительность системы 725 17.16. Специфика различных дистрибутивов 725 Специфика системы Linux 726 Специфика системы Solaris 728 Специфика системы HP-UX 729 Специфика системы AIX 730 17.17. Рекомендуемая литература 731 Списки рассылки и новостные группы 731 Книги и другая документация 731 Ресурсы в Интернете 732
содержание 21 Документы RFC 732 17.18. Упражнения 733 Diaea 18. Сетевой протокол Network File System 735 18.1. Введение в протокол NFS 735 Проблемы, связанные с состоянием 736 Проблемы производительности 736 Безопасность 736 18.2. Серверная часть NFS 737 Версии и история протокола 737 Транспортные протоколы 738 Состояние 738 Экспорт файловой системы 738 Блокировка файлов 739 Вопросы безопасности 740 Идентифицирующее отображение в версии 4 741 Учетные записи root и nobody 742 Производительность версии 4 743 Дисковые квоты 743 18.3. Серверная часть протокола NFS 744 Команда share и файл dfstab (Solaris, HP-UX) 745 Команда exports и файл exports (Linux, AIX) 747 Файл exports в системе AIX 747 Файл exports в системе Linux 748 Демон nfsd: обслуживание файлов 750 18.4. Клиентская часть протокола NFS 751 Монтирование файловых систем NFS на этапе начальной загрузки 753 Ограничения на выбор порта 754 18.5 Идентифицирующее отображение в протоколе NFS 4 755 18.6. Команда nfsstat: отображение статистики NFS 755 18.7. Специализированные файловые серверы NFS 756 18.8. Автоматическое монтирование 757 Таблицы косвенных назначений 758 Таблицы прямых назначений 759 Главные таблицы 759 Исполняемые таблицы 760 Видимость демона automount 760 Реплицированные файловые системы и демон automount 761 Автоматическое монтирование (V3; все, кроме Linux) 761 Специфика системы Linux 762 18.9. Рекомендуемая литература 762 18.10. Упражнения 763 йава 19. Совместное использование системных файлов 764 19.1. Предмет совместного использования 765 19.2. Копирование файлов 766 Использование сервера NFS 766 Сравнение модели принудительной рассылки с моделью рассылки по запросу 767 Утилита rdist: принудительная рассылка файлов 767
22 Содержание Утилита rsync: более безопасная рассылка файлов 770 Рассылка файлов по запросу 772 19.3. LDAP: упрощенный протокол доступа к каталогам 773 Структура данных LDAP 774 Особенности LDAP 775 Документация и спецификации LDAP 776 OpenLDAP: традиционный LDAP-сервер с открытым исходным кодом 776 389 Directory Server: альтернативный LDAP-сервер с открытым исходным кодом 777 LDAP вместо /etc/passwd и /etc/group 778 Создание LDAP-запросов 779 LDAP и безопасность 780 19.4. NIS: сетевая информационная служба 781 Модель NIS 781 Схема работы NIS 782 Безопасность NIS 784 19.5. Задание приоритетов для источников административной информации 784 Демон nscd: кеширование результатов поиска 785 19.6. Рекомендуемая литература 786 19.7. Упражнения 786 Глава 20. Электронная почта 787 20.1. Системы электронной почты 788 Пользовательские агенты 789 Агенты представления 790 Транспортные агенты 791 Локальные агенты доставки 791 Хранилища сообщений 792 Агенты доступа 792 Так много компонентов, так мало времени 793 20.2. Структура почтового сообщения 793 Заголовки почтовых сообщений 793 20.3. Протокол SMTP 795 Вы прислали мне привет 796 Коды ошибок протокола SMTP 797 Аутентификация SMTP 797 20.4. Принципы организации электронной почты 798 Почтовые серверы 799 20.5. Почтовые псевдонимы 802 Загрузка списков рассылки из файла 804 Направление почты в файл 804 Направление почты в программу 805 Примеры псевдонимов 805 Хешированная база данных псевдонимов 806 Списки рассылки и программы для работы с ними 806 Программы для работы со списками рассылки 806 20.6. Сканирование содержимого: спам и вредоносные программы 807 Спам 808 Подделки * 809 Конфиденциальность сообщений 809 Фильтрация спама 809
Содержание 23 Когда следует фильтровать 810 “Серые” списки/DCC 810 Программа SpamAssassin 811 Черные списки 812 Белые списки 812 Фильтрация почты 813 Технология SPF и спецификации Sender ID 813 Системы DomainKeys, DKIM и ADSP 814 Функциональные возможности транспортных агентов по борьбе со спамом 815 Программа MailScanner 815 Интерфейс amavisd-new 816 Проверка эффективности сканирования с помощью транспортных агентов 819 20.7. Конфигурация электронной почты 820 20.8. Почтовый агент sendmail 821 Файл переключения 822 Запуск программы sendmail 823 Почтовые очереди 824 20.9. Конфигурация программы sendmail 825 Препроцессор т4 825 Фрагменты конфигурации программы sendmail 8 26 Конфигурационный файл, построенный на основе эталонного файла с расширением .тс 827 20.10. Примитивы конфигурации программы sendmail 828 Таблицы и базы данных 828 Обобщенные макросы и функциональные возможности 829 Конфигурация клиентов 835 Параметры конфигурации 835 Средства программы sendmail для борьбы со спамом 837 Ретрансляция 838 Дроссели, скорость и ограничения на количество соединений 840 Конфигурирование почтовых фильтров в программе sendmail 841 Соединение сканера amavisd и программы sendmail 842 20.11. Безопасность и программа sendmail 843 Владельцы файлов 843 Права доступа 844 Безопасная пересылка почты в файлы и программы 845 Опции безопасности 846 Выполнение программы sendmail в виртуальном каталоге (для настоящих параноиков) 847 Отражение атак типа “отказ от обслуживания” 847 SASL: простой протокол аутентификации и защиты 848 TLS: безопасность транспортного уровня 848 20.12. Производительность программы sendmail 849 Режимы доставки 849 Группы очередей и разбивка конвертов 849 Обработчики очередей 850 Контроль средней загруженности 850 Обработка недоставленных сообщений 850 Настройка ядра г 851 20.13. Сбор статистических данных, тестирование и отладка 853
24 Содержание Мониторинг очереди 853 Журнальная регистрация 854 20.14. Почтовый агент Exim 855 Инсталляция почтового сервера EXIM 856 Загрузка почтового сервера Exim 857 Утилиты почтового сервера Exim 858 Язык конфигурации программы Exim 859 Файл конфигурации программы Exim 859 Глобальные параметры 861 Сканирование содержимого на этапе применения списков управления доступом 866 Аутентификаторы 867 Маршрутизаторы 868 Маршрутизатор accept 869 Маршрутизатор dnslookup 870 Транспортные механизмы 872 Конфигурация retry 873 Конфигурация перезаписи 873 Функция локального сканирования 873 Сочетание программ amavisd и Exim 873 Регистрация 4 874 Отладка 875 20.15. Почтовый агент Postfix 876 Архитектура системы Postfix 876 Безопасность 878 Команды и документация системы Postfix 878 Конфигурация системы Postfix 879 Виртуальные домены 883 Управление доступом 885 Борьба со спамом и вирусами 888 Фильтрация содержимого с помощью программы amavisd 89.0 Отладка 891 20.16. Конфигурация механизма DKIM 893 Технология DKIM: DomainKeys Identified Mail 893 Почтовые фильтры DKIM 894 Конфигурация DKIM в программе amavisd-new 896 Технология DKIM в системе sendmail 897 Технология DKIM в системе Exim 898 Технология DKIM в системе Postfix 900 20.17. Интегрированные почтовые системы 900 20.18. Рекомендуемая литература 901 Общие вопросы по борьбе со спамом 901 Литература по программе sendmail 902 Литература о системе Exim 902 Литература о системе 902 Документы RFC 903 20.19. Упражнения 903 Упражнения, связанные с программой sendmail 904 Упражнения, связанные с системой Exim 905 Упражнения, связанные с системой Postfix 905
Содержание 25 Глава 21. Управление сетями 907 21.1. Поиск неисправностей в сетях 908 21.2. Команда ping: проверка доступности компьютера 909 21.3. Инструмент SmokePing: сбор статистики в работе команды ping во времени 911 21.4. Команда traceroute: трассировка IP-пакетов 912 21.5. Команда netstat: получение информации о состоянии сети 915 Контроль состояния сетевых соединений 915 Отслеживание состояния сетевых соединений 917 Идентификация прослушивающих сетевых служб 918 Проверка таблицы маршрутизации 919 Просмотр статистических данных функционирования различных сетевых протоколов 919 21.6. Проверка функционирования интерфейса в реальном времени 921 21.7. Анализаторы пакетов 922 Утилита tcpdump: стандартный анализатор 923 Утилиты Wireshark и TShark: усовершенствованный вариант tcpdump 924 21.8. Служба Netalizr Института ICSI 926 21.9. Протоколы управления сетями 926 21.10. SNMP: простой протокол управления сетями 928 Структура протокола SNMP 928 Операции протокола SNMP 930 RMON: база MIB для дистанционного мониторинга 930 21.11. Агент NET-SNMP 931 21.12. Программы управления сетями 932 Команды пакета NET-SNMP 932 Сбор и накопление данных протокола SNMP 933 Nagios: событийная служба мониторинга 934 Совершенный пакет для мониторинга: поиски продолжаются 935 Коммерческие системы сетевого управления 936 21.13. Протокол NetFlow: мониторинг соединений 937 Мониторинг данных протокола NetFlow с помощью утилит nfdump и NfSen 937 Настройка протокола NetFlow для маршрутизатора Cisco router 939 21.14. Рекомендуемая литература 940 21.15. Упражнения 941 Глава 22. Безопасность 943 22.1. Безопасна ли система UNIX 944 22.2. Слабые места в системе защиты 945 Человеческий фактор 945 Ошибки в программах 946 Ошибки конфигурации 947 22.3. Ключевые аспекты безопасности 947 Программные “заплаты” 948 Ненужные службы 948 Удаленная регистрация событий 949 Резервные копии 949 Вирусы и черви 949 Троянские программы * 950 Руткиты 951
26 Содержание Фильтрация пакетов 951 Пароли 951 Бдительность 951 Общие принципы защиты 952 22.4. Пароли и учетные записи пользователей 952 Устаревание паролей 953 Групповые и совместно используемые учетные записи 954 Пользовательские оболочки 954 Привилегированные учетные записи 954 22.5. Модули РАМ: украшение или чудо аутентификации 954 Системная поддержка для моделей РАМ 955 Конфигурация модулей РАМ 955 Подробный пример конфигурации системы Linux 958 22.6. Программы с установленным битом SETUID 959 22.7. Эффективное использование команды chroot 960 22.8. Инструментальные средства защиты 961 Команда пшар: сканирование сетевых портов 961 Nessus: сетевой сканер следующего поколения 962 John the Ripper: средство для выявления слабых паролей 963 Команда hosts_access: управление доступом к узлу 964 Вго: программная система для распознавания вторжения в сеть 964 Snort: популярная программная система для распознавания проникновения в сеть 965 OSSEC: система для распознавания вторжения в сеть на уровне узла 966 22.9. Мандатное управление доступом 969 Система Linux с усиленной системой безопасности (SELinux) 969 22.10. Системы криптографической защиты 970 Kerberos: унифицированный подход к сетевой безопасности 971 PGP: высокая конфиденциальность 972 SSH: безопасная оболочка 972 Пакет Stunnel 976 22.11. Брандмауэры 978 Брандмауэры, фильтрующие пакеты 979 Принципы фильтрации служб 979 Брандмауэры, осуществляющие инспекцию пакетов с отслеживанием состояния соединений 980 Насколько безопасны брандмауэры 981 22.12. Особенности брандмауэров в системе Linux 981 Правила, цепочки и таблицы 982 Целевые директивы для правил 982 Настройка команды iptables в качестве брандмауэра 983 Полный пример 983 22.13. Модуль IPFilter для систем UNIX 985 22.14. Виртуальные частные сети 988 Туннели IPSEC 989 Так ли уж нужны виртуальные частные сети 989 22.15. Сертификация и стандарты 989 Сертификации v 990 Стандарты безопасности 991 22.16. Источники информации по вопросам обеспечения безопасности 993
Содержание 27 Организация CERT 993 Сервер SecurityFocus.com и список рассылки BugTraq 994 Блог Брюса Шнайера 994 Организация SANS 994 Информационные ресурсы отдельных дистрибутивов 995 Другие списки рассылки и веб-сайты 996 22.17. Что нужно делать в случае атаки на сервер 996 22.18. Рекомендуемая литература 998 22.19. Упражнения 999 Глава 23. Веб-хостинг 1001 23.1. Основы веб-хостинга 1001 Обнаружение ресурсов в сети веб 1002 Унифицированные указатели ресурсов 1002 Принцип работы HTTP 1003 Генерирование содержимого “на лету” 1004 Серверы приложений 1005 Распределение нагрузки 1006 23.2. Инсталляция НТТР-сервера 1008 Выбор сервера 1008 Инсталляция сервера Apache 1009 Конфигурирование сервера Apache 1010 Запуск сервера Apache 1011 Анализ регистрационных файлов 1011 Высокопроизводительный хостинг 1011 23.3. Виртуальные интерфейсы 1012 Конфигурирование виртуальных интерфейсов 1013 Передача серверу Apache информации о виртуальном интерфейсе 1015 23.4. Протокол Secure Sockets Layes 1016 Генерирование файла Certificate Signing Request 1016 Конфигурация веб-сервера Apache для использования протокола SSL 1018 23.5. Кеширование и прокси-серверы 1018 Использование кеша Squid и прокси-сервера 1019 Инсталляция сервера Squid 1020 Настройка обратного прокси с помощью веб-сервера Apache 1020 23.6. Расширение возможностей 1022 Облачные вычисления 1022 Хостинг совместного размещения серверов 1022 Сети для распределения контента 1023 23.7. Упражнения 1023 Насть Hi. Разное 1025 Глава 24. Виртуализация 1027 24.1. Виртуальный жаргон 1028 Полная виртуализация 1029 Паравиртуализация 1029 Виртуализация на основе операционной системы 1030 Естественная виртуализация * 1031 Облачные вычисления 1031
28 Содержание Динамическая миграция 1032 Сравнение технологий виртуализации 1032 24.2. Преимущества виртуализации 1032 24.3. Практичный подход 1033 24.4. Виртуализация с помощью системы linux 1035 Введение в платформу Хеп 1035 Основы платформы Хеп 1036 Инсталляция гостя на платформе Хеп с помощью программы virt-install 1037 Динамическая миграция на платформе Хеп 1038 Платформа KVM 1039 Инсталляция платформы KVM и ее использование 1040 24.5. Зоны и контейнеры системы solans 1042 24.6. Разделы рабочей нагрузки в системе AIX 1045 24.7. Программное обеспечение Integrity Virtual Machines в системе HP-UX 1047 Создание и инсталляция виртуальных машин 1047 24.8. VMware: операционная система со своими собственными правами 1049 24.9. Веб-службы компании Amazon 1049 24.10. Рекомендуемая литература 1054 24.11. Упражнения 1054 Глава 25. Система X Window System 1055 25.1. Диспетчер дисплеев 1057 25.2. Процесс запуска Х-приложения 1058 Переменная окружения DISPLAY 1059 Аутентификация клиентов 1060 Перенаправление соединений с помощью протокола SSH 1061 25.3. Конфигурирование Х-сервера 1063 Раздел Device 1065 Раздел Monitor 1065 Раздел Screen 1066 Раздел InputDevice 1066 Раздел ServerLayout 1068 Утилита xrandr: конфигуратор Х-сервера 1068 Установка режима ядра 1069 25.4. Устранение неполадок и отладка Х-сервера 1070 Специальные комбинации клавиш в системе X 1070 Когда с Х-сервером творится что-то неладное 1070 25.5. Краткое замечание о настольных средах 1072 KDE 1073 GNOME 1073 Что лучше: GNOME или KDE? 1074 25.6. Рекомендуемая литература 1074 25.7. Упражнения < 1074 Глава 26. Печать 1076 26.1. Архитектура системы печати 1077 Основные системы печати 1077 Очереди печати 1078 26.2. Система печати CUPS 1078
Содержание 29 Интерфейсы для системы печати 1078 Очередь на печать 1079 Множество принтеров 1080 Экземпляры принтеров 1080 Сетевая печать 1080 Фильтры 1081 Управление сервером CUPS 1082 Настройка сетевого сервера печати 1083 Автоматическое конфигурирование принтера 1083 Конфигурирование сетевых принтеров 1084 Примеры конфигурирования принтеров 1084 Создание класса принтеров 1085 Отключение принтера 1085 Другие связанные с конфигурированием задачи 1086 26.3. Печать в настольных системах 1087 Документы kprinter: printing 1088 Konqueror и печать 1088 26.4. Система печати System V 1089 Обзо р 1089 Пункты назначения и классы 1090 Краткое описание команды 1р 1090 Команды Ipsched и Ipshut: начало и конец печати 1091 Команда Ipadmin: конфигурирование среды печати 1091 Примеры использования команды Ipadmin 1094 Команда Ipstat: получение информации о состоянии системы печати 1094 Команда cancel: удаление заданий печати 1095 Команды accept и reject: управление очередью печати 1095 Команды enable и disable: управление печатью 1096 Команда Ipmove: перемещение заданий ~ 1096 Интерфейсные программы 1096 Что делать, если система печати вышла из строя 1097 26.5. Печать BSD и AIX 1098 Обзор архитектуры системы BSD 1098 Управление средой печати 1099 Демон Ipd: буферизация заданий на печать 1100 Команда 1рг: выдача заданий на печать 11 ® Команда Ipq: просмотр очереди печати 1100 Команда Iprm: удаление заданий на печать 1101 Команда 1рс: внесение административных изменений 1101 Файл /etc/printcap 1103 Переменные файла printcap 1104 26.6. Долгая странная история 1108 История печати и появления систем печати 1108 Разнообразие принтеров 1109 Основные программы печати 1110 2«.8. Языки принтеров 1111 PostScript 1112 PCL 1П2 pdf шз XPS 1113
30 Содержание PJL 1114 Драйверы принтеров и как они обрабатывают PDL-языки 1114 26.9. Файлы PPD 1115 26.10. Форматы бумаги 1116 26.11. Практические советы 1118 Выбор принтера 1118 GDI-принтеры 1119 Двусторонняя печать 1119 Другие аксессуары для принтера 1120 Принтеры с последовательным и параллельным интерфейсом 1120 Сетевые принтеры 1121 Другие советы 1121 26.12. Советы по выявлению проблем 1124 Повторный запуск демона печати 1125 Регистрационные журналы 1125 Проблемы с прямой печатью 1125 Проблемы с печатью в сети 1126 Проблемы с распространением 1127 26.13. Рекомендуемая литература 1127 26.14. Упражнения 1127 Глава 27. Центры обработки данных 1129 27.1. Уровни надежности центров обработки данных 1130 27.2. Терморегуляция 1131 Теплые и холодные отсеки 1133 Влажность 1134 Мониторинг окружающей среды 1135 27.3. Электропитание 1135 Требования к электроснабжению стоек 1136 Удаленное управление 1137 27.4. Стойки 1138 27.5. Инструменты 1138 27.6. Рекомендованная литература 1139 27.7. Упражнения 1139 Глава 28. Экологичные информационные технологии 1141 28.1. Введение в экологичные информационные технологии 1142 28.2. Экологическая пирамида 1144 28.3. Стратегии разработки экологичных информационных технологий: центр обработки данных 1144 Консолидация приложений 1145 Консолидация серверов 1146 Сеть S AN 1147 Серверная виртуализация 1147 Только самые необходимые серверы 1148 Использование детализированных данных и планирование потребления 1148 Конфигурация серверов, оптимизированная по потреблению энергии 1148 Облачные вычисления 1150 Свободное охлаждение 1150
содержание_______________________________________________________________ Эффективное охлаждение центра обработки данных 1151 Режим ограниченной функциональности во время простоя 1151 Продление срока эксплуатации оборудования 1151 Более высокая температура в центре обработки данных 1152 Энергосберегающее оборудование 1152 28 4 Экологические информационные стратегии: рабочее место пользователя 1153 28 5 Компании, поддерживающие экологичные информационные технологии 1154 28.6. Упражнения 1155 Глава 29. Анализ производительности 1157 29.1 • Способы повышения производительности 1159 29.2. Факторы, влияющие на производительность 1160 29.3. Как анализировать проблемы производительности 1161 29.4. Проверка производительности системы 1162 Инвентаризуйте свое оборудование 1162 Сбор данных о производительности 1166 Анализ использования центрального процессора 1166 Управление памятью в системе 1168 Анализ использования памяти 1170 Анализ операций обмена с диском 1172 Утилита xdd: анализ производительности дисковой подсистемы 1174 Команда sar: сбор статистических данных и генерирование отчетов по ним 1174 nmon и nmon_analyser: мониторинг производительности в системе AIX 1175 Выбор Lmux-планировщика ввода-выЙОда 1175 Программа oprofile: универсальный профилировщик системы Linux 1176 29.5. Помогите! Моя система почти остановилась! 1177 29.6. Рекомендуемая литература 1178 29.7. Упражнения 1179 Глава 30. Взаимодействие с системой Windows 1180 30.1. Вход в систему UNIX из Windows 1180 30.2. Получение доступа к удаленным настольным средам 1181 Запуск сервера X Server на компьютере Windows 1182 VNC: система виртуальных сетей 1183 Протокол RDP в системе Windows 1184 30.3. Запуск системы Windows и Windows-приложений 1184 Двухвариантная загрузка и почему ею не стоит пользоваться 1185 Альтернативы Microsoft Office 1185 30 S Использование утилит командной строки в системе Windows 1186 ’ овместимость Windows со стандартами электронной почты и веб 1187 овместное использование файлов при помощи Samba и CIFS 1187 ЬашЬа: сервер CIFS для UNIX 1188 Установка Samba 1189 Кодирование имен файлов 4190 Аутентификация пользователей 1191 овместное использование основных файлов 1191 Фупповые ресурсы 1192 Розрачная переадресация при помощи MS DFS 1193 Рограмма smbclient: простой клиент CIFS 1194
32 Содержание 30.7. Совместное использование принтеров при помощи Samba 1195 Установка драйвера принтера из системы Windows 1197 Инсталляция принтера из командной строки 1197 30.8. Отладка сервера Samba 1198 30.9. Аутентификация службы Active Directory 1200 Подготовка к интеграции службы Active Directory 1201 Конфигурирование протокола Kerberos для интеграции службы Active Directory 1202 Программа Samba как член домена Active Directory 1203 Конфигурация системы РАМ 1205 Альтернатива демону winbind 1206 30.10. Рекомендуемая литература 1206 30.11. Упражнения 1206 Глава 31. Последовательные устройства и терминалы 1208 31.1. Стандарт RS-232C 1209 31.2. Альтернативные разъемные соединения 1211 Разъем DB-9 1211 Разъем RJ-45 1212 31.3. Аппаратная и программная несущие 1213 31.4. Аппаратный контроль передачи данных 1213 31.5. Файлы последовательных устройств 1214 31.6. Команда setserial: передача драйверу параметров последовательного порта в системе Linux 1215 31.7. Псевдотерминалы 1216 31.8. Конфигурирование терминалов 1216 Процедура регистрации в системе 1217 Файл /etc/ttytype 1218 Файл /etc/gettytab 1218 Файл /etc/gettydefs 1219 Файл /etc/inittab 1219 Демон Upstart в системе Ubuntu 1221 31.9. Специальные символы и драйвер терминала 1222 31.10. Команда stty: задание параметров терминала 1223 31.11. Команда tset: автоматическое задание параметров терминала 1224 31.12. Как справиться с “зависшим” терминалом 1225 31.13. Отладка последовательной линии 1225 31.14. Соединение с консолями последовательных устройств 1226 31.15. Упражнения 1227 Глава 32. Управление, стратегия и политика 1228 32.1. Цель информационных технологий 1228 Составление сметы и расходование средств 1229 Стратегия в области информационных технологий 1230 Соглашения о качестве оказываемых услуг 1231 32.2. Информационная структура организации 1235 Основы: система отслеживания запросов и управления задачами 1235 Общие функции систем отслеживания запросов 1236 Владение запросом 1237 Система отслеживания запросов с точки зрения пользователей 1238
Содержание 55 Типичные диагностические системы 1238 Распределение сообщений о неполадках 1239 Перечень навыков 1240 Управление временем 1241 32.3. Служба поддержки 1241 Диапазон услуг 1241 Доступность службы поддержки 1242 Зависимость от службы поддержки 1242 32.4. Архитектура предприятия 1242 Процессы должны быть воспроизводимыми 1243 Сохранение отладочных данных 1243 Осознание важности документации 1244 Настройка и кодирование 1244 Содержание системы в чистоте 1244 32.5. Операции 1244 Время простоев должно быть минимальным 1245 Документирование зависимостей 1245 Переналадка или списывание старого оборудования 1245 Поддержка локальной документации 1246 Разделение окружающей среды 1250 Автоматизируйте, автоматизируйте, автоматизируйте! 1250 32.6. Управление 1251 32.7. Инструкции и процедуры 1260 Различие между инструкциями и процедурами 1260 Эффективные инструкции 1261 Процедуры 1261 32.8. Восстановление после аварий 1262 Оценка рисков 1262 Борьба со стихийными бедствиями 1263 Подбор персонала на случай аварии 1264 Электропитание и кондиционирование 1265 Сетевая избыточность 1266 Проблемы с безопасностью 1267 32.9. Соответствие законам и стандартам 1267 Библиотека ITIL: Information Technology Infrastructure Library 1270 NIST: Национальный Институт стандартов и технологии 1270 32.10. Правовые вопросы 1271 Конфиденциальность 1271 Реализация стратегии 1272 Контроль — это ответственность 1273 11 Л114611311**на программное обеспечение 1273 1 о рганизации» конференции и другие ресурсы 1274 ’ ек°мендуемая литература 1276 •^•13. Упражнения 1276 Краткая история системного администрирования 1278 В защиту AIX 1288 Предметный указатель 1291
Об авторах Эви Немет уволилась с факультета вычислительной техники Университета штата Колорадо и в настоящее время бороздит просто- ры Тихого океана на своей 40-футовой яхте “Wonderland” (“Страна чудес”). Это — ее последнее издание, невозможно быть в курсе со- временных “сисадминовских игрушек”, стоя на якоре в каком-то райском уголке с пакетом EMail Connection для радиосвязи со ско- ростью 30 бод. sailingevi@gmail.com Гарт Снайдер работал в компаниях NeXT и Sun и получил сте- пень бакалавра электротехники в колледже Суортмор, штат Пенсильвания, а также ученую степень в Университете Рочестера, штат Нью-Йорк. garth@garthsnyder.com Т^ент Р. Хейн — один из основателей компании Applied Trust Engineering, которая разрабатывает средства защиты и анализа про- изводительности сетей. Трент получил степень бакалавра вычисли- тельной техники в Университете штата Колорадо. trent@atrust.com Бен Уэйли — руководитель отдела архитектуры предприятий (Enterprise Architecture) в компании Applied Trust Engineering, которая занимается консалтингом в области информационных технологий (г. Боулдер, штат Колорадо). В 2004 году он получил диплом бака- лавра по специальности “Вычислительная техника” в Университете штата Колорадо. ben@atrust.com
О соавторах Терри Морреале (Terry Morreale) — старший инженер и руководитель отдела по об- служиванию клиентов в Applied Trust. Она получила диплом по специальности “Вычислительная техника” в Университете штата Колорадо, а также имеет следую- щие сертификаты: CISSP, GIAC Gold Certified Incident Handler и ITILv3 Foundations. Свободное от работы время Терри посвящает заботе о двух своих детях, чтению и бегу. Нэд Мак-Клейн (Ned McClain) (ned@atrust. com) — один из основателей и руково- дитель технического отдела в Applied Trust Engineering. Он помогает клиентам разного уровня в вопросах архитектуры и эксплуатации систем. Работает над решением проблем производительности, бесперебойности и безопасности работы систем. Но особенно его интересует область системного администрирования. Нэд получил диплом по специаль- ности “Вычислительная техника” в техническом колледже при Корнеллском универси- тете и имеет сертификаты CISSP, МСР и ITIL. Нэд регулярно обновляет содержимое своего блога (arkingseal. com). Рон Яким (Ron Jachim) получил степень магистра в Университете Уэйна в Детройте (штат Мичиган), где в настоящее время читает лекции в качестве адъюнкт-профессора. В течение 20 лет он набирался опыта по использованию систем UNIX как в процессе преподавания, так и работая в Ford Motor Company. Он сочетает навыки администри- рования с пристрастием к поиску решений по созданию эластичных инфраструктур, включающих тысячи серверов, и к повышению производительности глобальных при- ложений. Дэвид Швайкерт (David Schweikert) работает менеджером по продукции в Open Systems AG (Швейцария) — организации, предоставляющей услуги по обеспечению безопасности систем. Его команда отвечает за управление конфигурированием и мониторинг более чем 1 500 серверов UNIX в более чем 100 странах. Девид является разработчиком про- ектов с открытым кодом Mailgraph (инструментальное средство для визуализации стати- стики электронной почты) и Postgrey (реализация Postfix); см. david. schweikert. ch. Тоби Отикер (Tobi Oetiker) — инженер-электрик по образованию и системный адми- нистратор по призванию. В течение десяти лет он работал в швейцарском федеральном технологическом институте (Swiss Federal Institute of Technology), где создал роскош- ную UNIX-среду для студентов и персонала. С 2006 года Тоби трудится в собственной компании OETIKER+ PARTNER AG, где занимается поддержкой UNIX-серверов для промышленных клиентов, совершенствует свои любимые проекты с открытым кодом ( RTG™, RRDtool и Smoke Ping) и применяет этот инструментарий для решения про- лем своих клиентов. В ноябре 2006 года Тоби получил престижную награду (SAGE utstanding Achievement Award) за работу над пакетами MRTG и RRDtool; см. tobi. oetiker.ch.
Предисловие Двадцать семь лет назад, т.е. в 1983 году, я написал, пожалуй, первое руководство по системному администрированию для операционной системы UNIX. Меня пригласили в Массачусетсскую компанию (Massachusetts Computer Company — MASSCOMP), спе- циализирующуюся на UNIX-машинах, для написания документации. Завершив озна- ченную в контракте работу над руководством по графическому программированию, я прикидывал, к чему бы еще мне можно было здесь приложить свои силы. “При возник- новении системных проблем мы всегда обращаемся к Тому Тейкшейре, — сказал я. — А что делать нашим клиентам?” Ответ не заставил себя ждать: “Нам просто позарез нужно практическое руковод- ство”. И вскоре я снова работал, но на этот раз должен был извлечь максимум полезной информации из головы Тома Тейкшейры и перенести ее на бумагу. В результате получилась книга, в которой были описаны такие основные понятия, как суперпользователь, добавление учетной записи, управление разрешениями, резерви- рование и восстановление, организация сети с помощью протокола UUCP и пр. Книга была ориентирована на System V, одну из двух главных (на то время) разновидностей UNIX (другой была Berkeley UNIX). В конечном счете я вполне справился с поставленной передо мной задачей — до- был ценную информацию от Тома и других членов немногочисленной (на то время) ка- сты элитных системных администраторов. И когда в 1989 году увидела свет книга UNIX System Administration Handbook (USAH), у меня уже не было сомнений в том, что это ав- торитетное руководство — “библия” в своем роде — получило заслуженное признание, и неудивительно: ведь оно вышло непосредственно из-под пера (то бишь клавиатуры) истинных мастеров своего дела. К тому времени О’Рейли стал издателем. Узнав, что многие мои клиенты (в сфере написания технической документации) перешли на UNIX, я начал сохранять права на написанные мною руководства, чтобы можно было перепродавать их другим компа- ниям. В конце 1985 года мы представили наши первые книги, которые уже не лицен- зировались для компаний, а находились в открытой продаже. Сначала мы выпускали небольшие книги, посвященные таким отдельным темам, как vi, sed и awk, termcap и terminfo, или протоколу UUCP. Мы называли их “Nutshell Handbooks” (“Справочники в двух словах” — Примеч. ред.), поскольку хотели охватить все темы и собрать их под одной “оболочкой”. В действительности мы ничего не знали об издательском деле. Наши книги не имели ни корешков (они сшивались скобками), ни предметных указателей, ни ISBN (междуна- родный стандартный номер книги). Мы продавали их по почте, а не через книжные ма- газины. Но мало-помалу мы осваивали эту сферу деятельности и в конце концов стали конкурировать с известными издателями компьютерных книг. Любимая для нас тема — общие методы администрирования UNIX, но до недавних пор мы не брались за нее. И вот почему. Я — сторонник удовлетворения возникших потребностей без конкуренции с кем-либо ради этого. И было абсолютно ясно, что по означенной теме уже есть не просто хорошая, а ВЕЛИКОЛЕПНАЯ книга! Я не видел ни необходимости соперничать с такой всеобъемлющей книгой, ни возможности добиться успеха в этом направлении. Но со временем, когда наш бизнес стал на ноги и мы вышли на рынок компьютер- ных книг, стало понятно, что конкуренция действительно может способствовать рас- ширению рынка. Люди, как правило, видя одну книгу, воспринимают ее как нечто исключительное. Если же им на глаза попадается несколько книг по одной теме, то, как говорил певец Арло Гатри (Arlo Guthrie), “они могут подумать, что это движение”.
Предисловие 37 Кроме того, в первом издании USAH авторы четко взяли курс на BSD-ориентированные системы (BSD UNIX), и мы подумали, что осталась свободной ниша для книги с укло- ном в сторону System V. В 1991 году мы выпустили в свет собственную книгу по системному администриро- ванию UNIX, а именно ЛЕДееп Frisch, Essential System Administration, Как автор, редактор и издатель, я никогда не придавал большого значения кон- куренции — за исключением нескольких случаев. И это один из таких случаев. UNIX System Administration Handbook — это одна из немногих книг, на которые мы равняемся. Могли бы мы сделать так же хорошо? Могли бы мы сделать еще лучше? Подобно дуэли Мэджика Джонсона и Ларри Берда в NBA, соперничество выявляет лучшее, что есть в нас. Ну вот, опять! Четвертое издание? Элин не мешало бы вернуться к работе!:-) Тим О’Рейли июнь 2010 г.
Введение Когда мы писали первое издание этой книги в средине 1980-х, нам очень хотелось сравнить нашу рукопись с другими книгами по системному администрированию. К на- шему удивлению, мы отыскали только три. Теперь же вы можете выбирать из сотен книг. Назовем преимущества нашего издания. • Эта книга является практическим руководством, в котором мы делимся с читате- лями нашим коллективным опытом системного администрирования и предлагаем рекомендации, которые выдержали испытание временем. Она содержит множе- ство практических примеров и советов. • Здесь не говорится о том, как использовать UNIX или Linux в домашних услови- ях. Мы описываем применение операционных систем в коммерческих компаниях, правительственных учреждениях, университетах. • В книге подробно излагаются вопросы, связанные с работой UNIX- и Linux-сис- тем в сетях. Это самый трудный аспект системного администрирования, и имен- но здесь наша помощь, как нам кажется, будет для читателей наиболее полезной. • В этом руководстве рассмотрены основные варианты UNIX и Linux. Структура книги Книга разбита на три части — “Основы администрирования”, “Работа в сети” и “Разное”. В части I, “Основы администрирования”, приводится общий обзор систем UNIX и Linux с точки зрения системного администратора. В главах этой части представлены основные сведения и описаны методики, необходимые для управления автономной системой. В этой части описаны протоколы, используемые в UNIX-системах, а также способы построения, расширения и администрирования сетей и интернет-серверов. Здесь же рассматривается высокоуровневое сетевое программное обеспечение. Среди изучаемых тем можно выделить систему доменных имен (DNS), сетевую файловую си- стему (NFS), систему электронной почты и инструменты сетевого управления. В части II, “Работа в сети”, описываются протоколы, используемые в системах UNIX, а также способы настройки, расширения и эксплуатации сетей и серверов, с выходом в Интернет. Кроме того, в ней рассматривается высокоуровневое сетевое программное обеспечение, а также система доменных имен, сетевая файловая система, электронная почта и управление сетью. В части III, “Разное”, содержит разнообразную вспомогательную информацию. В некоторых главах обсуждаются дополнительные функциональные возможности, такие как поддержка виртуализации серверов. В других главах даются рекомендации по самым разным темам: от экологического аспекта до принципов функционирования групп системного администрирования. В конце каждой главы приводится набор практических заданий. Каждому упражне- нию дана оценка уровня сложности, причем учитывается как сложность самой задачи, так и время, затрачиваемое на ее выполнение. Упражнения соответствуют четырем уровням сложности. звездочки отсутствуют Простое задание, не требующее особых усилий ★ Более сложное или трудоемкое задание, для которого может потребоваться лабораторная работа ★★ Наиболее сложное или трудоемкое задание, требующее лабора- торной работы
Введение 39 Курсовые проекты (лишь в нескольких главах) Для выполнения некоторых упражнений требуется доступ к системе с правами су- перпользователя. Иногда нужно получить предварительное разрешение у системного ад- министратора локальной сети. Подобные случаи оговариваются в задании. Наши помощники Мы признательны Неду Мак-Клейну (Ned McClain), Девиду Швайкерту (David Schweikert) и Тоби Отикеру (Tobi Oetiker) за их вклад в создание книги. В написании этого издания принимали участие Терри Морреале (Terry Morreale) и Рон Яким (Ron Jachim). Их глубокие знания в самых разных областях существенно обогатили материал книги. Информация для контактов Свои предложения и комментарии присылайте по адресу: ulsah@book. admin. com. Мы действительно отвечаем на большинство писем, но, пожалуйста, будьте терпели- вы. Иногда проходит несколько дней, прежде чем у кого-то из нас появляется возмож- ность ответить на письмо. Для того чтобы просмотреть список выявленных на данный момент опечаток, а также другую свежую информацию по книге, посетите наш веб-сайт www.admin.com. Надеемся, что книга вам понравится, и желаем удачи в системном администриро- вании. Эви Немет Гарт Снайдер Трент Р. Хейн Бен Уэйли июнь 2010 г. Благодарности Множество людей внесли ценный вклад в работу над книгой. Кто-то из них выпол- нял научное редактирование или предлагал интересные примеры, кто-то оказывал мо- ральную поддержку. И все они заслуживают особой благодарности. Рон Айтчисон Питер Хааг Джереми С. Рид (Ron Aitchison) (Peter Haag) (Jeremy С. Reed) Эрик Олмен Брайан Хелви Энди Рудов (Eric Allman) (Bryan Helvey) (Andy RudofI) Клей Бензигер Матийс Меккинг Михаил Синатра (Clay Baenziger) (Matthijs Mekking) (Michael Sinatra) Адам Богз Рэндалл Манро П<$ль Викси (Adam Boggs) (Randall Munroe) (Paul Vixie) Том Кристиансен Эрик Остервейл Уотер Вийнгаардс (Tom Christiansen) Дэн Фостер (Пап Foster) Стив Гэд (Steve Gaede) (Eric Osterweil) Фил Пеннок (Phil Pennock) Уильям Путнем (William Putnam) (Wouter Wijngaards)
40 Введение Наш редактор из Prentice Hall, Марк Тауб (Mark Taub), заслуживает не только благо- дарности, но и награды за то, что мужественно выдерживал капризы авторов. Он был бесконечно терпелив к нам и сделал все возможное, чтобы заставить нас сосредоточить- ся на повышении качества материала. Нам очень повезло с рецензентами. Особенно хотелось бы отметить Джонатана Корбета (Jonathan Corbet) и Пэта Парсигьяна (Pat Parseghian) не только за их деликат- ные и подробные замечания, но и за их готовность вновь погрузиться в работу над буду- щими изданиями. Мэри Лу Hop (Mary Lou Nohr) проделала огромную работу по оформлению настоя- щего издания. Мы высоко ценим ее усилия. Потрясающие рисунки и обложка для этого издания придуманы и выполнены Лизой Хани (Lisa Haney). С ее портфолио можно ознакомиться на сайте lisahaney.com. Линда Григолейт (Linda Grigoleit), Терри Хоффман (Terry Hoffman) и Джон Саливан (John Sullivan) оказали нам неоценимую помощь в переговорах с сетевой службой IBM, в результате чего мы получили необходимое оборудование для оценки качества нашей работы. Благодарим также компанию Applied Trust (appliedtrust.com), руководство ко- торой позволило использовать свои лабораторные площади и оказывало всяческую материально-техническую поддержку. К сожалению, нам не удалось достичь соглашения, которое позволило бы нам пу- блично выразить признание одному из наших выдающихся авторов. Тем не менее его вклад в проект был нами высоко оценен, и мы посылаем ему этот перевертень, который, несомненно, станет украшением его коллекции: “A man, a plan, a canoe, pasta, Hero’s rajahs, a coloratura, maps, snipe, percale, macaroni, a gag, a banana bag, a tan, a tag, a banana bag again (or a camel), a crepe, pins, Spam, a rut, a Rolo, cash, ajar, sore hats, a peon, a canal — Panama!” От издательства Вы, читатель этой книги, и есть главный ее критик. Мы ценим ваше мнение и хотим знать, что было сделано нами правильно, что можно было сделать лучше и что еще вы хотели бы увидеть изданным нами. Нам интересно услышать и любые другие замечания, которые вам хотелось бы высказать в наш адрес. Мы ждем ваших комментариев и надеемся на них. Вы можете прислать нам бумаж- ное или электронное письмо либо просто посетить наш Web-сервер и оставить свои за- мечания там. Одним словом, любым удобным для вас способом дайте нам знать, нра- вится ли вам эта книга, а также выскажите свое мнение о том, как сделать наши книги более интересными для вас. Посылая письмо или сообщение, не забудьте указать название книги и ее авторов, а также ваш обратный адрес. Мы внимательно ознакомимся с вашим мнением и обязатель- но учтем его при отборе и подготовке к изданию последующих книг. Наши координаты: E-mail: info@williamspublishing.com WWW: http: //www.williamspublishing.com Адреса для писем из: России: 127055, г. Москва, ул. Лесная, д. 43, стр. 1 Украины: 03150, Киев, а/я 152
ЧАСТЬ I Основы администрирования
Глава 1 С чего начать В настоящее время в море информации по UNIX и Linux можно утонуть, поэтому мы решили с помощью этой книги проложить свой курс и удовлетворить потребности именно системных администраторов, заняв тем самым вполне конкретную нишу в эко- системе разного рода справочных страниц (man pages), блогов, журналов, книг и прочих справочных материалов. Во-первых, это — руководство, в котором рассматриваются различные компонен- ты основных систем администрирования и принципы их совместной работы. Во мно- гих случаях, когда нам приходилось выбирать между разными реализациями некоторой идеи, мы описывали преимущества и недостатки основных вариантов. Во-вторых, это — краткий справочник, в котором собрано все, что необходимо знать Для выполнения задач общего характера в различных версиях UNIX- и Linux-систем. Например, команда ps, отображающая статус текущих процессов, поддерживает более 80 ключей (опций) командной строки в системах Linux. Но всего несколько комбина- ций ключей удовлетворяют 99% нужд системного администратора (см. раздел 5.7). Наконец, в этой книге делается акцент на администрировании корпоративных сер- веров и сетей, т.е. на серьезной теме системного администрирования. Несложно устано- вить операционную систему на отдельном компьютере, гораздо труднее поддерживать Устойчивую работу виртуализированной сетевой^ при больших нагрузках, сбоях в Работе дисков и умышленных атаках. Поэтому мй^щсываем методы и практические способы, которые позволят вам “поднимать” “уйавшие” сети, а также выбирать реше- ния, которые останутся актуальными при расширении и усложнении вашего сайта и из- менении его гетерогенности. Мы не претендуем на абсолютную степень объективности в решении перечисленных Выше задач, поэтому по ходу изложения Постарались максимально ясно пояснить свои
44 Часть I. Основы администрирования субъективные взгляды и предпочтения. Особенность системного администрирования заключается в том, что опытные администраторы могут иметь совершенно разные пред- ставления о правилах и процедурах управления системами. Читателям придется само- стоятельно решать, какой именно материал и в какой степени соответствует той среде, в которой они работают. 1.1. Основные задачи системного администратора CQ Подробнее о написании сценариев рассказывается в главе 2. В Википедии в статье “системный администратор” представлено довольно полное описание функций, которые, как общепринято считать, должен выполнять системный администратор. В английской версии этой статьи проводится четкое разграничение по- нятий администрирования и разработки программ, но мы знаем не понаслышке, сколь- ко времени профессиональные администраторы отдают написанию сценариев (scripts). Сам по себе этот факт не превращает системных администраторов в разработчиков, но это означает, что им необходимо иметь практически такие же аналитические способно- сти и знания в области архитектуры компьютерных сетей. В этом разделе перечислены задачи, обычно возлагаемые на системного администра- тора. Совсем не обязательно, чтобы эти функции выполнял один человек. Во многих организациях работа поручается команде специалистов. В любом случае необходим хотя бы один человек, который понимал бы все поставленные задачи и обеспечивал их кор- ректное выполнение другими людьми. Инициализация пользователей CQ Подробнее о добавлении новых пользователей рассказывается в главе 7. В круг обязанностей системного администратора входит создание учетных записей для новых пользователей, удаление учетных записей тех пользователей, которые уже не рабо- тают в системе, и решение всех проблем, возникающих во время “системной жизни” сво- их подопечных (например, “подсказка” забытых паролей). Процесс управления записями можно автоматизировать, но ряд решений, связанных с включением в систему нового пользователя (место размещения его начального каталога, компьютер, на котором должна создаваться учетная запись, и так далее), должен принимать только администратор. Если необходимо прекратить доступ пользователя к системе, его учетная запись должна быть аннулирована. Все файлы, относящиеся к этому пользователю, необходи- мо удалить, чтобы они не занимали место на диске. Подключение и удаление аппаратных средств CQ Дополнительная информация по данной теме приведена в главах 8,13 и 26. В случае приобретения новых аппаратных средств или подключения уже имеющихся устройств к другому компьютеру, нужно переконфигурировать систему таким образом, чтобы она распознавала и активизировала эти устройства. Изменение конфигурации может быть как простой задачей (например, подключение принтера), так и более слож- ной (например, подключение жесткого диска). Теперь, когда в сферу корпоративной обработки данных прочно вошло понятие вир- туализации, конфигурация технических средств может усложниться как никогда ранее. Инсталляция устройств может занимать несколько уровней стека виртуализации, и си-
Глава 1. С чего начать 45 стемному администратору приходится вырабатывать новые стратегии, которые позволят безопасно и качественно использовать общие аппаратные средства. резервное копирование Ш Подробнее о резервном копировании рассказывается в главе 10. Резервное копирование является, наверное, одной из наиболее важных задач систем- ного администратора, которая, к сожалению, чаще всего игнорируется или выполняет- ся спустя рукава. Процедура резервного копирования довольно утомительна и занимает много времени, но осуществлять ее необходимо. Этот процесс можно автоматизировать или поручить подчиненным, но все равно системный администратор обязан убедиться в том, что резервное копирование выполнено правильно и по графику (а с полученного носителя можно восстановить данные). Инсталляция и обновление программ Ш Подробнее об утилитах работы с программами рассказывается в главе 12. После приобретения нового программного обеспечения его нужно инсталлировать и протестировать, часто в нескольких операционных системах и на различном оборудова- нии. Если программы работают нормально, пользователям необходимо сообщить об их наличии и местонахождении. Выпускаемые пакеты обновлений для исправления оши- бок и устранения брешей в системе безопасности должны без проблем устанавливаться в локальных системах. Локальные программы и административные сценарии следует соответствующим об- разом упаковать и организовать в виде, обеспечивающем совместимость с процедурами обновления, используемыми в системах вашего сайта. Новые версии ваших программ- ных продуктов, прежде чем использовать их во всем узле сети, необходимо представлять для тестирования. V Мониторинг системы Крупные системы требуют неусыпного контроля. Не стоит надеяться, что пользова- тели всегда сами будут сообщать вам о затруднениях (если, конечно, они не столкнутся по-настоящему с серьезными проблемами). Обычно пользователи идут по пути наи- меньшего сопротивления, полагая, что на решение проблемы у них уйдет меньше вре- мени, чем на ее описание и сообщение о ее возникновении. Существует множество обязательных ежедневных операций, а именно: проверка правильности функционирования электронной почты и веб-служб; просмотр журналь- ных файлов на предмет наличия ранних признаков неисправностей; контроль над под- ключением локальных сетей; контроль доступности системных ресурсов (в частности, проверка наличия свободного места на диске). Все эти рутинные операции прекрасно поддаются автоматизации, да и множество готовых систем мониторинга могут помочь системным администраторам в решении этой задачи. Поиск неисправностей Сбои систем неизбежны. Задача администратора — диагностировать сбои в системе и в случае необходимости вызвать специалистов. Как правило, найти неисправность бы- вает намного сложнее, чем устранить ее. *
46 Часть I. Основы администрирования Ведение локальной документации Ш Рекомендации, касающиеся ведения документации, даны в разделе 32.5. При настройке конфигурации системы под конкретные требования очень скоро об- наруживается, что она значительно отличается от базовой конфигурации, которая опи- сана в документации. А поскольку за реализацию этих настроек отвечает системный ад- министратор, он должен документировать все изменения. Администратор должен также вести учет обслуживания всех аппаратных средств, регистрировать состояние резервных копий, документировать разводку сетевых кабелей и локальные правила работы в системе. Слежение за безопасностью системы Ш Вопросы безопасности рассматриваются в главе 22. Системный администратор отвечает за реализацию стратегии защиты и должен пе- риодически проверять, не нарушена ли безопасность системы. В системах с низким уровнем безопасности эта процедура может быть сведена к нескольким элементарным проверкам на предмет несанкционированного доступа. В системах с высоким уровнем безопасности обычно применяется сложная сеть ловушек и программ контроля. Оказание помощи пользователям О необходимости оказания помощи пользователям в решении различных проблем редко упоминается в должностной инструкции системного администратора, хотя вы- полнение подобного рода обязанностей “съедает” большую часть его рабочего времени. Системных администраторов терроризируют самыми разными вопросами, начиная от “Вчера моя программа работала, а сегодня нет! Что вы поменяли?” до “Я пролила кофе на клавиатуру! Нужно ли теперь полить ее водой, чтобы смыть кофе?”. В большинстве случаев ваша реакция на все эти “сигналы тревоги” гораздо больше влияет на вашу оценку как администратора, чем реальные технические навыки, которы- ми, возможно, вы обладаете. Вы можете либо роптать на несправедливость такого поло- жения вещей, либо радоваться тому, что успешным решением одной-единственной про- блемы вы можете заслужить такую же благосклонность сотрудников (или начальства), как и пятичасовой отладкой в ночное время. Выбирайте! 1.2. Что НЕОБХОДИМО ЗНАТЬ Мы предполагаем, что у читателей есть определенный опыт работы с Linux или UNIX. В частности, необходимо иметь общее представление о системе с точки зрения пользователя, поскольку мы не будем на этом останавливаться. Книги, перечисленные в разделе 1.14, помогут заложить необходимый фундамент знаний. Даже в дни композитных оконных 3D-менеджеров (например, Compiz Fusion) GUI- инструменты для UNIX- и Linux-систем остаются довольно простыми по сравнению с навороченными базовыми программами. На практике большинство задач администри- рования по-прежнему решается путем редактирования конфигурационных файлов и на- писания сценариев, поэтому читатели должны быть знакомы как с оболочкой команд- ной строки, так и с каким-нибудь текстовым редактором. Ваш редактор может иметь графический интерфейс (как у gedit) или работать в сре- де интерпретации командной строки (как vi или emacs). Такие текстовые процессоры,
Глава 1. С чего начать 47 как Microsoft Word и OpenOffice Writer, кардинально отличаются от упомянутых тек- стовых редакторов и практически бесполезны для решения задач администрирования. Командные редакторы имеют неоспоримое преимущество, поскольку они могут преодо- левать простые SSH-соединения и работать на слабых системах, которые отказываются выполнять начальную загрузку; поэтому в оконных системах нет никакой необходимо- сти. Кроме того, они действуют гораздо быстрее маленьких проворных редакторов, ко- торые часто создают администраторы. Рекомендуем изучить редактор vi (или его версию vim). Он является стандартным для всех UNIX- и Linux-систем и, хотя выглядит несколько “бледным” на фоне более мощ- ных программ (в частности, emacs), абсолютно пригоден для работы. Нам также нра- вится GNU-редактор nano, который прост и прекрасно подходит новичкам, к тому же он оснащен экранными подсказками. Остерегайтесь нестандартных редакторов. Если отдать предпочтение одному из них, очень быстро надоест устанавливать его в каждой новой системе. Одним из важнейших инструментов системного администратора являются сценарии для автоматизации основных задач. Примеры такого рода сценариев приводятся на про- тяжении всей книги. Для того чтобы стать профессионалом, необходимо научиться чи- тать и модифицировать сценарии, написанные на языке интерпретатора sh (в Linux его эквивалент — интерпретатор bash). Ш Подробнее о написании сценариев рассказывается в главе 2. Для новых проектов мы рекомендуем применять язык Perl или Python. Как язык программирования Perl несколько необычен, однако содержит много средств, необхо- димых администраторам. В качестве учебника по этому языку советуем прочесть книгу Ларри Уолла Programming Perl; она также представляет собой образец профессиональ- ного технического руководства. Библиографическое описание этой книги приведено в разделе 1.14. Многие администраторы предпочитают иметь дело с языком Python. В определенном смысле это более элегантный язык, чем Perl, и его сценарии обычно легче читать и со- провождать. (Вот что сказал по этому поводу бывший сотрудник издательства Amazon Стив Йег: “Python уже давно стал пристанищем для тех, кто, наконец, принял крас- ную пилюлю и освободился от Perl-матрицы”.) Статьи, посвященные сравнению языка Python с другими языками (включая Perl), можно найти по следующему адресу: www. Python.org/doc/Comparisons.html. В большинство дистрибутивов сейчас входит Ruby переводе с англ, “рубин”) — перспективный язык программирования, в котором соз^нена мощность языка Perl и который при этом освобожден от его синтаксических “подводных камне#”. Но главное то, что он обладает современными объектно-ориентированными свойствами. Ruby еще Не стал для системных администраторов традиционным языком написания сценариев, но, по всей вероятности, станет таковым в ближайшие несколько лет. Мы рекомендуем также изучить expect, который представляет собой скорее интер- фейс для управления интерактивными программами, а не язык программирования. По сУти, это эффективная интегрирующая технология, которая может заменить традицион- ный процесс написания сценариев. Освоить expect можно достаточно быстро. Все самое важное, что необходимо знать о написании сценариев на языках bash, Perl и Python, можно почерпнуть в главе 2. В ней также рассматриваются регулярные выра- жения (шаблоны, задающие правило поиска) и некоторые идиомы оболочки, полезные 4ля системных администраторов.
48 Часть I. Основы администрирования 1.3. Взаимосвязь систем Linux и UNIX Ш Подробнее об истории Linux и UNIX читайте в разделе “Краткая история системного ад- министрирования”. В этой книге описываются как UNIX-, так и Linux-системы ввиду их схожести. Однако употребление названий Linux и UNIX в одном предложении чем-то сродни хож- дению по политическому минному полю или зыбучим пескам. Тем не менее мы возьмем на себя смелость максимально лаконично и объективно изложить ряд фактов. Однако, поскольку отношения между системами UNIX и Linux, мягко говоря, носят запутанный характер, мы не можем обойти молчанием создавшуюся ситуацию и возьмем на себя смелость максимально лаконично и объективно изложить ряд фактов. Linux — измененная и усовершенствованная реализация ядра операционной системы UNIX. Она соответствует стандарту POSIX, работает на различных аппаратных платфор- мах и совместима с большинством существующих приложений UNIX. Отличие от мно- жества других (но не всех) вариантов UNIX заключается в том, что Linux — бесплатная операционная система с открытым исходным кодом, разрабатываемая коллективными усилиями тысяч энтузиастов и организаций. Вместе с тем, операционная система Linux содержит ряд технических усовершенствований, которые отсутствуют в UNIX, и поэто- му представляет собой нечто большее, чем простой клон UNIX. В то же время тради-; ционные производители UNIX не перестают заниматься усовершенствованием своих продуктов, что говорит о наличии областей, в которых коммерческие UNIX-системы превосходят Linux-системы. 1 Linux совершенно законно может считаться отдельным программным продуктом, ко- торый уже неправильно называть “UNIX” или версией “UNIX”. В то же время было бы ошибкой настаивать на том, что Linux — совсем “не UNIX”. Если ваше творение ходит как утка и крякает как утка, то, скорее всего, вы изобрели утку. Раскольники нашлись даже в самом лагере Linux. Часто утверждают, и отчасти это справедливо, что ссылаться на дистрибутивы Linux просто как на “Linux” — значит не признавать труд разработчиков, вложенный в утилиты, выполняющиеся вне ядра (ко- торые, по сути, составляют подавляющее большинство программ в средней системе). К сожалению, альтернативная версия, которую наиболее часто предлагают, — “GNU/ Linux” — обременена собственным политическим багажом и официально поддержива- ется только дистрибутивом Debian. В статье Википедии “Спор об именовании GNU/ Linux” приведены аргументы обеих сторон1. Интересно отметить факт уже преобладаю- щего использования открытых программных средств в большинстве UNIX-систем, но ни для одной из них, насколько нам известно, пока не предложено использовать назва- ние “GNU/UNIX.2 Программы, написанные для Linux, являются UNIX-программами. Во многом бла- годаря проекту GNU наиболее значительные программные компоненты, составляющие основу UNIX-систем, разрабатываются теперь в соответствии с принципом открыто- 1 Поскольку Википедия содержит информацию о Linux, а значит, она должна часто ссылать- ся на соответствующую статью, эта дискуссия имеет большое значение для самой Википедии. Рекомендуется также ознакомиться с содержимым вкладки Discussion для упомянутой статьи Википедии. 2 В конце концов. “GNU — не UNIX”!
Глава 1. С чего начать 49 сти исходного кода.3 Один и тот же код может выполняться как в Linux, так и в любой другой однотипной среде. Веб-серверу Apache, к примеру, все равно, где работать: Linux или Solaris. С позиции коммерческих приложений и большинства программ админи- стрирования Linux — это просто одна из наиболее поддерживаемых и самых доступных разновидностей UNIX. Следует заметить, что Linux — не единственная свободно доступная UNIX-подобная операционная система. OpenSolaris также имеет открытый исходный код, хотя ее строго оговоренные сроки лицензирования кажутся подозрительными для некоторых борцов за чистоту проектов с открытым кодом. Системы FreeBSD, NetBSD и OpenBSD, являю- щиеся потомками BSD UNIX, имеют своих пылких сторонников. Эти операционные системы сопоставимы с Linux по функциональным возможностям и надежности, хотя и не пользуются такой популярностью у сторонних разработчиков программного обе- спечения. Как UNIX-, так и Linux-системы уже многие годы эффективно функционируют в промышленных условиях.4 Здесь выбор между ними должен делаться исходя из органи- зации пакетирования, поддержки и корпоративных традиций, а не из реальных разли- чий в качестве или современности. В этой книге слово “Linux”, как правило, относится к дистрибутивам Linux, а не к традиционным версиям UNIX. Но слово “UNIX” здесь употребляется не всегда в одном и том же значении, и иногда мы применяем его к атрибутам, используемым всеми про- изводными от UNIX системами, включая Linux (например, “разрешения UNIX-файла”). Если описываемые детали касаются как UNIX, так и Linux-систем, то во избежание двусмысленности мы обычно так и пишем: “UNIX и Linux”. 1.4. Дистрибутивы Linux Все дистрибутивы основаны на едином семействе ядер, однако набор служебных программ, дополняющих ядро, может существенно варьироваться. Дистрибутивы раз- личаются по своему назначению, наличию служб поддержки и степени популярности. В настоящее время существуют сотни независимых дистрибутивов Linux, но мы счита- ем, что дистрибутивы из семейств Debian, Red Hat и SUSE будут доминировать в произ- водственных средах еще как минимум в течение ближайших пяти лет. В целом между дистрибутивами Linux нет огромных различий. Остается загадкой: за- чем столько? Причем отличительными свойствами каждого из них являются “простота инсталляции” и “внушительная библиотека nporpaMWgg^средств”. Нет-нет да и про- скакивает мысль о том, что кто-то просто испытывает уд^ЙЖ^орение от выпуска новых Дистрибутивов Linux. На удивление, многие другие (более компактные) дистрибутивы так же конкурен- тоспособны по возможностям настройки. Все значительные дистрибутивы (в том числе 3 Некоторые наши технические рецензенты не соглашались с тем, что мы, как им казалось, связывали GNU с созданием самого открытого в мире программного обеспечения. Отнюдь нет! Однако участники проекта GNU определенно сделали больше, чем любая другая группа для рас- пространения идеи открытого программного обеспечения как социальной инициативы и система- тизации ^прекращающегося спора о сроках лицензирования и взаимодействии между открытыми и неоткрытыми программными продуктами. 4 Под “производственной” средой мы понимаем среду, которую организация использует для выполнения реальных задач (в отличие от использования для тестирования, исследований или Разработки).
50 Часть I. Основы администрирования и второго яруса) включают относительно безболезненную процедуру инсталляции, из- ящную среду, реализующую концепцию рабочего стола, и форму управления пакетиро- ванием. Кроме того, большинство дистрибутивов позволяет выполнять загрузку с DVD- диска, что удобно для отладки и ознакомления с новым продуктом. Поскольку эта книга сфокусирована на управлении крупномасштабными Linux- системами, мы больше склоняемся к дистрибутивам наподобие Red Hat, которые предусматривают управление сетями. Одни дистрибутивы создавались в расчете на про- мышленное применение, другие — нет. Какой-нибудь дополнительный программный компонент системы промышленного уровня, на первый взгляд малозначительный, в действительности существенно упрощает администрирование. Принимая решение в пользу того или иного дистрибутива, обращайте внимание не только на его функциональные возможности, но и на то, как будет протекать сотрудни- чество вашей организации и поставщика дистрибутива в ближайшие годы. Задайте себе ряд важных вопросов. • Будет ли дистрибутив существовать в ближайшие пять лет? • Будут ли оперативно устраняться бреши в системе защиты? • Будут ли оперативно выпускаться новые версии программных продуктов? • Будет ли оказана помощь в решении возникших проблем? Под этим углом зрения некоторые чрезвычайно интересные, компактные дистрибу- тивы уже не кажутся столь привлекательными. Но не стоит сбрасывать их со счетов: на- пример такая компания, как E*Trade, работает в системе Gentoo Linux. Наиболее жизнеспособные дистрибутивы не обязательно имеют корпоративный ста- тус. Например, мы ожидаем, что система Debian Linux (простите, Debian GNU/Linux!) просуществует довольно долго, несмотря на то что Debian — это не коммерческая ком- пания, она ничего не продает и не предлагает сервисного обслуживания. Несмотря на то что Debian не входит в число широко используемых дистрибутивов, эта система из- влекает пользу из группы спонсоров и огромной популярности дистрибутива Ubuntu, который основан на системе Debian. Наиболее популярные дистрибутивы общего назначения перечислены в табл. 1.1. Таблица 1.1. Наиболее популярные дистрибутивы Linux общего назначения Дистрибутив Веб-узел - Комментарии ,. CentOS centos.org Бесплатный аналог Red Hat Enterprise Linux Debian debian.org Популярный некоммерческий дистрибутив Fedora fedoraproj ect.org Вариант Red Hat Linux, предназначенный для использо- вания отдельными пользователями Gentoo gentoo.org Оптимизированный дистрибутив, предназначенный для самостоятельной компиляции Linux Mint linuxmint.com Компактный дистрибутив, основанный на Ubuntu Mandriva mandriva.com Один из наиболее дружественных по отношению к поль- зователю дистрибутивов openSUSE opensuse.org Бесплатный аналог SUSE Linux Enterprise Oracle Enterprise Linux oracle.com Версия RHEL, поддерживаемая системой Oracle PCLinuxOS pclinuxos.com Ответвление от Mandriva, ориентированное на KDE Red Flag redflag-linux.com Ведущий дистрибутив в Китае, подобный Red Hat
Глава 1. С чего начать 51 Окончание табл. 1.1 Дистрибутив Веб-узел Комментарии Red Hat Enterprise redhat. com Коммерческий дистрибутив Red Hat, отличающийся вы- сокой надежностью Slackware SUSE Linux Enterprise slackware. com Один из старейших дистрибутивов novel 1. com/linux Многоязыковой дистрибутив, особенно популярен в Европе Ubuntu ubuntu. com Доработанная версия Debian Обновляемый перечень дистрибутивов Linux (в том числе и не англоязычных) можно найти по следующим адресам: linux.org/dist, lwn.net/Distributions и distrowatch.com. 1.5. Примеры систем, используемых в этой книге В этой книге мы остановились на трех популярных дистрибутивах Linux и трех вер- сиях UNIX: Ubuntu Linux, openSUSE, Red Hat Enterprise Linux, Solaris, HP-UX и AIX. Они представляют собой срез рынка корпоративных систем и охватывают большинство инсталляций в крупных организациях. Приведенная в книге информация относится, как правило, ко всем упомянутым выше дистрибутивам, если нет специальных уточнений. Подробности, касающиеся кон- кретного дистрибутива, помечаются значком поставщика. ЙЭ Ubuntu® 9.10 “Karmic Koala” soians openSUSE® 11.2 Red Hat® Enterprise Linux® 5.5 Solaris™ 11 and OpenSolaris™ 2009.06 HP-UX® lli v3 AIX® 6.1 Эти значки использованы с разрешения их владельцев. Следует заметить, что разра- ботчики приведенных дистрибутивов не рецензировали эту книгу. Подробнее о каждой Из Упомянутых систем описано в следующих разделах. Примеры Linux-дистрибутивов 81 Информация, относящаяся именно к Linux-системам, но не к какому-то кон- кретному дистрибутиву, отмечается логотипом с изображением талисмана Linux — пингвина Такса (Тих). ©Дистрибутивы Ubuntu сохраняют идеологическую направленность на разра- ботку членами сообщества пользователей и разработчиков и открытый доступ,
52 Часть I. Основы администрирования поэтому вопрос о том, какие части дистрибутива бесплатны или разрешены для дальнейшего распространения, даже не возникает. Ubuntu в настоящее время финансируется за счет благотворительных пожертвований южноафри- канского предпринимателя Мака Шаттлворта (Mark Shuttleworth). Ubuntu основан на дистрибутиве Debian и использует его систему пакетирования. Он выпускается в двух основных вариантах: Desktop Edition и Server Edition. В сущности, они идентичны, но ядро Server Edition предварительно настроено для использования на сервере и не инсталлирует графический интерфейс (GUI) или такие GUI-приложения, как OpenOffice. Компания SUSE, которая теперь является одним из подразделений корпора- 6 " " ции Novell, пошла по пути Red Hat и начала распространять два связанных дистрибутива: openSUSE, который содержит только бесплатное программное обеспечение, и платный SUSE Linux Enterprise, который включает средства формальной поддержки и предоставляет несколько дополнительных возмож- ностей. Эта книга не содержит никакой информации, характерной для того или иного дистрибутива SUSE, поэтому мы называем их всех просто “SUSE”. В течение более десяти последних лет Red Hat занимает ведущее положение среди вариантов Linux, и его дистрибутивы наиболее популярны в Северной Америке. В 2003 году первоначальный дистрибутив Red Hat Linux был разде- лен на серию версий, ориентированных на производственные среды, которые получили название Red Hat Enterprise Linux (в этой книге мы иногда употре- бляем аббревиатуру RHEL), и на версии, разрабатываемые в рамках проекта с привлечением всех членов сообщества пользователей и разработчиков, кото- рый получил название Fedora. Это разделение было обусловлено рядом техни- ческих, экономических, логических и юридических причин. Сначала эти дистрибутивы были схожими, но за последние пять лет Fedora претерпе- ла значительные изменения, и теперь эти две системы не синхронизированы. RHEL от- личается высоким уровнем поддержки и стабильностью, но ее по существу невозможно использовать, не приобретя лицензию в компании Red Hat. Проект CentOS (centos. org) концентрирует исходный код, который компания Red Hat обязана распространять в соответствии с различными лицензионными соглашения- ми (наиболее значимой является общедоступная лицензия GNU), и комплектует их в законченный дистрибутив, который во многом подобен дистрибутиву Red Hat Enterprise Linux, но доступен бесплатно. Этот дистрибутив лишен торговой марки компании Red Hat и не содержит некоторых запатентованных программных средств, но в остальном аналогичен платной версии. CentOS стремится к полной совместимости с RHEL, как по двоичному коду, так и по степени исправления ошибок. Этот дистрибутив — прекрасный выбор для тех сайтов, которые стремятся развернуть крупномасштабную производственную систему, не платя при этом “десятину” компа- нии Red Hat. Возможен также смешанный подход: сетевые серверы могут работать под управлением Red Hat Enterprise Linux, используя при этом преимущества, предостав- ляемые прекрасным уровнем поддержки со стороны Red Hat, а рабочие станции могут функционировать под управлением CentOS. Такой подход обеспечивает оптимизацию с точки зрения риска и поддержки, в то же время сводя к минимуму затраты и сложность администрирования.
Глава 1. С чего начать 53 Примеры UNIX-дистрибутивов Solaris — операционная система, построенная на основе System V и “оброс- SOiariS шая” множеством расширений. Разработана компанией Sun Microsystems, ко- торая ныне принадлежит корпорации Oracle.5 Изначально Sun UNIX (так эта система называлась в средине 80-х гг.) — потомок Berkeley UNIX, но в резуль- тате корпоративного партнерства Sun и AT&T в системе была изменена кодо- вая основа. Solaris работает на различных аппаратных платформах, в частно- сти на Intel х86 и SPARC. Под “крышей” компании Sun систему Solaris можно было свободно загружать и ис- пользовать. Но корпорация Oracle изменила условия лицензирования, и теперь для за- гружаемых версий устанавливается бесплатный пробный период (90 дней). Наличие же OpenSolaris (свободно распространяемой версии Solaris с открытым исходным кодом) явно усугубляет сложившуюся ситуацию. На момент написания книги (средина 2010 г.) планы Oracle в отношении Solaris и OpenSolaris были неясны. Выпуск системы Solaris 11, очень похожей на систему OpenSolaris, ожидался уже в 2010 году. В этой книге, употребляя слово “Solaris”, мы имеем в виду смешанную си- стему, основанную на выпусках Solaris 10 и OpenSolaris (все данные получены от нашей разветвленной сети сильно засекреченных шпионов, действующих в недрах Oracle). В оп- ределенных случаях при необходимости мы конкретно указываем названия Solaris 10 или OpenSolaris. ОЛ Система HP-UX основана на System V и привязана к аппаратным платформам Hewlett-Packard. По исходному коду она ближе к родительскому генеалогиче- скому древу, чем Solaris илиА1Х, но HP сохранила темп ведения разработок в мире операционных систем и расширила круг собственных усовершенство- ваний. Теперь, когда HP начала поддержку и Linux-систем, будущее HP-UX несколько затуманено. • AIX — операционная система компании IBM, изначально построенЙйЙРна базе BSD 4.2 (Berkeley UNIX), но уже в версии AIX 4 (1994 г.) большинство ее компонентов перешло в System V. В настоящее время систему AIX “отнесло” довольно далеко от обоих источников. В целом, у нас создалось впечатление, что перекрестное опыление от других систем характерно для AIX в меньшей степени, чем для большинства вариантов UNIX. Вместе с тем мы считаем, что эта система попала под “дьявольское” влияние некоторых мэйн- Фреймовых и среднего класса (AS/400) операционных систем IBM, от которых она уна- следовала такие компоненты, как Object Data Manager (см. раздел 13.6), команды кон- фигурации (вместо файлов конфигурации) и административный интерфейс SMIT. Со временем эта система, возможно, станет более самобытной. Интересно отметить, что в последние десять дет IBM демонстрирует ОС-инва- риантный (т.е. независимый от операционной системы) подход к маркетингу своих лппаратных средств. IBM, продолжая разработку и продвижение AIX, также заинтере- сована в сотрудничестве с Red Hat и Novell, чтобы убедиться в устойчивой работе их Дистрибутивов Linux на оборудовании IBM. Посмотрим, как этот подход проявит себя в будущем. 5 Подробнее о системах BSD, System V и истории возникновения UNIX читайте в разделе Краткая история системного администрирования”.
54 часть I. Основы администрирование 1.6. Административные средства конкретных систем Современные системы включают графические средства и панели управления (та- кие, как YaST2 в SUSE и SMIT в IBM), упрощающие конфигурирование и администри- рование определенных компонентов системы. Эти средства очень удобны, особенно администраторам-новичкам, но они недостаточно полно отражают возможности базо- вого программного обеспечения. В этой книге мы описываем низкоуровневые механизмы, а не высокоуровневые инструментальные средства. На то есть ряд причин. Во-первых, графические средства зачастую являются платными или по крайней мере зависят от используемой системы. В результате то, что на низком уровне является одинаковым для всех систем, начинает казаться хаотичным и непостоянным. Во-вторых, мы считаем, что для системного адми- нистратора важно четко знать, как работает система. Когда в системе происходит сбой, графические утилиты не всегда помогают найти и устранить проблему. Наконец, конфи- гурировать систему на низком уровне обычно удобнее: так быстрее и надежнее, больше возможностей для манипуляции, легче писать сценарии. 1.7. Типографские особенности книги Имена файлов, команды и аргументы команд, которые следует набирать на клавиа- туре без изменений, даны полужирным шрифтом. Аргументы, вместо которых следует подставлять конкретные значения, даны курсивом. Например, в команде ср файл каталог предполагается, что аргумент файл следует заменить именем реального файла, а аргу- мент каталог — именем реального каталога. Результаты работы команд, а также фрагменты сценариев и файлов конфигурации даны моноширинным шрифтом. Комментарии к интерактивным сеансам иногда даются курсивом, например: % grep Bob /pub/phonelist # Найти номер телефона Боба Bob Knowles 555-2834 Bob Smith 555-2311 При описании синтаксиса команд мы, как правило, используем те же обозначения, что и в интерактивном руководстве: • текст, заключенный в квадратные скобки (“[” и является необязательным; • текст, после которого стоит многоточие (“...”), можно повторять; • фигурные скобки (“{” и “}”) указывают на то, что необходимо выбрать один из элементов, разделенных вертикальной чертой (“|”)- Например, спецификации bork [—х] {on|off} имя_файла... соответствует любая из следующих команд: bork on /etc/passwd bork -x off /etc/passwd /etc/termcap bork off /usr/lib/tmac В выражениях с шаблонами поиска используются следующие метасимволы: • звездочка (*) обозначает нуль или более символов; • знак вопроса (?) обозначает один символ;
Клава 1. с чего начать 55 • тильда (~) обозначает начальный каталог текущего пользователя6 *; • выражение -пользователь обозначает начальный каталог указанного пользователя. Например, иногда мы обозначаем каталоги, где хранятся сценарии запуска (etc/ rc*. d, etc/rc*. d и т.д.), сокращенным шаблоном etc/rc*.d. 1.8. Единицы ИЗМЕРЕНИЯ Такие метрические приставки, как кило-, мега- и гига-, определяются показателями степени числа 10 (например, один мегагерц составляет тысячу килогерц или миллион герц). Эти приставки “позаимствованы” и для компьютерных типов данных, но с ис- пользованием степеней числа 2. Например, один “мегабайт” памяти составляет 220 или 1 048 576 байт. Ассоциация твердотельных технологий (Solid State Technology Association) Объединенного инженерного совета по электронным устройствам (Joint Electronic Device Engineering Council — JEDEC) даже превратила эти “позаимствованные” едини- цы измерения в такой официальный стандарт, как Standard 100В.01, который признает их степенями двойки (не без некоторых натяжек). Пытаясь восстановить справедливость (или внести ясность), Международная элек- тротехническая комиссия (International Electrotechnical Commission — IEC) определила ряд числовых приставок, основанных именно на степенях числа 2: киби- (kibi-), меби- (mebi-), гиби- (gibi-) и так далее с аббревиатурами КиБ (Ki), МиБ (Mi) и ГиБ (Gi) соот- ветственно. С вводом этих единиц измерения ликвидируется двузначность, но их только начинают использовать. Поэтому привычный набор кило-, мега- и гига-префиксов все еще в ходу (в обоих значениях: десятичном и двоичном). Определить конкретное значение можно по контексту. Объем ОЗУ всегда измеряет- ся в степенях двойки, но пропускная способность сети — в степенях числа 10. Размер дисков их производители обычно указывают в десятичных единицах, а размер блоков и страниц — в двоичных. В этой книге мы используем единицы измерения МЭК (IEC) для степеней двойки и метрические — для степеней числа 10. Метрические единицы измерения мы применяем также для приблизительных значений и в тех случаях, когда точное основание степени неясно, недокументировано или его невозможно определить. В командах файлов кон- фигурации output и in мы оставляем исходные значения и указатели единиц измере- ний. Для обозначения бита служит буква Ь, а для байта — буква В. Некоторые примеры интерпретации единиц измерения приведены в табл. 1.2. Таблица 1.2. Примеры интерпретации единиц измерения Пример Описание возможного варианта_____________________________ J ;~ 56 кбит/с (kb/s) Скорость передачи данных по последовательной линии связи, равная 56 000 бит в секунду 1 Кбайт (кВ) Размер файла, равный 1000 байт 4 Кибайт (KiB) Общий размер страниц полупроводникового диска (SSD) 4 096 байт 8 Кбайт (КВ) Размер памяти — не используется в этой книге (см. описание ниже) 100 Мбайт (МВ) Ограничение по размеру файла (неоднозначность, понимается по контексту) номиналь- но составляет 108 байт 6 В дистрибутиве Solaris 10 в качестве стандартной оболочки для пользователя root использует- ся оригинальная оболочка Bourne, которая (что удивительно) не воспринимает метасимвол ~ или Поль зов а тель.
56 Часть I. Основы администрирования Окончание табл. 1.2 Пример Описание возможного варианта 100 Мбайт (МВ) Размер раздела диска (понимается по контексту) номинально составляет 108 байт, воз- можно, 99 999 744 байт3 1 Гибайт (GiB) Размер ОЗУ, в точности равный 1 073 741 824 байт6 1 Пбит/с (Gb/s) Скорость передачи информации в сети Ethernet составляет 1 гигабит в секунду (1 000 000 000 бит в секунду) 1 Тбайт (ТВ) Объем жесткого диска составляет 1 терабайт (один триллион байт), или 1 000 000 000 000 байт аЧисло 108 округлено в меньшую сторону до ближайшего целого, кратного размеру 512-байтового блока диска. 6 По заявлению компании Microsoft, этого недостаточно для функционирования 64-разрядной версии Windows 7. Аббревиатура К, как в случае “8 Кбайт (КВ)”, не является частью стандарта. Это компьютерная адаптация метрической аббревиатуры к (обозначение приставки кило-), которая означает 1 024 в отличие от 1 000. Но поскольку в аббревиатурах для многих ме- трических приставок уже используется прописная буква, стала возникать путаница при новом и исходном использовании буквы К в качестве множителя 1 000. В дистрибутиве Ubuntu Linux реализуется героическая попытка внести здравый смысл в этот вопрос и ликвидировать противоречивость (подробнее см. wiki.ubuntu. сот/ UnitsPolicy). 1.9. Использование справочных страниц И ДРУГОЙ ОПЕРАТИВНОЙ ДОКУМЕНТАЦИИ Справочные страницы онлайн-руководства (так называемые man-страницы, по- скольку их можно просмотреть с помощью команды man) составляют традиционную “интерактивную” документацию (хотя, конечно, в настоящее время практически вся до- кументация в той или иной мере является интерактивной). Эти материалы в основном инсталлируются вместе с системой, а справочной страницы отдельных программ — вме- сте с соответствующим пакетом. Интерактивное руководство содержит краткое описание отдельных команд, драйве- ров, форматов файлов и библиотечных функций. В них не найти ответа на общие во- просы, например, “Как инсталлировать новое устройство?” или “Почему моя система работает так медленно?”. Для получения ответов на подобные вопросы обращайтесь к руководствам по администрированию систем соответствующих производителей (см. раз- дел 1.10) или, если вопрос касается систем Linux, к документам, находящимся в ведении проекта Linux Documentation Project (LDP). Организация справочных страниц интерактивного руководства Во всех системах справочные страницы обычно делятся на разделы, при этом воз- можны небольшие вариации на тему принципов такого разделения. Основная схема разделения, используемая в наших примерах систем, показана в табл. 1.3.
•лава 1. с чего начать 57 Таблица 1.3. Разделы справочных страниц Unux Solaris HP-UX AIX Содержание '• -— ~ r... * 1 1 1 1 Команды пользовательского уровня и приложения 2 2 2 2 Системные вызовы и коды ошибок ядра 3 3 3 3 Библиотечные функции 4 7 7 4 Драйверы устройств и сетевые протоколы 5 4 4 5 Стандартные форматы файлов 6 6 — 6 Игры и демонстрационные программы 7 5 5 7 Различные файлы и документы 8 1m 1m 8 Команды системного администрирования 9 9 - - Внутренние интерфейсы и спецификации ядра — - 9 - Общая информация по HP-UX Некоторые разделы делятся на подразделы. Например, подраздел Зс руководства по Solaris содержит страницы с информацией о библиотеке стандартных С-функций систе- мы. В некоторых системах раздел 8 остается пустым, а описание команд, относящихся к системному администрированию, как правило, содержится в разделе 1. Игры и демон- страционные программы во многих системах уже удалены из раздела 6. Раздел руко- водства под названием “1” (прописная буква от “L”) зачастую отводится для локальных справочных страниц. Точная структура разделов не так уж важна, поскольку команда man находит соответ- ствующую страницу в большинстве случаев. При этом в нескольких разделах может быть одно и то же имя, и вот тут важно указать нужный вам раздел. Например, passwd — это и команда, и файл конфигурации, поэтому соответствующие статьи есть как в разделе 1, так и разделе 4 или 5. Команда man: чтение страниц интерактивного руководства Команда man заголовок форматирует конкретную страницу интерактивного руко- водства и выводит ее на терминал пользователя посредством more, less или другой про- граммы постраничной разбивки, которая задана в переменной среда PAGER. Аргумент заголовок — это, как правило, имя команды, устройства или файла, о которых необхо- димо получить справочную информацию. Поиск по разделам руководства осуществля- ется в порядке возрастания номеров, хотя разделы, посвященные описанию команд (1,8 и 6), обычно просматриваются в первую очередь. Команда man раздел заголовок вызывает справочную страницу из указанного раздела. Так, в большинстве систем команда man sync вызывает справочную страницу ДДя команды sync, а команда man 2 sync — для системного вызова sync. _ В системе Solaris необходимо перед номером раздела использовать флаг -з, bOiaHS например man -s 2 sync. Команда man -k ключевое слово или apropos ключевое^ слов о выводит список равочных страниц, в строке пояснений к которым имеется указанное ключевое слово. % man -k translate dca ” С0РУ and translate object files е text (3) - translate message
58 Часть I. Основы администрирования tr (1) - translate or delete characters snmptranslate (1) - translate SNMP OID values into more useful information tr (lp) - translate characters База данных ключевых слов может устаревать. При добавлении новых справочных страниц к системе вам, возможно, придется перестроить (перекомпоновать) этот файл с помощью команд mandb (Ubuntu, SUSE), makewhatis (Red Hat) или catman -w (Solaris, HP-UX, AIX). Хранение страниц интерактивного руководства Неформатированная информация для справочных страниц (входные данные коман- ды nroff) обычно хранится в подкаталогах каталога /usr/share/man. В целях эконо- мии места на диске системы Linux сжимают страницы с помощью утилиты gzip (ко- манда man может очень быстро разархивировать их). Команда man поддерживает кеш отформатированных страниц в каталогах /var/cache/man или /usr/share/man, если соответствующие каталоги доступны для записи, но эти операции рискованны с точки зрения безопасности. В большинстве систем предварительное форматирование справоч- ных страниц выполняется однократно во время инсталляции (см. команду catman) или не выполняется совсем. В дополнение к традиционной команде nroff система Solaris воспринимает soiaris справочные страницы, отформатированные с использованием обобщенного языка разметки SGML. SGML-страницы имеют собственные каталоги раздела в каталоге /usr/share/man. Команда man ищет страницы в ряде каталогов. В Linux-системах выяснить путь поис- ка позволяет команда manpath. Результат ее работы (в системе Ubuntu) обычно таков. ubuntu$ manpath /usг/local/man:/usr/local/share/man:/usr/share/man Эта установка хранится в переменной среды MANPATH, и в случае необходимости ее, можно изменить. export MANPATH=/home/share/localman:/usr/share/man Некоторые системы позволяют установить общесистемный параметр пути поиска для справочных страниц, который может оказаться полезным в случае, если вам придет- ся поддерживать параллельное дерево справочных страниц, например, сгенерированных кроссплатформенным менеджером пакетов OpenPKG. Но если вы хотите распростра- нять локальную документацию в виде справочных страниц, проще всего использовать стандартный системный механизм пакетирования и выложить справочных страницы в стандартные справочные каталоги. Подробнее об этом написано в главе 12. CNU-система Texinfo Системы Linux включают дополнительный вариант интерактивных справочных стра- ниц, именуемый Texinfo. Система Texinfo была изобретена энтузиастами проекта GNU после того, как выяснилось, что команда nroff, применяемая для форматирования справочных страниц, является собственностью AT&T. Теперь то же самое делает GNU- команда groff, так что проблема утратила актуальность, хотя Texinfo все еще бродит как зомби в поисках человеческих мозгов.
глава 1. С чего начать_____________________________________________________59 Несмотря на то что использование системы Texinfo, казалось бы, постепенно сходит на нет, некоторые GNU-пакеты требуют, чтобы документация к ним была представлена именно в формате Texinfo. Чтобы обойти встроенную навигационную систему Texinfo, перенаправьте поток вывода команды info посредством команды less. Но есть и приятный момент. Пакеты, документируемые с помощью системы Texinfo, обычно инсталлируют страницы-заглушки, в которых сообщается о том, что инфор- мацию о соответствующем пакете можно получить, вызвав команду info. Таким обра- зом можно продолжать пользоваться командой man, обращаясь к команде info лишь в случае необходимости. Команда info info выдает справку по запутанной системе Texinfo. 1.10. Другие виды официальной документации Справочные страницы — это лишь малая часть официальной документации. Остальная, в основном, рассеяна в веб-пространстве. Руководства по конкретным системам Одни производители систем ведут собственные онлайн-проекты по подготовке доку- ментации, другие выпускают полезные руководства в виде объемных книг. В настоящее время нужное руководство быстрее найти в Интернете, чем в форме печатного издания. Объем и качество документации бывают разными, но большинство производителей вы- пускает, по меньшей мере, руководство по администрированию и инсталляции системы. Где найти документацию по каждому из наших примеров систем, показано в табл. 1.4. • Безусловно, нельзя не выделить компанию IBM, которая выпускает множе- ство толстых книг по различным темам администрирования систем. Вы мо- жете купить их или даже бесплатно скачать на свой компьютер. Но, к сожале- нию, многие документы от IBM отстают на одну или две версии от текущего выпуска AIX. Таблица 1.4. Где найти документацию от производителей операционных систем Система URL - Ubuntu help.ubuntu.com Наиболее дружественная к пользователю; см. раздел “server guide” SUSE novell.com/documentation Материал по администрированию собран в разделе “reference guide” RHEL redhat.com/docs В основном, документы по расширениям системы Red Hat Solaris docs.sun.com Громадный каталог материалов HP-UX docs.hp.com Книги, технические описания и руководства AIX www.redbooks.ibm.com ibm.com/support Многочисленные книги в формате PDF Доступ к комментариям, разделам FAQs и пр. В “соревнованиях” по созданию документации система Red Hat, к сожале- нию, отстает от лидеров. Большая часть выпускаемых документов касается не общих вопросов администрирования Linux-систем, а собственных систем с дополнительными позитивными характеристиками.
60 Часть I. Основы администрирования Документация по конкретным пакетам Большинство важнейших программных пакетов в мире UNIX и Linux поддержива- ют отдельные лица или такие сторонние организации, как Internet Systems Consortium и Apache Software Foundation. Сотрудники этих групп пишут собственную документацию, качество которой часто оставляет желать лучшего. При этом существуют и такие пре- красно выполненные документы, как Version Control with Subversion от svnbook. red- bean . com (оказывается, надо знать, где искать!). Производители систем UNIX и дистрибуторы систем Linux всегда включают в свои пакеты соответствующие справочные страницы. К сожалению, многие из них старают- ся сэкономить на документации другого типа, главным образом, ввиду отсутствия стан- дартного места для ее представления (см. /usr/share/doc). Всегда имеет смысл по- сетить веб-сайт первоисточника программного продукта и поинтересоваться наличием дополнительных материалов и доступа к ним. В число дополнительных документов входят: технические отчеты (техническое опи- сание), проектные обоснования и трактовки конкретных тем. Эти дополнительные материалы зачастую не ограничиваются простым описанием команд и могут включать самоучители и другие разделы. Многие программные пакеты, помимо справочных стра- ниц, содержат и статьи по соответствующим темам. Например, после вызова справочной страницы для редактора vi вам будет предложено не только ознакомиться с аргументами командной строки, но и перейти к разделу, из которого вы узнаете, как в действитель- ности отредактировать файл. Книги К самым лучшим источникам информации для системных администраторов в книж- ном мире (в дополнение к этой книге :-), конечно) можно отнести серию книг Тима О’Рейли (Tim O’Reilly). Начало этой серии было положено более 20 лет назад книгой UNIX in a Nutshell. Теперь же практически всем важным подсистемам UNIX и Linux (и даже командам) посвящены ее отдельные тома. Эта серия также включает книги по Интернету, Windows и другим темам, не связанным с UNIX. Все эти книги имеют при- емлемую цену, своевременны и ориентированы на конкретную аудиторию. Тим О’Рейли, заинтересовавшись движением, основанным на принципе открыто- го исходного кода, регулярно проводит конференции (OSCON) по этой и другим зло- бодневным темам. Конференции OSCON проводятся дважды в год (по одной в США и Европе). Подробнее см. на сайте oreilly.com. Документы RFC и другие интернет-ресурсы Документы из серии RFC (Request for Comments — запрос на комментарий) опи- сывают протоколы и процедуры, используемые в Интернете. Большинство из этих до- кументов достаточно детализированы и специализированы, но некоторые написаны в виде обзоров. Информации, которую они содержат, вполне можно доверять, и она во многом оказывается полезной для системных администраторов. Более полное описание этих документов можно найти в разделе 14.1. Проект документации по Linux Для систем Linux существует и такой источник справочной информации, как проект Linux Documentation Project (LDP), доступный на веб-сайте tldp. org. Этот сайт пред-
Глава 1. С чего начать 61 ставляет собой центральное хранилище разного рода информации, посвященной Linux: от FAQ (часто задаваемые вопросы) до объемных руководств. Здесь же концентрируются результаты усилий по переводу документации на различные языки. К сожалению, многие LDP-документы практически не обновляются, поэтому быстро устаревают. Всегда обращайте внимание на дату публикации документа, так как по ней можно судить об актуальности информации. 1.11. Другие источники информации Источники информации, рассмотренные в предыдущем разделе, можно охарактери- зовать как самые надежные, но вряд ли это последнее слово в документации по UNIX и Linux. В Интернете же можно найти многочисленные блоги, дискуссионные форумы и новостные веб-каналы и получить с их помощью самую “свежую” информацию. Как и следовало ожидать, система Google стала лучшим другом системного админи- стратора. Именно к Google многие администраторы обращаются за консультацией, если вопрос не касается спецификации конкретной команды или формата файла (но и в этом случае Google обязательно поможет). Возьмите себе за правило (если не хотите впустую терять время и репутацию) при возникновении затруднений выносить свои вопросы на онлайн-форумы, ссылающиеся при ответах на Google.7 Невозможно перечислить все полезные интернет-источники информации по Linux, поэтому упомянем лишь важнейшие из них (табл. 1.5). Можем порекомендовать еще один забавный и полезный ресурс. Это страница “Ro- setta Stone” (розеттский камень) Брюса Гамильтона (Bruce Hamilton), доступная по адресу bhami. com/rosetta. html. Она содержит указатели на команды и утилиты, применяемые для решения основных административных задач в различных операционных системах. Если вы работаете в Linux-системе, не стесняйтесь обращаться к UNIX-ресурсам об- щего назначения. Большая часть информации в них напрямую применима к Linux. Таблица 1.5. Веб-ресурсы, посвященные системному администрированию Веб-сайт Описание blogs.sun.com Огромная коллекция технических статей, посвященных, в основном, Solaris cpan.org Заслуживающая доверия коллекция Perl-модулей freshmeat.net Большой каталог программ для Linux и UNIX kernel.org Официальный веб-сайт разработчиков ядрзД&цх linux.com Unux-форум, прекрасный сайт для новичков Unux. org Неофициальное хранилище информации по Unux linux.slashdot.org Огромный архив новейшей справочной технической информации по Unux linuxhq.com Хранилище информации по ядру и “заплат” к нему lwn.net Сборник материалов по Linux и программам с открытым исходным кодом l*er com Агрегатор новинок по Linux r°otvg.net Сайт, ориентированный на системы AIX с множеством ссылок и форумов securityfocus.com Хранилище информации по общим вопросам компьютерной безопасности serverfault.com Совместно редактируемая база данных вопросов от системных администра- торов Или, в худшем случае, ссылающиеся на Google через lmgtfy.com.
62 Часть I. Основы администрирования Окончание табл. 1.5 Веб-сайт Описание ServerFiles.com Каталог сетевых программных и аппаратных средств slashdot.org Хранилище новейшей справочной технической информации по различным темам solariscentral.org Открытый блог с новостями и статьями по Solaris sun.com/bigadmin Сайт, содержащий информацию по администрированию Sun-систем sunhelp.org Прекрасная коллекция Sun-материалов ugu.com Сайт “Вселенная гуру UNIX” (UNIX Guru Universe) с информацией для систем- ных администраторов а Сейчас его поддерживает Linux Foundation — некоммерческий консорциум развития Linux. 1.12. Как инсталлировать программное обеспечение Подготовка к работе программного обеспечения подробно рассматривается в гла- ве 12. Но ддя самых нетерпеливых мы прямо здесь расскажем о том, как выяснить, что уже установлено в вашей системе, и как получить новое программное обеспечение и ин- сталлировать его. В современных операционных системах программное обеспечение разделено на па- кеты, которые можно инсталлировать независимо друг от друга. При стандартной уста- новке системы используется группа “стартовых” пакетов, которую можно при необхо- димости расширить. Добавочные программные продукты зачастую предоставляются также в виде пред- варительно скомпилированных пакетов, но далеко не во всех системах. Большая часть программного обеспечения создается независимыми группами разработчиков, выпуска- ющих программы в виде исходных кодов. Репозитории пакетов затем берут исходные коды, компилируют их в соответствии с особенностями конкретной системы и вклю- чают в пакеты полученные бинарные файлы. Как правило, намного проще инсталли- ровать бинарную версию пакета, предназначенную для данной системы, чем искать и компилировать исходный код. Однако нужно учитывать, что иногда создатели пакетов на один-два выпуска отстают от текущей версии системы. Если в двух системах используется один и тот же формат обработки пакетов, то это еще не означает, что пакеты обеих систем будут взаимозаменяемыми. Например, в си- стемах Red Hat и SUSE применяется формат RPM, однако структура их файловых си- стем неодинакова. Рекомендуется всегда пользоваться пакетами, созданными для кон- кретной системы. В известных Linux-дистрибутивах предусмотрены отлаженные системы управления пакетами, которые включают средства доступа к репозиториям программных продук- тов и поиска их в Интернете. Дистрибуторы активно поддерживают эти репозитории от имени сообщества, которое они представляют, поэтому у администраторов Linux-систем редко возникает необходимость выходить за рамки стандартного менеджера пакетов. Другими словами, жизнь прекрасна! При этом UNIX-системы демонстрируют больше неопределенности по части управ- ления пакетами. Solaris, HP-UX и AIX предоставляют соответствующие программные средства работы с пакетами, которые функционируют на уровне отдельных машин. Однако производители этих систем не поддерживают репозитории продуктов с откры-
Глава 1. С чего начать 63 тым исходным кодом, и поэтому пользователям, в основном, приходится заниматься самообслуживанием.8 К сожалению, одним из главных звеньев цепочки, которая свя- зывает систему пакетирования в одно целое, является метод ссылки одних пакетов на другие, позволяющий выразить информацию о взаимной зависимости и совместимости. Без центральной координации вся эта экосистема может быстро развалиться на отдель- ные части. Действительность демонстрирует совершенно разные результаты. Дистрибутив Solaris предлагает добавочную систему (pkgutil от blastwave. org), которая предоставляет простую инсталляцию программного обеспечения из интернет-репозитория, во многом подобную системам, содержащимся на Linux-дистрибутивах. Система HP-UX содержит прекрасный интернет-репозиторий в форме HP-UX Porting и Archiving Centre (hpux. connect. org. uk), но пакеты должны быть загружены вручную и по отдельности. Что касается AIX, то пока трудно говорить о возможности использования предварительно скомпонованного программного обеспечения для этой системы. Администраторы без доступа к предварительно скомпонованным бинарным верси- ям пакетов должны инсталлировать системы по-старому, т.е. загрузить архив исходного кода tar, а затем вручную сконфигурировать, скомпилировать и инсталлировать систему. Иногда этот процесс проходит гладко, а иногда может превратиться в кошмар: все зави- сит от используемого программного обеспечения и конкретной операционной системы. В этой книге мы предполагаем, что дополнительное программное обеспечение уже установлено, и не собираемся мучить вас шаблонными инструкциями по инсталляции каждого пакета. При необходимости мы будем указывать точные названия пакетов для выполнения конкретного проекта. Однако большей частью мы не будем повторять ин- струкции по инсталляции, поскольку они практически идентичны для всех пакетов. Определение факта инсталляции программного обеспечения По ряду причин иногда нелегко определить, какой программный пакет содержит нужный компонент. Для того чтобы выяснить, “прописан” ли важный для вас бинарный файл в строке поиска, лучше использовать команду which (а не действовать на пакет- ном уровне). Например, следующая команда сообщает о том, что компилятор GNU С инсталлирован на данном компьютере. aix$ which gcc /opt/pware/bin/gcc Если команда which не помогла, воспользуйтесь командой whereis, которая ведет поиск в системных каталогах без учета строки поиска. Другой вариант — это чрезвы- чайно удобная команда locate, которая просматривает предварительно скомпилиро- ванный индекс файловой системы в поиске имен файлов, соответствующих заданному шаблону. Команда locate входит в состав GNU-пакета findutils, который по умол- чанию включен в большинство систем Linux, но для UNIX его необходимо инсталлиро- вать вручную. С помощью команды locate можно искать не только программы или пакеты, но Файлы любых типов. Например, если не известно точно, где искать файл заголовков signal.h (в нем содержатся определения сигналов Linux), попробуйте поступить так. Репо ^аЗРаб°ТЧИКИ OpenS°laris не предлагают систему управления пакетами и интернет- зиторий. Хотя этих средств нет в Solaris 10, ими предполагается оснастить Solaris 11.
64 Часть I. Основы администрирований ubuntu$ locate signal.h /usr/include/signal.h /usr/include/asm/signal.h /usr/include/asm-generic/signal.h /usr/include/linux/signal.h База данных команды locate периодически обновляется командой updatedb, кото- рая запускается демоном cron. Следовательно, результаты работы команды locate не всегда отражают последние изменения в системе. Ш Подробнее об управлении пакетами рассказывается в главе 12. Если известно имя искомого пакета, воспользуйтесь системными утилитами обра- ботки пакетов, которые непосредственно проверят наличие пакета. Например, в систе- мах Red Hat или SUSE следующая команда определяет наличие интерпретатора языка Python (и его инсталлированной версии): redhat$ rpm -q python python-2.4.3-21.el5 Добавление новых программ Если возникнет необходимость инсталлировать дополнительное программное обе- спечение, вам, прежде всего, нужно определить каноническое имя соответствующего программного пакета. Например, вам следует преобразовать ваше желание “хочу ин- сталлировать locate” в версию “нужно инсталлировать пакет findutils” или пере- вести намерение “инсталлировать named” в вариант “инсталлировать BIND”. В этом вам поможет множество веб-индексов, эффективно работающих при указании конкретной системы, особенно при использовании Google. Например, при введении в поле поиска “команда locate” вас направят точно по адресу. Если вы работаете в системе UNIX, ука- жите также имя операционной системы. Если вам известно имя нужной утилиты, можете загрузить и инсталлировать ее. В Linux и Solaris полная установка обычно состоит в использовании одной команды, по- скольку в этих системах уже инсталлирована утилита pkgutil. Для HP-UX и AIX вам придется загрузить либо предварительно собранный бинарный пакет, либо исходный код проекта. В последнем случае попробуйте с помощью Google найти официальную веб-страницу проекта и загрузить оттуда его исходный код. Следующие примеры демонстрируют инсталляцию утилиты wget для каждой си- стемы, взятой в этой книге в качестве примера. Эта GNU-утилита, которая превращает сетевую загрузку файлов (поддерживающую протоколы HTTP и FTP) в элементарную команду, очень полезна для выполнения сценариев. Утилита wget инсталлируется по умолчанию в каждом из рассматриваемых здесь примеров систем Linux; при этом от- метим, что представленные ниже команды можно использовать как во время начальной инсталляции, так и при последующих обновлениях системы. ®В системе Ubuntu используется программа для установки, обновления и удале- ния программных пакетов в операционных системах Debian (Advanced Package Tool - APT). ubuntu# apt-get install wget Reading package lists... Done Building dependency tree Reading state information... Done
Глава 1. С чего начать 65 wget is already the newest version. 0 upgraded, 0 newly installed, 0 to remove and 0 not upgraded. Вот как выглядит версия SUSE. suse# yast —install wget <runs in a terminal-based UI> Вариант инсталляции в системе Red Hat. redhat# yum install wget Loaded plugins: fastestmirror Parsing package install arguments Package wget-1.10.2-7.el5.i386 is already installed and latest version Nothing to do В системе Solaris инсталляция выполняется с помощью уже установленной soians утилиты pkutil (для получения инструкций по данной установке см. сайт blastwave. org). Solaris# /opt/csw/bin/pkgutil —install wget cmultiple pages of output as seven packages are installed> [КЯ Для системы HP-UX мы нашли на сайте hpux. connect. org. uk соответству- ющий бинарный пакет и загрузили его в каталог /tnp. Команды распаковки и инсталляции в этом случае выглядят так. hpux# gunzip /tmp/wget-1.11.4-hppa-ll. 31.depot.gz hpux# swinstall -s /tmp/wget-1.11.4-hppa-ll. 31. depot wget ======= 05/27/09 13:01:31 EDT BEGIN swinstall SESSION (non-interactive) (jobid=hpuxl1-0030) * Session started for user "root@hpuxll". * Beginning Selection * Target connection succeeded for "hpuxll:/". * Source: /tmp/wget-1.11.4-hppa-ll.31.depot * Targets: hpuxll:/ * Software selections: wget.wget-RUN,r=l.11.4,a=HP-UX_B./800 * Selection succeeded. * Beginning Analysis and Execution * Analysis and Execution succeeded. Пакет depot (в строке с командой swinstall) должен быть задан как полный путь, начинающийся косой чертой “/”; в противном случае команда swinstall попытается найти нужный файл в сети. Утилита wget при завершении инсталляции сообщает ко- манде swinstall, какой пакет надо загрузить из файла depot. К сожалению, этот процесс инсталляции в действительности не так прост, как может показаться на первый взгляд. Инсталлируемая версия утилиты wget на самом деле не будет работать, поскольку некоторые библиотеки, от которых она зависит, не инсталли- рованы. hPux$ wget http://samba.org/samba/docs/Samba3-HOWTO.pdf /usr/lib/dld.si: Can't open shared library: /usr/local/lib/libcrypto.si /usr/lib/dld.si: No such file or directory
66 Часть I. Основы администрирования [HP ARIES32] : Core file for 32 bit РА-RISC application [HP ARIES32]: /usr/local/bin/wget saved to /tmp/соге.wget. Утилита swinstall обладает встроенным механизмом управления зависимостями, но его возможности, к сожалению, не распространяются на интернет-репозитории. Прочитайте “паспортные данные” утилиты swinstall и инсталлируйте все необходи- мые для нее пакеты (в данном случае — еще шесть). Сборка программного обеспечения из исходного кода Фактически существует, по крайней мере, один бинарный пакет wget, доступный для AIX в формате RPM. Поиск в Google при заданной строке “aix wget грш” вполне оправдает ваши надежды. После загрузки вам останется выполнить совсем простую ко- манду инсталляции. aix# rpm —install wget-1.11.4-1.aix5.l.ppc.rpm В целях иллюстрации построим AIX-версию пакета wget на основе оригинального исходного кода. Прежде всего, нам нужно найти этот код, но это не проблема: первый же результат, предложенный системой Google для заданной строки поиска “wget”, направит нас пря- мо на страницу GNU-проекта, которая содержит нужные ссылки. После загрузки теку- щей версии в каталог /trap мы распаковываем ее, задаем конфигурацию, компонуем и инсталлируем. aix# cd /top; gunzip wget-1.11.4.tar.gz aix# tar xfp wget-1.11.4.tar aix# cd wget-1.11.4 aix# ./configure —disable-ssl —disable-nls # См. комментарии ниже configure: configuring for GNU Wget 1.11.4 checking build system type... rs6000-ibm-aix config.status: creating src/config.h config.status: executing default commands generating po/POTFILES from ./ро/POTFILES.in creating po/Makefile aix# make <несколько страниц компиляционных сообщений> aix# make install <o странице выходных сообщений> Приведенную последовательность команд инсталляции configure/make/make install обычно применяют для большинства UNIX- и Linux-утилит во всех системах, но, безусловно, при наличии инсталлированной среды разработки и программ, состав- ляющих заданный пакет. При этом будет не лишним прочитать файлы INSTALL или README, сопровождающие данный пакет. В данном случае использование ключей —disable-ssl и —disable-nls в ко- манде configure позволяет опустить некоторые wget-функции, входящие в состав би- блиотек, которые не были инсталлированы (при обслуживании реальной системы вам,* возможно, захочется включить в инсталляцию опущенные здесь части пакета). Чтобы узнать все опции процесса конфигурации, используйте команду configure —help. Обратите внимание на полезную опцию - -pref ±х=каталог команды configure, которая позволит вам поместить программное обеспечение не в каталог /usr/local, а в более подходящий для вас каталог.
Глава 1. С чего начать 67 1.13. Издержки профессии Системные администраторы — настоящие “многостаночники”. Они часто имеют дру- гую работу, просто их попросили присмотреть за несколькими компьютерами “на сторо- не”. Если вы один из таких людей, подумайте, к чему в конце концов это может привести. Чем больше вы будете знать о своей системе, тем больше пользователи будут зави- сеть от вас. Сети неуклонно разрастаются, и вы будете вынуждены тратить все больше и больше времени на выполнение функций администратора. Вскоре окажется, что вы — единственный человек во всей организации, который знает, как решить ряд важнейших проблем. Если коллеги стали считать вас локальным системным администратором, от этой роли уже трудно отказаться. Мы знаем нескольких людей, которым пришлось поменять место работы, чтобы избавиться от дополнительной нагрузки. Поскольку круг обязан- ностей системного администратора четко очертить нельзя, от вас, скорее всего, потре- буют, чтобы вы были не только штатным администратором, но и штатным инженером, писателем, а также специалистом по психоанализу. Практика показывает, что некоторые администраторы, ставшие таковыми волей об- стоятельств (а не по “велению души”), стараются избежать потока просьб о помощи, демонстрируя раздражение и плохо выполняя свои обязанности.9 Не стоит придерживаться такого подхода, так как вы будете плохо выглядеть в гла- зах окружающих и у вас могут возникнуть дополнительные проблемы. Вместо этого мы предлагаем просто фиксировать время, затрачиваемое на системное администрирова- ние. Ведите работу на должном уровне и собирайте доказательства, которые можно бу- дет использовать, когда вы попросите начальника освободить вас от обязанностей адми- нистратора. В большинстве организаций для того, чтобы добиться замены, приходится упрашивать руководство полгода, а то и год, так что учитывайте это в своих планах. С другой стороны, может оказаться, что системное администрирование вам нравится и вы хотите стать штатным администратором. В этом случае проблем с поиском рабо- ты у вас не будет. К сожалению, сама работа от этого не станет легче. О политических аспектах системного администрирования рассказывается в главе 32. 1.14. Рекомендуемая литература • Robbins Arnold. UNIX in a Nutshell (4th Edition). Sebastopol, CA: O’Reilly Media, 2008. • Siever Ellen, Aaron Weber and Stephen Figgins. Linux in a Nutshell (5th Edition). Sebastopol, CA: O’Reilly Media, 2006. • Gancarz Mike. Linux and the Unix Philosophy. Boston: Digital Press, 2003. • Salus Peter H. The Daemon, the GNU & the Penguin: How Free and Open Software is Changing the World. Reed Media Services, 2008. В настоящее время эта захватывающая история развития программного обеспече- ния с открытым исходным кодом, исследованная наиболее известным историком UNIX, переводится в цифровую форму на сайте groklaw. com в соответствии с ли- цензией Creative Commons (Сообщество представителей творческих профессий). 9 Обозначенная тенденция с любовью и черным юмором описана в рассказах Синона Травальи (Simon Travaglia Bastard Operator from Hell на сайте bof h. ntk. net в разделе BOFH.).
68 Часть I. Основы администрирования URL-адрес самой книги достаточно длинный; попытайтесь найти действующую ссылку на сайте groklaw.com или проверьте следующий сокращенный вариант: tinyurl.com/d6u7j. • Raymond Eric S. The Cathedral & The Bazaar: Musings on Linux and Open Source by an Accidental Revolutionary. Sebastopol, CA: O’Reilly Media, 2001. Системное администрирование • Limoncelli Thomas A., Christina J. Hogan and Strata R. Chalup. The Practice of System and Network Administration (Second Edition). Reading, MA: Addison-Wesley, 2008. Это прекрасная книга, описывающая политические и процедурные аспекты си- стемного администрирования. Авторы ведут блог по системному администрирова- нию (everythingsysadmin. com). • Frisch ЛПееп. Essential System Administration (3rd Edition). Sebastopol, CA: O’Reilly Media, 2002. Это классическое универсальное руководство по администрированию систем UNIX, которое, к сожалению, уже несколько устарело. Надеемся, что его новая версия уже в работе! Основной инструментарий • Robbins Arnold, Elbert Hannah and Linda Lamb. Learning the vi and Vim Editors. Sebastopol, CA: O’Reilly Media, 2008. • Powers Shelly, Jerry Peek, Tim O’reilly and Mike Loukides. UNIX Power Tools (3rd Edition) . Sebastopol, CA: O’Reilly Media, 2003. • Michael Randal K. Mastering UNIX Shell Scripting: BASH, Bourne, and Korn Shell Scripting for Programmers, System Administrators, and UNIX Gurus. Indianapolis, IN: Wiley Publishing, Inc., 2008. • Robbins Arnold and Nelson H. F. Beebe. Classic Shell Scripting. Sebastopol, CA: O’Reilly Media, 2005. • Wall Larry, Tom Christiansen and Jon Orwant. Programming Perl (3rd Edition). Cambridge, MA: O’Reilly Media, 2000. • Christiansen Tom and Nathan Torkington. Perl Cookbook (2nd Edition). Sebastopol, CA: O’Reilly Media, 2003. • Blank-Edelman David N. Automating System Administration with Perl (2nd Edition). Sebastopol, CA: O’Reilly Media, 2009. • Pilgrim Mark. Dive Into Python. Berkeley, CA: Apress, 2004. К этой книге есть свободный веб-доступ по адресу: diveintopython.org. • Flanagan David and Yukihiro Matsumoto. The Ruby Programming Language. Sebastopol, CA: O’Reilly Media, 2008. Эта книга, имеющая оптимистический подзаголовок Everything You Need to Know (Все, что вам необходимо знать), к сожалению, написана несколько суховато. Но она подкупает полнотой описания языка Ruby (версии 1.9) с богатством деталей, которые могут быть известны лишь создателюязыка. Это самая лучшая книга для тех, кто уже владеет (на практическом уровне) языками Perl или Python.
Глава 1. С чего начать 69 1.15. Упражнения 1.1. Какую команду нужно ввести, чтобы получить информацию о драйвере терминала tty (а не о команде tty)? Как прочитать соответствующую страницу документа- ции, хранящуюся в каталоге /usr/local/share/man? 1.2. Определяет ли общий конфигурационный файл поведение команды man в ва- шей системе? Какие строки нужно в него добавить, чтобы локальные материалы хранились в каталоге /doc/man? Как организовать каталог /doc/man, чтобы его структура соответствовала иерархии справочных страниц? 1.3. Как в настоящее время протекает разработка ядра Linux? Каковы наиболее акту- альные вопросы? Какие организации играют в этом процессе ключевую роль? Кто руководит проектом? 1.4. ★Изучите возможности нескольких систем UNIX и Linux и порекомендуйте опе- рационную систему для каждого из перечисленных ниже случаев. Аргументируйте свой выбор. а) домашний компьютер пользователя б) университетская компьютерная лаборатория в) корпоративный веб-сервер д) серверный кластер, обеспечивающий работу базы данных для судоходной ком- пании 1.5. ★Предположим, вы обнаружили, что определенное свойство демона httpd серве- ра Apache работает не так, как описано в документации к Ubuntu. а) что нужно сделать перед тем, как сообщать об ошибке? б) если вы решили, что это действительно ошибка, то кого нужно уведомить и каким способом? в) какую информацию необходимо включить в отчет об ошибке? 1.6. ★★Системы Linux серьезно заявили о себе в производственных средах. Обречены ли UNIX-системы? Почему?
Глава Сценарии и командная оболочка Настоящие системные администраторы пишут сценарии. Сценарии позволяют стан- дартизировать и автоматизировать выполнение рутинных операций по администрирова- нию систем, тем самым освобождая столь ценное время администраторов для решения? более важных и более интересных задач. В известном смысле сценарии — это докумен- тирование действий в виде официального перечня команд, необходимых для выполне- ния конкретной задачи. Сценарии бывают самыми разными: от очень простых, которые инкапсулируют всего несколько статических команд, до значительных программных проектов, управляющих конфигурациями хостов и административной информацией всего узла. В этой книге нас, главным образом, интересуют небольшие повседневные сценарные проекты, с ко- торыми обычно имеют дело системные администраторы, поэтому мы не будем подроб- но останавливаться на функциях поддержки (например, отслеживание ошибок и оценка проекта), необходимых для более крупных проектов. При написании административных сценариев следует делать акцент на эффектив- ности работы программиста и ясности кода, а не на производительности вычисли- тельных средств. Не может служить оправданием для небрежно написанного сценария время его выполнения, т.е. не так уж важно, выполняется он за полсекунды или за две. Удивительно, но оптимизация слабо оправдывает затраты, даже в случае сценариев, ко- торые регулярно выполняются демоном cron. В течение долгого времени стандартный язык написания административных сцена- риев определялся командной оболочкой. В большинстве систем используется оболочка bash (“2toume-again” sAell — “возрожденная” оболочка Борна), но в ряде систем UNIX
Глава 2. Сценарии и командная оболочка 71 все еще работают sh (оригинальная оболочка Борна) и ksh (оболочка Корна). Сценарии оболочки обычно применяются для выполнения таких несложных задач, как автоматиза- ция последовательности команд или сборка нескольких фильтров для обработки данных. Командная оболочка всегда доступна, поэтому ее сценарии отличаются относитель- ной переносимостью и независимостью, в отличие от вызываемых ими команд. Пока вы будете выбирать оболочку, она может выбрать вас: большинство сред включает объеми- стое дополнение уже существующих sh-сценариев, с которыми администраторам часто приходится знакомиться, разбираться и заниматься их настройкой. При написании более сложных сценариев желательно использовать такие языки про- граммирования, как Perl или Python, поскольку они оба хорошо подходят для выполне- ния административной работы. Эти языки (по сравнению с командной оболочкой) во- брали в себя такие мощные достижения в области создания языков программирования последних двух десятилетий и оснащены такими возможностями по части обработки текстов (столь бесценные для системных администраторов), что оболочке sh остается лишь “рыдать от стыда где-то в уголке”. Основной недостаток языков Perl и Python состоит в отсутствии четкости в установке их сред, особенно в случае, если вы начинаете использовать библиотеки с откомпилиро- ванными компонентами от сторонних производителей. Командная оболочка не страдает такой проблемой, поскольку не имеет модульной структуры и не содержит сторонних библиотек. В этой главе дается краткий обзор языковых инструментов написания сценариев bash, Perl и Python, а также регулярных выражений. 2.1. Основы РАБОТЫ КОМАНДНОЙ ОБОЛОЧКИ Прежде чем обсуждать написание сценариев оболочки, рассмотрим некоторые базо- вые команды и синтаксис языка командной оболочки. Материал этого раздела актуален для всех основных оболочек sh-семейства (включающего оболочки bash и ksh, но не csh или tcsh), вне зависимости от используемой вами платформы. Опробуйте формы, с которыми вы пока еще не знакомы, и не бойтесь экспериментировать! Редактирование команд Мы наблюдали, как многие редактируют командные строки с помощью клавиш управления курсором. Вы ведь так не поступаете в своем текстовом редакторе, верно? Все основные команды редактора emacs доступны при редактировании уже выпол- ненного ряда команд (т.е. “предыстории”). Нажав комбинацию клавиш <Ctrl+E>, вы переместитесь в конец строки, а с помощью комбинации клавиш <Ctrt+A> — в начало. Нажатие комбинации клавиш <Ctrl+P> позволяет вернуться к предыдущим комавдви*» вызвать их для редактирования. С помощью комбинации клавиш <Ctrl+R> вы сможете шаг за шагом “прокрутить” свою “предысторию” и найти старые команды. Если вы предпочитаете использовать редактор vi, переключите свою командную оболочку в режим vi. $ set -о vi В режиме vi редактирование является модальным, но вы начинаете работать в ре- жиме ввода команд. Для того чтобы выйти из режима ввода, нажмите вначале клайй- шу <Esc>, а затем клавишу <i>, чтобы вернуться в него. В режиме редактирования на- жатие клавиши <w> переместит вас вперед на одно слово; использование комбинаций
72 Часть I. Основы администрирования клавиш <f+X> позволит найти следующий символ “X” в строке и т.д. “Прогуляться” по командам, зафиксированным в “предыстории”, можно с помощью клавиш <Esc> и <к>. Решили вернуться в режим emacs-редактирования? Выполните эту команду. $ set -о emacs Каналы и перенаправление потоков Каждому процессу доступны по меньшей мере три информационных канала: “стан- дартный ввод” (STDIN), “стандартный вывод” (STDOUT) и “стандартная ошибка” (STDERR). Эти каналы устанавливаются ядром системы “от имени процесса”, и поэ- тому сам процесс не обязательно знает их направленность. Они, например, могут быть связаны с окном терминала, файлом, подключением к сети или с каналом, принадлежа- щим к другому процессу. Для систем UNIX используется унифицированная модель ввода-вывода, в которой каждому каналу присваивается целое число, именуемое файловым дескриптором. Точное число (номер), назначаемое каналу, обычно не имеет значения, но каналам STDIN, STDOUT и STDERR гарантированно соответствуют файловые дескрипторы 0, 1 и 2 со- ответственно, чтобы обеспечить безопасное обращение к ним по номерам. В контексте интерактивного окна терминала канал STDIN обычно считывает данные с клавиатуры, а оба канала STDOUT и STDERR записывают свои выходные данные на экран. Большинство команд принимает входные данные из канала STDIN. Выходная ин- формация записывается ими в канал STDOUT, а сообщения об ошибках — в канал STDERR. Это соглашение позволяет объединять команды подобно строительным бло- кам для организации конвейерной обработки данных. Командная оболочка интерпретирует символы и “»” как инструкции по изменению направления передаваемых командой данных в файл или принимаемых данных из файла. Символ “<” связывает канал STDIN с содержимым некоторого суще- ствующего файла. Символы “>” и “»” перенаправляют поток STDOUT; причем символ “>” используется для замены содержимого файла, а “»” — для добавления данных в его конец. Например, команда $ echo "Это тестовое сообщение." > /tmp/mymessage сохраняет одну строку в файле /tmp/mymessage (при необходимости файл будет соз- дан). Следующая команда отправляет содержимое этого файла по электронной почте пользователю johndoe. $ mail -s "Mail test" johndoe < /tmp/mymessage Для того чтобы перенаправить потоки STDOUT и STDERR в одно и то же место, ис- пользуйте символ “>&”. Для того чтобы перенаправить только поток STDERR, исполь- зуйте вариант “2>”. На примере команды find можно показать, почему важно обрабатывать потоки STDOUT и STDERR отдельно. Дело в том, что она формирует выходные данные по обо- им каналам, особенно в случае ее выполнения непривилегированным пользователем. Например, при выполнении команды $ find / -name core обычно генерируется так много сообщений об ошибках “permission denied” (отсутствие прав доступа), что настоящие результаты поиска теряются в “шуме”. Чтобы отбросить все сообщения об ошибках, можно использовать такой вариант. $ find / -name core 2> /dev/null
Глава 2. Сценарии и командная оболочка 73 В этой версии команды find только настоящие совпадения (где пользователь имеет разрешение на чтение родительского каталога) выводятся в окно терминала. Чтобы со- хранить список совпадающих путей в файле, выполните такую команду. $ find / -name core > /trap/corefiles 2> /dev/null Эта командная строка отправляет совпадающие пути в файл /tmp/corefiles, от- брасывая все ошибки и ничего не посылая в окно терминала. Для того чтобы связать канал STDOUT одной команды с каналом STDIN другой, ис- пользуйте символ “ | ”. Вот два примера. $ ps -ef | grep httpd $ cut -d: -f7 < /etc/passwd | sort -u В первом примере выполняется команда ps, генерирующая список процессов, из которого при “проходе” через команду grep выбираются строки, содержащие слово “httpd”. Результат выполнения команды grep никуда больше не перенаправляется, поэ- тому совпадающие строки попадают в окно терминала. Во втором примере команда cut выбирает из файла /etc/passwd пути к оболоч- ке каждого пользователя. Список оболочек затем отправляется через команду sort -и, чтобы сформировать отсортированный список уникальных значений. Для того чтобы последующая команда выполнялась только в случае успешного вы- полнения предыдущей, можно разделить эти команды символом Например, ко- мандная строка $ Ipr /tmp/t2 && rm /tmp/t2 удалит файл /tmp/t2 тогда и только тогда, когда она успешно дождется очередаьна печать. В данном случае успех выполнения команды 1рг будет зафиксирован при по- лучении кода завершения, равного нулю. Использование для этой цели символу озна- чающего операцию “логическое И”, может сбить с толку тех, кто в других язЫ^ЙПро- граммирования использовал вычисления в сокращенной форме записи. ЕсЛИ кому-то это непонятно, не стоит слишком долго здесь застревать; а просто примите это как иди- ому командной оболочки. И наоборот, символ “ | | ” обеспечит выполнение следующей команды только в том случае, если предыдущая команда не выполнится (т.е. сгенерирует ненулевое значение кода завершения). Для того чтобы разбить команду на несколько строк, для наглядности отделяя тем самым код обработки ошибок от остальной части командного конвейера, можно ис- пользовать в сценариях обратную косую черту. ср —preserve —recursive /etc/* /spare/backup \ I I echo "Did NOT make backup" Для получения обратного эффекта, т.е. объединения нескольких команд в одной строке, можно использовать в качестве разделителя точку с запятой. Использование переменных и кавычек В операциях присваивания имена переменных никак не маркируются, но предваря- ются знаком доллара при ссылке на их значения. $ etcdir='/etc’ $ echo $etcdir /etc
74 Часть I. Основы администрирования Не ставьте до и после знака равенства (=) пробелы, в противном случае оболочка ошибочно примет имя вашей переменной за имя команды. При ссылке на переменную можно заключить ее имя в фигурные скобки, чтобы син- таксический анализатор (да и сам человек) не сомневался в том, где заканчивается имя переменной и начинается другой текст; например, используйте запись ${etcdir} вме- сто $etcdir. Обычно без фигурных скобок можно обойтись, но они могут оказаться по- лезными в случае, если вам понадобится раскрывать переменные в строках с двойными кавычками. Часто нужно сделать так, чтобы после значения переменной стояли буквы или знаки препинания. $ echo "Saved ${rev}th version of mdadm.conf.” Saved 8th version of mdadm.conf. Для имен переменных командной оболочки не существует стандартного соглашения, но обычно предполагается, что имена, полностью написанные прописными буквами, принадлежат переменным среды или переменным, считанным из файлов глобальной конфигурации. И чаще всего все буквы в именах локальных переменных — строчные, а отдельные их компоненты разделяются символами подчеркивания. Вообще имена пе- ременных чувствительны к регистру букв. Переменные среды автоматически импортируются в пространство имен оболочки bash, поэтому их можно устанавливать и считывать с использованием стандартного синтаксиса. Для того чтобы перевести переменную оболочки в ранг переменной среды, используйте команду export имя_переменной. Команды для переменных среды, ко- торые вы хотите установить во время регистрации (при входе в систему), должны быть включены в ваш файл ~/.profile или -/ .bash profile. Другие переменные среды, такие как PWD (для хранения имени текущего рабочего каталога), автоматически созда- ются командной оболочкой. Командная оболочка интерпретирует строки, заключенные в одинарные и двойные кавычки, почти одинаково. Различие состоит в том, что строки в двойных кавычках служат субъектами для универсализации файловых имен (замены реальных символов в имени и расширении файла универсальными, т.е. такими метасимволами, как и “?”) и для раскрытия переменных (замены переменных их значениями). $ mylang="Pennsylvania Dutch” $ echo "I speak ${mylang}." I speak Pennsylvania Dutch. $ echo 'I speak ${inylang}. ’ I speak ${mylang}. Обратные апострофы (также известные как обратные галочки, левые кавычки, ле- вые одиночные кавычки или открывающие кавычки) интерпретируются аналогично двойным кавычкам, но несут при этом дополнительную нагрузку. Эта нагрузка состоит в интерпретации содержимого такой строки, как команды оболочки, выполнении этой команды и замене строки результатом выполнения этой команды. $ echo "There are 'wc -1 /etc/passwd4 lines in the passwd file." There are 28 lines in the passwd file. Команды общих фильтров Любые корректные команды, которые считывают входные данные из канала STDIN и записывают результаты в канал STDOUT, могут быть использованы в качестве филь- тра (т.е. компонента конвейера) для обработки данных. В этом разделе мы кратко рас-
Глава 2. Сценарии и командная оболочка 75 смотрим некоторые из часто используемых команд фильтрации (хотя их полный список практически бесконечен). Команды фильтрации отличаются настолько сильным “кол- лективизмом”, что порой даже трудно продемонстрировать их идивидуальное исполь- зование. Большая часть команд фильтрации принимает в командной строке одно или не- сколько имен файлов. И только в том случае, если вы не можете задать соответствую- щие файлы, указывайте в качестве источника считываемой информации стандартный входной поток. Команда cut: разбивка строк на поля Команда cut выводит выбранные части входных строк. Чаще всего эта команда используется для извлечения полей (ограниченных некоторыми разделителями), как в приведенном выше примере, который для удобства читателей повторим еще раз. $ cut -d: -f7 < /etc/passwd | sort -u Команда cut также может возвращать сегменты, определенные границами столбцов текста. В качестве стандартного разделителя служит символ <ТаЬ>, но с помощью ключа -d разделители можно изменить. Ключ -f позволяет указать, какие поля нужно вклю- чить в результат. Еще один пример использования команды cut показан в разделе, посвященном ко- манде uniq (см. ниже). Команда sort: сортировка строк Команда sort сортирует входные строки. Звучит просто, да? Хотя на самом деле не все так безоблачно: существуют потенциальные нюансы, связанные с точно заданными частями сортируемых строк (т.е. с использованием сортировочного ключа) и порядком сортировки. Наиболее распространенные варианты применения этой команды показа- ны в табл. 2.1, в отношении же остальных случаев обратитесь к соответствующей шап- странице. Таблица 2.1. Ключи команды sort .................................... -ь -f -к Игнорировать ведущие пробельные символы Сортировать независимо от регистра букв Указать столбцы, которые формируют сортировочный ключ -п Сравнивать поля как целые числа -г Изменить порядок сортировки на противоположный -t Установить разделитель полей (по умолчанию — пробельный символ) -и Выводить только уникальные записи На примерах приведенных ниже команд демонстрируется различие между число- вой и лексикографической сортировкой (последняя действует по умолчанию). В обеих командах используются ключи -t: и -кЗ, 3 для сортировки файла /etc/group пегего третьему полю (в качестве разделителя используется двоеточие), содержащему иденти- фикатор (ID) группы. Первая команда реализует числовую сортировку, а вторая — лек- сикографическую (в алфавитном порядке).
76 Часть I. Основы администрирования $ sort -t: -к3,3 -n /etc/group1 root:x:0: bin:x:1:daemon daemon:x:2: $ sort -t: -k3,3 /etc/group root:x:0: bin:x:1:daemon users:x:100: Команда uniq: вывод уникальных строк Команда uniq по существу подобна команде sort -и, но у нее есть некоторые по- лезные ключи, которые команда sort не эмулирует. Так, ключ -с используется для под- счета количества экземпляров каждой строки, ключ -d — для отображения только строк, имеющих дубликаты, а ключ -и — для отображения только строк, не имеющих дубли- каты. При этом входные данные должны быть предварительно отсортированы, обычно путем “пропускания” через команду sort. Например, по результатам выполнения следующей команды видно, что у 20 пользо- вателей поле login shell (стартовая оболочка) содержит значение /bin/bash и у 12 — /bin/false. (Последний результат характерен либо для псевдопользователей, либо для пользователей, учетные записи которых были заблокированы.) $ cut -d: -f7 /etc/passwd | sort | uniq -с 20 /bin/bash 12 /bin/false Команда wc: подсчет строк, слов и символов Подсчет количества строк, слов и символов в файле — еще одна распространенная операция, удобным средством реализации которой и является команда wc (word count). Выполненная без каких-либо ключей, она выведет все три результата подсчета. $ wc /etc/passwd 32 77 2003 /etc/passwd В контексте написания сценариев команду wc часто применяют только с одним из ключей (-1, -w или -с), чтобы результат ее выполнения состоял из одного числа. Эту форму чаще всего можно встретить внутри обратных апострофов, и тогда результат мо- жет быть сохранен или использован по назначению. Команда tee: копирование входного потока в два места Командный конвейер, как правило, действует прямолинейно, но зачастую полез- но распараллелить поток данных, т.е. “перехватить” его и отправить копию в файл или- окно терминала. Это можно сделать с помощью команды tee, которая отправляет свой стандартный входной поток как в стандартный выходной канал, так и в файл, указан- ный в командной строке. Представьте действие этой команды в виде тройника в трубо- проводе (перев. с англ, tee — тройник). 1 Команда sort принимает спецификацию ключа -кЗ (вместо -Jk3,3), но в этом случае вы, скорее всего, не получите ожидаемого результата. Без завершающего номера поля сортировочный ключ продолжится до конца строки.
Глава 2. Сценарии и командная оболочка 77 Устройство /dev/tty можно считать синонимом для текущего терминала. Например, команда $ find / -name core | tee /dev/tty | wc -1 выводит найденные путевые имена файлов core и результат подсчета их количества. Часто работа конвейера с командой tee, выводящей результаты и в файл, и в окно терминала (для проверки), занимает много времени. Вы можете понаблюдать за первы- ми результатами, чтобы убедиться в том, что все работает как надо, а затем смело уходи- те: ведь результаты же сохранятся в файле. Команды head и tail: чтение файла с начала или с конца Просмотр строк с начала или конца файла — обычная административная операция. Команды head и tail отображают по умолчанию десять строк, но вы можете использо- вать ключ, задающий желаемое количество строк. Для интерактивного использования команда head уже несколько устарела, и вместо нее (в этом контексте) часто используется команда less, которая разбивает файлы для отображения по страницам. Но команду head можно успешно применять в сценариях и с другой целью. С командой tail используется ключ -f, который чрезвычайно полезен для системных администраторов. Вместо немедленного завершения (после вывода тре- буемого количества строк) команда tail -f ожидает “прибытия” новых строк, которые (как только они появятся “на горизонте”) будут добавлены в конец файла, а затем выве- дены по назначению, что очень удобно для мониторинга журналов регистрации. Однако следует иметь в виду, что программа, которая реализует запись данных в файл, может буферизировать свои выходные данные. Даже если строки будут добавляться регулярно (с точки зрения логики), они могут стать видимыми только фрагментами объемом 1 или 4 Кбайт (KiB).2 Для остановки процесса мониторинга нажмите комбинацию клавиш <Ctrl+C>. Команда grep: поиск текста При выполнении команды grep по мере просмотра входного текста выводятся стро- ки, которые совпадают с заданным образцом (шаблоном). Свое название эта команда получила “в наследство” от команды д/regular_expression/p) из старого (и ныне действующего) редактора ed, используемого в самых первых версиях UNIX. “Регулярные выражения” (regular expressions) — это шабло®^ предназначенные для поиска совпадающего с ними текста и написанные на стаяй^^ИЙм языке шаблонов. Они представляют собой универсальный стандарт, используемый большинством про- грамм при поиске по совпадению с шаблоном, хотя и с небольшими различиями в реа- лизациях. Странное имя команды уходит своими корнями в оригинальные изыскания соответствующих разделов теории вычислений. Более детально синтаксис регулярных выражений рассматривается в разделе 2.3. Подобно большинству фильтров, команда grep имеет множество ключей. Например, ключ -с позволяет выводить количество совпавших строк, ключ -i служит дл%игнори- Рования регистра букв при сопоставлении, а ключ -v предназначен для вывода отли- чающихся (а не совпавших) строк. Очень полезным является ключ -1 (прописная бук- Ва “L”), который заставляет команду grep выводить только имена файлов, содержащие совпавшие с шаблоном строки, а не все совпавшие строки. Например, выполнение команды 2 О единицах измерения см. в разделе 1.8 главы 1. *
78 Часть I. Основы администрирования $ sudo grep -1 mdadm /var/log/* /var/log/auth.log /var/log/syslog.0 демонстрирует, что записи с именем утилиты mdadm нашлись в двух различных файлах системных журналов. Команду grep можно считать классической реализацией базового механизма ис- пользования регулярных выражений, но в некоторых версиях предлагается выбор других диалектов. Например, Linux-команда grep -р служит для поиска выражений в стиле языка Perl, хотя в справочных страницах можно найти неопределенное предупреждение о том, что такой вариант носит “экспериментальный характер”. Для полной уверенно- сти в своих сценариях просто используйте язык Perl или Python. 2.2. Написание bash-сценариев Командный арсенал оболочки bash позволяет успешно писать простые сценарии (без этого средства автоматизации системным администраторам пришлось бы вручную вводить команды в командную строку). Ваше мастерство в использовании командных строк вы должны воплотить в искусстве создания bash-сценариев (и наоборот), что по- может вам извлечь максимальную пользу из времени, потраченного на изучение обо- лочки bash. Но когда окажется, что ваш bash-сценарий превысил в объеме сотню строк или вам потребовались средства, которыми bash не обладает, это будет означать, что настало время переходить к языку Perl или Python. В среде bash комментарии начинаются со знака # и продолжаются до конца строки. Как и в командной строке, вы можете разбить одну логическую строку на несколько физических строк, обозначив переход на новую строку символом обратной косой чер- ты (\). И, наоборот, можно поместить на одной строке несколько операторов, разделив их точкой с запятой. Сценарий для оболочки bash может состоять только из последовательности команд- ных строк. Например, следующий сценарий helloworld просто выполняет команду echo. #!/bin/bash echo "Hello, world!" Первая строка содержит “банальный” описательный оператор, который сообщает, что данный текстовый файл является сценарием, предназначенным для интерпретации командной оболочкой /bin/bash. При принятии решения о том, как выполнить этот файл, ядро отыщет соответствующий синтаксис. С точки зрения оболочки, “стремящей- ся” выполнить этот сценарий, первая строка представляет собой просто комментарий. Если бы оболочка находилась в другом каталоге, вам пришлось бы отредактировать эту строку. Для того чтобы подготовить этот файл к выполнению, достаточно установить его бит, “отвечающий” за выполнение (см. раздел 6.5). $ chmod +х helloworld $ . /helloworld3 Hello, world! 3 Если ваша оболочка понимает команду helloworld без префикса . /, это означает, что в ва- шем пути поиска указан текущий каталог (.). И это плохо, поскольку дает другим пользователям возможность устраивать для вас “ловушки” в надежде, что вы будете пытаться выполнить опреде- ленные команды при переходе к каталогу, в котором они имеют доступ для записи.
Глава 2. Сценарии и командная оболочка 79 Можно также непосредственно запустить (активизировать) оболочку в качестве ин- терпретатора сценария. $ bash helloworld Hello, world! $ source helloworld Hello, world! Первая команда выполнит сценарий helloworld в новом экземпляре оболочки bash, а вторая — заставит вашу начальную оболочку прочитать содержимое файла, а затем выполнить его. Второй вариант полезен в случае, когда сценарий устанавдива- ет переменные среды или выполняет другие операции настройки, применимые толь- ко к текущей оболочке. Обычно этот вариант используется при написании сценариев, включающих содержимое файла конфигурации, написанного в виде ряда присваиваний значений bash-переменным.4 Ш Подробнее о битах разрешения (доступа) можно прочитать в разделе 6.5. Если вы пришли сюда из мира Windows, то вам привычно использовать понятие рас- ширения файла, по которому можно судить о типе файла, а также о том, можно ли его выполнить. В мире UNIX и Linux признак того, может ли файл быть выполнен (и если да, то кем), содержится в специальных битах полномочий. При желании вы можете на- делить свои bash-сценарии суффиксом . sh, который бы напоминал вам об их типе, но тогда при выполнении соответствующей команды вам придется вводить суффикс . sh, поскольку UNIX не интерпретирует расширения специальным образом. От команд к сценариям Прежде чем переходить к особенностям написания bash-сценариев, остановимся на методике этого процесса. Многие пишут bash-сценарии так же, как Perl- или Python- сценарии, т.е. используя какой-нибудь текстовый редактор. Но все же удобнее рассма- тривать в качестве интерактивной среды разработки сценариев режим с приглашением на ввод команды. Предположим, например, что у вас есть журналы регистрации, именованные с суф- фиксами .log и .LOG и разбросанные по всей иерархической системе каталогов. Допустим также, что вы хотите изменить эти суффиксы, приведя их к “прописному” виду. Прежде всего, попытаемся отыскать все эти файлы. $ find . -name ’ * *log ’ •do-not-touch/important.log admin.com-log/ foo.log genius/spew.log leather_flog Так, похоже на то, что нам надо включить в шаблон точку и игнорировать при поис- ке каталоги. Нажмите комбинацию клавиш <Ctrl+P>, чтобы вернуть команду в команд- НУ1° строку, а затем модифицируйте ее. $ find . -type f -name '*.log ’ •do-not-touch/important.log foo.log 4 Синонимом для команды source служит команда “с точкой” (dot-команда), например • helloworlcL м
80 Часть I. Основы администрирования genius/spew.log Ну вот, это уже выглядит лучше. Правда, каталог .do-not-touch (т.е. “не трогать”) вызывает смутное чувство опасности; но мы можем избавиться от этого неприятного хо- лодка. $ find . -type f -name '*.log ' | grep -v .do-not-touch foo.log genius/spew.log Теперь все в порядке: мы получили абсолютно точный список файлов, которые долж- ны быть переименованы. Попробуем сгенерировать несколько новых имен. $ find . -type f -name '*.log ’ | grep -v .do-not-touch | while read fname > do > echo mv $ fname $ {fname/. log/. LOG/} > done mv foo.log foo.LOG mv genius/spew.log genius/spew.LOG Да, это именно те команды, которые позволят переименовать нужные файлы. А как мы это делаем в реальности? Мы могли бы снова вызвать уже выполненную команду и отредактировать команду echo, чтобы заставить оболочку bash выполнять команды mv, а не просто выводить их. Ведь передача команд в отдельную копию оболочки bash — более надежный вариант работы, который к тому же требует меньшего объема редакти- рования. Нажав комбинацию клавиш <Ctrl+P>, мы обнаруживаем, что оболочка bash забот- ливо свернула наш мини-сценарий в одну-единственную строку. К этой “уплотненной” командной строке мы просто добавляем канал, передающий наши выходные данные ко- манде bash -х. $ find . -type f -name '*.log ' | grep -v .do-not-touch | while read fname; do echo mv $ fname ${fname/.log/.LOG/}; done | bash -x + mv foo.log foo.LOG + mv genius/spew.log genius/spew.LOG Ключ -x команды bash обеспечивает вывод каждой команды перед ее выполнением. Теперь мы завершили переименование файлов, но нам хотелось бы сохранить этот сценарий, чтобы можно было использовать его снова. Встроенная в bash команда fc по своему действию во многом аналогична нажатию комбинации клавиш <Ctrl+P>, но вместо возврата последней команды в командную строку она передает команду в задан- ный вами редактор. Добавьте в свой файл строку идентификационного комментария, поместите сохраненный файл в приемлемый для вас каталог (например, -/bin или / usr/local/bin), сделайте файл исполняемым, и вы получите настоящий сценарий. Итак, подытожим^ • Разрабатывайте сценарий (или его часть) в виде конвейера команд, причем поша- гово и в режиме выполнения командных строк. • Пересылайте результат в стандартный выходной поток, проверяя правильность ра- боты используемых вами команд. • На каждом этапе используйте буфер ранее выполненных команд для их появления в командной строке и инструменты редактирования — для их модификации.
Глава 2. Сценарии и командная оболочка 81 • Пока вы получаете неправильные результаты, можно считать, что вы, по сути, ни- чего не сделали, и до тех пор, пока команды не заработают так, как надо, ничего (из уже сделанного) не надо удалять. • Если результат выглядит правильным, выполните команды на реальном примере, чтобы убедиться, что все получилось так, как ожидалось. • Используйте команду f с, чтобы зафиксировать свою работу в редакторе, оформи- те ее соответствующим образом и сохраните. В приведенном выше примере мы вывели командные строки, а затем направили их в подоболочку для выполнения. Этот метод не является универсально применимым, но часто оказывается полезным. В качестве альтернативного варианта можно фиксировать результаты, перенаправляя их в файл. Терпеливо добивайтесь получения нужных резуль- татов, и пока вы не увидите их, не выполняйте никаких потенциально деструктивных действий. Организация ввода и вывода данных Команда echo не отличается интеллектуальностью, но зато проста в применении. Для получения большего контроля над выводом данных используйте команду printf. Она не очень удобна, поскольку предполагает, что вы должны в явном виде указывать в нужных для вас местах символы перехода на новую строку (\п), но позволяет использо- вать символ табуляции и другие средства форматирования результата. Сравните резуль- таты выполнения следующих двух команд. $ echo ”\taa\tbb\tcc\n" \taa\tbb\tcc\n $ printf "\taa\tbb\tcc\n" аа bb сс В некоторых системах работа команд echo и printf поддерживается на уровне ОС (обычно соответствующие им исполняемые файлы хранятся в каталогах /bin и /usr/ bin соответственно). Хотя эти команды и встроенные в оболочку утилиты в целом по- добны, они могут иметь незначительные отличия, и особенно это касается команды printf. Вы можете либо придерживаться bash-синтаксиса, либо вызывайте “внеш- нюю” команду printf, указывая ее полный путь. Для того чтобы сформировать для пользователя приглашение ввести данные, можно использовать команду read. # !/bin/bash echo -п ’’Введите свое имя: ’’ read user_name if [ -n "$user_name" ]; then echo ’’Привет $user_name!’’ exit 0 else echo ”Вы не назвали свое имя!” exit 1 fi Ключ -п в команде echo подавляет привычный переход на новую строку, но здесь была бы кстати команда printf. Мы еще рассмотрим вкратце синтаксис оператора if, Но его действие здесь, с нашей точки зрения, очевидно. Ключ -п в операторе if обе-
82 Часть I. Основы администрирования спечит значение истины, если его строковый аргумент не окажется нулевым. Вот как выглядит результат выполнения этого сценария. $ sh readexanple Введите свое имя: Ron Привет Ron! Функции и аргументы командной строки Аргументы командной строки служат для сценария переменными с числовыми име- нами: $1 — первый аргумент командной строки, $2 — второй и т.д. Аргумент $0 содер- жит имя, по которому был вызван сценарий, например . /bin/example. sh, т.е. это не фиксированное значение. Переменная $# содержит количество переданных аргументов командной строки, а переменная $ * — все эти аргументы. Ни одна из этих переменных не учитывает ар- гумент $0. При вызове сценария с некорректными аргументами или вообще без них должно быть выведено короткое сообщение с напоминанием о том, как следует использовать данный сценарий. Приведенный ниже сценарий, принимающий два аргумента, прове- ряет, являются ли оба эти аргумента каталогами, и, убедившись в этом, отображает их. Если аргументы оказываются недопустимыми, сценарий выводит сообщение о его пра- вильном использовании и завершается с ненулевым значением кода возврата. Если про- грамма, вызвавшая этот сценарий, проверит код возврата, она будет “знать”, что этот сценарий не удалось выполнить корректно. # !/bin/bash function show_usage { echo ’’Использование: $0 source_dir dest_dir" exit 1 } # Основная программа начинается здесь if [ $# -ne 2 ]; then show_usage else # Существуют два аргумента if [ -d $1 ]; then source_dir=$l else echo ’Недопустимый каталог-источник’ show_usage fi if [ -d $2 ] ; then dest_dir=$2 else echo ’Недопустимый каталог-приемник’ show_us>tge fi fi printf "Каталог-источник: ${source_dir}\n" printf "Каталог-приемник: ${dest_dir}\n"
Глава 2. Сценарии и командная оболочка 83 Для вывода сообщения о правильном использовании данного сценария мы создали отдельную функцию show usage. Если бы позже этот сценарий был модифицирован и стал бы принимать дополнительные аргументы, это сообщение нужно было бы изме- нить только в одном месте.5 $ mkdir ааа ЬЬЬ $ sh showusage ааа ЬЬЬ Каталог-источник: ааа Каталог-приемник: ЬЬЬ $ sh showusage foo bar Недопустимый каталог-источник Использование: showusage source_dir dest_dir Аргументы bash-функций обрабатываются практически так же, как аргументы ко- мандной строки: $1 — первый аргумент командной строки, $2 — второй и т.д. Как вид- но из приведенного выше примера, аргумент $0 содержит имя сценария. Для того чтобы сделать предыдущий пример более устойчивым к ошибкам, мы могли бы заставить функцию show usage принимать в качестве аргумента код ошибки. Это позволило бы конкретизировать код возврата для каждого типа отказа. Реализация этой идеи показана в следующем фрагменте программы. function show_usage { echo "Использование: $0 source_dir dest_dir" if [ $# -eq 0 ]; then exit 99 # Выход с любым ненулевым кодом возврата else exit $1 fi } В этой версии функции добавляется анализ наличия аргументов. Внутри функции переменная $# сообщает, сколько аргументов было ей передано. Сценарий завершится с кодом возврата 99, если при его вызове не было передано никаких аргументов. Но при передаче конкретного значения, например, такого, как show_usage 5 сценарий завершится с этим кодом после вывода сообщения об использовании сцена- рия. (Переменная $ ? содержит статус завершения последней выполненной команды, независимо от того, была ли она использована в сценарии или в командной строке.) Между функциями и командами в оболочке bash существует строгая аналогия. Вы можете определить полезные функции в своем файле ~/.bash_profile, а затем ис- пользовать их в командной строке как команды. Например, если ваш узел стандартизи- ровал в сети порт 7988 для протокола SSH (в форме “безопасность через сокрытие”), вы можете определить в своем файле */ .bashjprofile функцию ssh, чтобы быть уверен- ным в том, что она всегда будет запускаться (как команда) с ключом -р 7988. function ssh { /usr/bin/ssh -р 7988 $* рия Тратите внимание на то, что сообщения об ошибках и сообщение об использовании сцена- fi ст Направляются в стандартный поток вывода данных. Разве не логичнее было бы направить их не n^apTHbI^ канал вывода ошибок? В действительности это было бы корректнее, но поскольку редполагается использовать этот сценарий в качестве фильтра, канал вывода данных здесь не Уж и важен.
84 Часть I. Основы администрирования Подобно многим командным оболочкам, bash обладает механизмом псевдонимов (alias), который может репродуцировать этот ограниченный пример в еще более ла- коничном виде, тем не менее функции остаются более универсальным и более мощным средством. Поэтому забудьте о псевдонимах и просто используйте функции. Область видимости переменных Переменные в рамках сценария имеют глобальный статус, но функции могут соз- давать собственные локальные переменные с помощью объявления local. Рассмотрим следующий код. #’/bin/bash function localizer { echo "==> В функции localizer начальное значение а равно '$а' ” local а echo ’’==> После объявления local значение а стало равным ' $а' ’’ a="localizer version" echo "==> При выходе из функции localizer значение а равно '$а' " } a="test" echo "До вызова функции localizer значение а равно '$а' " localizer echo "После вызова функции localizer значение а равно ' $а'" По приведенным ниже результатам выполнения сценария scope test. sh видно, что локальная версия переменной $а внутри функции localizer “забивает” глобальную переменную $а. Глобальная переменная $а видна в функции localizer до тех пор, пока не встретится объявление local, т.е. по сути, объявление local работает как ко- манда, которая в момент выполнения создает локальную переменную. $ sh scopetest.sh До вызова функции localizer значение а равно ’test' ==> В функции localizer начальное значение а равно ’test’ ==> После объявления local значение а стало равным ' ’ ==> При выходе из функции localizer значение а равно 'localizer version' После вызова функции localizer значение а равно 'test' Поток управления Выше в этой главе мы уже рассмотрели несколько конструкций if-then и if-then- else (они работают вполне ожидаемым образом). Терминатором (признаком конца) длЙ. оператора if служит оператор f i. Для образования цепочки if-операторов можно ис- пользовать ключевое слово elif, означающее “else if”. if [ $base -eq 1 ] && [ $dm -eq 1 ]; then installDMB^se elif [ $base -ne 1 ] && [ $dm -eq 1 ]; then installBase elif [ $base -eq 1 ] && [ $dm -ne 1 ]; then installDM else echo ’==> Installing nothing' fi
Глава 2. Сценарии и командная оболочка 85 Как и специальный [ ] -синтаксис для выполнения операций сравнения, так и “клю- чеподобные” имена операторов целочисленного сравнения (например -eq) уходят “на- следственными корнями” в использование утилиты /bin/test из ранней командной оболочки Стивена Борна. В действительности квадратные скобки — это не что иное, как условное обозначение вызова утилиты test; они не являются частью оператора if.6 В табл. 2.2 собраны bash-операторы сравнения для чисел и строк. В отличие от Perl, в bash используются текстовые операторы для чисел и символические операторы для строк. Таблица 2.2. Элементарные bash-операторы сравнения Строки'' X = У х -eq У х равно у X != у х -пе У х не равно у X < У х -It У х меньше у X <= У х -1е У х меньше или равно у X > У х -gt У х больше у X >= У х -де У х больше или равно у -п X - х не равно значению null -z X - х равно значению null В оболочке bash предусмотрены возможности оценки свойств файлов (снова-таки как освобождение от наследства /bin/test). Некоторые из операторов тестирования и сравнения файлов приведены в табл. 2.3. Таблица 2.3. Некоторые bash-операторы оценки свойств файлов Оператор -d файл Файл файл существует и является каталогом -е файл Файл файл существует ~f файл Файл файл существует и является обычным -г файл У вас есть право доступа для чтения файла ~s файл Файл файл существует и он — не пустой -w файл У вас есть право доступа для записи в файл Файл1 -nt файл 2 Файл файл1 новее, чем файл2 файл! -ot файл2 Файл файл1 старше, чем файл2 Несмотря на всю полезность формы elif, зачастую лучше (с точки зрения ясности программного кода) использовать case-структуру выбора варианта. Ниже показан ее синтаксис на примере функции, которая централизирует процесс регистрации сообще- ний для сценария. Конкретные варианты описываются закрывающими скобками после каждого условия и двумя точками с запятой, завершающими блок операторов, который Должен быть выполнен при реализации заданного условия. Оператор case завершается ключевым словом esac. 6 Сейчас эти операции встроены в оболочку и уже не запускают на выполнение утилиту /Ып/ test.
86 Часть I. Основы администрирования # Уровень протоколирования устанавливается в глобальной # переменной LOG_LEVEL. Возможные варианты перечислены в порядке # от самого строгого до наименее строгого: Error, Warning, Info и Debug. function logMsg { me s s age_leve1=$1 message_itself=$2 if [ $message_level -le $LOG_LEVEL ]; then case $message_level in 0) message_level_text="Error” ;; 1) message_level_text=’’Warning” ; ; 2) message_level_text=”Info" ;; 3) message_level_text=”Debug’’ ;; *) message_level_text=’’Other’’ esac echo ’’$ {message_level_text}: $message_itself’’ fi } Эта функция иллюстрирует общепринятую парадигму “уровня регистрации” (log level), используемую многими приложениями административного характера. Код это- го сценария позволяет генерировать сообщения на различных уровнях детализации, но действительно регистрируются или отрабатываются только те из них, которые “прохо- дят” глобально устанавливаемый порог $LOG_LEVEL. Чтобы прояснить важность каждо- го сообщения, его текст предваряется меткой, описывающей соответствующий уровень регистрации. Циклы Конструкция for...in предназначена для упрощения выполнения некоторых дей- ствий для группы значений или файлов, особенно при универсализации файловых имен, т.е. замене реальных символов в имени и расширении универсальными (например и “?”) с целью формирования целых списков имен файлов. Шаблон * . sh в при- веденном ниже цикле for позволяет обработать целый список совпадающих с ним (ша- блоном) имен файлов из текущего каталога. Оператор for, проходя по этому списку, по очереди присваивает имя каждого файла переменной $file. #!/bin/bash suf fix=BACKUP—'date +%Y%m%d-%H%M' for script in *.sh; do newname="$script.$suffix" echo ’’Copying $script to $newname...’’ cp $script $newname done Результат выполнения этого сценария таков. $ sh forexainple Copying rhel.sh to rhel.sh.BACKUP—20091210-1708... Copying sles.sh to sles.sh.BACKUP—20091210-1708... В раскрытии имени файла здесь нет ничего магического; все работает в точном соот- ветствии с тем, как написано в командной строке. Другими словами, сначала имя файла
Глава 2. Сценарии и командная оболочка раскрывается (т.е. шаблон заменяется существующим именем), а затем уж обрабатывает- ся интерпретатором в развернутом виде.7 С таким же успехом вы могли бы ввести имена файла статически, как показано в этой командной строке. for script in rhel.sh sles.sh; do В действительности любой список имен, содержащих пробельные символы (включая содержимое переменной), обрабатывается как объект циклической конструкции f or...in. Оболочке bash также присуща близость к циклу for из традиционных языков про- граммирования, в которых задается стартовое выражение, инкрементация и условие окончания цикла. for ( ( i=0 ; i < $CPU_COUNT ; i++ )) ; do CPU_LIST=’’$CPU_LIST $i" done На примере следующего сценария иллюстрируется bash-цикл while, который часто применяется для обработки аргументов командной строки и чтения строк файла. #!/bin/bash exec 0<$1 counter=l while read line; do echo "$counter: $line” $((counter++)) done Вот как выглядит результат выполнения этого сценария. ubuntu $ sh whileexainple /etc/passwd 1: root:x:0:0:Superuser:/root:/bin/bash 2: bin:x:l:l:bin:/bin:/bin/bash 3: daemon:x:2:2:Daemon:/sbin:/bin/bash В этом сценарии есть интересные особенности. Оператор ехес переопределяет стан- дартный выходной поток сценария так, чтобы входные данные считывались из файлов, имена которых должны определяться в соответствии с первым аргументом командной строки.8 Если окажется, что такой файл не существует, данный сценарий сгенерирует ошибку. Оператор read в конструкции while на самом деле является встроенным в оболоч- ку, но действует подобно внешней команде. Внешние команды можно также помещать в конструкцию while. Цикл while в такой форме завершится тогда, когда внешняя ко- манда возвратит ненулевое значение кода завершения. Выражение $ ((counter++)) выглядит несколько странно. Обозначение $ ((...)) го- ворит о вычислении выражения. Кроме того, оно делает необязательным использова- ние символа $ для обозначения имен переменных. Удвоенный знак “плюс” (++) — это оператор постинкремента, знакомый, например, по языку С. Он возвращает значение 7 Точнее, небольшая доля магии в раскрытии имен файлов здесь все же имеет место и состоит в поддержке понятия атомарности каждого имени файла. Имена файлов, которые включают про- белы, пройдут этот цикл for в один проход. 8 В зависимости от вызова, оператор ехес также может иметь и такое значение: “остановить этот сценарий и передать управление другому сценарию или выражению”. В этом состоит еще °дна странность оболочки: доступ к обеим упомянутым здесь функциям реализуется через один * и тот же оператор.
88 Часть I. Основы администрирования переменной, с которой он связан, но также имеет побочный эффект, который состоит в приращении значения этой переменной. Выражения $((...)) работают в контексте двойных кавычек, поэтому тело рассмо- тренного выше цикла можно свернуть до одной строки. while read line; do echo ’’$ ((counter++)) : $line" done Массивы и арифметика Сложные структуры данных и вычисления нельзя отнести к сильной стороне обо- лочки bash. Но, по крайней мере, вы можете надеяться на использование массивов и арифметических операций. Все bash-переменные представляют собой строковые значения, поэтому оболочка bash не делает различия в присваиваниях между числом 1 и символьной строкой “1”. Различие лежит в использовании переменных. Следующий код иллюстрирует это раз- личие. #!/bin/bash а=1 Ь=$((2)) с=$а+$Ь d=$(($a+$b)) echo "$а + $b - $с \Ь(знак плюс как строковый литерал)” echo ”$а + $b = $d \Ь(знак плюс как арифметическое сложение)" При выполнении этого сценария получим такой результат. 14-2 = 1+2 (знак плюс как строковый литерал) 1+2=3 (знак плюс как арифметическое сложение) Обратите внимание на то, что знак “плюс” в присваивании переменной $с не рабо- тает как оператор конкатенации для строк. Он остается всего лишь литеральным симво- лом, и посему эта строка эквивалентна следующей. с="$а+$Ь" Для того чтобы добиться вычисления, необходимо заключить выражение в двойные скобки: $((...)), как показано выше в присваивании переменной $d. Но даже эта мера предосторожности не позволяет получить в переменной $d числового значения; это зна- чение по-прежнему хранится в виде строки “3”. В оболочке bash реализован обычный ассортимент операторов: арифметических, ло- гических и отношений (подробнее см. соответствующие тап-страницы). Массивы в командной оболочке bash могут показаться немного странными объек- тами (да они и используются не очень часто). Тем не менее при необходимости их мож- но применять. Литеральные массивы ограничиваются круглыми скобками, а отдельные элементы разделяются пробельными символами. Для включения литеральных пробелов в элемент можно использовать кавычки. example=(aa 'bb сс' dd) Для доступа к отдельным элементам массива используйте выражение $ {имя_ массива [индекс] }. Индексация начинается с нуля. Такие индексы, как и
Глава 2. Сценарии и командная оболочка 89 относятся к массиву в целом, а специальные конструкции ${#имя_массива [*] } и $ {#имя_массива [@] } возвращают количество элементов в массиве. Не спутайте эти выражения с конструкцией $ {#имя_массива} — и хотя эта форма кажется более логич- ной, но в действительности она содержит указатель на первый элемент массива (эквива- лент для $ {#имя_массива [ 0 ] }). Можно подумать, что выражение $example [ 1 ] должно служить однозначной ссыл- кой на второй элемент массива, но оболочка bash интерпретирует эту строку так: $example (обозначение ссылки на $example [ 0 ]) плюс литеральная строка [ 1 ]. Отсю- да вывод: ссылаясь на переменные массива, всегда используйте фигурные скобки каких-либо исключений). Рассмотрим сценарий, который иллюстрирует некоторые особенности bash-мас- сивов и подводные камни, на которые можно наткнуться при управлении ими. #!/bin/bash example=(aa 'bb сс' dd) example[3]=ee echo ’’example [@] = $ {example [0]}’’ echo "Массив example содержит ${#example[@]} элементов" for elt in ’’${example [@] }’’; do echo ’’ Элемент = $elt" done Вот как выглядит результат выполнения этого сценария. $ sh arrays example[0] = аа bb сс dd ее Массив example содержит 4 элемента Элемент = аа Элемент = bb сс Элемент = dd Элемент = ее Этот пример кажется простым, но лишь потому, что мы организовали его “хорошее поведение”. Но если потерять бдительность, вы можете попасть в ловушку. Например, сценарий с заменой for-строки вариантом for elt in $ {example [@] }; do (т.е. без кавычек, в которых заключено выражение массива) также работает, но вместо четырех элементов он выведет пять: аа, bb, сс, dd и ее. Важно помнить, что все bash-переменные все равно остаются строками, поэтому работа с массивами — в некотором роде иллюзия. В тонкостях, связанных с тем, когда и как строки разбиваются на элементы, можно утонуть. Для того чтобы не рисковать, лучше используйте язык Perl или Python. Настойчивые читатели, желающие разобраться в нюансах, могут с помощью Google обратиться к руководству Менделя Купера (Mendel Cooper) Advanced Bash-Scripting Guide. 2.3. Регулярные выражения Регулярные выражения поддерживаются большинством современных языков, хотя одни языки “принимают их ближе к сердцу”, чем другие. Они также используются в та- ких UNIX-командах, как grep и vi. Регулярные выражения настолько распространены,
90 Часть I. Основы администрирования что их название в оригинальной литературе часто сокращали до слова “regex” (regular expressions). О том, как использовать их немалые возможности, написаны уже целые книги и неудивительно, что они стали объектом исследования многочисленных доктор- ских диссертаций. Сопоставление имен файлов и их раскрытие, выполненное оболочкой в процессе интерпретации таких командных строк, как wc -1 * .pl, не является формой сопо- ставления с регулярным выражением. Это совсем другая система, именуемая “универса- лизацией файловых имен с помощью оболочки” (shell globbing), в которой используется другой, причем более простой, синтаксис. Регулярные выражения — очень мощный инструмент, но они не могут распознавать все возможные грамматики. Их самый большой недостаток состоит в том, что они не в состоянии различать вложенные ограничители. Например, невозможно написать ре- гулярное выражение, которое распознает допустимые арифметические выражения для ситуации, когда для группирования членов выражения разрешено использовать круглые скобки. Регулярные выражения в мощности и совершенстве достигли кульминации в язы- ке Perl. Функции сопоставления шаблонов в Perl настолько тщательно разработаны, что в действительности не совсем правильно называть их реализацией регулярных выра- жений. Шаблоны Perl могут включать вложенные разделители, они могут распознавать палиндромы (перевертни или перевертыши) и сопоставляться, например, с произволь- ной строкой букв “А”, за которыми последует такое же количество букв “Б”, — словом, пойдут в ход всевозможные вариации на тему регулярных выражений. При этом в Perl можно обрабатывать и довольно примитивные регулярные выражения. Язык сопоставления Perl-шаблонов остается промышленным мерилом качества, и он принят на вооружение во многих других языках и инструментах. Библиотека Филиппа Гейзела (Philip Hazel) PCRE (Perl-compatible regular expression) несколько упрощает для разработчиков включение этого языка в проекты. Сами по себе регулярные выражения не являются частью языка написания сцена- риев, но они настолько полезны, что заслуживают подробного рассмотрения в любом обсуждении “сценарной” темы, а уж тем более в этом разделе.9 Здесь мы рассматриваем их в базовой форме с учетом некоторых Perl-нюансов. Процесс сопоставления Код, который использует регулярное выражение, пытается сопоставить одну задан- ную текстовую строку с одним заданным шаблоном. Сопоставляемая текстовая строка может иметь очень большой размер и содержать встроенные символы перехода на но- вую строку. Зачастую регулярное выражение удобно использовать для сопоставления с содержимым целого файла или HTML-документа. Для того чтобы обнаружитель совпадений мог доложить о благоприятном исходе, шаблон поиска должен целиком совпасть с непрерывной областью исследуемого тек- ста. При этом шаблон может совпасть в любом месте исследуемого текста. После об- наружения успешного совпадения вычислитель возвращает текст совпадения вместе со 9 Известный знаток Perl, Том Кристиансен (Tom Christiansen) сказал: “Я не знаю, что такое язык написания сценариев, но я согласен с тем, что регулярные выражения нельзя отнести ни к процедурным, ни к функциональным языкам. Скорее, это язык, основанный на логике, или декларативный язык, относящийся к группе языков, в которую также входят Prolog и Makefile. И формы Бэкуса-Наура (BFS). Его также можно назвать языком, основанным на системе правил. Лично я предпочитаю называть подобные языки декларативными”.
Глава 2. Сценарии и командная оболочка 91 списком совпадений для любых частей (подразделов) шаблона, ограниченных специ- альным образом. Литеральные символы В общем случае символы регулярного выражения при сопоставлении должны соот- ветствовать самим себе. Так, шаблон I am the walrus совпадает со строкой “I am the walrus” и только с этой строкой. Поскольку совпадение может быть обнаружено в любом месте исследуемого текста, этот шаблон может дйт£> успешный результат совпадения со строкой “I am the egg man. I am the walrus. Koo koo ka-choo!” При этом реальное совпадение ограничено фрагментом “I am the walrus”. Процесс сопоставления чувствителен к регистру букв. Специальные символы В табл. 2.4 собраны значения некоторых распространенных специальных символов, которые могут использоваться в регулярных выражениях (вообще, этих специальных символов гораздо больше). Таблица 2.4. Распространенные специальные символы регулярных выражений Совпадает с любым символом [ chars ] Совпадает с любым символом из заданного набора [л chars ] Совпадает с любым символом не из заданного набора Л Совпадает с началом строки $ Совпадает с концом строки \w Совпадает с любым алфавитно-цифровым символом (аналогично набору [A-Za-z0-9_]) \s Совпадает с любым пробельным символом (аналогично набору [ \f\t\n\r])a \ d Совпадает с любой цифрой (аналогично набору [ 0 - 9 ]) I Совпадает с элементом либо слева, либо справа (ехрг) Ограничивает область действия, группирует элементы, позволяя формировать группы совпадений с “захватом” и без “захвата” ? Позволяет одно повторение (или ни одного) предшествующего элемента * Позволяет множество повторений (или ни одного) предшествующего элемента + Позволяет одно или больше повторений предшествующего элемента Iп) Ровно п повторений предшествующего элемента {min, } не менее min повторений (обратите внимание на запятую) {min, шах} Любое число (от min до max) повторений а пробел, символ прогона страницы, табуляции, новой строки или возврата каретки. Многие такие специальные конструкции, как + и |, оказывают влияние на сопо- ставление подстрок слева или справа. В общем случае подстроку может составлять один символ, или “подшаблон”, заключенный в круглые скобки, или класс символов, заклю- ченный в квадратные скобки. Однако для символа “ | ” подстрока распространяется нео-
92 Часть I. Основы администрирования граниченно как влево, так и вправо. Если вы хотите ограничить область действия верти- кальной черты, заключите ее и обе подстроки в их собственный набор круглых скобок. Например, шаблон I am the (walrus | egg man)\. даст совпадение либо со строкой “I am the walrus.”, либо со строкой “I am the egg man.”. Этот пример демонстрирует также способ “экранирования” специальных символов (в данном случае точки) с помощью обратной косой черты (\). Шаблон (I am the (walrus|egg man)\. ?){1,2} совпадет с любой из следующих строк. • I am the walrus. • I am the egg man. • I am the walrus. I am the egg man. • I am the egg man. I am the walrus. К сожалению, он также даст совпадение со строкой “I am the egg man. I am the egg man.”. (И какой в этом смысл?) Важнее то, что приведенный выше шаблон также со- впадет со строкой “I am the walrus. I am the egg man. I am the walrus.”, хотя количество повторений явно ограничено числом два. Дело в том, что шаблон не обязательно дол- жен совпадать полностью с исследуемым текстом. В данном случае после обнаружения совпадений этого регулярного выражения с двумя предложениями дальнейшее его со- поставление прекратилось с объявлением об успешном завершении. После выполнения условия, заданного в регулярном выражении, уже не важно, что в данном тексте есть еще одно совпадение с шаблоном. Часто метасимвол регулярного выражения “*” (квантификатор, равный нулю или больше нуля) путают с символом используемым командной оболочкой для уни- версализации файловых имен. В системе регулярных выражений используйте метасим- вол “*” в случае, если для совпадения приемлема любая последовательность символов (включая их отсутствие). Примеры использования регулярных выражений В Соединенных Штатах почтовые индексы (zip-коды) имеют либо пять цифр, либо пять цифр с последующим тире и еще четырьмя цифрами. При создании регулярного выражения для zip-кода необходимо обеспечить сопоставление пятизначного номера. Следующее регулярное выражение отвечает всем этим требованиям. A\d{5}$ Символы “Л” и “$” сопоставляются с началом и концом обрабатываемого текста, не соответствуя при этом реальным символам в тексте; они представляют собой “утверж- дения нулевой длины” (т.е. это не символы, а лишь “позиции” в тексте). Эти симво- лы гарантируют, что только те текстовые строки, которые состоят ровно из пяти цифр, должны совпадать с регулярным выражением (строки большей длины не должны давать совпадения). Сочетание символов \d обеспечивает совпадение с цифрой, а квантифика- тор {5} выражает требование совпадения ровно пяти цифр. Для того чтобы можно было выявить либо пятизначный почтовый индекс, либо рас- ширенный zip-код (zip+4), добавим в качестве необязательной части тире и четыре до- полнительные цифры. A\d{5}(-\d{4})?$
Глава 2. Сценарии и командная оболочка 95 Круглые скобки объединяют в группу тире и дополнительные цифры, чтобы они счи- тались одной необязательной единицей. Например, это регулярное выражение не даст совпадения с пятизначным почтовым индексом, за которым следует “голое” тире (без последующих цифр). Если тире существует, также должно существовать четырехзначное расширение, в противном случае совпадение зафиксировано не будет. Классический пример использования регулярного выражения демонстрирует сле- дующее выражение. М[ои]'?ат+[ае]г ([АЕае]1[- ])?[GKQ]h?[аеи]+([dtz][dhz]?)+af[iy] Оно дает совпадения со многими вариантами произношения имени ныне покойного лидера Ливии Муаммара Каддафи (Moammar Gadhafi), например, с такими, как: (ВВС); (Associated Press); (Al-Jazeera); (U.S. Department of State). • Muammar al- Kaddafi • Moammar Gadhafi • Muammar al-Qadhafi • Mu’ammar Al-Qadhafi Вы понимаете, почему каждый из приведенных вариантов успешно совпал с шабло- ном? Приведенное выше регулярное выражение также иллюстрирует, насколько быстро могут быть достигнуты пределы удобочитаемости. Многие системы регулярных выра- жений (включая используемую в Perl) поддерживают опцию х, которая игнорирует ли- теральные пробельные символы в шаблоне и легитимизирует комментарии, разрешая “растягивать” шаблон и располагать его на нескольких строках. Затем вы можете ис- пользовать пробельные символы для выделения логических групп и “прояснения отно- шений” между ними подобно тому, как это делается в процедурных языках. М [ои] '? а т+ [ае] \s # # # # # # Имя: Mu'ammar, Moamar и т.д. Пробельный символ; здесь нельзя использовать литеральный пробел Группа для необязательного префикса-фамилии Al, El, al или el Тире или пробел [АЕае] 1 [-\s] [GKQ] h? [aeu]+ ( [dtz] [dhz]? # # # Начальный fteici фамилии: Kha, Qua и т.д. Группа для согласных в начале 2-го слога dd, dh и т.д. af [iy] Такой способ описания регулярного выражения, вероятно, слегка облегчит понима- ние, но все же и он в состоянии замучить потенциальных читателей. Поэтому лучше использовать иерархический подход и строить множество небольших сопоставлений вместо попытки описать все возможные ситуации в одном огромном регулярном вы- ражении. Захваты В случае, если совпадение происходит, каждый набор круглых скобок становится “группой захвата”, которая фиксирует реально совпавший текст. То, как именно эти элементы становятся доступными для вас, зависит от конкретной реализации и контек- ста. В Perl доступ к результатам можно получить в виде списка или последовательности пронумерованных переменных.
94 Часть I. Основы администрирования Поскольку круглые скобки могут быть вложенными, как узнать, чему соответствует каждое совпадение? Ответ простой: совпадения выстраиваются в результате в том же по- рядке, в котором располагаются открывающие скобки. Количество “захватов” равно ко- личеству открывающих скобок, независимо от роли (или ее отсутствия), которую играла каждая взятая в скобки группа в реальном совпадении. Если взятая в скобки группа не используется (например, при сопоставлении регулярного выражения Ми (') ?ammar со строкой “Muammar”), соответствующий “захват” будет пустым. Если обнаружится несколько совпадений группы, в качестве результата возвращается содержимое только последнего совпадения. Например, при шаблоне (I am the (walrus|egg man)\. ?){1,2} и таком варианте обрабатываемого текста I am the egg man. I am the walrus. существует два результата (по одному для каждого набора круглых скобок). I am the walrus. Walrus Обратите внимание на то, что обе захваченные группы в действительности совпали дважды. Но был захвачен только последний текст, совпавший с каждым набором кру- глых скобок. Жадность, леность и катастрофический поиск с возвратом Регулярные выражения сопоставляются слева направо. Если каждый компонент шаблона перед переходом к следующему компоненту стремится “захватить” макси- мально возможную строку, то такая характеристика поведения называется жадностью (greediness). Если обработчик регулярных выражений (анализатор) достигает состояния, из ко- торого сопоставление выполнить уже невозможно, он немного “откатывается” назад от кандидата на совпадение и заставляет одного из “жадных” компонентов отказаться от части текста. Например, рассмотрим регулярное выражение а*аа применительно к входному тексту “аааааа”. Вначале анализатор присваивает весь входной текст компоненту а*, поскольку он (т.е. а*) является “жадным”. Когда окажется, что больше букв “а” не осталось, анализа- тор перейдет к поиску совпадений со следующим компонентом регулярного выражения. Но поскольку им является а и во входном тексте больше нет ничего, что можно было бы сопоставить с а, пора делать “откат”. Компонент а* вынужден отказаться от одной из букв “а”, с которыми уже было зафиксировано совпадение. Теперь анализатор может сопоставлять компонент а*а, но он по-прежнему не мо- жет это сделать для последней буквы “а” в шаблоне. Поэтому он снова откатывается и “отнимает” вторую букву “а” из “добычи” компонента а*. На этот раз вторая и третья буквы “а” в шаблоне имеют буквы “а” для фиксации совпадения, и на этом обработка текста завершена. Этот простой пример иллюстрирует некоторые важные общие момен- ты. Прежде всего, “жадное” сопоставление с “откатами” делает использование таких простых шаблонов, как <img. *></tr>, дорогим удовольствием при обработке целых
Глава 2. Сценарии и командная оболочка 95 файлов.10 Действие порции . * начинается с сопоставления всего содержимого от первой найденной подстроки <img до конца входного текста, и только благодаря повторным откатам область поиска сузится, чтобы “подобраться” к локальным тегам. Более того, порция ></tr>, с которой связан этот шаблон, — это последнее возмож- ное допустимое вхождение искомого элемента во входном тексте, что, наверняка, совсем не отвечает вашим намерениям. Вероятно, вы хотели отыскать совпадение с подстро- кой <img>, за которой следует тег </tr>. Тогда лучше переписать этот шаблон в виде <img[A>] *></tr>, что позволит распространить совпадение с начальными групповы- ми символами только до конца текущего тега благодаря явно заданной невозможности пересечь границу, обозначенную правой угловой скобкой. Можно также использовать “ленивые” (в противоположность “жадным”) оператор- ные выражения: *? вместо * и +? вместо +. Эти варианты квантификаторов ограничи- вают количество вхождений искомых символов во входном тексте до минимально воз- можного. Во многих ситуациях эти операторы работают эффективнее и дают результаты, более близкие к желаемым, чем “жадные” варианты. Однако обратите внимание на то, что “ленивые” квантификаторы (в отличие от “жадных”) могут давать различные совпадения; разница состоит не просто в исполь- зуемой реализации. В нашем HTML-примере “ленивый” шаблон выглядел бы так: <img. * ?></tr>. Но даже в этом случае элемент . * ? мог бы стать причиной внесения в результат ненужных нам символов “>”, поскольку следующим после тега <img> может быть не тег </tr>. А такой результат вас, скорее всего, не устроит. Шаблоны с несколькими секциями групповых символов могут “спровоцировать” анализатор регулярных выражений на экспоненциальное поведение, особенно в слу- чае, если порции текста могут совпадать с несколькими шаблонными выражениями, и тем более в случае, если искомый текст в действительности не соответствует шаблону. Эта ситуация не является такой уж необычной, как может показаться, главным образом тогда, когда шаблон сопоставляется с HTML-кодом. Очень часто вам придется искать конкретные теги, за которыми следуют другие теги, возможно, разделенные третьими тегами, и так далее, одним словом, вам придется создавать задание, которое потребует, чтобы анализатор проверил массу возможных комбинаций. Большой специалист в области регулярных выражений Ян Гойвертс (Jan Goyvaerts) называет этот эффект катастрофическим откатом (catastrophic backtracking) и описы- вает его в своем блоге (за подробностями и некоторыми удачными решениями обращай- тесь по адресу: regular-expressions.info/catastrophic.html). Из всего сказанного выше можно сделать такие выводы. • Если вы можете организовать построчное сопоставление шаблона, а не пофай- ловое (т.е. с просмотром сразу всего файла), значит, вы значительно уменьшаете риск получения, мягко говоря, низкой производительности. • Несмотря на то что регулярные выражения являются “жадными” по умолчанию, вам, скорее всего, такие не нужны. Используйте “ленивые” операторы. 10 Несмотря на то что в этом разделе в качестве примеров обрабатываемого текста показаны фрагменты HTML-кода, регулярные выражения — не самый подходящий инструмент в данном случае (что не преминули отметить и наши рецензенты). Языки Perl и Python имеют прекрасные расширения, которые анализируют HTML-документы надлежащим образом. Вы можете получить доступ к интересующим вас порциям с помощью Xpath-селекгоров. Подробнее о модульных репо- зиториях соответствующих языков можно узнать, обратившись к странице Википедии, посвящен- ной языку запросов Xpath (XML Path Language).
96 Часть I. Основы администрирования • Все экземпляры специальных символов “. * ” по своему существу подозрительны и должны быть тщательно исследованы. 2.4. Программирование на языке Perl Язык Perl, созданный Ларри Уоллом (Larry Wall), был первым из самых популярных языков написания сценариев. Он предлагает чрезвычайно больше возможностей, чем bash, а написанные на нем программы (если они написаны хорошо) довольно просты для понимания. Поскольку в языке Perl не предусмотрена обязательность соблюдения раз- работчиками стилистических правил создания кода, читабельность Perl-кода зависит от их дисциплинированности. Не без основания Perl называют языком “только для записи”. Здесь описывается версия Perl 5, которая была стандартом в течение последнего деся- тилетия. Версия Perl 6 все еще находится в стадии разработки. Подробнее можно узнать на сайте perl 6. org. Языки Perl и Python (см. раздел 2.5) больше подходят для работы в области системного администрирования, чем такие традиционные языки программиро- вания, как С, C++, C# и Java. Их отличает большая эффективность: при лаконичности кода и менее мучительном процессе отладки, а также без компиляционной “волокиты” они могут продемонстрировать большие возможности. Выбор языка обычно зависит от личных предпочтений или стандартов, используемых вашим работодателем. Как Perl, так и Python предлагают библиотеки модулей и языковые расширения. По популярности язык Perl “старше”, чем Python, поэтому его предложения “вылились” в довольно длинный список возможностей. Но при решении каждодневных задач системного администрирования библиотеки поддержки обоих языков практически эквивалентны. Для языка Perl характерен следующий девиз: “Достичь цель можно несколькими путями”. Поэтому имейте в виду, что в большинстве примеров, описанных в этом разделе, существуют и другие (помимо приведенного здесь) способы выполнения поставленной задачи. Операторы Perl разделяются точкой с запятой.11 Комментарии начинаются знаком # и продолжаются до конца строки. Блоки операторов заключаются в фигурные скобки. Вот пример простой программы “Привет, мир!”. #!/usr/bin/perl print "Привет, мир!\п"; Как и для bash-программ, вы должны либо изменить права доступа (chmod +х) для исполняемого файла, либо непосредственно вызвать Рег1-интерпретатор. $ chmod +х helloworld $ ./helloworld Привет, мир! Строки в Perl-сценарии не являются командами оболочки (они представляют собой Perl-код). В отличие от командной оболочки bash, которая позволяет объединить неко- торую последовательность команд в сценарий, Perl не “видит дальше своего носа”, если ему не дать соответствующего указания. Тем не менее Perl обеспечивает действие многих таких же соглашений, которые действуют в оболочке bash, например использование об- ратных апострофов, заключающих в себя некоторую команду, для перехвата результата выполнения этой команды. 11 Поскольку знаки “точка с запятой” являются разделителями, а не ограничителями (терми- наторами), последнюю точку с запятой в блоке ставить необязательно.
Глава 2. Сценарии и командная оболочка 97 Переменные и массивы В Perl используются три базовых типа данных: скаляры (т.е. такие унитарные значе- ния, как числа и строки), массивы и хеши (известные также как ассоциативные масси- вы). Тип переменной всегда очевиден, поскольку он “встроен” в имя переменной: ска- лярные переменные начинаются знаком “$”, переменные массивов — символом и хеш-переменные — знаком “%”. В Perl понятия “список” и “массив” часто взаимозаменяемы, но, пожалуй, коррек- тнее сказать, что список — это некоторая последовательность значений, а массив — это переменная, которая может содержать такой список. Отдельные элементы массива явля- ются скалярами, поэтому, подобно обычным скалярным переменным, их имена начина- ются со знака “$”. Индексация массивов начинается с нуля, а индекс самого последнего элемента в массиве @а определяется значением $#а. Чтобы получить размер массива, достаточно добавить к этому значению единицу. Массив @ARGV содержит аргументы командной строки сценария. Его можно исполь- зовать подобно любому другому массиву. Пример использования массивов демонстрирует следующий сценарий. #!/usr/bin/perl @items = ("носки", "туфли", "шорты"); printf "Есть %d вида одежды.\n", $#items +1; print "Наденьте ${items[2]} первыми, затем ", join(" и ", @items[0,1]), ”.\п"; Результат выполнения этого сценария таков. $ perl clothes Есть 3 вида одежды. Наденьте шорты первыми, затем носки и туфли. В этих нескольких строках сценария есть много интересного. Рискуя отвлечь ваше внимание, мы все же включаем в каждый наш Perl-пример несколько распространен- ных идиом, разъясняя сложные моменты в тексте, следующем за примером. Если вы внимательно прочитаете все пояснения к примерам (не пугайтесь, они короткие!), то к концу этой главы приобретете практические знания в использовании большинства рас- пространенных Perl-конструкций. Массив и строковые литералы В этом примере обратите внимание, прежде всего, на то, что набор круглых ско- бок (...) создает список литералов. Отдельными элементами этого списка являются строки (которые разделяются запятыми). Созданный список присваивается перемен- ной @items. В языке Perl нет жесткого требования заключать все строки в кавычки. В конкретном случае начальное присваивание значения переменной @i terns с тем же успехом работает и без кавычек. @items = (носки, туфли, шорты); Такие строки без кавычек называются в Perl “голыми словами” (barewords), и они интерпретируются таковыми в качестве “последнего средства”. Это значит, что, если для некоторого объекта невозможно найти смысловую нагрузку, Perl пытается интерпрети- ровать его как строку. В некоторых случаях это имеет смысл, если сохранится читабель- ность кода. Однако наш пример не относится к таким случаям. Даже если вы сами пред-
98 Часть I. Основы администрирования почитаете всегда заключать строки в кавычки, будьте готовы к тому, что вам придется “разгадывать” намерения других программистов, разбираясь в их “голословном” коде. В Perl существует еще один способ инициализировать этот массив. Он состоит в ис- пользовании оператора qw (#uote words — т.е. брать слова в кавычки). Это, по сути, фор- ма заключения строки в кавычки, которая предоставляет вам право самим выбирать раз- делители (как и во многих других случаях использования кавычек в Perl). Форма @items = qw (носки туфли шорты) ; является самой традиционной, но при этом может ввести в заблуждение, поскольку часть после оператора qw — уже не список. В действительности это строка, разделенная пробельными символами для формирования списка. Версия @items = qw[носки туфли шорты]; тоже работает и, пожалуй, точнее передает смысл происходящего. Обратите внимание на то, что запятых здесь нет, поскольку их нагрузку “взял на себя” оператор qw. Вызовы функций Оба варианта — print и printf — принимают произвольное количество аргумен- тов, которые разделяются запятыми. Но вот вы видите join (...). Не напоминает ли вам это вызов функции? Чем же “этот j oin” отличается от print и printf? По сути, ничем, print, printf и join — это обычные функции. Perl позволяет опу- скать круглые скобки в вызовах функций, если эта “экономия” не послужит причиной неоднозначности, поэтому обе формы приемлемы. В приведенной выше print-строке форма записи со скобками (join (...)) используется для явного отделения аргументов, передаваемых функции join, от аргументов, передаваемых функции print. Выражение @items [0,1] должно дать “списочный” результат, поскольку оно на- чинается с символа “@”. В действительности это выражение означает “кусочек масси- ва” (или подмассив), а список индексов 0,1 перечисляет индексы элементов исходного массива, которые должны быть включены в упомянутый “кусочек”. Здесь Perl прини- мает диапазон значений, как и в эквивалентном выражении @items [ 0.. 1 ]. Здесь так- же было бы допустимо использовать одиночный числовой индекс: например, выраже- ние @items [0] означало бы список, содержащий один скаляр, т.е. строку “носки”, что в данном случае было бы эквивалентно литералу ("носки”). Массивы в вызовах функций автоматически раскрываются, поэтому в выражении join(" и ”, @items[0,1]) функция join получает три строковых аргумента: " и ”, "носки" и "туфли". Она конкатенирует свой второй и последующие аргументы, вставляя между каждой парой копию первого аргумента. В результате получаем “носки и туфли”. Преобразования типов в выражениях В printf-строке при вычислении выражения $#items + 1 получим число 3. По определению выражение $#items содержит числовое значение, но это не дает основа- ния считать, что выражение $#items + 1 предполагает выполнение арифметического действия; смешанный вариант "2" + 1 работает так же. “Магия” кроется в операто- ре “+”, который всегда подразумевает арифметику, т.е. он преобразует свои аргументы в числа и генерирует числовой результат. Аналогично ему оператор “точка” (.), назна- чение которого — конкатенировать строки, преобразует свои операнды “по контексту”, т.е. при вычислении выражения "2" . (12 ** 2) получим в результате “2144”.
Глава 2. Сценарии и командная оболочка eg Раскрытие строк и устранение неоднозначности при ссылках на переменные Как и в командной оболочке bash, строки, заключенные в двойные кавычки, явля- ются объектами для раскрытия переменных. Так же, как и в bash, вы можете заключить имена переменных в фигурные скобки, чтобы при необходимости устранить неодно- значность, как в выражении $ {items [2]}. (В данном случае фигурные скобки исполь- зуются только для иллюстрации; на самом деле они не нужны.) Символ “$” информиру- ет о том, что результат вычисления выражения должен быть скалярным. Переменная® items определяет массив, но его любой элемент в отдельности — это скаляр, исейфД^г отражен в соглашениях о присваивании имен переменным. Хеши Хеш (также именуемый ассоциативным массивом или хеш-массивом) представляет набор пар “ключ/значение”. Хеш можно представить себе как массив, индексы.которо- го (ключи) являются произвольными скалярными значениями, т.е. они необязательно должны быть числами. Но на практике в качестве ключей используются именно числа и строки. Имена хеш-переменных начинаются с символа “%” (например, %myhash), но их от- дельными значениями являются скаляры, поэтому для работы с хеш-массивами нужно, как и в обычных массивах, использовать префикс разыменования “$”. Индексация обо- значается фигурными скобками, а не квадратными, например $myhash {’ гоп ’}. Для системных администраторов хеши — это очень важный инструмент, который вы будете использовать практически в каждом сценарии. В приведенном ниже коде мы считываем содержимое файла, анализируем его в соответствии с правилами, задан- ными структурой файла /etc/passwd, и формируем хеш с именем %names_by_uid. Значением каждого элемента в хеше становится имя пользователя, связанное с иденти- фикатором UID. #!/usr/bin/perl while ($_ = <>) { ($name, $pw, $uid, $gid, $gecos, $path, $sh) - split /:/; $names_by_uid{$uid} = $name; } %uids_by_name = reverse %names_by_uid; print ”\$names_by_uid{0} is $names_by_uid{0}\n"; print "\$uids_by_name{'root'} is $uids_by_name{'roof}\n"; Как и в предыдущем примере сценария, мы “начинили” эти программные строки некоторыми новыми понятиями. Прежде чем рассматривать анонсированные нюансы, ознакомьтесь с результатом работы этого сценария. $ perl hashexainple /etc/passwd $names_by_uid{0} is root $uids_by_name{'roof } is 0 В каждом проходе цикла while ($_ = о) считывается одна входная строка, кото- рая присваивается переменной $_ (напомним: значение всего оператора присваивания, как в языке С, определяется значением его правой части). При достижении конца вход-
100 Часть I. Основы администрирования ного потока, оператор о возвратит значение “Ложь”, что послужит причиной заверше- ния цикла. Интерпретируя оператор <>, Perl проверяет командную строку, чтобы узнать, указа- ны ли там какие-нибудь имена файлов. Если вы не забыли это сделать, Perl открывает каждый файл по очереди и “прогоняет” его содержимое через цикл. Если вы не назвали ни одного файла в командной строке, Perl возьмет входные данные для циклической об- работки из стандартного входного канала. Внутри цикла указанные в скобках переменные получают значения, возвращаемые функцией split, которая “разрезает” входную строку, используя регулярное выраже- ние, переданное ей в качестве разделителя полей. Здесь наш шаблон ограничивается слешами (символами “/”), действие которых подобно двойным кавычкам. Мы могли бы с таким же успехом написать split ': ’ или split ": Строка, которую функция split должна разбить на подстроки в позициях сопо- ставления с двоеточиями, нигде явно не задана. Если второй аргумент функции split, т.е. подлежащая разбиению строка, опущен, Perl предполагает, что вы хотите разбить на подстроки значение $_. Яснее не бывает! По правде говоря, иногда можно опустить даже шаблон — в этом случае разбиение строки производится по пробельному символу, при этом начальные пробелы в каждой подстроке игнорируются. Но и это еще не все. Даже исходное присваивание переменной $_ в первой строке цикла необязательно. Если просто написать так: while (о) {, то Perl автоматически сохранит каждую входную строку в переменной $_. Можно об- рабатывать строки без создания явной ссылки на переменную, в которой они будут со- храняться. Использование переменной $_ в качестве операнда, действующего по умол- чанию, — распространенная практика, и Perl позволяет такие “вольности” везде, где это имеет смысл. Во множественном присваивании, которое “захватывает” содержимое каждого поля passwd, наличие списка в левой части ($name, $pw, $uid, $gid, $gecos, $path, $sh) = split /:/; создает для функции split “контекст списка”, что предписывает ей возвращать в ре- зультате список всех полей. Если бы в присваивании участвовала скалярная переменная, например $n_fields = split функция split “переключилась” бы на “скалярный контекст” и вернула бы только ко- личество обнаруженных полей. Пользовательские функции также могут отличать скаля- ры от списочного контекста с помощью функции wantarray. Она возвращает значение “Истина” в контексте списка, “Ложь” — в контексте скаляра и неопределенное значе- ние — в void-контексте (для пустых типов данных). Строка %uids_by_name = reverse %names_by_uid; также заслуживает внимания. Хеш в контексте списка (здесь в качестве аргумента функ- ции reverse) приводится к списку в форме (keyl, valuel, кеу2, value2, ...). Функция reverse меняет порядок следования элементов в списке на обратный: (valueNf keyN, valuel, keyl). Наконец, присваивание хеш-переменной %uids_by_name преобразует этот список в вариант (keylr valuelf ...), создавая тем самым перестановочный индекс.
Глава 2. Сценарии и командная оболочка 101 Ссылки и их самооживление Обозначенная в заголовке тема относится к более сложным, но мы посчитали себя не вправе обойти ее молчанием. По крайней мере, мы должны изложить здесь основные положения. Массивы и хеши могут хранить скалярные значения, но не исключено, что вам понадобится сохранить в них другие массивы и хеши. Например, возвращаясь к на- шему предыдущему примеру анализа файла /etc/passwd, вы могли бы сохранить все поля каждой строки passwd в хеше, индексируемом значением идентификатора UID. Если нельзя хранить массивы и хеши, то можно хранить ссылки (указатели) на мас- сивы и хеши, которые сами по себе являются скалярами. Чтобы создать ссылку на мас- сив или хеш, необходимо предварить имя соответствующей переменной обратной косой чертой (например, \@аггау) или использовать литеральный синтаксис ссылок на мас- сив или на хеш. Например, наш цикл passwd-анализа мог выглядеть так. while (о) { $array_ref = [ split /:/ ]; $passwd_by_uid{$array_ref->[2]} = $array_ref; } Квадратные скобки возвращают ссылку на массив, содеращий результаты работы функции split. Выражение $array_ref-> [2] ссылается на поле UID (это третий член массива, адресуемого переменной $array_ref). Выражение $array_ref [2 ] здесь не работает, поскольку мы не определили массив @array_ref; $array_ref и @array_ref — это разные переменные. Хуже того, вы не получите сообщение об ошибке, если ошибочно использовали здесь выражение $аг- ray ref [2], поскольку @array_ref — это абсолютно легитимное имя для массива; вы ведь не присваивали ему никаких значений. Отсутствие предупреждающих сообщений может показаться проблемой, но это, возможно, одно из лучших качеств Perl, именуемое самооживлением (autovivification). Поскольку имена переменных и синтаксис использования ссылок всегда делают доволь- но ясной структуру данных, к которой вы пытаетесь получить доступ, вам не придется создавать промежуточные структуры данных вручную. Достаточно организовать при- сваивание на самом низком уровне, и промежуточные структуры возникают автомати- чески. Например, используя только один оператор присваивания, можно создать хеш ссылок на массивы, в качестве содержимого которых будут выступать ссылки на хеши. Регулярные выражения в Perl Регулярные выражения в Perl используются путем “привязки” строк к операциям над регулярными выражениями, а именно с помощью оператора связывания =~. Например, при выполнении кода if ($text =~ m/ab+c/) { проверяется, совпадает ли строка, хранимая в переменной $text, с регулярным выраже- нием ab+c. Для выполнения действий по умолчанию над строкой, в которой хранится результат предыдущей операции, т.е. $_, можно просто опустить имя переменной и опе- ратор связывания. На самом деле можно опустить и оператор гл, поскольку эта операция по умолчанию приводит к совпадению. if (/ab+c/) { Подстановки работают аналогично.
102 Часть I. Основы администрирования $text =~ s/etc\./and so on/g; # Замена текста в строке $text, ИЛИ s/etc\./and so on/g; # Применительно к переменной $_ Мы вставили здесь модификатор д, чтобы заменить не просто первый экземпляр подстроки “etc.” вместе с подстрокой “and so on”, а все найденные экземпляры. Помимо модификатора g (который применяется для поиска множественных совпадений), часто используются и другие: модификатор i, чтобы игнорировать регистр букв; модифика- тор s, чтобы “нацелить” точку (.) на совпадение с символами новой строки; и моди- фикатор ш, чтобы с помощью маркеров “л” и “$” искать совпадения в начале и конце отдельных строк, а не только в начале и конце обрабатываемого текста. Для того чтобы обратить ваше внимание на другие важные нюансы, рассмотрим сле- дующий сценарий. #’/usr/bin/perl $names = "huey dewey louie"; $regex = ’ (\w+)\s+(\w+)\s+(\w+) ' ; if ($names =- m/$regex/) { print "1-ое имя $1.\п2-ое имя $2.\n3-e имя $3.\п"; $names =~ s/$regex/\2 \1/; print "Новые имена \"${names}\".\п"; } else { print qq{"$names” не совпадает с "$regex".\п}; } Вот как выглядит результат выполнения этого сценария. $ perl testregex 1-ое имд huey. 2-ое имя dewey. 3-е имя louie. Новые имена "dewey huey". Этот пример показывает, что символы // позволяют раскрыть переменные, т.е. регу- лярное выражение необязательно должно быть фиксированной строкой. Обратите внима- ние на оператор qq — это еще одно имя для оператора заключения в двойные кавычки. После реализации совпадения или подстановки переменные $1, $2 и так далее со- относятся с содержимым круглых скобок в регулярном выражении. Содержимое этих переменных также доступно в самом процессе замены, в контексте которого они “име- нуются” как \ 1, \2 и т.д. Ввод и вывод данных Открывая файл для чтения или записи, вы определяете так называемый дескриптор файла, чтобы идентифицировать соответствующий канал. В приведенном ниже при- мере переменная INFILE служит дескриптором для файла /etc/passwd, а переменная OUTFILE — дескриптором, связанным с файлом /tmp/passwd. Используемое в цикле while условие <INFILE> аналогично рассмотренному выше выражению о, но имеет свою специфику, связанную с данным конкретным дескриптором файла. Здесь считыва- ются строки из файла с дескриптором infile до тех пор, пока не обнаружится конец файла, что и остановит работу цикла while. Каждая строка размещается в переменной $_.
Глава 2. Сценарии и командная оболочка 103 #!/usr/bin/perl open(INFILE, "</etc/passwd") or die "He удается открыть /etc/passwd"; open(OUTFILE, ">/tmp/passwd") or die "He удается открыть /tmp/passwd"; while (<INFILE>) { ($name, $pw, $uid, $gid, $gecos, $path, $sh) - split /:/; print OUTFILE "$uid\t$name\n"; } Функция open возвратит значение “Истина”, если файл успешно откроется, тем са- мым “замкнув” (т.е. сделав необязательным) вычисление частей die, поскольку резуль- тат вычисления всего выражения уже не изменится. Perl-оператор or подобен оператору I | (который также есть в Perl), но с более низким приоритетом. Оператор or в общем случае предпочтительнее, если вы хотите подчеркнуть, что прежде, чем Perl переключит “свое внимание” на последствия неудачного исхода операции, должны быть выполнены все действия, указанные в левой части выражения. Синтаксис Perl для задания способа использования каждого файла (для чтения, запи- си или добавления в конец) отражает возможности, заложенные в командной оболочке. Кроме того, использование таких имен файлов, как ”/bin/df | ”, позволит открывать входные или выходные каналы связи с командами оболочки. Поток управления В приведенном ниже примере представлена Perl-версия уже знакомого вам bash- сценария, в котором проверялась достоверность аргументов командной строки (для сравнения можете вернуться к разделу “Функции и аргументы командной строки” этой главы). Обратите внимание на то, что Perl-конструкция if не оснащена ни ключевым словом then, ни каким-либо признаком завершения — блок операторов здесь просто заключен в фигурные скобки. Для того чтобы обеспечить выполнение любого отдельного оператора при соблюде- нии некоторого условия, вы можете добавлять постфиксный вариант оператора if (или его обратную версию unless). #!/usr/bin/perl sub show_usage { print shift, "\n" if scalar(@_) ; print "Применение: $0 source_dir dest_dir\n"; exit scalar (@_) ? shift : 1; } if (@ARGV != 2) { show_usage; } else { # Существует два аргумента ($source_dir, $dest_dir) = @ARGV; show_usage "Недопустимый каталог-источник" unless -d $source_dir; -d $dest_dir or show usage "Недопустимый каталог-приемник"; } Здесь две строки, которые используют унарный Perl-оператор -d для проверки суще- ствования каталогов $source_dir и $dest_dir, эквивалентны. Вторая форма (с опера- тором -d в начале строки) предпочтительнее, поскольку утверждение используется в на- чале строки, где оно заметнее всего. Однако применение оператора or, обозначающего в противном случае”, несколько сомнительно; и многих, кому приходится разбираться, в чужом коде, это сбивает с толку.
104 Часть I. Основы администрирования Переменная массива в скалярном контексте (заданном оператором scalar в данном примере) возвращает количество элементов в массиве. Это значение на единицу превы- шает значение $#аггау (как всегда, в Perl предусмотрено несколько способов получе- ния одного и того же результата). Функции в Perl принимают аргументы в массив с именем Обычной практикой считается в Perl получать доступ к ним с помощью оператора shift, который удаляет первый элемент массива аргументов и возвращает его значение. Эта версия функции show usage принимает необязательное сообщение об ошибке для вывода на печать. Если вы предоставляете сообщение об ошибке, то можете также предоставить специфический код выхода. Тернарный оператор ? г оценивает свой пер- вый аргумент; если оценка даст значение “Истина”, то результатом всего выражения станет значение второго аргумента, в противном случае — третьего. Как и в среде bash, Perl имеет специальное условие “else if ”, но его ключевым сло- вом является elsif, а не elif. (Для тех, кто использует оба языка, эти забавные пустя- ковые различия либо заострят их ум, либо — наоборот.) Как показано в табл. 2.5, Perl-операторы сравнения не совпадают с аналогичными операторами в оболочке bash: строки используют текстуальные операторы, а числа — традиционную алгебраическую запись. Сравните эту таблицу с табл. 2.2. Таблица 2.5. Элементарные Perl-операторы сравнения и У/ Йстина,если х eq У х = у х равно у х пе У х != у х не равно у х It У х < у х меньше у х 1е У х <= у х меньше или равно у х gt У X > у х больше у х де У X >= у х больше или равно у В Perl у вас есть все операторы тестирования файлов, показанные в табл. 2.3, за ис- ключением операторов -nt и -ot, которые доступны только в среде bash. Подобно оболочку bash, язык Perl предоставляет два типа цикла for. При использо- вании более распространенной формы цикла for обеспечивается выполнение итераций с проходом по всем элементам явно заданного списка аргументов. Например, в приве- денном ниже коде перебираются по очереди элементы списка названий животных (ani- mals) и выводятся по одному на строке. @animals = qw(lions tigers bears); foreach $animal (@animals) { print ”$animal \n" ; } Также вы вправе использовать цикл for в стиле языка С. for ($counter=l; $counter <= 10; $counter++) { printf ”$counter ”; } Хотя мы продемонстрировали применение циклов с разными ключевыми словами — for и foreach, на самом деле в обоих случаях работает одно и то же ключевое слово, т.е. в Perl вы можете использовать любую форму, которая кажется вам предпочтительнее.
Глава 2. Сценарии и командная оболочка 105 В версиях языка Perl до 5.10 (2007 г.) не было явно определенных операторов case или switch, но, как уже подчеркивалось не раз, один результат можно получить не- сколькими путями. В дополнение к очевидному, но громоздкому варианту каскадирова- ния операторов if, можно прибегнуть к еще одному способу использования оператора for, в котором главное — установить переменную $_, сравнить ее с нужными значе- ниями и после выполнения соответствующих действий обеспечить выход из контекста (с помощью оператора last). for ($ARGV[0]) { т/Лwebsphere/ && do { m/Atomcat/ && do { m/Ageronimo/ && do { print "Инсталляция для print "Инсталляция для print "Инсталляция для websphereXn"; last; }; tomcatXn" ; last; }; geronimoXn"; last; }; print "Предоставлен недопустимый вариант.\n"; exit 1; } Здесь регулярные выражения по очереди сравниваются с аргументом, сохраненным в переменной $_. При неуспешном результате сравнения в левой части операции && правая часть уже не вычисляется и управление передается следующему оператору. Если же происходит совпадение с некоторым регулярным выражением, выполняется соответ- ствующий ему блок do, после чего остается лишь “красиво уйти”. Немедленный выход из блока for обеспечивают операторы last. Прием входных данных и проверка их достоверности В приведенном ниже сценарии объединены многие уже рассмотренные нами кон- струкции Perl, включая использование подпрограммы, нескольких постфиксных опера- торов if и цикла for. Сама программа — это просто “обертка”, в которую “завернута” основная функция get_string, обеспечивающая проверку достоверности входных дан- ных. Эта функция приглашает пользователя ввести строку, удаляет замыкающий символ новой строки и проверяет, не является ли введенная строка нулевой. После приема ну- левой строки пользователю предлагается повторить ввод, но после трех неудачных по- пыток сценарий “умоет руки”. # !/usr/bin/perl $maxatt = 3; # Максимальное число попыток ввести корректные данные sub get_string { my ($prompt, $response) = shift; # Пытаемся прочитать входную строку до $maxatt раз for (my $attempts = 0; $attempts < $maxatt; $attempts++) { print "Пожалуйста, попытайтесь еще раз.Хп" if $attempts; print "$prompt: "; $response = readline(*STDIN); chomp($response); return $response if $response; } die "Слишком много неудачных попыток ввести данные"; } # Прием имен с помощью функции get_string и перевод в прописные буквы $fname = uc get_string "Имя";
106 Часть I. Основы администрирования $lname = uc get_string "Фамилия"; printf "Полное имя: $fname $lname\n"; Результат выполнения этого сценария таков. $ perl validate Имя: John Ball Фамилия: Park Полное имя: JOHN BALL PARK Функция get string и цикл for иллюстрируют использование оператора ту в соз- дании переменных локальной области видимости. По умолчанию все переменные в Perl являются глобальными. Список локальных переменных для функции get string ини- циализируется с помощью одного скаляра, получаемого из массива аргументов функ- ции. Переменные в списке инициализации, которые не имеют надлежащего значения (в данном случае это переменная $response), остаются неопределенными. Значение * STDIN, переданное функции чтения строк, имеет “всеядный” тип type- glob, который считается слабым местом в языковом проектировании. Из соображений самосохранения, лучше не ломайте голову над тем, что он (этот тип) в действительно- сти означает. Возможно, вас удовлетворит такое короткое пояснение: в Perl дескрип- торы файлов не относятся к типам данных “первого класса”, поэтому в общем случае для передачи их функциям в качестве аргументов необходимо перед их именами ставить символ “звездочка”. В присваиваниях для переменных $fname и $lname обе функции uс (convert to uppercase — означает преобразовать в прописные буквы) и get string вызываются без использования круглых скобок. Поскольку в данном случае функциям передается один- единственный аргумент, здесь нет никакой неоднозначности, а потому “экономия” ни- как не навредила. Использование языка Perl в качестве фильтра Язык Perl можно использовать без сценария — просто введя отдельные выражения в командную строку. Это позволяет быстро выполнить преобразования текста и “объя- вить” устаревшими такие программы фильтрации, как sed, awk и tr. Ключ командной строки -ре дает возможность циклически обработать поток STDIN, вычислить простое выражение в каждой строке и вывести результат. Например, команда ubuntu$ perl -ре ' s#/bin/sh$#/bin/bash#' /etc/passwd root:x:0:0:root:/root:/bin/bash daemon:x:1:1:daemon:/usr/sbin:/bin/bash заменяет текст /bin/sh в конце строк файла /etc/passwd текстом /bin/bash, выводя трансформированный файл passwd в поток STDOUT. Возможно, вы привыкли к тому, что оператор подстановки текста использует в качестве разделителей слеши (например, s/foo/bar/), но Perl позволяет применять любой символ. Здесь как искомый текст, так и текст замены содержат слеши, поэтому в данном случае в качестве разделителя проще использовать символ Предпочитая парные разделители, вы должны применять их в количестве четырех вместо “обычных” трех, например s (foo) (bar). Perl-ключ -а устанавливает режим автоматического разбиения, в котором входные строки разбиваются на поля, сохраняемые в массиве @F. Разделителем полей по умол- чанию служит пробел, но с помощью ключа -F вы можете установить другой шаблон разделителя.
Глава 2. Сценарии и командная оболочка Режим авторазбиения удобно использовать вместе с ключом -р или его вариантом запрещения автовывода -п. Например, в приведенных ниже строках используется ва- риант команды perl -апе, чтобы отформатировать результат работы двух вариантов команды df. В третьей строке выполняется команда join, которая объединяет два на- бора полей в поле Filesystem, создавая составную таблицу, включающую поля, “вы- тащенные” из обеих версий результата команды df. suse$ df -h | perl -ane 'print join("\t", @F[0..4]), "\n'" > tmpl suse$ df -i | perl -ane 'print join("\t", @F[0,l,4J), "\n"' > tmp2 suse$ join tmpl tmp2 Filesystem Size Used Avail Use% Inodes IUse% /dev/hda3 3.0G 1.9G 931M 68% 393216 27% udev 126M 172K 12 6M 1% 32086 2% /dev/hdal 92M 26M 61M 30% 24096 1% /dev/hda6 479M 8.1M 446M 2% 126976 1% Вариант сценария без временных файлов выглядит следующим образом. #!/usr/bin/perl for (split(/\n/, 'df-h')) { @F - split; $h_part{$F[0] } = [ @F[0..4] ]; } for (split(/\n/, ’df -i’) { @F = split; print join("\t", @{$h_part{$F[0]}}, $F[1], $F[4]), "\n"; } Истинно бесстрашные программисты могут использовать ключ -i вместе с ключом -ре, чтобы редактировать файлы “прямо по месту”: Perl считывает содержимое фай- лов, передает их строки на редактирование и сохраняет результаты в исходных файлах. Вместе с ключом -i можно предоставить шаблон, который укажет, как именно резер- вировать оригинальную версию каждого файла. Например, вариант -i.bak позволит сохранить резервную копию файла passwd в виде файла passwd.bak. Но будьте осто- рожны — если вы не предоставите образец резервирования, резервная копия не будет создана совсем. Обратите внимание на то, что ключ -i и предоставляемый вами суф- фикс не разделяются пробелом. Модули расширения для Perl Всеобъемлющая сеть архивов Perl (Comprehensive Perl Archive Network — CPAN) — это обширное хранилище пользовательских Perl-библиотек (cpan. org). Инсталляция новых модулей значительно облегчается командой cpan, которая действует во многом подобно открытому консольному менеджеру yum или менеджеру управления пакетами APT, “специализирующимся” на модулях Perl. Если вы работаете в системе Linux, по- интересуйтесь, есть ли в вашем дистрибутиве модуль, который вы собираетесь использо- вать в качестве стандартного средства, — намного проще инсталлировать однажды пакет системного уровня, а затем позволить системе самой периодически заботиться о соб- ственных обновлениях. Если в системе нет команды cpan, можно “пойти другим путем” и попытаться вы- полнить команду perl -MCPAN -е shell.
108 Часть I. Основы администрирования $ sudo perl -MCPAN -e shell cpan shell — CPAN exploration and modules installation (vl.9205) ReadLine support available (maybe install Bundle::CPAN or Bundle::CPANxxl?) cpan[1]> install Class::Date CPAN: Storable loaded ok (v2.18) CPAN: LWP::UserAgent loaded ok (v5.819) CPAN: Time::HiRes loaded ok (vl.9711) ... several more pages of status updates ... Можно посоветовать пользователям инсталлировать модули Perl в их домашние ка- талоги для личного применения, но этот процесс не совсем простой. В масштабе всей системы рекомендуем инсталлировать модули (с открытым кодом) сторонних произво- дителей из архива CPAN. Эти модули Perl (их создателей можно идентифицировать по имени) не опаснее других программных продуктов с открытым кодом. Многие модули Perl используют компоненты, написанные на языке С (что способ- ствует повышению производительности). Инсталляция включает компиляцию этих сег- ментов, поэтому для работы вам необходимо иметь полную среду разработки, содержа- щую С-компилятор и полный набор библиотек. Как и во многих других языках, самой распространенной ошибкой в Perl-программах считается повторная реализация средств, которые уже реализованы в модулях расширения.12 При решении любой задачи на языке Perl возьмите себе за правило пер- вым делом обращаться к архиву CPAN. Так вы сэкономите на времени разработки и от- ладки. 2.5. Создание сценариев на языке PYTHON По мере усложнения и увеличения в объеме программных проектов становятся оче- видными преимущества объектно-ориентированного проектирования и реализации. Языку Perl явно не хватало объектно-ориентированного “буксира” в течение почти пяти лет, и хотя разработчики изо всех сил “налегали на весла”, чтобы как-то удержаться на плаву, Perl-версия объектно-ориентированного программирования все еще оставляет желать лучшего. Этот раздел посвящен языку Python (версии 2). Версия Python 3 пока находится в ра- боте и, по всей вероятности, будет выпущена после выхода этой книги. Но, в отличие от Perl 6, она будет значительно усовершенствована. Разработчикам с сильной подготовкой в области объектно-ориентированного про- граммирования обычно нравятся Python и Ruby — языки написания сценариев с рез- ко выраженным объектно-ориентированным уклоном. Создается такое впечатление, что язык Python в данный момент находится на нисходящей части кривой восприятия, поэтому его распространение — относительно простое направление деятельности для 12 Вот что по этому поводу думает разработчик UNIX Том Кристиансен (Tom Christiansen): “В принципе, это правильно, но я бы выбрал другого кандидата. Претендентом на звание “самой распространенной ошибки в программах” я бы назвал тенденцию, состоящую в том, что програм- мы, как правило, никогда не переписываются. Если вы когда-то писали сочинение, то знаете, на- сколько сильно могут отличаться его начальный и конечный варианты. Так и в программировании. Вероятно, вы слышали такое высказывание: ‘Никогда не останавливайся на опытном образце’. Другими словами, очень печально, что люди, затратив силы на создание какой-то программы, почему-то никогда не переделывают ее, чтобы улучшить ее ясность и повысить эффективность”.
Глава 2. Сценарии и командная оболочка 109 менеджмента. Некоторые операционные системы, включая OpenSolaris, инвестируют значительные средства в развитие Python-возможностей по написанию сценариев. Язык Ruby, наоборот, по-прежнему ассоциируется, главным образом, с веб-разработкой и ред- ко используется для сценариев общего назначения. Язык Python был создан Гуидо ван Россумом (Guido van Rossum). По сравнению с Perl, здесь проще процесс кодирования, а сам код читабельнее. Python отличается про- стым для понимания синтаксисом даже для тех, кто сам не разрабатывал код. Если вам трудно запомнить детали использования операторов сравнения, вы оцените унифициро- ванный подход, реализованнный в языке Python. Что касается системных администра- торов, то они считают весьма полезными дополнительные типы данных, предлагаемые языком Python. Если Python еще не инсталлирован в вашей системе, просмотрите список доступных пакетов, предлагаемых вашим поставщиком. Если с этим у вас возникнут проблемы, вы можете получить исходный код Python с сайта python. org. Здесь также вы найдете мо- дули расширений, разработанные сторонними производителями. Для того чтобы получить более подробное введение в язык Python, чем представлен- ное здесь, начните с книги Марка Пилгрима (Mark Pilgrim) Dive Into Python. Ее можно прочитать и бесплатно загрузить на сайте diveintopython. org (или купить в печатном виде от издательства Apress). Полный список предлагаемой литературы по обсуждаемой теме приведен в разделе 2.7. Быстрое погружение в языковую среду Python Как обычно, начнем с вывода сообщения “Привет, мир!”. Как видите, его Python- версия практически идентична Peri-варианту. #!/usr/bin/python print "Привет, мир!" Для выполнения этой программы установите “исполнительный” бит или вызовите напрямую интерпретатор языка Python. $ chmod +х helloworld $ ./helloworld Привет, мир! В этой программе не иллюстрируется самое “возмутительное” отступление Python от традиций, к которым мы так привыкли в программировании. В языке Python не исполь- зуются ни скобки (фигурные и квадратные), ни специальные ключевые слова (begin и end), ограничивающие блоки. Операторы на одном и том же уровне отступа автомати- чески формируют блоки. Конкретный стиль отступов (пробелы или табуляция, глубина отступа) не имеет значения. Формирование блоков в Python прекрасно показано на сле- дующем примере, в котором используется оператор if-then-else. #!/usr/bin/python import sys a = sys.argvfl] if a == ”1": print ’а равно одному' print 'Это все еще ветвь then оператора if. ' 5 else:
110 Часть I. Основы администрирования print 'а равно', а print 'Это все еще ветвь else оператора if. ' print 'А это уже за границей оператора if. ' В третьей строке программы импортируется модуль sys, который содержит массив argv. Обе ветви then и else оператора if имеют по две строки, и все они “отмечены” отступом одинакового уровня. Последний оператор print “выпадает” из контекста опе- ратора if. Как и в языке Perl, Python-оператор print принимает произвольное количе- ство аргументов. Но, в отличие от Perl, Python-оператор print вставляет пробел между каждой парой аргументов и автоматически “приправляет свое блюдо” символом новой строки. Вы можете подавить разделитель строк, включив дополнительную запятую в ко- нец строки print; кроме того, null-аргумент предписывает оператору print не выво- дить символ новой строки. Двоеточие в конце строки обычно служит признаком того, что за ней (этой строкой) следует блок, состоящий из строк с отступами. $ python blockexample 1 а равно одному Это все еще ветвь then оператора if. А это уже за границей оператора if. $ python blockexanqple 2 а равно 2 Это все еще ветвь else оператора if. А это уже за границей оператора if. Соглашение о Python-отступах ограничивает наши возможности в форматировании кода, но зато дает выигрыш в том, что программы, написанные разными программи- стами, выглядят практически одинаково. Это соглашение также означает, что для про- граммистов отпадает необходимость “сдабривать” код знаками “точка с запятой” для завершения операторов. Комментарии начинаются с символа # и продолжаются до конца строки (точно так же, как в оболочке bash и языке Perl). Длинную строку можно разбить на части с помощью символа “\”, помещенного В конце. В этом случае имеет значение только отступ первой строки. При желании можете использовать отступы и в остальных строках-продолжениях (частях разбитой длинной строки). Строки с несбалансированными скобками (круглыми, квадратными или фигур- ными) автоматически сигнализируют о продолжении строки даже при отсутствии сим- вола “\”, но вы можете вставить этот символ, чтобы прояснить структуру вашего кода. При выполнении некоторых операций вырезки и вставки символы табуляции пре- образуются в пробелы, что может иметь для вас неожиданные последствия. Поэтому следуйте золотому правилу: никогда не смешивайте символы табуляции и пробелы; для создания отступов используйте либо табуляцию, либо пробелы. Работа многих про- граммных продуктов основана на традиционном предположении, что символ табуляции соответствует интервалу, состоящему из восьми пробелов, что на практике “выливается” в слишком большие отступы для получения читабельного кода. Большая часть Python- сообщества предпочитает использовать пробелы и 4-символьные отступы. Если вы захотите кардинально решить проблему отступов, то, “идя навстречу вашим пожеланиям”, многие текстовые редакторы включают средства, которые помогают со- хранить в здравии вашу психику, либо запрещая символы табуляции (в пользу пробе- лов), либо отображая эти “конкурирующие” символы по-разному. В качестве послед-
Глава 2. Сценарии и командная оболочка 111 него средства можете переводить символы табуляции в пробелы с помощью команды expand или использовать команду perl -ре для замены табуляции строкой символов, которая лучше видна. Объекты, строки, числа, списки, словари, кортежи и файлы Все типы данных в языке Python являются объектами, и это придает им больше силы и гибкости, чем в языке Perl. В языке Python списки заключаются в квадратные скобки (а не в круглые). Индек- сация массивов начинается с нуля (это один из немногочисленных принципов, который не меняется для всех трех “сценарных” языков, рассматриваемых в этой главе). “Новым словом” в языке Python прозвучали “кортежи,” которые, по сути, представ- ляют собой неизменяемые списки. Кортежи работают быстрее, чем массивы, и оказыва- ются весьма полезными для представления данных, которые должны быть немодифици- рованными. Синтаксис для кортежей такой же, как для списков, за исключением того, что разделителями у них служат круглые скобки (а не квадратные). Поскольку запись (thing) похожа на простое алгебраическое выражение, кортежи, содержащие только один элемент, должны иметь дополнительную запятую, которая не оставит у вас сомне- ний, с чем именно вы имеете дело, — (thing, ). Рассмотрите пример использования некоторых основных типов данных в языке Python. #!/usr/bin/python name = ’Gwen* rating = 10 characters = [ 'ГубкаБоб', ’Патрик', 'Сквидвард’ ] elements = ( 'литий', 'углерод', 'бор' ) print "Имя:\Ь%з\пРейтинг:\t%d" % (name, rating) print "Герои:\t%s" % characters print "Элементы:\t%s" % (elements, ) Вот как выглядит результат выполнения этого примера. $ python objects Имя: Gwen Рейтинг: 10 Герои: ['ГубкаБоб', 'Патрик', 'Сквидвард'] Элементы: ('литий', 'углерод', 'бор') Переменные в языке Python не отмечаются синтаксически и не объявляются с указа- нием типа, но объекты, на которые они ссылаются, имеют базовый тип. В большинстве случаев язык Python автоматически не преобразует типы за вас, но это могут сделать отдельные функции или операторы. Например, вы не можете сцепить строку и число (с помощью оператора “+”) без явного преобразования числа в его строковое представ- ление. Однако операторы форматирования приводят объекты любого типа к строковому виду. Каждый объект имеет строковое представление. Действие оператора строкового форматирования “%” во многом подобно действию Функции sprintf из языков С или Perl, но его можно использовать везде, где может находиться строка. Это бинарный оператор, в левой части которого стоит строка, а
112 Часть I. Основы администрирования правой — вставляемые значения. Если вставляемых значений несколько, они должны быть представлены в виде кортежа. Словарь в языке Python — это то же самое, что хеш в языке Perl, т.е. список пар “ключ/значение”. Словарные литералы заключаются в фигурные скобки, а элементы, составляющие пару “ключ/значение”, отделяются друг от друга двоеточием. #!/usr/bin/python ordinal = { 1 : 'первый’, 2 : 'второй’, 3 : ’третий' } print "Массив ordinal содержит", ordinal print "Значением ordinal для ключа 1 является", ordinal[1] На практике Python-словари во многом подобны массивам, за исключением того, что “словарные” индексы (ключи) могут быть объектами, отличными от целых чисел. $ python dictionary Массив ordinal содержит {1: ’первый’, 2: 'второй', 3: 'третий'} Значением ordinal для ключа 1 является первый В языке Python файлы открываются как объекты с помощью соответствующих ме- тодов. Метод readline, вполне оправдывая свое имя, считывает одну строку. При вы- полнении приведенного ниже примера считываются (и выводятся) две строки из файла /etc/passwd. #!/usr/bin/python f = open('/etc/passwd', 'r') print f.readline(), print f.readline() , f .close () $ python fileio at:x:25:25:Batch jobs daemon:/var/spool/atjobs:/bin/true bin:x:1:1:bin:/bin:/bin/true Замыкающие запятые в операторах print используются для подавления символов новой строки, поскольку каждая строка и так уже включает этот символ, считанный из исходного файла. Пример контроля входных данных Приведенный ниже сценарий — это Python-версия уже знакомой нам программы проверки допустимости входных данных. В этом сценарии демонстрируется использова- ние подпрограмм и аргументов командной строки, а также некоторых других “питониз- мов” (от англ. Python — питон). #!/usr/bin/python import sys import os def show_usage(message, code - 1) : print message print "%s: source_dir dest_dir" % sys.argv[0] sys.exit(code) if len(sys.argv) != 3: show_usage("Нужно передать 2 аргумента; вы передали %d" % (len(sys.argv) - 1)) elif not os.path.isdir(sys.argvfl]):
Глава 2. Сценарии и командная оболочка 113 show_usage (’’Недопустимый каталог-источник”) elif not os .path, isdir (sys .argv[2]) : show_usage("Недопустимый каталог-приемник") source, dest - sys.argv[l:3] print "Каталогом-источником является", source print "Каталогом-приемником является", dest В дополнение к импортированию модуля sys, мы также импортируем модуль os (чтобы получить доступ к утилите os .path, isdir). Обратите внимание на то, что ко- манда import не позволяет вам “фамильярничать” с содержимым импортируемых мо- дулей при доступе к любым определенным в них символам, т.е. вы не освобождаетесь от необходимости использовать полные имена, которые начинаются с имени модуля. Определение подпрограммы show usage предполагает использование значения по умолчанию для кода завершения на случай, если вызывающий оператор не передаст этот аргумент в явном виде. Поскольку все типы данных являются объектами, аргумен- ты функции передаются по ссылке. Первый элемент массива sys. argv (в позиции 0) содержит имя сценария, поэтому длина массива на единицу больше, чем количество реально переданных аргументов ко- мандной строки. Запись sys. argv [ 1: 3J означает только часть массива. Удивительно, но часть (подмассив) не включает элйййгг, расположенный на дальнем конце заданно- го диапазона, поэтому рассматрйЙЙеЙ&я часть массива содержит только элементы sys. argv [ 1 ] и sys. argv [ 2 ]. Чтобы включить в подмассив второй и последующие аргумен- ты командной строки, можно использовать выражение say sys. argv [ 1: ]. Подобно оболочке bash и языку Perl, в языке Python предусмотрено специальное условие “else if ”, которому соответствует ключевое слово elif. В языке Python нет оператора-переключателя (switch) для передачи управления на различные ветви (case) в зависимости от результата сравнения аргумента с заданными значениями. Параллельное присваивание значений переменным source и dest несколько отли- чается от Perl-версии тем, что самих этих переменных нет в списке. Язык Python позво- ляет параллельные присваивания в любой форме. В языке Python используются одинаковые операторы сравнения для числовых и стро- ковых значений. Оператор сравнения “ !=” означает “не равно”. Обратите внимание на то, что в языке Python унарного оператора “! ” нет; используйте вместо него оператор not. Булевы операторы and и or выполняют булевы операции (что вполне ожидаемо), но они не возвращают булевы значения: результатом всегда является значение одного из операндов. Циклы В приведенном ниже фрагменте используется конструкция for...in, обеспечивающая выполнение итераций в диапазоне от 1 до 10. for counter in range (1, 10): print counter, Как и в подмассиве из предыдущего примера, правый конец указанного диапазона на самом деле не включается, поэтому результат содержит только числа от 1 до 9. 1 2 3 4 5 6 7 8 9
114 Часть I. Основы администрирования Цикл for в этой форме существует только в языке Python, причем он обладает таки- ми сильными свойствами, которые существенно отличают его от циклов for в других языках. • В синтаксисе цикла нет никаких специальных требований в отношении числовых диапазонов. Итерационную Python-модель может поддерживать практически лю- бой объект. Так, вы можете организовать выполнение итераций по строке (посим- вольно), списку, файлу (по символам, строкам или блокам), подмассиву и т.д. • Итераторы могут возвращать несколько значений, и вы можете использовать не- сколько переменных цикла. Присваивание в начале каждой итерации работает по- добно обычным множественным Python-присваиваниям. • Оба цикла for и while могут иметь в конце оператор else, который выполняется только в том случае, если цикл завершается нормально (в противоположность вы- ходу из цикла посредством оператора break). Это свойство на первый взгляд мо- жет показаться нелогичным, но оно позволяет реализовать довольно элегантные решения для выполнения определенных действий при заданных условиях. В приведенном ниже примере сценарий принимает в командной строке регулярное выражение и сопоставляет его со списком имен карликов (из сказки “Белоснежка и семь гномов”) и цветов их костюмов. Первое совпадение выводится в виде сообщения о том, какого цвета костюм у такого-то карлика, причем те части текста, которые совпали с регулярным выражением, содержат знаки подчеркивания. #!/usr/bin/python import sys import re suits = { 'Bashful':'red', 'Sneezy':'green', 'Doc'blue', 'Dopey':'orange', 'Grumpy':'yellow', 'Happytaupe', 'Sleepy':'puce' } pattern = re.compile("(%s)" % sys.argv[l]) for dwarf, color in suits.items(): if pattern.search(dwarf) or pattern.search(color): print "%s's dwarf suit is %s." % \ (pattern.sub(r"_\l_", dwarf), pattern.sub(r"_\l_", color)) break else: print "No dwarves or dwarf suits matched the pattern." Вот как выглядят результаты выполнения этого сценария. $ python dwarf search ' [aeiou] {2}' Sn_ee_zy's dwarf suit is gr_ee_n. $ python dwarf sear ch go No dwarves or dwarf suits matched the pattern. Присваивание переменной suits демонстрирует Python-синтаксис для кодирования литеральных словарей. Метод suits. items () работает как итератор для пар “ключ/ значение” — обратите внимание на то, что на каждой итерации мы извлекаем как имя карлика, так и цвет костюма. Если хотите, чтобы итерация происходила только по клю- чам, можете использовать такой вариант организации цикла: for dwarf in suits.
Глава 2. Сценарии и командная оболочка 115 Python реализует обработку регулярного выражения посредством его модуля ге. Никакие правила работы с регулярными выражениями не встроены в сам язык, поэтому их обработка в Python более громоздкая, чем в Perl. Здесь сначала выбирается регуляр- ное выражение pattern из первого аргумента командной строки, заключенного в кру- глые скобки, чтобы сформировать “группу захвата”. Затем проверяются и модифицируются строки с помощью методов search и sub объекта регулярного выражения. Можно также использовать вызов соответствующих функций (например, re. search), передав регулярное выражение в качестве первого ар- гумента. Выражение \ 1 в строке подстановки представляет собой обратную ссылку на содержимое первой “группы захвата”. 2.6. Передовой опыт создания сценариев Несмотря на то что фрагменты программ в этой главе снабжены некоторыми ком- ментариями и сообщениями о правильном применении сценариев (поскольку мы хоте- ли обратить ваше внимание на кое-какие нюансы), хотелось бы, чтобы реальные сцена- рии были еще лучше. Существует множество книг о написании качественных программ, но все же будет не лишним изложить здесь некоторые основные рекомендации по на- писанию сценариев. • При запуске с неадекватными аргументами сценарий должен вывести сообщение о его корректном применении и завершиться. Можно также реализовать возмож- ность получения справочной информации (—help). • Проверяйте входные данные и выходные значения на корректность. Прежде чем выполнять команду rm -rf (удаление указанных имен файлов из каталога), хоро- шо было бы, чтобы сценарий сначала удостоверился, что полученный в результате путь будет соответствовать ожидаемому образцу. Такие двойные предосторожности (и средства языка, которые позволяют их реализовать) иногда оказываются весьма полезными. • Сценарий должен возвращать надлежащий код завершения: нуль — в слу- чае успешного выполнения и ненулевое значение — при неудачном исходе. Необязательно сопровождать каждый вид отказа уникальным кодом завершения, однако следует поинтересоваться, какая информация была бы полезной для вы- зывающих процедур. • Используйте соответствующие соглашения о присвоении имен для переменных, сценариев и подпрограмм. Приведите в соответствие соглашения, действующие в языке, в остальной части кодовой основы вашего узлами, что самое важное, других переменных и функциях, определенных в текущем проекте. Используйте принцип смешанного регистра букв или знаки подчеркивания, чтобы сделать читабельны- ми длинные имена.13 • Для переменных используйте имена, которые отражают хранимые в них значения, но старайтесь все же давать имена покороче. Например, переменную для хранения количества входных строк можно, конечно, назвать number of lines of input, но уж очень оно длинное, и его лучше заменить так: n lines. 13 Имена самих сценариев также имеют большое значение. В этом контексте “в роли” пробе- лов дефисы предпочтительнее, чем знаки подчеркивания (например, system-config-printer).
116 Часть I. Основы администрирования • Разработайте руководство по стилю, чтобы вы и ваши коллеги могли писать код, используя одни и те же соглашения. Такое руководство облегчит вам понимание кода, написанного другими программистами, а им — написанного вами. • Начинайте каждый сценарий с блока комментария, в котором будет сказано, что делает данный сценарий и какие параметры он принимает. Не забудьте указать свое имя и текущую дату. Если сценарий требует, чтобы в системе были инсталли- рованы нестандартные инструменты, библиотеки или модули, обязательно пере- числите их. • Комментируйте свой код, используя такую степень детализации, какую посчитае- те полезной, с учетом временного “отхода” от этого кода и с последующим воз- вратом к нему через месяц или два. Имеет смысл также комментировать выбор алгоритма, причины неиспользования более очевидного способа кодирования, необычные пути в коде, все “трудные места”, возникшие в период разработки. Не загромождайте код бесполезными комментариями; отнеситесь к написанию ком- ментариев с точки зрения потенциального читателя: пишите лаконично, грамотно и “по делу”. • Комментарии кода лучше всего применять к целым блокам или функциям. Комментарии, которые описывают назначение переменной, следует вставлять вместе с объявлением этой переменной или при ее первом использовании. • Лучше запускать сценарии от имени суперпользователя root. Не устанавливайте для них атрибут setuid, поскольку такие сценарии довольно трудно сделать со- вершенно безопасными. Для того чтобы реализовать надлежащие стратегии управ- ления контролем доступа, используйте команду sudo. • В оболочке bash используйте ключ -х, чтобы отобразить команды, прежде чем они будут выполнены, и ключ -п, чтобы проверить синтаксис команд без их вы- полнения. • Используйте Perl-ключ -w, который предупредит вас о подозрительном поведе- нии, например об использовании переменных до установки их значений. Вы мо- жете использовать этот ключ в “описательной” строке или “внедрить” его в текст программы с помощью директивы use warnings. • Выполняя Python-сценарий, вы находитесь в режиме отладки, если явно не от- ключите его с помощью аргумента -0 в командной строке. Это означает, что еще до вывода диагностических выходных данных вы можете протестировать специ- альную переменную______debug___. Том Кристиансен (Tom Christiansen) предлагает следующие пять золотых правил для генерирования полезных сообщений об ошибках. • Сообщения об ошибках должны направляться в канал STDERR, а не STDOUT. • Включайте в сообщение об ошибке имя программы. • Указывайте виновника (имя функции или операции) ошибочного действия. • Если к сбою приводит системный вызов, включите строку реггог ($ ! в языке Perl). • Если код завершения некоторой операции не равен нулю, обеспечьте выход из программы. В среде Perl несложно следовать всем этим пяти правилам. die "can't open $filename: $!";
Глава 2. Сценарии и командная оболочка 117 2.7. Рекомендуемая литература • Brooks, Frederick Р. JR. The Mythical Man-Month: Essays on Software Engineering. Reading, MA: Addison-Wesley, 1995. Основы работы в командной оболочке и написание сценариев в среде bash • Albing, Carl, JP Vossen and Cameron Newham. Bash Cookbook. Sebastopol, CA: O’Reilly Media, 2007. • Kemighan, Brian W. and Rob Pike. The UNIX Programming Environment. Englewood Cliffs, NJ: Prentice-Hall, 1984. • Newham, Cameron and Bill Rosenblatt. Learning the bash Shell (3rd Edition). Sebastopol, CA: O’Reilly Media, 2005. • Powers, Shelley, Jerry Peek, Tim O’reilly and Mike Loukides. Unix Power Tools, (3rd Edition), Sebastopol, CA: O’Reilly Media, 2002. Регулярные выражения • Friedl, Jeffrey. Mastering Regular Expressions (3rd Edition), Sebastopol, CA: O’Reilly Media, 2006. • Goyvaerts, Jan and Steven Levithan. Regular Expressions Cookbook. Sebastopol, CA: O’Reilly Media, 2009. Написание сценариев на языке Perl • Wall, Larry, Tom Christiansen and Jon Orwant. Programming Perl (3rd Edition), Sebastopol, CA: O’Reilly Media, 2000. • Schwartz, Randal L., Tom Phoenix and Brian D Foy. Learning Perl (5th Edition), Sebastopol, CA: O’Reilly Media, 2008. • Blank-Edelman, David. Automating System Administration with Perl, Sebastopol, CA: O’ReiUy Media, 2009. • Christiansen Tom and Nathan Torkington. Perl Cookbook (2nd Edition). Sebastopol, CA: O’ReiUy Media, 2003. Написание сценариев на языке Python • Beazley, David M. Python Essential Reference (4th Edition), Reading, MA: Addison- Wesley, 2009. • Gift, Noah and Jeremy M. Jones. Python for Unix and Linux System Administrators, Sebastopol, CA: O’ReiUy Media, 2008. • Martelli, Alex, Anna Martelli Ravenscroft and David Ascher. Python Cookbook (2nd Edition), Sebastopol, CA: O’ReiUy Media, 2005. • Pilgrim, Mark. Dive Into Python. Berkeley, CA: Apress, 2004. К этой книге можно также получить бесплатный доступ на веб-сайте diveintopython.org.
118 Часть I. Основы администрирования 2.8. Упражнения 2.1 UNIX позволяет в именах файлов использовать пробелы. Как найти файлы, имена которых содержат пробелы? Как удалить такие файлы? Можно ли рассчитывать на встроенные в оболочку bash и языки Perl и Python средства обработки пробелов в именах файлов или нужно самим предпринимать специальные меры предосторож- ности? Перечислите основные правила написания сценариев. 2.2. Напишите простой bash-сценарий (или два сценария) для резервирования и вос- становления вашей системы. 2.3 Используя регулярные выражения, напишите Perl- или Python-сценарий для анали- за даты в форме, генерируемой командой date (например, Tue Oct 20 18:09:33 PDT 2009), и определения ее корректности (например, чтобы не “прошло” несу- ществующее 30 февраля). Существует ли готовая библиотека или готовый модуль, который позволит вам сделать это одной строкой кода? Если да, то поясните, как инсталлировать их, и перепишите свой сценарий с их использованием. 2.4. Напишите сценарий, который перечисляет пользователей системы и группы, ис- пользуя файлы /etc/passwd и /etc/group (или их эквиваленты в сетевых базах данных). Для каждого пользователя выведите его идентификатор (UID) и группы, членом которых он является. 2.5. Усовершенствуйте подпрограмму get string (см. подраздел “Прием входных данных и проверка их достоверности” раздела 2.4 этой главы) так, чтобы она при- нимала только целые числа. Новая версия подпрограммы должна принимать три параметра: строку-приглашение, нижний предел и верхний предел допустимых це- лых чисел. 2.6. Найдите недокументированный сценарий, который используется в вашей среде. Прочитайте его и убедитесь, что понимаете его. Добавьте комментарии и напишите man-страницу для этого сценария. 2.7. ★ Напишите сценарий, который отображает короткую (длиной в одну страницу) суммарную сводку данных о состоянии оборудования по одной из следующих ка- тегорий: ЦП, память, диск или сеть. Ваш сценарий с помощью системных команд и файлов должен создать легко воспринимаемую инструментальную панель, кото- рая содержала бы максимально возможный объем информации. 2.8. ★ Создайте управляемый в режиме меню интерфейс, который упрощает выбор ключей командной строки для команд top, sar или инструмента анализа произво- дительности. 2.9. ★ Напишите сценарий для тестирования возможности сетевого соединения на сервере и служб обратных потоков, от которых она зависит (например, служба до- менных имен — DNS, файловая служба, протокол LDAP или другая каталоговая служба). В случае обнаружения каких-либо проблем обеспечьте отправку вам со- общения по электронной почте или текстового сообщения.
Глава Запуск и останов системы Как и практически все операции в UNIX, процедуры включения/выключения систе- мы превратились в тщательно спроектированные процессы, которые учитывают мно- жество возможных непредвиденных ситуаций. Как администраторы мы рассматриваем сложности процесса загрузки во многих аспектах, чтобы предотвратить потенциальные проблемы и устранить возникшие. Эффективный системный администратор, прежде всего, “зрит в корень”. Процесс начальной загрузки системы всегда был достаточно сложным, но все же он был несколько проще в те дни, когда изготовители определяли буквально все аспекты аппаратного и программного обеспечения. Теперь, когда Linux и Solaris управляют ап- паратным обеспечением персональных компьютеров, процедура загрузки должна вы- полняться по их правилам. При этом приходится иметь дело с множеством возможных конфигураций. Несмотря на то что в этой главе мы обсуждаем процедуру загрузки для всех рассматриваемых нами операционных систем, все же больше внимания уделяется версиям UNIX, ориентированным на персональные компьютеры, чем “стационарным” системам. Хотя эта глава в книге — одна из первых, в ней мы иногда оперируем понятиями, которые подробно рассматриваются лишь через несколько сотен страниц. Поэтому ре- комендуем также прочесть главы 6 и 13. 3.1. Начальная загрузка Под начальной загрузкой (bootstrapping), понимается запуск системы при включении питания. Поскольку обычные средства операционной системы на данном этапе еще не- доступны, система должна “самозагрузиться”, в буквальном смысле “обслужить себя
120 Часть I. Основы администрирования самостоятельно”. В ходе этого процесса ядро системы загружается в память и активи- зируется. Затем выполняется ряд инициализационных задач, после чего система готова к обслуживанию пользователей. Начальная загрузка — это период особой уязвимости системы. Ошибки в конфи- гурации, сбои в работе или отсутствие нужного оборудования, повреждения файловых систем могут помешать компьютеру нормально начать работу. Настройка режимов за- грузки часто является одной из первых задач, которую приходится решать администра- тору в новой системе, особенно при добавлении нового оборудования. К несчастью, эта задача — одна из наиболее сложных, и для ее решения необходимо хорошо знать многие другие аспекты системы. Когда включается питание, запускается на выполнение загрузочный код, хранящий- ся на постоянном запоминающем устройстве. Он должен запустить ядро. Ядро опраши- вает состояние аппаратных устройств, а затем запускает демон init, идентификатор ко- торого всегда равен 1. Прежде чем система полностью загрузится, должны быть проверены и смонтирова- ны файловые системы и запущены системные демоны. Соответствующие процедуры реализуются с помощью сценариев интерпретатора команд, которые последовательно запускаются демоном init. Конкретная структура сценариев и способ их выполнения зависят от системы. Все эти вопросы будут рассмотрены в данной главе. Главное — активизировать командную оболочку При нормальной работе системы сами выполняют начальную загрузку в автономном режиме, после чего к ним могут получить удаленный доступ администраторы и пользова- тели. Однако администраторам необходимо иметь инструмент восстановления системы в случае, если неожиданный отказ дисковода или какая-нибудь проблема конфигурации помешает системе нормально выполнить процесс начальной загрузки. Системы UNIX (вместо загрузки “по полной программе”) могут ограничиться только самым необходи- мым, а именно активизацией командной оболочки на системной консоли. Этот вариант называют входом системы в так называемый “однопользовательский режим”, режим вос- становления или профилактический режим — все эти термины в этой главе взаимозаме- няемы. Однопользовательский режим не позволяет выполнять сетевые операции, а для использования системной консоли вам нужно иметь физический доступ к ней. В большинстве систем для входа в однопользовательский режим во время начальной загрузки необходимо передать ядру в командной строке определенный параметр. Если система уже загружена и работает, вы можете перевести ее в однопользовательский ре- жим с помощью команды shutdown или telinit. Этапы загрузки Типичная процедура начальной загрузки состоит из шести отдельных этапов: • считывание начального загрузчика с главной загрузочной записи; • загрузка и инициализация ядра; • обнаружение и конфигурирование устройств; • создание процессов ядра; • вмешательство администратора (только в однопользовательском режиме); • выполнение системных сценариев запуска.
Глава 3. Запуск и останов системы 121 Почти все этапы не требуют интерактивного контроля со стороны администратора. Ведь администраторы имеют возможность управлять загрузкой системы, редактируя файлы конфигурации для сценариев запуска системы или изменяя аргументы, переда- ваемые загрузчиком ядру. Инициализация ядра CQ Подробнее о ядре рассказывается в главе 13. Ядро представляет собой программу, и в качестве первой задачи начальной загруз- ки выполняется запись этой программы в память для последующего выполнения. Имя файлу ядра дает его изготовитель, но по традиции оно называется /unix или /vmunix. В Linux-системах ядро обычно получает путевое имя в виде вариации на тему /boot/ vmlinuz. В большинстве систем загрузка осуществляется в два этапа. Сначала в память ком- пьютера с диска считывается (с помощью кода, записанного на постоянном запоми- нающем устройстве) небольшая программа начальной загрузки (именуемая начальным загрузчиком), которая затем выполняет собственно загрузку ядра. Эта процедура совер- шается вне UNIX-домена и поэтому не стандартизирована среди систем. Ядро выполняет тесты, позволяющие определить, сколько памяти имеется в распоря- жении системы. Часть внутренних структур ядра имеет фиксированный размер, поэтому ядро резервирует определенный объем физической памяти для самого себя. Эта память недоступна пользовательским процессам. Ядро выдает на консоль сообщение об общем объеме физической памяти и объеме памяти, доступной пользовательским процессам. Конфигурирование аппаратных средств Одна из первых задач ядра — исследование компонентов аппаратного обеспечения. В процессе тестирования различных системных шин и инвентаризации оборудования ядро выводит на консоль краткую информацию о каждом обнаруженном устройстве. Во многих случаях ядро загружает драйверы устройств как независимые модули ядра. Для систем, ориентированных на персональные компьютеры, дистрибутивы включают ядро, которое способно работать в большинстве аппаратных конфигураций компьютеров, тре- буя при этом минимальной настройки или же вообще обходясь без нее. Процесс конфигурации аппаратного обеспечения должен быть относительно про- зрачным для администраторов, особенно в среде Linux. Готовые ядра имеют модульную структуру и автоматически обнаруживают большую часть устройств. Тем не менее вы можете встретить нераспознанные устройства. О том, как справиться с конфигурацией драйверов вручную, прочитайте в главе 13. Создание процессов ядра После завершения этапа базовой инициализации ядро создает в области памяти, вы- деленной для пользовательских программ, несколько “самовыполняющихся” процес- сов. Это происходит “в обход” стандартного системного механизма fork (описан в раз- деле 5.2). Количество таких процессов зависит от операционной системы, хотя демон init всегда имеет идентификатор процесса (PID), равный 1. Большинство систем UNIX ис- пользует sched в качестве процесса с идентификатором 0.
122 Часть I. Основы администрирования В Linux процесс с идентификатором PID, равным 0, отсутствует. Демон init работает в сопровождении с различными обработчиками памяти и сигналов ядра, в том числе с теми, которые представлены в табл. 3.1. Все эти процессы имеют идентификаторы с низкими номерами, а их имена в листингах коман- ды ps заключены в квадратные скобки (например, [kacpid]). Иногда имена процессов могут содержать в конце символ косой черты и цифру, как, напри- мер, [kblockd/0 ]. Число указывает процессор, на котором выполняется дан- ный процесс. Эта информация может быть полезна при настройке многопро- цессорной системы. Таблица 3.1. Некоторые наиболее часто встречающиеся процессы ядра в Linux-системах Процесс kjournald kswapd ksoftirqd Записывает обновления журнала на диска Выполняет подкачку процессов при недостаточном объеме физической памяти Обрабатывает мягкие прерывания, если ими нельзя заняться во время переключения контекста khubd Выполняет конфигурирование USB-устройств а Для каждой смонтированной файловой системы ext3 или ext4 существует один процесс k joumald. Из этих процессов только init является полноценным пользовательским процес- сом; остальные фактически представляют собой части ядра, которые были сделаны про- цессами из концептуальных соображений. Системы UNIX создают подобные процессы ядра, но поскольку эти процессы ото- бражают особенности конкретной реализации ядра, никакие имена или функции не могут быть одинаковыми для разных систем. К счастью, администраторам никогда не приходится взаимодействовать с этими процессами напрямую. После создания этих процессов ядро больше не принимает участия в процедуре на* чальной загрузки системы. К этому моменту, однако, еще не создан ни один из процес* сов, управляющих базовыми операциями (например, регистрацией пользователей в си* стеме), и большинство демонов не запущено. Обо всем этом позаботится (в некоторых случаях косвенно) демон init. Действия оператора (только в режиме восстановления) Ш Подробнее об учетной записи root рассказывается в главе 4. Если систему нужно запустить в режиме восстановления, оператор устанавливает в командной строке специальный флаг, а ядро передает эту информацию демону init в качестве уведомления о запуске. Во время однопользовательской загрузки вы должны получить приглашение ввести пароль пользователя root. Если он введен правильно, за- пускается интерпретатор команд с правами суперпользователя. Можно не задавать па- роль, а просто нажать комбинацию клавиш <Ctrl+D>, после чего загрузка продолжится в многопользовательском режиме (подробнее см. раздел 3.4). СЗ Подробнее о файловых системах и их монтировании речь пойдет в главе 6. В однопользовательском режиме команды выполняются почти так же, как и в пол- ностью загруженной системе. Однако иногда монтируется только корневой раздел. Для того чтобы можно было использовать программы, находящиеся вне каталогов /bin, / sbin или /etc, необходимо вручную смонтировать остальные файловые системы.
Глава 3. Запуск и останов системы Во многих однопользовательских средах корневой каталог файловой системы мон- тируется в режиме только для чтения. Если каталог /etc является частью корневой файловой системы (обычная ситуация), редактирование многих файлов конфигурации будет невозможно? Чтобы выйти из положения, придется начать однопользовательский сеанс с повторного монтирования каталога / в режиме чтения/записи. Нужное действие в Linux-системах выполняет следующая команда. # mount -о rw,remount / В большинстве других систем вы можете выполнить команду mount /, чтобы реали- зовать обращение к файлу f stab или vfstab и выяснить, как должна быть смонтирова- на файловая система. В системе Red Hat загрузка в однопользовательском режиме выполняется не- сколько активнее, нежели обычно. До того момента, когда на экран будет вы- ведено приглашение интерпретатора команд, этот дистрибутив попытается смонтировать все локальные файловые системы. Хотя на первый взгляд такой подход кажется удобным, но при использовании недостаточно продуманной файловой системы он может порождать проблемы. Команда f sck, которая проверяет и восстанавливает поврежденные файловые систе- мы, обычно выполняется в ходе автоматической загрузки. Если система запускается в однопользовательском режиме, команду fsck придется вводить вручную. Подробнее эта команда описана в разделе 8.9. Когда интерпретатор команд однопользовательского режима завершит свою работу, система продолжит загрузку в нормальном режиме. Выполнение сценариев запуска системы В тот момент, когда система сможет выполнять сценарии запуска, ее уже можно на- звать UNIX. Это еще не полностью загруженная система, но “загадочных” этапов про- цесса загрузки больше не осталось. Файлы сценариев представляют собой обычные ко- мандные файлы, которые выбираются и запускаются демоном init по сложному, но, в общем-то, понятному алгоритму. Точное местонахождение, содержимое и организация сценариев запуска заслужива- ют отдельного изучения. Подробнее об этом рассказывается в разделе 3.6. Краткий курс написания сценариев можно пройти, изучив материал главы 2. Завершение процесса загрузки Ш Подробнее процесс регистрации в системе описан в разделе 31.8. После выполнения сценариев инициализации система полностью готова к работе. Такие системные демоны, как DNS- и SMTP-серверы, принимают и обслуживают под- ключения. Не забывайте о том, что демон init продолжает играть важную роль даже по завершении начальной загрузки. У демона init есть один однопользовательский и несколько многопользовательских Уровней выполнения”, определяющих, какие ресурсы системы будут доступны пользо- вателю. Уровни выполнения рассматриваются в разделе 3.5. 1 Например, однопользовательский режим используется для восстановления утраченного паро- ля суперпользователя. Эта операция требует модификации файла /etc/shadow.
124 Часть I. Основы администрирования 3.2. Загрузка системы на персональном компьютере До этого момента описывалась общая схема начальной загрузки. Теперь некоторые наиболее важные (и сложные) ее этапы необходимо рассмотреть подробнее, проанали- зировав особенности функционирования Intel-систем. Загрузка системы на персональном компьютере — это многоступенчатый процесс. Когда включается компьютер, начинает выполняться код, записанный на постоянном запоминающем устройстве. Точное его местонахождение и структура зависят от типа оборудования. В компьютерах, созданных специально для UNIX или другой коммерче- ской операционной системы, код “прошивается” разработчиком, который заранее за- дает алгоритм подключения устройств, базовой инициализации сети и распознавания локальных файловых систем. Это очень удобно для системного администратора. Ему достаточно ввести лишь имя нового файла ядра, а код постоянного запоминающего устройства автоматически обнаружит и прочитает этот файл. На персональных компьютерах код начальной загрузки представлен в виде базовой подсистемы ввода-вывода — BIOS (Basic Input/Output System), которая чрезвычайно упрощена в сравнении с фирменным кодом UNIX-станций. В действительности в си- стеме BIOS есть несколько уровней кода: для самого компьютера, для видеоплаты, для SCSI-адаптера, если таковой имеется, и иногда для других периферийных устройств вроде сетевых плат. Встроенному коду BIOS известно об устройствах, расположенных на материнской плате, в частности о IDE- и SATA-контроллерах (и жестких дисках), плате сетевого адап- тера, измерителе мощности и температуры, контроллере клавиатуры, последовательных и параллельных портах. SCSI-адаптеры знают только об устройствах, подключенных не- посредственно к ним. К счастью, за последние несколько лет сложные взаимодействия, необходимые для обеспечения совместной работы этих устройств, были стандартизова- ны и теперь почти не требуют вмешательства оператора. В режиме конфигурирования можно выбрать, с какого устройства требуется загру- жаться. Обычно последовательность загрузки задается в виде правила, например: “сна- чала — DVD, затем — “флешка” (USB drive), в последнюю очередь — жесткий диск”. Распространенным вариантом также считается сетевая загрузка с помощью среды РХЕ (см. раздел 12.1). Когда компьютер определил, с какого устройства следует загружаться, считывается его (устройства) первый блок. Этот сегмент (512 байт) называется главной загрузочной записью (master boot record — MBR). В ней хранится программа, которая сообщает ком- пьютеру о том, в каком разделе диска расположена программа вторичной загрузки (за- грузчик операционной системы). Дополнительная информация о разделах дисков на персональных компьютерах и главной загрузочной записи приведена в главе 8. Стандартная программа, находящаяся в главной загрузочной записи, дает компью- теру указание извлечь загрузчик операционной системы из первого раздела диска. В не- которых системах поддерживаются более сложные программы, которые могут работать с несколькими операционными системами и ядрами. Найдя раздел, с которого будет вы- полняться загрузка системы, программа главной загрузочной записи пытается запустить загрузочную программу, связанную с этим разделом. В случае успеха этой программе передаются полномочия по дальнейшей загрузке ядра.
Глава 3. Запуск и останов системы 125 3.3. GRUB: УНИВЕРСАЛЬНЫЙ ЗАГРУЗЧИК Программа GRUB (GRand Unified Boot loader), разработанная в рамках проекта GNU, используется как стандартный загрузчик в большинстве UNIX- и Linux-систем, оснащенных процессорами Intel. GRUB поставляется в составе многих дистрибутивов Linux и Solaris (с архитектурой х86) начиная с версии 10. Задача GRUB — выбрать из предварительно подготовленного списка ядро и загрузить его с опциями, заданными ад- министратором. Существует две ветви развития GRUB: оригинальная, официально именуемая “GRUB Legacy”, и более новая — GRUB 2. Название “GRUB 2” может ввести в за- блуждение, поскольку выпуски GRUB 2 в действительности имеют номера версий 1 и 2; Все наши примеры систем в настоящее время используют исходный вариант — GRUB Legacy, и именно эта версия описывается в данной книге. Версия GRUB 2 в концепту- альном плане подобна исходной, но отличается синтаксисом файла конфигурации. По умолчанию GRUB читает параметры загрузки из файла /boot/grub/menu.lst или /boot/grub/grub. conf. Считывание содержимого файла конфигурации проис- ходит в период запуска (что само по себе уже впечатляет), и это позволяет реализовать динамические изменения при каждой загрузке системы. Файлы menu. Ist и grub. conf отличаются незначительно, но имеют аналогичный синтаксис. Системы Red Hat ис- пользуют файл grub.conf, a Solaris, SUSE и Ubuntu — файл menu. 1st. Вот образец файла grub. conf. default==0 timeout=10 splashimage=(hdO,0)/boot/grub/splash.xpm.gz title Red Hat Enterprise Linux Server (2.6.18-92.1.10.el5) root (hd0,0) kernel /vmlinuz-2.6.18-92.1.10.el5 ro root=LABEL=/ В этом примере конфигурируется единственная операционная система, которая бу- дет загружена автоматически (default=0), если в течение 10 секунд с клавиатуры не поступят никакие данные (timeout=10). Корневая файловая система для конфигурации “Red Hat Enterprise Linux Server” находится в разделе (hdO, 0), что для GRUB означает обращение к первому разделу первого жесткого диска системы (нумерация “первый раз- дел” и “первый диск”определяется в BIOS). Программа GRUB загрузит ядро из файла /vmlinuz-2.6.18-92.1.10. е15, а затем выведет начальный образ экрана, хранящийся в файле /boot/grub/splash.xpm.gz. Путь поиска ядра указывается относительно раздела загрузки, который обычно монти- руется в каталоге /boot. Программа GRUB поддерживает мощный интерфейс командной строки и ряд функ- ций, которые позволяют редактировать записи файла конфигурации в ходе загрузки. Для того чтобы перейти в режим командной строки, в окне загрузки GRUB необходимо ввести команду с. Из командной строки можно загружать операционные системы, не от- раженные в файле grub. conf, выводить на экран информацию о системе и выполнять простейшую проверку файловой системы. Загрузчик предоставляет также ряд функций, подобных функциям интерпретатора команд, в том числе — функции завершения не полностью введенных команд и перемещения курсора. Любые действия, которые могут быть выполнены с помощью файла grub. conf, могут быть выполнены и посредством командной строки загрузчика GRUB.
126 Часть I. Основы администрирования Нажатие клавиши <ТаЬ> позволяет вывести на экран краткий список доступных ко- манд. Некоторые из наиболее полезных команд перечислены в табл. 3.2. Таблица3.2. Параметрыкомандной строки GRUB Команда reboot Мягкая перезагрузка системы find Поиск файла во всех смонтированных логических разделах root Указание корневого устройства (логического раздела) kernel Загрузка ядра с корневого устройства help Вывод интерактивной справки по команде boot Загрузка системы с указанного образа ядра Для получения подробной информации о загрузчике GRUB и его параметрах ко- мандной строки обратитесь к официальному руководству: gnu.org/software/grub/ manual. Параметры ядра Программа загрузчика GRUB позволяет передавать ядру параметры командной стро- ки. Как правило, эти параметры изменяют значения параметров ядра, вынуждают его опросить конкретные устройства, указывают путь поиска демона in it или назнача- ют конкретное корневое устройство. Несколько примеров этих параметров приведены в табл. 3.3. Таблица 3.3. Примеры параметров ядра времени загрузки Параметр As A A A'A-. • 'AASfc acpi=off Отключает компоненты Advanced Configuration (усовершенствованный интерфейс конфигурации) и Power Interface (интерфейс управления питанием) ini t=/bin/bash Заставляет ядро запускать только интерпретатор bash; используется при восста- новлении системы в случае сбоев root=/dev/foo Сообщает ядру о том, что корневым является устройство /dev/foo single Задает режим однопользовательской загрузки (только для Linux. Используйте ключ -sb системах Solaris — он предназначен для администраторов, знакомых со стандартом OpenBoot в других CPU-архитектурах) Параметры ядра, отредактированные во время загрузки, не сохраняются. Чтобы со- хранить изменения на будущие перезагрузки, отредактируйте строку kernel в файле grub. conf или menu. 1st. Ядро Linux постоянно совершенствуется с помощью заплат, повышающих уровень безопасности, исправлений ошибок и новых функций. Но, в отличие от других про- граммных пакетов, старые версии ядра обычно не заменяются новыми. Новые ядра ин- сталлируются наряду со старыми, чтобы в случае возникновения проблемы вы могли тут же вернуться к старому ядру. Это соглашение помогает администраторам отказаться от модернизации, если заплата ядра разрушает их систему. По прошествии некоторого вре- мени загрузочные меню GRUB заполняются различными версиями ядра. Обычно вы- бор версии ядра по умолчанию не представляет опасности, но если окажется, что ваша система не загружается после добавления заплаты, позаботьтесь о возможности выбора другого ядра.
Глава 3. Запуск и останов системы 127 Мультисистемная загрузка Поскольку на одном персональном компьютере может быть установлено несколько операционных систем, привычной является ситуация, когда компьютер загружается в мультисистемном режиме. Для этого загрузчик должен быть правильно сконфигуриро- ван, чтобы распознать имеющиеся на локальных дисках операционные системы. В сле- дующих разделах мы опишем некоторые проблемные блоки мультисистемной загрузки, а затем рассмотрим конкретные примеры конфигурации. В каждом разделе диска может храниться собственный вторичный загрузчик, одна- ко загрузочный диск должен иметь только одну главную загрузочную запись. Поэтому необходимо решить, какой загрузчик будет “главным”. Как правило, выбор диктуется особенностями имеющихся операционных систем. Для Intel-ориентированных UNIX- и Linux-систем лучше всего в качестве главного загрузчика выбрать GRUB. При двух- вариантной загрузке Windows-системы всегда используйте загрузчик GRUB (а не за- грузчик Windows). Конфигурирование загрузчика GRUB для выполнения мультисистемной загрузки во многом аналогично конфигурированию загрузки только одной операционной системы. Прежде чем вносить изменения в файл grub.conf или menu. 1st, нужно установить желаемые операционные системы. Записанные в файле grub. conf параметры конфигурации для загрузки операцион- ной системы Windows отличаются от параметров для загрузки UNIX или Linux. title Windows ХР rootnoverify (hd0,0) chainloader +1 Параметр chainloader загружает утилиту начальной загрузки из указанного ме- ста (в данном случае из сектора 1 первого раздела первого IDE-диска). Параметр rootnoverify предотвращает попытки загрузчика GRUB выполнить монтирование указанного раздела. Ниже приведен полный текст файла grub, conf для случая, когда система Windows ХР загружается (по умолчанию) из первого раздела, Red Hat Enterprise Linux — из второго. default=0 timeout=5 splashimage=(hdO,2)/boot/grub/splash.xpm.gz hiddenmenu title Windows XP rootnoverify (hd0,0) chainloader +1 title Red Hat root (hdO,l) kernel /vmlinuz Тот факт, что загрузчик GRUB решает многие потенциальные проблемы мультиси- стемной загрузки, в действительности не смягчает наш врожденный скептицизм в от- ношении мультисистемных конфигураций. Дополнительно об этом можно прочитать в разделе 30.3.
128 Часть I. Основы администрирования 3.4. Загрузка в однопользовательском режиме То, как начинается процесс загрузки, зависит от конкретной системы. Системы с не Intel-процессорами используют специально разработанные программы загрузки, в то время как на персональных компьютерах, в основном, загрузчики стандартизированы (благодаря GRUB). Однопользовательский режим при использовании GRUB Для того чтобы выполнить загрузку в однопользовательском режиме при использо- вании загрузчика GRUB, не нужно применять опции командной строки. Авторы этого загрузчика пришли к выводу, что параметры начальной загрузки должны легко подда- ваться изменению и что клавиша <а> — вполне подходящее средство для решения этой задачи. Когда откроется экран начальной загрузки GRUB, выделите нужное ядро и на- жмите клавишу <а>, чтобы дополнить опции начальной загрузки. Для того чтобы обе- спечить загрузку в однопользовательском режиме, добавьте флаг single (или -s в си- стеме Solaris) в конец существующих опций ядра. Пример типичной конфигурации мог бы выглядеть следующим образом. grub append> го root=LABEL=/ rhgb quiet single Однопользовательский режим в архитектуре SPARC Для того чтобы прервать процедуру загрузки и войти в среду OpenBoot PROM SOLariS на Sun-оборудовании, нажмите одновременно клавиши <Ы> и <а>. На со- временных Sun-клавиатурах клавиша <L1> иногда имеет надпись “STOP”. Для того чтобы выполнить загрузку в однопользовательском режиме из среды OpenBoot PROM, вы можете ввести команду boot -s. Для загрузки альтернативного ядра под управлением Solaris, как правило, нужно ввести полное Solaris-имя устройства и файла. Имя Solaris-устройства — это длинная странного вида строка символов, которую можно увидеть, введя команду Is -1 для файла /dev. % Is -1 /dev/rdsk/cOtOdOsO Irwxrwxrwx 1 root root 55 Jan 15 1998 /dev/rdsk/cOtOdOsO -> ../../devices/sbus@lf,0/SUNW,fas@e,8800000/sd@0,0:a,raw Для того чтобы загрузить ядро, хранимое в виде файла /kernel/backup на том же диске, введите следующую команду в режиме монитора OpenBoot PROM. boot /devices/sbus@lf,0/SUNW,fas@ef 8800000/sd@0,0:a,raw/kernel/backup Некоторые полезные команды, которые можно ввести из Sun-среды OpenBoot PROM, кратко описаны в табл. 3.4. Таблица 3.4. Некоторые PROM-команды для выполнения на Sun-оборудовании boot /path_to_kernel Загружает альтернативное ядро boot -s Загружает систему в однопользовательском режиме boot -г Распознает ядро и определяет наличие новых устройств boot -а /etc/system.bak Принуждает ядро читать файл /etc/system.bak вместо /etc/system probe-scsi Отображает список всех подключенных SCSI-устройств
Глава 3. Запуск и останов системы 12» Однопользовательский режим на рабочих станциях HP-UX KSt ПроцедУРа загрузки в однопользовательском режиме на рабочих станциях: HP-UX зависит от типа машины. Следующий пример взят с рабочей станции: HP 9000/735. Сначала прервите процесс загрузки после соответствующего напоминания. Получив; приглашение на ввод команд, введите команду boot pri isl. Эта команда сгенери- рует следующее приглашение, которое позволит вам загрузить систему в однопользова- тельском режиме. Это приглашение должно выглядеть примерно так. ISL> prompt: Следующая команда выбирает ядро и загружает систему в однопользовательском ре- жиме. ISL> prompt: hpux -iS /stand/vmunix Однопользовательский режим в системах AIX В системах AIX однопользовательский режим называется “профилактиче- ским”. Для его установки, если система еще не загружена, достаточно выбрать соответствующий пункт из меню загрузки. Если система уже загружена, ис- пользуйте команду telinit S. 3.5. Работа со сценариями запуска системы После выхода из однопользовательского режима (или — при стандартной загрузке — по завершении работы интерпретатора команд, запущенного с правами суперпользо- вателя) демон init выполняет сценарии запуска системы. Они являются сценариями интерпретатора sh (на самом деле bash), а их местонахождение, содержимое и органи- зация зависят от изготовителя системы. В большинстве систем используется подход, в котором сценарии нумеруются и вы- полняются по порядку. Сценарии хранятся в каталоге /etc/init.d, а ссылки на них созданы в каталогах /etc/rcO. d, /etc/rcl. d и т.д. Такая организация совершенно ясна, и поскольку сценарии выполняются по порядку, система может обеспечивать со- ответствующие зависимости между службами. Эти “пусковые” сценарии как запускают службы, так и останавливают их, поэтому такая архитектура также позволяет надлежа- щим образом остановить систему. Ниже приведен перечень задач, которые часто выполняются этими сценариями. • Задание имени компьютера • Установка часового пояса • Проверка дисков с помощью команды f sck • Монтирование дисков систем • Удаление старых файлов из каталога /tinp • Конфигурирование сетевых интерфейсов • Запуск демонов и сетевых служб
130 Часть I. Основы администрирования Сценарии запуска обычно довольно многословны и выводят подробную информа- цию о выполняемых ими задачах. Это может оказать существенную помощь при отладке сценариев или поиске причин зависания системы в процессе загрузки. Администраторам не следует заниматься модификацией сценариев запуска. Те сцена- рии, которые принимают данные конфигурации, читают их в форме отдельного файла конфигурации (специфичного для конкретного узла). Вы можете модифицировать вспо- могательный сценарий конфигурации и должны быть уверены, что он не будет переза- писан обновлениями. Сценарии процесса init используются в определенной степени всеми шестью опе- рационными системами, которые рассматриваются здесь в качестве примеров. Процесс запуска системы Solaris 10 был полностью переработан (см. раздел 3.6). Ubuntu исполь- зует “версию” процесса init, известную как Upstart, но мы все же рассмотрим ее в этом разделе, поскольку она имеет сходство с традиционным процессом init. В следующих разделах мы сначала представим общие принципы системы, а затем опишем индивидуальные особенности каждой системы. Демон init и его уровни выполнения Демон init — это первый процесс, который выполняется после завершения загруз- ки системы, и во многих отношениях он считается самым важным. Его идентификаци- онный номер (PID) всегда равен 1, и сам он является базовым для всех пользователь- ских и почти для всех системных процессов. Реализации демона init незначительно различаются в разных системах. Этот демон определяет по меньшей мере семь уровней выполнения, на каждом из которых должен выполняться конкретный набор системных служб. Точное определение каждого уровня в разных системах имеет свои особенности, но следующая информация справедлива для всех систем. • Уровень 0 означает, что система полностью прекратила работу. • Уровень 1 и S означает однопользовательский режим. • Уровни 2—5 предназначены для поддержки работы в сети. • Уровень 6 определяет этап перезагрузки системы. Уровни 0 и 6 характерны тем, что система не может на них оставаться. Если она на них переходит, то в качестве побочного эффекта происходит завершение рабо- ты или перезагрузка. В большинстве случаев система по умолчанию находится на уров- не 2 или 3. В Linux уровень 5 используется регистрационными процессами X Windows. Уровень 4 используется редко. Однопользовательскому режиму традиционно соответствовал уровень 1. На нем за- прещены все сетевые сеансы и процессы удаленной регистрации, а в системе выпол- няется минимальный набор программ. Но поскольку в этом режиме доступ к системе осуществляется с правами суперпользователя, администраторам необходимо, чтобы при загрузке система запрашивала ввод пароля. Для этой цели был введен уровень S: здесь создается отдельный процесс, отображаю- щий приглашение ввести пароль. В Solaris и AIX уровень S означает, что однопользова- тельский режим “в действии”, но в Linux уровень S носит переходный характер и завер- шается сразу после ввода пароля. Создается впечатление, что уровней выполнения больше, чем нужно. Обычно это объясняется тем, что в телефонном коммутаторе 7 уровней, поэтому считалось, что
Глава 3. Запуск и останов системы 131 в UNIX-системе должно быть как минимум столько же. В действительности в системах Linux и АЕХ поддерживается до десяти уровней, хотя большинство уровней не опреде- лено. В стандартной конфигурации системы AIX значимым является только уровень 2. Уровни 0 и 1 зарезервированы для операционной системы, а уровни 3—9 открыты для использования администраторами. В файле /etc/inittab содержатся параметры, определяющие, что должен делать демон init на каждом уровне. Формат файла зависит от системы, но основная идея со- стоит в том, что в нем задаются команды, которые должны быть выполнены (или про- должить выполнение), когда система переходит на конкретный уровень. В процессе загрузки демон init последовательно продвигается от уровня 0 к уровню по умолчанию, заданному в файле /etc/inittab. Чтобы осуществить переход между соседними уровнями, демон выполняет команды из этого файла. Аналогичные дей- ствия, только в обратном порядке, происходят при останове системы. Команда telinit позволяет изменить уровень выполнения демона init, когда система полностью функциональна. Например, команда telinit 3 переводит демон init на уровень 3. Самым полезным аргументом команды telinit является -q, кото- рый предписывает init перечитать файл /etc/inittab. К сожалению, структура файла inittab несколько недоработана и недостаточно хо- рошо согласуется с реальным механизмом запуска и остановки служб в системах UNIX. Для того чтобы сделать этот файл более эффективным, в демоне init реализован до- полнительный, абстрактный, уровень. Он представлен в виде команды, которая исходит из файла inittab и осуществляет смену уровней. Эта команда, в свою очередь, запуска- ет сценарии из каталога, зависящего от целевого уровня. Они-то и переводят систему в новое состояние. • Этот дополнительный уровень не до конца разработан в системах AIX. По- этому управление службами в системах AIX определяется только содержимым файла inittab. Кроме того, AIX-сценарии запуска немного отличаются от соответствующих сценариев в других системах. Большинство современных дистрибутивов Linux по умолчанию выполняет загруз- ку на уровень 5, что может быть не подходящим для систем, которым не требуется за- пускать дисплейный сервер (в среде X Window System). Изменение используемого по умолчанию уровня выполнения не представляет сложности. Следующая строка из файла inittab компьютера, работающего под управлением системы SUSE, определяет уро- вень 5 выполнения в качестве используемого по умолчанию. id:5:initdefault: Системным администраторам обычно не приходится работать непосредственно с файлом /etc/inittab, так как существующие сценарии подходят для большинства случаев. Далее в главе мы практически не будем упоминать об этом файле и взаимодей- ствии демона init со сценариями запуска системы. Просто, когда мы говорим о том, что демон init выполняет такой-то сценарий, нужно понимать следующее: связь со сценарием может быть косвенной. Обзор сценариев запуска Основные копии сценариев запуска хранятся в каталоге /etc/init.d. Каждый сце- нарий отвечает за запуск одного демона или определенной подсистемы. Сценариям можно передавать аргументы start и stop, которые означают, что соответствующая
132 Часть I. Основы администрирования служба должна быть запущена либо остановлена. Большинство сценариев понимает также аргумент restart, который эквивалентен связке stop+start. Обладая правами системного администратора, можно вручную запускать или останавливать нужные служ- бы, вызывая соответствующий сценарий из каталога init.d и передавая ему требуемый аргумент. Ниже показан несложный сценарий, позволяющий запускать, останавливать и пере- запускать демон sshd. # !/bin/sh test -f /usr/bin/sshd | I exit 0 case "$1" in start) echo -n "Starting sshd: sshd" /usr/sbin/sshd echo "." r r stop) echo -n "Stopping sshd: sshd" kill 'cat /var/run/sshd.pid' echo "." г г restart) echo -n "Stopping sshd: sshd" kill 'cat /var/run/sshd.pid' echo "." echo -n "Starting sshd: sshd" /usr/sbin/sshd echo "." *) echo "Usage: /etc/init.d/sshd start|stop|restart" exit 1 r r esac Сценарии каталога /etc/init.d способны запускать и останавливать отдельные службы, но, чтобы перейти на требуемый уровень, главный управляющий сценарий, выполняемый демоном init, должен получить дополнительную информацию о том, какие сценарии и с какими аргументами нужно запустить. Управляющий сценарий не просматривает непосредственно каталог init.d, а обращается к каталогу гсуровень.d, где уровень — это номер требуемого уровня выполнения, на который осуществляется переход (rcO. d, rcl. d и т.д.). В каталогах хсуровень.& обычно содержатся символические ссылки на сценарии каталога init.d. Имена ссылок начинаются с префикса S или к, за которым следует номер и имя службы, управляемой сценарием (например, S34named). Если демон init переходит на более высокий уровень, он выполняет все сценарии с префиксом S (“start” — запуск) в порядке возрастания номеров, причем каждому сце- нарию передается аргумент start. Когда осуществляется переход на более низкий уро- вень, запускаются сценарии с префиксом К (“А1П” — уничтожить) в порядке убывания номеров, и всем им передается аргумент stop. Эта схема позволяет администраторам очень точно управлять порядком запуска служб. Например, запуск сценария sshd до запуска сетевых интерфейсов лишен смысла. Хотя в системе Red Hat и сеть, и сценарий sshd выполняются на уровне 3, сценарию
Глава 3. Запуск и останов системы 133 network присваивается порядковый номер 10, а сценарию sshd — 55. Поэтому можно не сомневаться, что сценарий network будет запущен раньше. При добавлении новых служб необходимо учитывать подобные взаимосвязи. Чтобы сообщить системе, когда следует запускать тот или иной демон, нужно создать символическую ссылку в соответствующем каталоге. Например, следующие команды информируют систему о том, что демон печати cupsd должен быть запущен на уровне 2 и остановлен при завершении работы системы. # In —s /etc/init.d/cups /etc/rc2.d/S80cups # In -s /etc/init.d/cups /etc/rcO.d/K80cups Первая ссылка свидетельствует о том, что сценарий запуска /etc/init.d/cups дол- жен быть выполнен одним из последних при переходе на уровень 2 и ему должен быть передан аргумент start. Вторая ссылка сообщает, что в процессе завершения работы системы сценарий /etc/init.d/cups должен быть запущен относительно рано, при- чем с аргументом stop. В некоторых системах процессы останова и перезагрузки тракту- ются по-разному, поэтому необходимо также создать символическую ссылку в каталоге /etc/гсб .d, чтобы обеспечить корректный останов демона при перезагрузке системы. Сценарии запуска в системах Red Hat Сценарии запуска в дистрибутивах Linux сильно отличаются друг от друга. В основу сценариев Red Hat положен подход, реализованный в демоне init, причем в некоторых строках разобраться довольно трудно. На каждом уровне выполнения демон init вызывает сценарий /etc/rc.d/rc, пе- редавая ему номер уровня в качестве аргумента. Этот сценарий может выполняться как в обычном режиме, так и в режиме подтверждения, когда перед выполнением каждого сценария выдается запрос. Сценарии запуска хранят файлы блокировок в каталоге /var/lock/subsys. Наличие файла блокировок (с таким же именем, как у сценария запуска) служит признаком того, что данная служба уже “занята”. Сценарии запуска создают файлы блокировок при вы- даче команды start и удаляют их при выполнении команды stop. В системах Red Hat управлять службами можно с помощью команды chkconf ig. Эта команда добавляет или удаляет сценарии запуска из системы, управляет уровнями вы- полнения, на которых они работают, и выводит уровни, для которых сконфигурирован сценарий. Для получения информации о применении этого простого и удобного сред- ства можно использовать команду man chkconf ig. В Red Hat также предусмотрен сценарий /etc/rc.d/rc.local (не каталог), кото- рый запускается во время загрузки. Этот последний сценарий, выполняемый как часть процесса загрузки, позволяет добавлять нюансы, характерные для конкретного узла или для выполнения задач после загрузки. Когда появится сообщение “Welcome to Red Hat Enterprise Linux”, можно нажать клавишу <i>, чтобы продолжить загрузку в режиме подтверждения. Однако подтверж- дение о нажатии клавиши не отображается. Система продолжит монтировать локальные файловые системы, активизировать разделы подкачки, загружать таблицы клавиш и ве- сти поиск модулей ядра. Только после перехода на уровень 3 система начнет выдавать запросы на подтверждение. Режимы интерактивной и однопользовательской загрузки начинаются в одной и той же точке. Если в процессе загрузки возникли серьезные проблемы и этой точки достичь невозможно, воспользуйтесь для загрузки DVD-диском или устройством USB (флешкой).
134 Часть I. Основы администрирования Можно передать ядру параметр init=/bin/sh, чтобы заставить его вызвать интер- претатор команд однопользовательского режима еще до того, как будет запущен демон init2. В этом случае все действия по запуску системы придется осуществлять вручную, включая выполнение команды f sck и монтирование локальных файловых систем. Повлиять на процесс начальной загрузки в Red Hat можно путем модификации кон- фигурационных файлов, находящихся в каталоге /etc/sysconfig. Назначение элемен- тов этого каталога описано в табл. 3.5. Таблица 3.5. Файлы и подкаталоги каталога /etc/sysconfig в Red Hat Файл/подкаталог clock Задает тип системных часов (почти всегда UTC)а console Загадочный каталог, который всегда пуст crond Перечисляет аргументы, передаваемые демону cron il8n Содержит региональные установки системы (форматы представления даты/вре- мени, языки и т.д.) init Определяет способ отображения сообщений, поступающих от сценариев запуска системы keyboard Задает тип клавиатуры (используйте идентификатор “us” для стандартной 101-клавишной клавиатуры) mouse Задает тип мыши; используется системой X и программой gpm network Задает глобальные сетевые опции (имя компьютера, шлюз, переадресация и т.д.) network-scripts Каталог, содержащий вспомогательные сценарии и сетевые конфигурационные файлы sendmail Задает параметры программы sendmail а При использовании мультисистемной загрузки совершенно непонятно, какой часовой пояс следует уста- навливать для системных часов. Для некоторых элементов списка необходимы дополнительные пояснения. Файл network содержит адрес шлюза, имя хоста и другие важные установки, кото- рые действуют по умолчанию и применяются ко всем сетевым интерфейсам. Каталог network-scripts содержит вспомогательные файлы, связанные с конфи- гурацией сети. Единственное, что может потребоваться в нем изменить, — это файлы с именами ifcfg-интерфейс. Например, файл network-scripts/ifcfg-ethO хранит параметры конфигурации интерфейса ethO, в частности его IP-адрес и сетевые опции. Подробнее конфигурирование сетевых интерфейсов рассматривается в разделе 14.10. Файл sendmail содержит две переменные: DAEMON и QUEUE. Если переменная DAEMON равна значению yes, система запустит программу sendmail в режиме демона (-bd) в процессе начальной загрузки. Переменная QUEUE информирует программу sendmail о том, каков интервал обработки очереди почтовых сообщений (-д). Стандартная уста- новка — 1 час. 2 Однажды в нашей системе был поврежден файл, содержащий таблицу клавиш, и поскольку система Red Hat загружала этот файл даже в однопользовательском режиме, переход в этот ре- жим не позволял решить проблему. Передача параметра init=/bin/sh оказалась единственным безопасным способом загрузить систему и исправить ошибку. Этот прием эффективен и в других
Глава 3. Запуск и останов системы 135 Сценарии запуска в системах SUSE Сценарии запуска систем SUSE подобны сценариям Red Hat, по крайней ме- 6"’’ ре, по части общей организации. Эти сценарии не только четко организова- ны, но надежны и хорошо документированы. Стоит сказать спасибо разработ- чикам, которые отвечают за эту часть операционной системы. Как и в системе Red Hat, на каждом уровне выполнения демон init вызывает сце- нарий /etc/rc. d/rc, передавая ему номер уровня в качестве аргумента. Сценарии дан- ного пакета хранятся в каталоге /etc/init.d, а их файлы конфигурации — в каталоге / etc/sysconf ig. Прекрасное краткое описание процесса запуска системы SUSE можно найти в файле /etc/init.d/README. Хотя файлы конфигурации запуска как системы SUSE, так и Red Hat собраны в ка- талоге /etc/sysconf ig, конкретные файлы внутри этого каталога в значительной мере различны. (В частности, в целом файлы SUSE сопровождаются достаточно подробными комментариями.) Необходимые параметры вызываются посредством установки пере- менных среды интерпретатора, к которым затем обращаются сценарии, хранящиеся в каталоге /etc/init.d. Некоторые подсистемы требуют более подробного конфигу- рирования. Такие системы, нуждающиеся в нескольких файлах конфигурации, имеют приватные подкаталоги вроде sysconfig/network. Файл windowmanager — типичный пример файла, хранящегося в каталоге sysconfig. # # Path: Desktop/Window manager # # Type: string(gnome,startkde,startkde3,startxfce4,twm) # # Default: kde # # Config: profiles,kde,susewm # Здесь можно установить стандартный оконный менеджер (kde, fvwm, ...) # Эти изменения требуют перерегистрации DE F AULT_WM="gnome” # # Type: yesno # # Default: yes # инсталляция расширения SuSE для новых пользователей # (тема и дополнительные функции) INSTALL_DESKTOP_EXTENSIONS=,’yes’' # # Path: Desktop # # Description: стандартный вид курсора мыши # # Type: string # # Default: # Название вида курсора мыши для системы XII. Возможные изображения # можно найти в каталоге /usr/share/icons/ X_MOUSE_CURSOR=" DMZ" KDE_USE_IPV6="ye s"
136 Часть I. Основы администрирования Каждой переменной предшествует информация о конфигурации, считываемая утилитой YaST3, и подробное описание назначения переменной. Например, в файле windowmanager переменная DEFAULT_WM определяет диспетчер окна рабочего стола, используемый системой X. Пакет SUSE содержит также команду chkconf ig, которая позволяет управлять сце- нариями запуска системы. Она коренным образом отличается от версии, предоставляе- мой системой Red Hat, но также является эффективным средством управления сцена- риями. Сценарии запуска Ubuntu и демон Upstart ©Начиная с выпуска “Feisty Fawn” в начале 2007 года, в системах Ubuntu тради- ционный демон init был заменен службой начальной загрузки на основе со- бытий Upstart, которая используется и некоторыми другими дистрибутивами Linux. Служба Upstart обрабатывает переходы из одного состояния системы в другое (например, при изменении состава оборудования) более элегантно, чем это делает демон init. Кроме того, Upstart значительно сокращает время загрузки. Служба Upstart организует запуск и останов других служб и задач в ответ на такие события системы, как добавление устройства или отключение сетевого диска. Из сооб- ражений совместимости служба Upstart также эмулирует традиционные уровни выпол- нения демона init. Но сценарии запуска и останова обрабатываются несколько не так, как при использовании демона init. Демон Upstart использует файлы определения заданий из каталога /etc/event.d (а не файл inittab). Задание в концептуальном плане подобно сценарию загрузки, т.е. оно выполняет некоторую последовательность команд, а затем возвращает управление демону Upstart. Коллекция заданий в системе Ubuntu выглядит так. ubuntu$ Is /etc/event.d control-alt-delete last-good-boot logd rcO rcl rc2 rc3 rc4 rc5 rc6 rc-default rcS rcS-sulogin sulogin ttyl tty2 tty3 tty4 tty5 tty6 Co временем все больше сценариев загрузки будут преобразованы в Upstart-задания, а пока для загрузки системы демон Upstart использует сценарии эмуляции уровней вы- полнения. Например, сценарий гс2 (в виде файла /etc/rc2 .d/rc) выполняет все сце- нарии запуска для уровня 2. Из-за необходимости поддержки этой совместимости Ubuntu-администраторы долж- ны использовать Ubuntu-команду update-rc. d для обслуживания ссылок на сценарии запуска в рамках rc-каталогов. Вот как выглядит синтаксис этой команды. update-rc.d служба { start | stop } последовательность уровней . Команда update-rc.d принимает в качестве аргументов порядковый номер (имеет- ся в виду порядок выполнения сценариев загрузки) и нужные уровни выполнения. Для обозначения конца списка уровней используется символ точки. Службы, которые при смене уровня стартуют позже, должны останавливаться рань- ше при выходе системы с данного уровня. Например, если сервер печати CUPS во время загрузки запускается с порядковым значением 80, он должен остановиться приблизи- 3 YaST — специализированная утилита графической конфигурации SUSE, которая управляет многими аспектами этой системы.
Глава 3. Запуск и останов системы 137 тельно с номером 20, т.е. поближе к началу процесса останова. Команда update-rc.d, добавляющая соответствующие ссылки, должна иметь такой вид. ubuntu$ sudo update-rc.d cups start 80 2 3 4 5 . stop 20 S 1 6 . Adding system startup for /etc/init.d/cups ... /etc/rcl.d/K20cups -> ../init.d/cups /etc/гсб.d/K20cups -> ../init.d/cups /etc/rcS.d/K20cups -> ../init.d/cups /etc/rc2.d/S80cups -> ../init.d/cups /etc/гсЗ.d/S80cups -> ../init.d/cups /etc/rc4.d/S80cups -> ../init.d/cups /etc/rc5.d/S80cups -> ../init.d/cups Эта команда добавляет “стартовые” экземпляры сценариев с порядковым номе- ром 80 на уровнях выполнения 2—5, а также — “финишные” экземпляры с порядковым номером 20 на уровнях S, 1 и 6. Устанавливаемый по умолчанию уровень управляется двумя telinit-строками в файле /etc/event. d/rc-default. Изменить уровень выполнения можно, отредак- тиров файл rc-default в любом текстовом редакторе. Демон Upstart также управляет логинами на терминалах, используя задания с tty*- именами. Сценарии запуска в системах HP-UX В системах HP-UX сценарии запуска хранятся в каталоге /sbin/init .d. Каталоги уровней выполнения также хранятся в каталоге /sbin. Файлы кон- фигурации, связанные со сценариями запуска, обычно “прописаны” в ката- логе /etc/rc. conf ig. d. Их имена соответствуют именам сценариев запуска, хранимых в каталоге /sbin/init.d. Например, сценарий /sbin/init.d/ SnmpMaster получает информацию о конфигурации системы из файла /etc/ rc. config. d/SnmpMaster, а реально вызывается демоном init посредством ссылок /sbin/rc2 .d/S560SnmpMaster и /sbin/rcl .d/K440SnmpMaster. Система HP-UX сохраняет результаты выполнения сценариев запуска в файле /etc/ rc. log. В случае неудачного завершения одного из сценариев запуска просмотрите со- держимое файла /etc/rc. log, чтобы узнать, содержит ли он какие-либо релевантные сообщения об ошибках или подсказки относительно источника проблемы. Это сохране- ние результатов выполнения сценария запуска — самая полезная и замечательная функ- ция, которую, к тому же, просто реализовать. Удивительно, что другие разработчики си- стем не ухватились за эту идею. Файлы конфигурации, хранимые в каталоге /etc/rc.config.d, местами могут вво- дить в заблуждение, и это притом, что они в целом снабжены неплохими комментария- ми. Назначение некоторых чаще всего модифицируемых файлов описано в табл. 3.6. Для большинства этих файлов вполне подходят стандартные установки. Наиболее часто вам придется работать с такими файлами, как netconf, netdaemons и, возможно, nddconf. Таблица 3.6. Конфигурационные файлы HP-UX из каталога /etc/rc. config. d______ Jfefoibi Назначение____________ SnmpMaster Включает или отключает поддержку протокола SNMP Другие параметры, связанные с протоколом SNMP _____
138 Часть I. Основы администрирования Окончание табл. 3.6 Файлы acct auditing cde clean* hpetherconf Ip mailservs Включает или отключает подсистему учета процессов; см. acct (1М) Управляет работой подсистемы аудита; см. audsys и audevent Содержит настройки CDE (Common Desktop Environment — Единая настольная среда) Управляет операциями очистки, выполняемыми на этапе загрузки Конфигурирует Ethernet-интерфейсы; см. lanadmin Включает или отключает подсистему буферизации печати Запускает утилиту sendmail или задает почтовый сервер nameservs nddconf netconf netdaemons nettl nfsconf sshd Конфигурирует или запускает демон службы имен Задает параметры ядра, устанавливаемые на этапе загрузки с помощью демона ndd Задает параметры конфигурации сети (1 P-адрес и т.п.) Указывает на то, какие сетевые демоны следует запустить Конфигурирует подсистемы сетевой трассировки и регистрации3 Задает параметры NFS (Network File System — Сетевая файловая система) Конфигурирует параметры демона ssh vt Запускает демон vtdaemon; зависит от ptydaemon xfs Включает и отключает сервис шрифтов X Windows аСм. nettle(1М), nettlconf (1М) и nettlgen.conf (4) Запуск систем AIX еВ системах AIX используется более “прямолинейный” подход (по сравнению с другими описываемыми здесь системами) к процессу загрузки. Во время за- пуска система AIX выполняет сценарий /sbin/rc.boot, который написан на . языке, интерпретируемом командной оболочкой ksh. Сценарий rc.boot (его код отличается скудными комментариями) выполняется в три этапа: • инициализация системного оборудования; • монтирование системных файлов; • выполнение демона /etc/init, который обрабатывает записи файла /etc/ \ inittab. Система AIX в большей степени полагается на содержимое файла /etc/inittab, чем другие члены семейства UNIX-подобных систем. Демон init читает по очереди строки файла inittab и выполняет их. В некоторых случаях файл inittab запуска- ет демоны напрямую. Например, при выполнении следующей строки запускается или перезапускается демон cron на уровнях выполнения 2-9. cron:23456789:respawn:/usr/sbin/cron Другие строки файла inittab содержат последовательность команд. Например, bsh- сценарий /etc/rc. tcpip запускает на выполнение сетевые демоны. rctcpip-.23456789: wait: /etc/rc. tcpip > /dev/console 2>&1 # Start TCP/IP daemons
Глава 3. Запуск и останов системы 139 Здесь результат выполнения сценария rc. tcpip передается системной консоли. Демон init ожидает завершения этого сценария, а уж потом переходит к обработке сле- дующей строки файла. Л Для управления файлом inittab в системе AIX предусмотрены четыре простые ко- манды: mkitab, chi tab, Isitab и rmitab. Эти команды позволяют добавлять записи в файл, изменять их, выводить в виде списка и удалять из файла. Мы не понимаем, в чем состоит их преимущество, и предпочитаем редактировать файл inittab с помощью какого-нибудь текстового редактора (например, vi). 3.6. Загрузка систем SOLARIS С помощью механизма управления службами SMF (Service Management Facility) компания Sun модернизировала процесс загрузки для систем Solaris 10 и OpenSolaris. Механизм SMF обеспечивает комплексный и принципиально новый подход к управле- нию службами в системах UNIX. Его уникальность состоит в надстройке нового логиче- ского уровня над службами, который управляет зависимостями между ними и автомати- чески обрабатывает ошибки в данных конфигурации и программные сбои. Механизм SMF в значительной степени изменяет процедуру загрузки систе- мы. Традиционная схема работы демона init и его rc-сценариев уходит в прошлое. Разработчики Sun заявляют, что современные приложения и их взаимозависимости ста- ли слишком сложными для стандартной схемы управления ими. И они отчасти правы. С другой стороны, стандартная архитектура гораздо проще, и мы даже диву даемся, как Linux и другим популярным операционным системам удавалось работать при старой ор- ганизации. Прежде чем рассматривать процесс загрузки системы, опишем в общих чертах меха- низм SMF. Механизм управления службами в системе Solaris Sun определяет службу как “средство предоставления приложениям некоторого спи- ска возможностей и других служб, локальных и удаленных”. С нашей точки зрения, служба — это аналог демона: веб-сервер, системный регистратор syslogd или даже init. Любая служба в системе может быть представлена несколькими экземплярами. Например, вы могли бы запустить на выполнение несколько почтовых серверов с раз- личными конфигурационными данными и IP-адресами. Кроме того, службу можно определить как коллекцию других служб. Это свойство позволяет SMF взять на себя роль традиционных уровней выполнения демона init. Каждый экземпляр службы уникальным образом определяется FMRI-идентифи- катором (fault management resource zdentifier — идентификатор управляемого ресурса в системе управления сбоями). Например, следующие эквивалентные FMRI-иденти- фикаторы ссылаются на службу ssh. svc:/network/ssh:default network/ssh:default Служба ssh принадлежит категории network, и данный конкретный FMRI-иден- тиФикатор описывает стандартный экземпляр. В SMF определено несколько кате- горий, например application, device, network и system. Специальная категория mi lestone инкапсулирует концепцию уровней выполнения.
140 Часть I. Основы администрирования Экземпляр службы в каждый момент времени может находиться в одном из воз- можных семи состояний. Узнать состояние службы можно с помощью команды svcs. Чтобы получить полный список служб, определенных в системе, используйте команду svcs -а. Если опустить флаг -а, вы увидите только те службы, которые выполняются в данный момент. Команду svcs можно использовать и для отдельно взятой службы. Например, следующая команда проверяет состояние службы ssh. solaris$ svcs -1 svc:/network/ssh:default fmri svc:/network/ssh:default name SSH server enabled true state online. next_state none state_time Mon Jul 13 15:56:19 2009 logfile /var/svc/log/network-ssh:default.log restarter svc:/system/svc/restarter:default contract id 65 dependency dependency dependency dependency dependency dependency dependency require_all/none svc:/system/filesystem/local (online) optional_all/none svc:/system/filesystem/autofs (online) require_all/none svc:/network/loopback (online) require_all/none svc:/network/physical (online) require_all/none svc:/system/cryptosvc (online) require_all/none svc:/system/utmp (online) require_all/restart file://localhost/etc/ssh/sshd_config (online) В этой командной строке используется полный FMRI-идентификатор (в отличие от сокращенного), но поскольку существует только один экземпляр этой службы, можно было бы ограничиться более лаконичной командой svcs -1 ssh. Состояние службы может принимать одно из следующих значений: • online — запуск разрешен, экземпляр службы успешно работает; • disabled — запуск запрещен; экземпляр службы не запущен; • degraded — запуск разрешен, но работа происходит с ограниченной функцио- нальностью; • legacy run — служба работает; некоторые унаследованные (от предыдущих вер- сий системы) службы не подлежат управлению через SMF, однако их работу мож- но наблюдать стандартными для SMF средствами; это состояние возможно только для унаследованных служб; • uninitialized — в этом состоянии находятся все службы до того, как их конфи- гурация будет считана из репозитория; • maintenance — экземпляр службы аварийно завершился и не может быть запу- щен заново без вмешательства администратора; • offline — запуск разрешен, но экземпляр службы еще не запущен или нет воз- можности его запустить из-за ожидания “неудовлетворенной зависимости” или по другой причине. В дополнение к текущему состоянию службы, команда svcs -1 позволяет узнать ме- стоположение журнала регистрации службы, ее зависимости и другие важные данные. С помощью зависимостей описываются взаимосвязи (различной сложности) между службами. Это средство, по сути, заменяет систему пронумерованных сценариев запу- ска, используемую традиционным демоном init, в котором сценарий с префиксом S20 должен выполняться раньше сценария с префиксом S90.
Глава 3. Запуск и останов системы 141 Из приведенного выше примера видно, что служба SSH использует элементы локаль- ных файловых систем, сетевые интерфейсы, службы cryptosvc и utmp, а также файл sshd_config. Средство автоматического монтирования файловых систем autofs от- мечено как имеющее необязательную зависимость. Это означает, что служба SSH будет выполняться в случае, если автомонтировщик не работает (по намерению администра- тора) или если он нормально работает. Команда svcadm изменяет состояние службы. Чтобы запретить запуск сервера SSH (не пытайтесь делать это удаленно!), используйте такую команду. solaris$ sudo svcadm disable ssh В этом примере используется сокращенный FMRI-идентификатор для сервера SSH, так как он уникальный. Такой запрет является устойчивым изменением; для временного же запрещения запуска службы SSH используйте команду svcsadm -t. В системе SMF службы конфигурируются на основе XML-файлов, именуемых ма- нифестами и профилями. Манифест содержит полное описание всех свойств службы (зависимостей и инструкций для ее запуска и останова). Файлы манифестов хранятся в каталоге /var/svc/manifest. Каждый экземпляр службы имеет собственный файл манифеста. Строки exec_method в файле манифеста обычно указывают на сценарии, которые запускают или останавливают службы, т.е. во многом подобно тому, как используются сценарии в системе init.d. Например, процесс запуска для демона SSH определяется в файле /var/svc/manifest/ssh.xml следующим образом. <exec_method type=’method' name='start’ exec='/lib/svc/method/sshd start' timeout_seconds=’60’/> Сценарий /lib/svc/method/sshd, на который здесь содержится ссылка, является sh-сценарием, запускающим службу sshd. Все это подозрительно напоминает сцена- рий, который когда-то хранился в каталоге /etc/rc.d, — чем больше мы изменяем жизнь, тем больше она остается прежней. Файл профиля службы определяет, разрешено ли запускать данный экземпляр или запрещено. Профили хранятся в каталоге /var/svc/profile. Постоянные данные о конфигурации для служб в действительности хранятся в виде файла SQLite-базы данных /etc/svc/repository .db. Таким образом, вам необяза- тельно непосредственно модифицировать содержимое XML-файлов. Вместо этого вы можете управлять манифестами и профилями с помощью команды svccfg. Для управ- ления службами, находящимися под контролем демона inetd, используйте команду ^netadm. Для получения дополнительной информации о командах svccfg, inetadm и svc. conf igd обратитесь к соответствующим тап-сТрДНицам. Одной из самых интересных особенностей механизма SMF является использование так называемых “пускателей” (restarters), которые составляют часть разрекламирован- ной в Solaris технологии “прогнозируемого самовосстановления”. В результате анализа тщательно определенной системы зависимостей механизм SMF может предположитель- Но определить причину сбоя службы и при необходимости перезапустить ее. Причиной отказа службы может служить ошибка в программном обеспечении, сбой в работе оборудования, проблема с зависимым элементом или даже ошибка администратора, оозначенный в SMF процесс “пускателей”, тесно связанный с ядром, автоматически выполняет действия, необходимые для восстановления.
142 Часть I. Основы администрирования Прекрасный новый мир: загрузка с помощью механизма SMF Начальная стадия загрузки в системе Solaris 10 (или более поздней версии) подобна обычному процессу самозагрузки. Загрузка в архитектуре SPARC несколько отличает- ся от загрузки в Intel-системах, но общий принцип состоит в том, что низкоуровневая встроенная программа (PROM для SPARC, BIOS для Intel) считывает загрузочную за- пись, которая загружает ядро операционной системы. Ядро просматривает каталог /etc/system в поиске загружаемых модулей ядра, за- тем активизирует демон init, который немедленно запускает процесс svc.startd. Этот процесс является главным SMF-пускателем, который отвечает за процессы запуска в порядке следования зависимостей, определенных в репозитории конфигурации SMF. К сожалению, система уровней выполнения и init-сценарии из предыдущих вер- сий Solaris не совсем “похоронены”. Некоторые службы (например, те, которые в ре- зультатах выполнения команды svcs -а демонстрируют состояние legacy-run) по- прежнему опираются на сценарии, хранимые в каталоге /etc/rc.d. Это значит, что коллизия между SMF-службами и традиционными уровнями выполнения оставила мас- су “осколков”. Для того чтобы не “пораниться” об их острые края, следует иметь в виду следующие моменты. • Службы в состоянии legacy_run были запущены из сценария гс. • Solaris определяет восемь уровней выполнения. Подробнее см. man-страницу для демона init. • Чтобы изменить уровни выполнения, используйте команду init п, где п — но- вый уровень выполнения. Не пытайтесь использовать механизм SMF для изме- нения служб, что, по мнению разработчиков Sun, “может вызвать неожиданное поведение”. • Демон init управляется с помощью содержимого файла /etc/inittab (практи- чески как в Linux). 3.7. Перезагрузка и останов системы Традиционные UNIX- и Linux-системы были очень требовательны в отношении про- цедуры выключения. Современные системы более терпимы (особенно если речь идет о высоконадежной файловой системе), но все же лучше корректно завершать работу, если это возможно. Неправильное выключение компьютера может привести к появлению трудно обнаруживаемых, неочевидных ошибок, а иногда и к полному краху системы. Базы данных (которые не прекращают свою работу корректно) “славятся” проблемами разрушения данных и их целостности.4 Перезагрузка системы на персональном компьютере — средство решения почти всех проблем. Проблемы, возникающие в Linux, как правило, скрытые и сложные, поэтому перезагрузка дает ожидаемый результат гораздо реже, чем в других системах. Если вы модифицируете один из сценариев запуска системы или вносите в систему существенные изменения, то нужно перезагрузиться хотя бы для того, чтобы проверить, успешно ли функционирует система после вашего вмешательства. Если какая-либо про- 4 Теоретически базы данных должны быть особенно устойчивыми к такой форме разрушения, но наш опыт свидетельствует об обратном.
Глава 3. Запуск и останов системы 143 блема не проявится в течение нескольких ближайших недель, впоследствии вы вряд ли вспомните подробности последних изменений. Команда shutdown: корректный способ останова системы Команда shutdown — самый безопасный и корректный способ остановить или пере- загрузить систему либо вернуться в однопользовательский режим. Она переносит нас во времена использования систем, работающих в режиме разделения времени, поэтому такой подход порой кажется анахроничным на настольных компьютерах. К сожалению, почти все изготовители систем решили приложить “свою руку” к ар- гументам команды shutdown. Мы рассмотрим эту команду в общих чертах, а затем об- судим ее синтаксис и аргументы, используемые на каждой платформе. Можно дать команде shutdown указание делать паузу перед остановом системы. Во время ожидания команда посылает зарегистрированным пользователям через постепен- но укорачивающиеся промежутки времени сообщения, предупреждая о приближаю- щемся событии. По умолчанию в сообщениях говорится о том, что система заканчивает работу, и указывается время до момента останова. При желании администратор может добавить собственное короткое сообщение, в котором поясняется, почему система оста- навливается и сколько примерно времени придется подождать, прежде чем снова можно будет войти в систему. После выполнения команды shutdown пользователи будут ли- шены возможности входа в систему, но они будут видеть сообщение, предусмотренное администратором. С помощью команды shutdown (в большинстве ее версий) можно указать, что должна сделать система после выполнения команды: остановиться, перейти в однопользователь- ский режим или перезагрузиться. Можно также задать, должна ли после перезагрузки выполняться принудительная проверка дисков с помощью команды f sck. В современ- ных системах с объемными дисками полное выполнение команды f sck может занять много времени; и эту проверку можно пропустить. (Большинство систем автоматически пропускает эту проверку, если файловые системы были корректно демонтированы.) В табл. 3.7 приведены аргументы команды shutdown в разных системах. Таблица 3.7. Множество “ликов” команды shutdown Система Путь Linux /shin/shutdown time -r -h - -f6 Solaris /usr/shin/shutdown -gsecs -i6 -iO -iS - HP-UX /etc/shutdown secs -r -h — AIX /shin/shutdown +time -r -h -m - * R — перезагрузка, Н — останов, S — вход в однопользовательский режим, F — пропуск команды f sck. Системы Red Hat и SUSE, но не Ubuntu. Например, следующая Linux-команда напоминает пользователям о запланированной процедуре сервисного обслуживания и отключает систему в 9:30 утра. $ sudo shutdown -h 09:30 "Going down for scheduled maintenance. Expected downtime is 1 hour." Можно также задать относительное время отключения. Например, приведенная ниже команда запустит процесс выключения через 15 минут: $ sudo shutdown -h +15 "Going down for emergency disk repair."
144 Часть I. Основы администрирования Команды halt и reboot: более простой способ останова Команда halt выполняет все основные операции, необходимые для останова систе- мы. Обычно она вызывается командой shutdown -h, но может применяться и сама по себе. Команда регистрирует в журнальном файле факт останова, уничтожает несуще- ственные процессы, выполняет системный вызов sync, дожидается завершения опера- ций записи на диск, а затем прекращает работу ядра. При наличии опции -п системный вызов sync подавляется. Команда halt -п ис- пользуется после восстановления корневого раздела командой f sck, чтобы ядро не мог- ло затереть исправления старыми версиями раздела, хранящимися в кеше. Команда reboot почти идентична команде halt. Разница лишь в том, что система перезагружается, а не останавливается. Режим перезагрузки вызывается также командой shutdown -г. 3.8. Упражнения 3.1. Можно ли UNIX- или Linux-системы выключать нажатием кнопки питания на корпусе компьютера? А что скажете насчет выключения вилки компьютера из ро- зетки на стене? Поясните свой ответ. Постарайтесь определить вероятность полу- чения отрицательного ответа на поставленные вопросы с помощью Интернета. 3.2. Используйте опции командной строки загрузчика GRUB для загрузки ядра, ин- формация о котором отсутствует в файле grub. conf. 3.3. Ж Объясните концепцию уровней выполнения. Перечислите уровни выполнения, существующие в одной из ваших локальных систем, и кратко опишите каждый из них. Чем отличаются концепции уровней выполнения в Ubuntu и других дистри- бутивах Linux? 3.4. ★ Напишите сценарий, предназначенный для запуска некоего сетевого демона /usr/local/sbin/foo. Покажите, как организовать автоматический запуск сце- нария на этапе начальной загрузки системы. 3.5. ★★★ Если система находится на уровне выполнения 3 и вводится команда telinit 1, какие действия предпримет демон init? Каким будет конечный ре- зультат? 3.6. Нарисуйте схему, показывающую очередность запуска демонов в вашей си- стеме. 3.7. Опишите последовательность действий, необходимых для инсталляции на одном компьютере операционных систем Linux и Windows. Используйте програм- му GRUB.
Глава Управление доступом: сила привилегий Управление доступом к ресурсам относится к сфере, которая активно исследуется в наши дни и долгое время была одной из самых проблемных в проектировании опе- рационных систем. Для отдельных пользователей операционные системы определяют учетные записи, которые позволяют выполнять множество операций: редактирование текстовых файлов, регистрация на удаленных компьютерах, установка имени главно- го узла, инсталляция новых программ и т.д. Систему управления доступом можно рас- сматривать как черный ящик, который (на входе) принимает потенциальные действия (пары “пользователь/операция”) и выдает (на выходе) решения в зависимости от допу- стимости каждого действия. В системах UNIX и Linux не существует единого черного ящика, который реализу- ет управление доступом. В действительности здесь можно говорить о целом хранилище черных ящиков — и это хранилище “съедает” память. В данной главе мы сначала вер- немся к истокам UNIX (чтобы понять, как сложилась нынешняя ситуация с управлени- ем доступом), а затем рассмотрим современные системы управления доступом в UNIX и Linux (как в теории, так и на практике), после чего остановимся на инструментах, ко- торые помогают сделать администрирование сферы управления доступом (и особенно в части, связанной с привилегиями всемогущего суперпользователя) относительно без- болезненным. О том, как предотвратить несанкционированный доступ на уровне суперпользовате- ля, Рассказывается в главе 22. В главе 32 описываются административные аспекты этого Процесса.
146 Часть I. Основы администрирования 4.1. Традиционные методы управления доступом в системах UNIX Даже в первых и самых простых версиях UNIX никогда не было единого “центра” управления доступом. Тем не менее существовали общие правила, которые оказывали влияние на проектирование систем. • Объекты (например, файлы и процессы) имеют владельцев. Владельцы обладают обширным (но необязательно неограниченным) контролем над своими объектами. • Вы являетесь владельцами новых объектов, создаваемых вами. • Пользователь root с особыми правами, известный как суперпользователь, может действовать как владелец любого объекта в системе. • Только суперпользователь может выполнять административные операции особого значения. В системах UNIX единого черного ящика, управляющего доступом, не существует, поскольку код, который принимает решения в этой области, рассредоточен по всей си- стеме. Одни системные вызовы (например, settimeofday) ограничены пользователем root (при выполнении таких системных вызовов просто проверяется “личность” теку- щего пользователя, и, если он окажется не суперпользователем, операция отвергается). Другие системные вызовы (например, kill) реализуют различные вычисления, которые требуют как соответствия владельцу, так и обеспечения специальных условий для супер- пользователя. Наконец, файловая система реализует собственную систему управления доступом, причем эта система сложнее любой другой, реализованной в ядре. Например, только файловая система использует принцип UNIX-групп для управления доступом. Ш Подробнее о файлах устройств рассказывается в разделе 6.4. Усложнение ситуации привело к переплетению ядра и файловой системы. Например, вы управляете большинством устройств и передаете им информацию посредством фай- лов, которые представляют их в каталоге /dev. Поскольку эти файлы устройств явля- ются объектами файловой системы, они используются и в ее семантике управления до- ступом. Управление доступом в файловой системе Каждый файл в традиционной модели UNIX-подобных систем принадлежит владель- цу и группе, иногда именуемой “групповым владельцем”. Владелец файла имеет особую привилегию, недоступную другим пользователям системы: ему разрешено менять права доступа к файлу. В частности, владелец может задать права доступа так, что никто, кроме него, не сможет обращаться к файлу1. Мы еще вернемся к теме прав доступа в главе 6. Ш Подробнее о группах написано в разделе 7.1. Владельцем файла всегда является один человек, тогда как в группу владельцев могут входить несколько пользователей. По традиции информация о группах хранилась в фай- ле /etc/group, но теперь ее чаще хранят на сетевом сервере NIS или LDAP. Подробнее эти вопросы рассматриваются в главе 19. 1 В действительности права доступа можно установить такими строгими, что даже владелец файла не сможет им и воспользоваться.
Глава 4. Управление доступом: сила привилегий 147 Владелец файла должен определить, какие операции могут выполнять над файлом члены группы. Такая схема допускает совместное использование файлов членами одной группы. Например, мы применяем группу для управления доступом к файлам исходного кода веб-сайта www. admin. com Узнать идентификаторы владельцев файла можно с помощью команды Is -1 имя файла. Например: aix$ Is -1 /home/garth/todo - rw----- 1 garth staff 1258 Jun 4 18:15 /home/garth/todo Файлом владеет пользователь garth, а группа, которой он принадлежит, называется staff. Буквы и дефисы в первом столбце означают права доступа к файлу (подробнее см. раздел 6.5). CQ Подробнее о файле /etc/passwd можно прочитать в разделе 7.1, а о файле /etc/ group — в разделе 7.3. Ядро и файловая система отслеживают не текстовые имена владельцев и групп, а их идентификаторы. В самом общем случае идентификаторы пользователей (сокра- щенно UID — User ID) и соответствующие им имена хранятся в файле /etc/passwd, а идентификаторы и названия групп (GID — group ID) находятся в файле /etc/group. Текстовые эквиваленты идентификаторов UID и GID определяются исключительно для удобства пользователей. Для того чтобы команда вроде 1s могла вывести информацию о владельце файла в удобочитаемом виде, она должна просмотреть базу данных иденти- фикаторов и найти в ней нужные имена. Владение процессом Владелец может посылать процессу сигналы (описываются в разделе 5.3), а также по- нижать его приоритет. С процессами связано несколько идентификаторов: реальный, текущий и сохраненный идентификатор пользователя; реальный, текущий и сохранен- ный идентификатор группы, а в системе Linux — “идентификатор пользователя файло- вой системы”, который используется только для определения прав доступа к файлам. Вообще говоря, реальные номера применяются для учета использования системных ре- сурсов, а текущие — для указания прав доступа. В большинстве случаев реальные и те- кущие идентификаторы совпадают. Сохраненные идентификаторы не оказывают никакого непосредственного влияния. Они позволяют программам “приберегать” неактивные идентификаторы для последую- щего использования, тем самым способствуя расчетливому применению расширенных полномочий. Вообще говоря, идентификатор пользователя файловой системы — это особенность реализации сетевой файловой системы (Network File System — NFS), и обычно он совпадает с текущим идентификатором пользователя. Ш Подробнее о системе NFS написано в разделе 18.1. Учетная запись суперпользователя Учетная запись root в UNIX принадлежит “всесильному” пользователю-админи- стратору, известному как суперпользователь, хотя его настоящее имя — “root”. Определяющей характеристикой учетной записи суперпользователя является значе- ние UID, равное нулю. Ничто не запрещает менять имя этой учетной записи или созда-
148 Часть I. Основы администрирования вать другую запись с нулевым идентификатором, но такие действия ни к чему хороше- му не приведут. Их следствием будет возникновение новых брешей в системе защиты, а также растерянность и гнев других администраторов, которым придется разбираться с особенностями конфигурирования такой системы. Традиционная система UNIX позволяет суперпользователю (т.е. всякому процессу, текущий идентификатор пользователя которого равен нулю) выполнять над файлом или процессом любую допустимую операцию2. Вот примеры операций, доступных лишь суперпользователю: • изменение корневого каталога процесса с помощью команды chroot; • создание файлов устройств; • установка системных часов; • увеличение лимитов использования ресурсов и повышение приоритетов процессов; • задание сетевого имени компьютера; • конфигурирование сетевых интерфейсов; • открытие привилегированных сетевых портов (номера которых меньше 1024); • останов системы. Процессы суперпользователя обладают способностью изменять свои идентифи- каторы. Один из таких процессов — программа login и ее графические эквиваленты, которые отображают на экране приглашение ввести пароль при входе в систему. Если введенные пароль и имя пользователя правильны, программа заменяет свои иденти- фикаторы соответствующими идентификаторами указанного пользователя и запускает интерпретатор команд. После того как процесс суперпользователя, сменив владельца, станет обычным пользовательским процессом, восстановить свое предыдущее привиле- гированное состояние он уже не сможет. Использование битов “setuid" и "setgid” Традиционная система управления доступом в UNIX дополнена системой смены полномочий, которая реализуется ядром в сотрудничестве с файловой системой. Более детально эта система описана в разделе 6.5, но, если кратко, то эта система позволяет выполнять специально подготовленные файлы с использованием привилегий более вы- сокого уровня (обычно это привилегии суперпользователя). Этот механизм разрешает разработчикам и администраторам создавать условия для непривилегированных пользо- вателей, при которых они могут выполнять привилегированные операции. Дело в том, что существует два специальных бита, устанавливаемых в маске прав доступа к файлу: “setuid” (Set User ID — бит смены идентификатора пользователя) и “setgid” (Set Group ID — бит смены идентификатора группы). Если запускается испол- няемый файл, у которого установлен один из этих битов, то текущими идентификато- рами создаваемого процесса становятся идентификаторы владельца файла, а не иден- тификаторы пользователя, запустившего программу. Смена полномочий действительна только на время работы программы. Например, пользователи должны иметь возможность изменять свои пароли. Но по- скольку пароли хранятся в защищенном файле /etc/shadow, пользователям нужно использовать команду passwd с полномочиями setuid, чтобы “усилить” свои права 2 Следует подчеркнуть важность слова “допустимую”. Некоторые операции (например, запуск файла, для которого не установлен бит выполнения) запрещены даже суперпользователю.
Глава 4. Управление доступом: сила привилегий 149 доступа. Команда passwd проверяет, кто ее выполняет, и, в зависимости от результата, настраивает свое поведение соответствующим образом, поэтому обычные пользователи могут менять только собственные пароли, а суперпользователь — любые. (Это, между прочим, еще один пример “специального случая” в UNIX-системе управления досту- пом — правила “встроены” в код команды passwd.) 4.2. Современная организация управления доступом В предыдущем разделе были рассмотрены практически все основные принципы по- строения традиционной UNIX-модели. Несмотря на то что систему управления досту- пом можно описать буквально двумя страницами, она выдержала проверку временем благодаря своей простоте, предсказуемости и способности удовлетворять большинство требований, предъявляемых к управлению доступом на среднестатистическом узле. Все UNIX- и Linux-версии продолжают поддерживать эту модель, которая широко исполь- зуется в наши дни. И если не считать разделы нашей книги, в которых уделяется вни- мание некоторым специальным альтернативным вариантам, мы предполагаем, что вы используете именно традиционную модель. Тем не менее мы не можем не упомянуть очевидные недостатки этой модели. • С точки зрения безопасности, суперпользователь представляет единственную учет- ную запись, которая может являться причиной потенциального отказа системы. Если суперпользователь дискредитирует себя, может нарушиться целостность всей системы. Взломщик в этом случае может нанести системе колоссальный вред. • Единственный способ разделить специальные привилегии суперпользователя со- стоит в написании setuid-программ. К сожалению, как показывает непрекра- щающийся интернет-поток обновлений средств защиты систем, довольно трудно написать по-настоящему безопасное программное обеспечение. К тому же, вам не следует писать программы, назначение которых можно было бы выразить такими словами: “Хотелось бы, чтобы эти три пользователя могли выполнять задачи ре- зервирования на файловом сервере”. • Модель безопасности не является достаточно прочной для использования в сети. Ни один компьютер, к которому непривилегированный пользователь имеет фи- зический доступ, не может гарантировать, что он точно представляет принадлеж- ность выполняемых процессов. Кто может утверждать, что такой-то пользователь не переформатировал диск и не инсталлировал собственную копию Windows или Linux со своими UID? • Во многих средах с высокими требованиями к защите системы действуют согла- шения, которые просто не могут быть реализованы с использованием традицион- ных UNIX-систем безопасности. Например, согласно государственным стандартам США компьютерные системы должны запрещать привилегированным пользовате- лям (например, тем, кто относится к высшей категории допуска) публиковать до- кументы особой важности на более низком уровне безопасности. Традиционная же организация безопасности в UNIX зависит от доброй воли и профессиональ- ных навыков отдельных пользователей. • Поскольку многие правила, связанные с управлением доступа, встроены в код от- дельных команд и демонов, невозможно переопределить поведение системы, не модифицируя исходный код и не перекомпилируя программы. Но это реально не практикуется.
150 Часть I. Основы администрирования • Для отслеживания действий пользователей предусмотрена минимальная поддерж- ка. Вы можете легко узнать, к каким группам принадлежит тот или иной пользо- ватель, но вы не в состоянии точно определить, какие действия разрешены поль- зователю членством в этих группах. Из-за этих недостатков UNIX- и Linux-системы многократно претерпевали различ- ные изменения. Их цель — усовершенствовать различные аспекты подсистемы управ- ления доступом и сделать UNIX-системы более пригодными для сайтов с высокими требованиями к безопасности. Одни корректирующие технологии, такие как РАМ (под- робнее чуть ниже), в настоящее время имеют практически универсальную подцержку. Другие системные расширения можно назвать уникальными. Самые популярные из них рассмотрим в следующем разделе. Управление доступом на основе ролей Управление доступом на основе ролей (role-Z>ased access control — RBAC) — теорети- ческая модель, формализованная в 1992 г. Дэвидом Ферраильо (David Ferraiolo) и Риком Куном (Rick Kuhn). В основе этой модели лежит идея добавления уровня косвенности в механизм управления доступом. Вместо того чтобы назначать полномочия непосред- ственно пользователям, они назначаются промежуточным конструкциям, именуемым “ролями”, а роли, в свою очередь, назначаются пользователям. Для того чтобы принять решение по управлению доступом, специальная библиотека перечисляет роли текущего пользователя и узнает, имеет ли хотя бы одна из этих ролей соответствующие полномочия. Между ролями и UNIX-группами можно заметить некоторое сходство, и нет единого мнения насчет того, отличаются ли эти конструкции по сути. На практике роли оказы- ваются более полезными, чем группы, поскольку системы, в которых они реализованы, разрешают использовать их вне контекста файловой системы. Роли могут также иметь иерархические взаимоотношения друг с другом, что значительно упрощает администри- рование. Например, вы могли бы определить роль “старшего администратора”, который имеет все полномочия “администратора”, а также дополнительные полномочия X, Y и Z. Модель RBAC позволяет на практике реализовать управление большими коллекция- ми возможных полномочий. Большая часть усилий тратится на иерархическое опреде- ление роли, но это делается один раз за проект. Повседневное же администрирование пользователей в этом случае упрощается. Следовательно, системы, которые поддержи- вают модель RBAC, обычно пользуются ее преимуществами для “расщепления” могу- щества суперпользователя на множество различных фрагментов, которые могут назна- чаться пользователям по отдельности. В системах Solaris для реализации ролей используются группы (/etc/group), SOiariS авторизации (/etc/security/auth_attr), профили (/etc/security/prof_ attr), а также связывания между пользователями, авторизациями и профиля- ми (/etc/user_attr). Авторизации имеют такие имена, как Solaris. admin. dis king г, Solaris. admin .pa tchmgr и Solaris .admin, printer. Многие авторизации имеют также специальный уровень структуризации . read или .write. В файле auth_attr определено 158 авторизаций. Для управления ролями в Solaris предусмотрены такие команды, как roleadd, rolemod и гoledel. Со времени выхода сборки 99 OpenSolaris в мае 2008 года Solaris-система RBAC вела себя достаточно устойчиво и позволяла работать без учетной записи root.
Глава 4. Управление доступом: сила привилегий 151 133 В среде HP-UX для определения “мелкоструктурированных” root-привилегий также используются авторизации, которые затем назначаются ролям, связан- ным с отдельными пользователями и группами. Авторизациям даются имена вроде hpux. admin.process. kill, hpux. admin. network. config и hpux. admin.device.install. В файле /etc/rbac/auths определено 137 авто- ризаций. Для управления авторизациями используются команды roleadm, authadm, cmdprivadm, privrun и privedit. В системах AIX используются роли с такими именами: DomainAdmin, BackupRe store, AccountAdmin, Sys Con fig и SecPolicy. Авторизации здесь имеют примерно такой же уровень структуризации, как в Solaris или HP-UX. Вот, например, как звучат в среде AIX имена авторизаций: aix.device, aix. proc, aix. fs .manage.export и aix. system, config. cron. В AIX-инстру- менте SMIT (“правая рука” системного администратора) роли связываются с экранами результатов выполнения команд. Пользователи здесь могут “играть” до восьми ролей сразу. Примеры основанных на ролях AIX-команд: mkrole, chrole, rmrole, rolelist и swrole. SELinux: Linux-системы с улучшенной безопасностью Д Операционная система SELinux (как проект) был разработан Агентством на- циональной безопасности США (АНБ), но с конца 2000 года был передан раз- работчикам открытого кода. Система SELinux включена в состав ядра Linux (с версии 2.6) и поэтому в настоящее время доступна в большинстве дистри- бутивов (но часто в не совсем дееспособном состоянии). SELinux — это реализация системы принудительного управления доступом доступа (mandatory access control — МАС), в которой все привилегии назначаются администра- торами. В среде МАС пользователи не могут делегировать свои права и не могут устанав- ливать параметры контроля доступа на объекты, которыми они (пользователи) владеют. И поэтому такая операционная система подходит больше для узлов со специальными требованиями3. Систему SELinux можно также использовать для контроля доступа на основе ролей, хотя это не главная цель системы. Подробнее см. раздел 22.9. Возможности POSIX (Linux) Д Системы Linux — даже те, которые не используют SELinux-расширения — те- оретически позволяют распределять привилегии учетной записи суперпоИзй- вателя по “возможностям” в соответствии со стандартом POSIX. Кроме того, спецификации характеристик можно назначить исполняемым программам, а затем программы при выполнении будут запрашивать заданные характери- стики. По сути, это — форма выполнения setuid-команд с нижним уровнем риска. 3 Вот отзыв одного из технических рецензентов: “Это была не самоцель. В действительности средние узлы, на которых выполняется базовая служба DNS/web/email, лучше всего работают именно в среде SELinux. Если же вы решаете какие-то неординарные задачи, все может закон- читься очень печально, и вам придется отключить эту систему. В настоящее время SELinux ведет себя гораздо лучше. Но я все же ее отключаю...”.
152 Часть I. Основы администрирования По различным причинам, в том числе из-за проблем, присущих текущей реализации, эта функция оказалась не столь полезной или ценной для системных администраторов, как ожидалось вначале. Подробнее эти возможности рассмотрены в разделе 20.14. Подключаемые модули аутентификации Подключаемые модули аутентификации (Pluggable Authentication Modules — РАМ) образуют технологию аутентификации, а не технологию управления доступом. Другими словами, технология РАМ призвана искать ответ не на вопрос: “Имеет ли право поль- зователь X выполнить операцию Y?”, а на вопрос: “Как узнать, что это действительно пользователь X?” Технология РАМ — это важное звено в цепи управления доступом в большинстве систем. Раньше пароли пользователей проверялись с помощью содержимого файла /etc/ shadow (или его сетевого эквивалента) в момент регистрации, чтобы можно было уста- новить соответствующий UID-идентификатор для командной оболочки пользователя или оконной системы. В этом случае программы, выполняемые пользователем, вынуж- дены были принимать указанный UID на веру. В современном мире сетей, криптогра- фии и устройств биометрической идентификации нужна более гибкая и открытая систе- ма. Поэтому и появилась технология РАМ. Технология РАМ — это набор разделяемых библиотек, которые позволяют интегри- ровать различные низкоуровневые методы аутентификации. Администраторы указывают те методы аутентификации, которые (с их точки зрения) должна использовать система в соответствующих контекстах. Программы, которые собираются аутентифицировать пользователя, просто вызывают систему РАМ, а не реализуют собственные формы ау- тентификации. Система РАМ, в свою очередь, вызывает специальную библиотеку аутен- тификации, заданную системным администратором. Подробнее о системе РАМ можно прочитать в разделе 22.4. Сетевой протокол криптографической аутентификации Kerberos Подобно РАМ, протокол Kerberos призван решать проблемы аутентификации, а не управления доступом. (Он назван в честь трехголового пса, который защищал вход в цар- ство Аида, — Цербера, или Кербера.) Но если РАМ можно назвать структурной оболоч- кой аутентификации, то Kerberos — это конкретный метод аутентификации. Реализация Kerberos использует проверенный (сторонний) сервер для выполнения задач аутентификации в масштабах всей сети. Вместо самоаутентификации на своем компьютере вы предоставляете свои мандаты (билеты) Kerberos-службе, а она выдает вам криптографические мандаты, которые вы можете презентовать другим службам как под- тверждение вашей идентичности. Больше о протоколе Kerberos написано в разделе 22.10. Списки управления доступом Управление доступом к файловой системе — важнейшая часть систем UNIX и Linux, и поэтому ее совершенствование составляет первоочередную цель разработчиков этих систем. Особое внимание было уделено поддержке списков доступа к файлам и ката- логам (access control Zists — ACL) как обобщению традиционной модели привилегий пользователя/группы/“всех остальных”, устанавливаемых сразу для нескольких пользо- вателей и групп. Списки ACL являются частью реализации файловой системы, поэтому
Глава 4. Управление доступом: сила привилегий 153 их поддержку в явном виде должна обеспечивать используемая вами файловая система. К счастью, в настоящее время практически все файловые системы UNIX и Linux под- держивают ACL-списки в той или иной форме. Ш Подробнее об NFS написано в главе 18. Поддержка ACL-списков в общем случае реализуется в двух формах: в виде проекта стандарта POSIX, который (хоть и без формального подтверждения) получил широкое признание, и системы, стандартизированной протоколом NFSv4, который базируется на ACL-списках Microsoft Windows. Оба стандарта ACL более детально описаны в раз- деле 6.6. 4.3. Управление доступом в реальном мире Несмотря на наличие описанных выше превосходных возможностей операционных систем, в большинстве узлов для задач системного администрирования по-прежнему используется учетная запись суперпользователя. Многие жалобы на традиционную си- стему имеют реальную почву, но и альтернативным вариантам присущи серьезные про- блемы. Поэтому особое значение приобретают такие дополнительные программные ин- струменты, как sudo (подробнее чуть ниже), которые в некоторой степени позволяют преодолеть разрыв между критериями простоты использования и безопасности. Часто для принятия решений в особых обстоятельствах используются возможности POSIX или средства управления доступом на основе ролей (например, когда необхо- димо разрешить переустановку принтера или демона каждому, кто работает в конкрет- ном отделе), в то время как при решении каждодневных задач ваша административная команда продолжает полагаться на утилиту sudo и учетную запись суперпользователя. В некоторых случаях (например, если это оговорено в контракте) для узлов необходимо использовать такие мощные и “ударопрочные” системы, как SELinux. Поскольку доступ с правами суперпользователя является обязательным условием системного администрирования и центральной точкой для безопасности систем, очень важно правильно пользоваться правами и обязанностями учетной записи root. Пароль суперпользователя Если вы используете процедуры и инструменты, описанные в этой главе, вероят- но, будете удивлены, как в действительности используется пароль суперпользователя. В большинстве случаев администраторам не нужно знать его вообще. Тем не менее для учетной записи root пароль необходим. Он должен быть секрет- ным и в то же время запоминающимся, чтобы вы могли им воспользоваться (т.е. не забыть) даже через большие интервалы времени. Для “запоминания” паролей можно использовать какой-нибудь хранитель паролей или систему депонирования паролей (см. ниже в этой главе). Ш Подробнее о взломе паролей читайте в разделе 22.8. Самой важной характеристикой хорошего пароля является его длина. Пароль поль- зователя root должен состоять как минимум из восьми символов, так как даже семи- символьные пароли взламываются достаточно легко. В системах, где применяются па- роли DES (Data Encryption Standard — стандарт шифрования данных), задавать более Длинный пароль не имеет смысла, потому что обрабатываются только первые восемь
154 Часть I. Основы администрирования символов. В начале главы 7 рассказывается о том, как разрешить использование систем шифрования MD5 или Blowfish, которые позволяют паролям иметь большую длину. Теоретически наиболее безопасный пароль состоит из случайного набора букв, зна- ков препинания и цифр. Такой пароль, однако, тяжело запомнить и, как правило, неу- добно вводить, поэтому, если системный администратор записывает пароль на бумажке или вводит его слишком медленно, об оптимальном уровне безопасности системы гово- рить не приходится. Сегодня наиболее широкое распространение получил подход, заключающийся в вы- боре пароля по принципу “шокирующего абсурда”. Этот принцип был определен Грейди Уордом (Grady Ward) в ранней версии списка часто задаваемых вопросов (FAQ), посвя- щенного выбору идентификационной фразы по системе PGP (Pretty Good Privacy). Принцип “шокирующего абсурда”заключается в составлении короткой фразы (или пред- ложения), которая лишена смысла и в то же время вызывает шок у пользователя в дан- ной социальной среде. То есть она должна содержать совершенно неприличные или ра- систские высказывания либо состоять из абсолютно бессвязных выражений. Применять такой подход не предосудительно, поскольку подразумевается, что пароль никогда не станет известен людям, чьи чувства могут быть им оскорблены). Маловероятно, чтобы такой пароль был повторен кем-то еще, ведь он уникален по своей сути. При этом он легко запоминается, потому что имеет яркую эмоциональную окра- ску. Сдержанный пример «шокирующего абсурда» выглядит так: «Моллюски отгрызли мои гарцующие гениталии». Любой читатель без труда придумает гораздо более шоки- рующие фразы. В системах, которые поддерживают пароли произвольной длины, вы можете исполь- зовать в качестве пароля всю абсурдную фразу. Можно также преобразовать эту фразу в пароль, записав только вторые буквы каждого слова или применив какое-нибудь другое легко запоминающееся преобразование. Безопасность пароля значительно возрастет, если включить в него цифры, знаки препинания и прописные буквы. Если ваш узел включает сотни компьютеров, то нужно ли вам готовить сотни root- паролей? Это зависит от среды и толерантности к риску, но, скорее всего, нет. Практика показывает, что для компьютеров-клонов (например, настольных АРМ) вполне подой- дет один и тот же root-пароль. При этом серверам следует подбирать уникальные паро- ли. Все важные части сети и инфраструктура, обеспечивающая маршрутизацию, должны быть защищены по отдельности. Потрудитесь точно записать, какие компьютеры совместно используют root-пароль. Важно также иметь структурированный способ изменения root-паролей для таких ком- пьютеров. Небрежность в этом вопросе напрямую связана с большим риском наруше- ния безопасности и головной болью администраторов. Пароль суперпользователя следует менять в следующих случаях: • минимум каждые три месяца; • всякий раз, когда кто-либо, знающий пароль, увольняется из организации; • когда, по вашему мнению, безопасности системы что-то угрожает. Часто говорят, что пароли никогда не следует записывать, однако эту мысль следует выразить точнее: пароли никогда не должны быть доступными для случайных людей. 4 Данный список FAQ был написан для отдельных пользователей системы PGP. В контексте системного администрирования вам следует учесть потенциальные возможности для нападения. Как бы восприняли ваш вариант “шокирующего абсурда” присяжные, которым, не дай бог, при- дется рассматривать ваше дело о сексуальных домогательствах?
Глава 4. Управление доступом: сила привилегий 155 Пароли суперпользователя и другие важные пароли лучше записывать в зашифрованном виде, чтобы администраторы могли воспользоваться ими при крайней необходимости. (Подробнее чуть ниже.) регистрация под именем root Поскольку суперпользователь является таким же членом системы, как и остальные пользователи, можно войти в систему непосредственно под именем root. Однако ока- зывается, что это довольно неудачное решение. Во-первых, не будет сделано никаких записей о том, какие операции выполнял суперпользователь. Согласитесь, не очень приятно обнаружить, что вчера ночью в 3:00 вы что-то поменяли, но никак не можете вспомнить, что именно. Еще хуже, если такой доступ был несанкционированным и не- обходимо выяснить, какой ущерб системе нанес нарушитель. Во-вторых, сценарий реги- страции суперпользователя не предполагает сбора дополнительной идентифицирующей информации. Когда под именем root в систему могут входить несколько пользователей, не существует способа определить, кто именно и когда это делал. Вследствие упомянутых причин в большинстве систем регистрация под именем root может быть запрещена на терминалах, в оконных системах и по сети, т.е. везде, кроме системной консоли5. Мы рекомендуем следовать этой схеме. О том, как реализовать эту политику в конкретной системе, читайте в разделе 22.4. Команда su: замена идентификатора пользователя Лучше получать доступ к учетной записи root с помощью команды su. Будучи вы- званной без аргументов, она выдает приглашение на ввод пароля суперпользователя, а затем запускает интерпретатор команд с правами пользователя root. Интерпретатор будет выполняться в привилегированном режиме, пока не завершит работу (при нажа- тии комбинации клавиш <Ctrl+D> или по команде exit). Команда su не фиксирует действия, производимые в среде интерпретатора, но добавляет запись в журнальный файл с указанием, кто и когда вошел в систему под именем суперпользователя. Команда su способна также подставлять вместо имени root имена других пользова- телей. Иногда единственный способ помочь пользователю в решении проблемы — вой- ти с помощью команды su в его среду и разобраться в происходящем, так сказать, “на месте”. Зная чей-либо пароль, можно непосредственно зарегистрироваться в системе под его именем, введя команду su имя_пользователя. В ответ будет выдан запрос на ввод па- роля. При использовании в качестве ключа команды su дефиса (-) интерпретатор пере- йдет в режим регистрации. Точная реализация этого режима зависит от конкретного ин- терпретатора команд, но обычно в этом режиме меняются количество и имена файлов запуска, считываемых интерпретатором. Например, в режиме регистрации интерпрета- тор bash считывает файл ~/ .bash_profile, а вне этого режима — файл ~/ .bashrc. При диагностике проблем конкретного пользователя режим регистрации позволяет мак- симально точно воспроизвести среду, в которой он работал. В одних системах пароль root позволяет регистрироваться с помощью команд su или login под любым именем. В других нужно сначала стать суперпользователем, вос- 5 Система Ubuntu Linux пошла еще дальше. По умолчанию система не содержит никакого дей- ствующего пароля для учетной записи root, и в ней необходимо использовать команду sudo, под- робно описанную в последующих абзацах этого раздела.
156 Часть I. Основы администрирования пользовавшись в явном виде командой su, а затем с помощью этой же команды перейти в другую учетную запись. В таком случае вводить пароль не потребуется. Рекомендуем взять за правило при вводе команды указывать полное имя, например /bin/su или /usr/bin/su, а не просто su. Это послужит определенной защитой от тех программ с именем su, которые преднамеренно были прописаны в переменной среды path злоумышленником, намеревавшимся собрать хороший “урожай” паролей6. В некоторых системах, чтобы использовать команду su, необходимо быть членом группы wheel. Команду su в значительной степени может заменить утилита sudo (см. следующий раздел), саму же команду su лучше всего оставить для крайних (аварийных) случаев. Утилита sudo: ограниченный вариант команды su Без организации управления доступом на основе ролей (RBAC) или такой системы, как SELinux, трудно предоставить кому-то право выполнять конкретную администра- тивную операцию (например, создавать резервные копии), не предоставив возможность свободно работать в системе. Если же учетная запись root доступна группе администра- торов, то вы и понятия не будете иметь о том, кто ею пользуется и что он при этом делает. Чаще всего для получения прав суперпользователя применяется утилита sudo. Она работает во всех рассматриваемых нами системах, а ее исходный код можно получить на веб-сайте sudo.ws. В системе Solaris предусмотрена команда pfexec, предоставляющая возмож- SOiariS ности, подобные возможностям программы sudo, которая реализована на базе собственной системы RBAC. Утилита sudo в качестве аргумента принимает командную строку, которая подлежит выполнению от имени root-пользователя (или другого уполномоченного пользовате- ля). Утилита обращается к файлу /etc/sudoers, где содержится список пользователей, имеющих разрешение на ее выполнение, и перечень команд, которые они могут вводить на конкретном компьютере. Если запрашиваемая команда разрешена, утилита sudo приглашает пользователя ввести его собственный пароль и выполняет команду от имени суперпользователя. Далее утилита sudo позволяет, не вводя пароль, выполнять другие команды, но толь- ко до тех пор, пока не наступит пятиминутный период бездействия (его продолжитель- ность можно менять). Такая мера служит защитой от тех привилегированных пользова- телей, которые оставляют свои терминалы без присмотра. Ш Подробнее о syslog читайте в главе 11. Утилита sudo ведет журнал, где регистрируются выполненные команды, компьюте- ры, на которых они выполнялись, и вызвавшие их пользователи, а также каталоги, из которых запускались команды, и время их вызова. Эта информация может направляться в системный журнальный файл syslog или сохраняться в любом другом файле по усмо- трению пользователя. Мы рекомендуем направлять ее на защищенный центральный компьютер. 6 По аналогичной причине настоятельно рекомендуем не включать запись “. ” (текущий ката- лог) в переменную path интерпретатора команд. Несмотря на очевидное удобство, подобная кон- фигурация приводит к тому, что можно непреднамеренно запустить “специальную” версию какой- нибудь системной команды, которую злоумышленник оставил в качестве приманки. Пользователю root следует быть бдительным вдвойне.
Глава 4. Управление доступом: сила привилегий 157 Строка журнального файла, содержащая данные о пользователе randy, который вы- полнил команду sudo /bin/cat etc/sudoers, может выглядеть следующим образом. Dec 7 10:57:19 tigger sudo: randy: TTY=ttypO ; PWD=/tigger/users/randy; USER=root ; COMMAND=/bin/cat /etc/sudoers Существует единая версия файла /etc/sudoers, которая используется на всех ком- пьютерах. Сам файл выглядит примерно так. # Define aliases for machines in CS & Physics departments Host_Alias CS = tigger, anchor, piper, moet, sigi Host_Alias PHYSICS = eprince, pprince, icarus # Define collections of commands Cmnd_Alias DUMP = /sbin/dump, /sbin/restore Cmnd_Alias PRINTING - /usr/sbin/lpc, /usr/bin/lprm Cmnd_Alias SHELLS = /bin/sh, /bin/tcsh, /bin/bash, /bin/ksh, /bin/bsh # Permissions mark, ed PHYSICS = ALL herb CS = /usr/sbin/tcpdump : PHYSICS = (operator) DUMP lynda ALL = (ALL) ALL, ’SHELLS %wheel ALL, ! PHYSICS = NOPASSWD: PRINTING Первые пять строк (не считая комментариев) определяют набор компьютеров и ко- манд, на которые имеются ссылки в спецификациях прав доступа. Списки элементов можно включать в спецификации в полном виде, но работать с псевдонимами проще, к тому же они делают файл /etc/sudoers понятнее и в него легче вносить изменения. Разрешается также создавать псевдонимы для различных групп пользователей. В каждую спецификацию прав доступа включается информация о следующем: • пользователях, к которым относится запись; • компьютерах, на которых пользователям разрешено выполнять соответствующие действия; • командах, которые могут выполняться указанными пользователями; • пользователях, от имени которых могут выполняться команды. Первая строка спецификаций применяется к пользователям mark и ed, которые ре- гистрируются в системе на компьютерах группы PHYSICS (eprince, pprince и icarus). Встроенный псевдоним ALL разрешает им вводить любые команды. Поскольку допол- нительный список пользователей в скобках не указан, утилита sudo будет выполнять команды только от имени суперпользователя. Пользователь herb может запускать утилиту tcpdump на компьютерах группы CS, а также выполнять команды резервного копирования на компьютерах группы PHYSICS. Обратите внимание, однако, что вторая группа команд получит привилегии не пользо- вателя root, а пользователя operator. Реальная команда, которую пришлось бы ввести пользователю herb, выглядит примерно так. ubuntu$ sudo -u operator /usr/sbin/dump Ou /dev/sdal Пользователь lynda имеет право выполнять команды от имени любого пользователя на любом компьютере, но он не может запускать большинство распространенных ин- терпретаторов команд. Означает ли это, что он не может получить доступ к интерпрета- тору? Конечно, нет. aix$ ср -р /bin/sh /txnp/sh aix$ sudo /txnp/sh
158 Часть I. Основы администрирования Вообще говоря, попытка разрешить “все команды, кроме...” обречена на провал, по крайней мере, с технической точки зрения. Тем не менее имеет смысл использовать по- добную форму спецификации, так как это послужит хотя бы напоминанием о том, что вызывать интерпретатор команд в режиме суперпользователя не рекомендуется. В последней строке пользователям группы wheel разрешается выполнять команды печати 1рс и Iprm от имени суперпользователя на всех компьютерах, за исключением eprince, pprince и icarus. Более того, от пользователей не требуется вводить пароль. Обратите внимание на то, что команды в файле /etc/sudoers приводятся с указа- нием полного имени, чтобы пользователи не могли выполнять свои собственные про- граммы и сценарии от имени суперпользователя. Разрешается также указывать допу- стимые аргументы команд (в приведенных выше примерах это не показано). В целом возможности файла sudoers очень велики, а рассмотренная конфигурация иллюстри- рует лишь основные из них. • В системах AIX полезно включать в раздел Defaults файла sudoers следую- щую строку. Defaults env_keep - "ODMDIR" Наличие этой строки не позволит утилите sudo удалить переменную среды ODMDIR, которая указывает многим административным командам на специальную базу объек- тов ODM (Object Data Manager), в которой хранится значительная часть параметров ОС AIX, например список поддерживаемых и сконфигурированных устройств, информация о драйверах и пр. Для модификации файла /etc/sudoers предназначена специальная команда visudo, которая проверяет, не редактируется ли файл кем-то посторонним, затем открывает его в редакторе, а перед инсталляцией файла выполняет синтаксический контроль. Послед- ний этап особенно важен, поскольку ошибка в файле /etc/sudoers может не позво- лить повторно вызвать утилиту sudo для исправления файла. Использование утилиты sudo имеет следующие преимущества. • Благодаря регистрации команд значительно повышается степень административ- ного контроля над системой • Операторы могут выполнять специальные задачи, не имея неограниченных при- вилегий • Настоящий пароль суперпользователя могут знать всего один-два человека7 • Вызывать утилиту sudo быстрее, чем выполнять команду su или входить в систе- му под именем root • Пользователя можно лишить привилегий, не меняя пароль суперпользователя • Ведется список всех пользователей с правами пользователя root • Меньше вероятность того, что интерпретатор команд, запущенный суперпользо- вателем, будет оставлен без присмотра • Управлять доступом ко всей сети можно с помощью одного файла Ш Дополнительную информацию о взломе паролей можно найти в разделе 22.8. Утилита sudo имеет и недостатки. Самый большой из них заключается в том, что любая брешь в системе защиты того или иного привилегированного пользователя экви- 7 Или даже никто, если вы используете один из проверенных вариантов системы хранения па- ролей Password Vault.
Глава 4. Управление доступом: сила привилегий 159 валентна нарушению безопасности самой учетной записи root. Противостоять этому нелегко. Можно лишь предупредить тех, кто имеет право выполнять утилиту sudo, о не- обходимости максимально защищать свои учетные записи. Можно также регулярно за- пускать какой-нибудь программный взломщик паролей, проверяя “стойкость” паролей привилегированных пользователей. Другой недостаток — возможность обмануть утилиту sudo с помощью таких уловок, как временный выход в интерпретатор команд из разрешенной программы либо выпол- нение команд sudo sh или sudo su, если они допустимы. Во многих версиях систем UNIX утилита sudo (как способ разделения привилегий суперпользователя) является лучшим инструментом для встроенных систем управления доступом на основе ролей (RBAC). И вот почему. • Вы можете точно определить, как именно будут разделены привилегии суперполь- зователя. Ваш вариант может отличаться в ту или иную сторону от предлагаемого встроенной системой RBAC. • Простота конфигурации — общепризнанный факт (в основном, это касается уста- новки, обслуживания и понимания происходящего). • Псевдонимы утилиты sudo для групп компьютеров, пользователей и команд функ- ционально подобны ролям в системе RBAC. • Утилита sudo выполняется во всех системах UNIX и Linux. Вам не нужно беспо- коиться об использовании различных систем RBAC на разных платформах. • Вы можете совместно использовать единственный на весь узел файл конфигурации. • Вы получаете бесплатную возможность высококачественного процесса регистра- ции в системе. Основной недостаток sudo-ориентированного управления доступом состоит в том, что система остается уязвимой в случае, если будет нарушена защита учетной записи суперпользователя. Хранилища паролей и их депонирование В пятистах милях на север от материковой части Норвегии, на одном из гористых островов архипелага Шпицберген, был вырыт огромный “погреб” — всемирный банк- хранилище посадочного материала всех существующих в мире сельскохозяйственных растений на случай планетарной катастрофы. Системным администраторам не нужно такое большое и холодное (на Шпицбергене вечная мерзлота как никак) спецхранилище для паролей, но какое-то хранилище им все же нужно иметь. Хранилище паролей может быть реализовано в виде некоторого программного (или программно-аппаратного) комплекса, который сохраняет пароли для конкретной орга- низации более безопасным способом, чем тот, что предлагает Windows (например, с по- мощью флажка “Запомнить ваш пароль?”). Некоторые разработки сделали хранилище паролей почти необходимостью. • Пароли теперь нужны не только для входа в системы компьютеров, но и для до- ступа к определенным веб-страницам, для задания конфигурации сетевых марш- рутизаторов и брандмауэров, а также для администрирования удаленных служб • Возросла необходимость для сильных (т.е. “не очень запоминающихся”) паролей, ведь слабые пароли легко взламываются
160 Часть I. Основы администрирования • Существуют правила, которые требуют доступа к определенным данным, отыски- ваемым для одного-единственного пользователя, — без применения таких “об- щих” регистрационных имен, как root Системы управления паролями возникли после того, как в Сенате США был заре- гистрирован законопроект “Акт о кибербезопасности 2009” (Cybersecurity Act of 2009), который предлагает значительно расширить полномочия федеральных властей в сфере безопасности компьютерных сетей. Этот законопроект (в случае его принятия) может существенно повлиять на структуру и саму суть современного Интернета, поскольку ав- торы законопроекта предлагают решать вопросы идентифицируемости и безопасности на государственном уровне с учетом особенностей различных производственных секто- ров. В некоторых случаях этот законопроект требует двухфакторной аутентификации, например пароль или парольная фраза плюс обмен сообщениями “вызов/ответ” (для проверки правильности реакции пользователя на непредсказуемый запрос системы). Хранилища паролей — это большое подспорье для компаний, которые должны безопас- но и прозрачно управлять паролями не только собственных компьютеров, но и компью- теров своих клиентов. В настоящее время доступно несколько программ для хранения паролей. Среди них программа KeePass — бесплатный, легкий и удобный в работе менеджер паролей с от- крытым исходным кодом, предназначенный для отдельных пользователей. Программа KeePass хранит пароли локально, предоставляет категорический (все или ничего) до- ступ к базе данных паролей, не выполняя при этом входа в систему. Продукты, предна- значенные для крупных корпораций (например, от компании Cyber-Ark), могут стоить десятки тысяч долларов. Многие коммерческие предложения ориентированы либо на удовлетворение специальных требований пользователя, либо просто на количество за- поминаемых паролей. Мы используем собственную веб-ориентированную систему, которая имеет несколь- ко ценных функций. Одна их них (наша любимая) называется “разбить стекло” (по ана- логии с надписью на противопожарном оборудовании в отелях: “в случае крайней не- обходимости разбить стекло и дернуть за большую красную ручку”). В нашем случае “разбить стекло” означает получить пароль, к которому обычно нет доступа. В случае аварии вы можете взять на себя ответственность и запросить пароль. Система предоставит список системных администраторов и зарегистрирует все действия, совершаемые вами с помощью “аварийного” пароля. “Разрулив” ситуацию, вы должны изменить пароль и поместить в хранилище новый пароль. “Низкотехнологичный” способ реализации депонирования паролей “позаимство- ван” у полиции, которая для хранения вещественных доказательств, собранных на месте преступления, использует специальные пронумерованные пакеты. Такие пакеты можно найти с помощью Интернета. До тех пор пока пакет не открыт, вы точно знаете, что ни- кто не получил доступа к паролю, хранящемуся внутри него. 4.4. О ПСЕВДОПОЛЬЗОВАТЕЛЯХ Только пользователь root имеет для ядра Linux особый статус. Есть, однако, еще не- сколько псевдопользовательских учетных записей, которые применяются для системных целей. Эти фиктивные учетные записи можно идентифицировать по значениям UID, которые обычно меньше 100. Как правило, учетные записи с UID меньше 10 принадле- жат системе, а значения UID от 10 до 100 отведены для псевдопользователей, связанных со специальными программами.
Глава 4. Управление доступом: сила привилегий 161 Пароли этих псевдопользователей в файле /etc/shadow обычно заменяют звездоч- кой, чтобы нельзя было войти в систему под служебным именем. Чтобы защититься от средств атаки на основе дистанционного входа в систему (когда вместо паролей исполь- зуются файлы SSH-ключей), укажите в качестве командных интерпретаторов (вместо /bin/bash или /bin/sh) вариант /bin/false или /bin/nologin. Файлы и процессы, которые являются частью операционной системы, но не должны принадлежать пользователю root, иногда передаются во владение пользователям bin или daemon. Считается, что это поможет избежать риска, связанного с действиями от имени суперпользователя. Однако ввиду неубедительности подобной аргументации в современных системах используется просто учетная запись root. В некоторых системах пользователь sys владеет специальными файлами (образами памяти ядра), которые хранятся в каталоге /dev. Доступ к этим файлам имеют лишь не- многие программы, и все они изменяют текущий идентификатор пользователя на sys. Иногда вместо пользователя sys создается группа kmem или sys. Ш Дополнительную информацию об учетной записи nobody можно найти в конце разде- ла 18.2. Сетевая файловая система — NFS (Network File System) — использует учетную запись nobody для представления суперпользователей в других системах. Чтобы лишить супер- пользователей их исключительных прав, излишних в данном контексте, NFS должна на время сеанса удаленного доступа заменить нулевой идентификатор чем-то другим. Этой цели как раз и служит учетная запись nobody. В среде сервера NFSv4 эта учетная за- пись также применяется для удаленных пользователей, которые не имеют допустимые локальные учетные записи. Пользователю nobody не нужны специальные права доступа, и он не должен владеть никакими файлами. Если бы ему принадлежали какие-то файлы, то над ними получили бы контроль суперпользователи, регистрирующиеся в удаленных системах. Традиционно пользователю nobody соответствовал идентификатор -1 или -2, и это соглашение по-прежнему соблюдается в ядре Linux, где идентификатор этого пользова- теля равен 65534 (16-битовый беззнаковый эквивалент -2). В других дистрибутивах про- сто выбирается маленькое значение идентификатора (например, в Red Hat используется значение, равное 99), что при использовании 32-битовых идентификаторов пользовате- лей более оправдано. В системах Solaris применяется значение идентификатора 60001, которое, по крайней мере, легко запомнить. Единственный недостаток переопределения nobody-идентификатора состоит в том, что, судя по всему, команда exportfs не обращает внимания на файл passwd, поэтому с помощью опции anonuid ей нужно явно указывать о необходимости использования другого идентификатора для пользователя nobody. 4.5. Упражнения 4.1. Воспользуйтесь командой find с флагом -perm, чтобы найти в своей системе пять файлов с установленным битом “setuid”. Объясните, почему каждая из команд не сможет правильно функционировать без этого бита. 4.2. Создайте две записи в файле конфигурации sudoers. а) первая запись разрешает пользователям matt и lisa конфигурировать прин- тер, очищать его очередь и перезапускать демоны печати на компьютере printserver
162 Часть I. Основы администрирования б) вторая запись позволяет пользователям drew, smithgr и jimlane удалять за- дания и перезагружать компьютеры в студенческой лаборатории 4.3. Составьте три фразы по принципу “шокирующего абсурда”, а затем пропустите их через утилиту md5sum и сравните результаты. Не безопаснее ли использовать паро- ли в формате MD5 (учитывая достижения технологии шифрования)? Почему? 4.4. ★ Опишите последовательность команд, позволяющих модифицировать чужой пароль, и покажите, как “замести следы”. Предполагается, что доступ к учетной записи root имеется только через утилиту sudo (разрешены все команды, кроме интерпретаторов и su). 4.5. * Инсталлируйте утилиту sudo, которая будет направлять вам по электронной почте сообщения о попытках несанкционированного доступа. Используйте ее для проверки записей, созданных в упражнении 4.2, и убедитесь в том, что ути- лита правильно регистрирует сообщения в Syslog. (Необходим доступ с правами суперпользователя; возможно, понадобится также модифицировать файл /etc/ syslog. conf.) 4.6. Ж В системе Solaris, HP-UX или AIX создайте RBAC-роль, которая бы позволя- ла монтировать и демонтировать файловые системы. Назначьте на эту роль двух пользователей. (Необходим доступ с правами суперпользователя.) а) какие действия необходимо выполнить для этого? Можете ли вы ограничить список разрешенных операций для определенных файловых систем или типов файловых систем? б) переопределите свое решение в виде sudo-конфигурации. Оно сложнее, чем RBAC-решение, или проще? Можете ли вы ограничить список разрешенных операций для определенных файловых систем или типов файловых систем?
глава Управление процессами Процесс — это абстракция, используемая в операционных системах UNIX и Linux для описания выполняющейся программы. Процесс представляет собой системный объ- ект, посредством которого можно контролировать обращения программы к памяти, цен- тральному процессору и ресурсам ввода-вывода. Концепция, согласно которой как можно больше работы должно выполняться в кон- тексте процессов, а не в ядре, является частью философии UNIX. Системные и пользо- вательские процессы подчиняются одним и тем же правилам, благодарящему управле- ние ими осуществляется с помощью единого набора команд. 5.1. Атрибуты процесса Процесс состоит из адресного пространства и набора структур данных, содержащих- ся внутри ядра. Адресное пространство представляет собой совокупность страниц памя- ти1, которые были выделены ядром для выполнения процесса. В него загружается код процесса и используемые им библиотеки функций, а также переменные, содержимое стеков и различная вспомогательная информация, необходимая ядру во время работы процесса. Поскольку в системах UNIX и Linux поддерживается концепция виртуальной памяти, страницы адресного пространства процесса в конкретный момент времени мо- гут находиться либо в физической памяти, либо в разделе подкачки, т.е. на диске. В структурах данных ядра хранится всевозможная информация о каждом процессе. К наиболее важным относятся следующие сведения: • таблица распределения памяти; • текущий статус (неактивен, приостановлен, выполняется и т.п.); 1 Страницы — это базовые блоки памяти, размер которых составляет от 1 до 8 Кбайт.
164 Часть I. Основы администрирования • приоритет; • информация об используемых ресурсах; • информация о файлах и сетевых портах, открытых процессом; • маска сигналов (запись о том, какие сигналы блокируются); • имя владельца процесса. Поток выполнения, обычно именуемый просто потоком, представляет собой резуль- тат разветвления в выполнении процесса. Поток наследует многие атрибуты своего про- цесса (например, адресное пространство процесса), причем в рамках одного процесса могут выполняться одновременно (параллельно) сразу несколько потоков — такая мо- дель выполнения получила название многопоточности (multithreading). В старых однопроцессорных системах параллельное выполнение моделируется (точ- нее, имитируется) ядром, но в мультиядерных и многопроцессорных архитектурах по- токи могут выполняться одновременно в различных ядрах. Такие многопоточные прило- жения, как BIND и Apache, извлекают максимальную пользу из мультиядерных систем, поскольку эти приложения могут отрабатывать несколько запросов одновременно. Все наши примеры операционных систем поддерживают многопоточный режим. Многие характеристики процесса непосредственно влияют на его выполнение. В част- ности, имеет значение, сколько времени выделяется ему центральным процессором, к каким файлам он имеет доступ и т.д. В следующих подразделах рассмотрим наиболее интересные с точки зрения системного администратора характеристики процессов. Они поддерживаются во всех версиях систем UNIX и Linux. Идентификатор процесса (PID) Ядро назначает каждому процессу уникальный идентификатор2. Большинство команд и системных вызовов, работающих с процессами, требует указания конкретного иден- тификатора, чтобы был ясен контекст операции. Идентификаторы присваиваются по порядку по мере создания процессов. Идентификатор родительского процесса (PPID) Ни в UNIX, ни в Linux нет системного вызова, который бы инициировал новый про- цесс для выполнения конкретной программы. Для того чтобы породить новый процесс, существующий процесс должен клонировать сам себя. Клон может заменить выполняе- мую программу другой. В операции клонирования исходный процесс называют родительским, а его клон — дочерним. Помимо собственного идентификатора, каждый дочерний процесс имеет ат- рибут PPID (Parent Process ID), который совпадает с идентификатором породившего его родительского процесса3. Идентификатор родительского процесса — весьма полезная информация, если при- ходится иметь дело с неизвестным (и, возможно, нестандартно ведущим себя) процес- 2 Как отмечено нашим рецензентом Джоном Корбетом (Jon Corbet), в ядре Linux 2.6.24 пред- ставлены пространства имен процессов, которые позволяют существовать одновременно несколь- ким процессам с одинаковыми идентификаторами PID. Это свойство реализовано для поддержки виртуализации на основе контейнеров. 3 По крайней мере, первоначально. Если родительский процесс по какой-то причине заверша- ется раньше потомка, демон init (процесс с номером 1) подставляет себя на место предка (под- робности описаны в разделе 5.2).
Глава 5. Управление процессами 165 сом. Отслеживание истоков процесса может облегчить понимание его назначения и зна- чимости. Идентификатор пользователя (UID) и текущий идентификатор пользователя (EUID) Ш Дополнительная информация об идентификаторах пользователя приведена в разде- ле 7.1. UID (User ID) — это идентификатор пользователя, создавшего данный процесс, точнее, копия значения UID родительского процесса. Менять атрибуты процесса могут только его создатель (владелец) и суперпользователь. EUID (Effective User ID) — это текущий пользовательский идентификатор процесса, предназначенный для того, чтобы определить, к каким ресурсам и файлам у процесса есть право доступа в данный момент. У большинства процессов значения UID и EUID одинаковы. Исключение составляют программы, у которых установлен бит смены иден- тификатора пользователя (setuid). Зачем нужны два идентификатора? Просто имеет смысл разграничить понятия пер- сонификации и прав доступа. К тому же программы с установленным битом setuid не всегда выполняются с расширенными привилегиями. В большинстве систем значение EU1D можно устанавливать, чтобы предоставлять процессу дополнительные полномо- чия, и сбрасывать, чтобы отбирать их. В большинстве систем хранится начальный идентификатор, т.е. копия значения EUID, который имел процесс в начальной точке. Если процесс не удалит сохраненный идентификатор, его можно будет использовать в качестве реального или текущего иден- тификатора. Благодаря этому “консервативно” написанная программа с установленным битом setuid может большую часть времени работать с обычными привилегиями, пере- ходя в режим расширенных привилегий лишь в определенные моменты. В системе Linux есть еще и нестандартный параметр FSUID, определяющий возмож- ности работы с файловой системой, но вне ядра он используется редко и не переносится на другие системы UNIX. Идентификатор группы (GID) и текущий идентификатор группы (EGID) Q Дополнительная информация о группах приведена в разделе 7.1. GID (Group ID) — это идентификатор группы, к которой принадлежит владелец про- цесса. Текущий идентификатор группы (Effective Group ID — EGID) связан с атрибутом GID так же, как значение EUID связано с UID, т.е. они будут отличаться в случае про- граммы, у которой установлен бит смены идентификатора группы (setgid). В ядре на- значение сохраненного GID аналогично назначению сохраненного атрибута UID. В значительной степени атрибут GID процесса является рудиментарным. С точки зрения определения прав доступа процесс одновременно может относиться к несколь- ким группам. Список групп хранится отдельно от значений GID и EGID. При анализе прав доступа проверяется текущий идентификатор и дополнительный список групп, но не значение GID. Если пользователь пытается получить доступ к какому-либо ресурсу, весь список проверяется на предмет того, принадлежит ли пользователь к группе, чле- нам которой разрешается использовать данный ресурс.
166 Часть I. Основы администрирования Атрибут GID используется только при создании процессом новых файлов. В зависи- мости от установленных прав доступа в данной файловой системе новые файлы могут принимать атрибут GID создающего их процесса. Подробнее эти вопросы рассмотрены в разделе 6.5. Приоритет и фактор уступчивости Приоритет процесса определяет, какую долю времени центрального процессора по- лучает программа. Ядро применяет динамический алгоритм вычисления приоритетов, учитывающий, сколько времени центрального процессора уже использовал процесс и сколько времени он ожидает своей очереди. Кроме того, учитывается заданный админи- стратором так называемый фактор уступчивости (устанавливается с помощью команды nice), который определяет, в какой степени программа может “делиться” процессором с другими программами. Подробнее этот механизм рассматривается в разделе 5.6. л Для улучшения поддержки приложений с небольшой временной задерж- /jb кой в системе Linux в традиционную модель планирования задач UNIX до- бавлены “классы планирования”. В настоящее время существует три класса планирования, причем каждый процесс относится только к одному из них. К сожалению, классы реального времени пока не находят широкого при- менения, а их поддержка из командной строки оставляет желать лучшего. Все системные процессы используют традиционный планировщик, ориен- тированный на применение фактора уступчивости, который мы и рассма- триваем в этой книге. Более подробную информацию по вопросам, связан- ным с планированием в реальном времени, можно найти на веб-сайте www. realtimelinuxfoundation.org. Управляющий терминал С большинством процессов, не являющихся демонами, связан управляющий терми- нал, который определяет базовую конфигурацию стандартных каналов ввода, вывода и ошибок. Когда пользователь запускает какую-либо программу в интерпретаторе, его терминал, как правило, становится управляющим терминалом процесса. От управляю- щего терминала зависит также распределение сигналов, о чем пойдет речь в разделе 5.3. 5.2. Жизненный цикл процесса Для создания нового процесса существующий процесс, как правило, клонирует сам себя с помощью системного вызова fork. В результате формируется копия исходного процесса, имеющая лишь некоторые отличия. В частности, новому процессу присваива- ется собственный идентификатор, и учет ресурсов ведется для него независимо от предка. Системный вызов fork имеет уникальное свойство: он возвращает два разных зна- чения. В дочернем процессе это будет 0, а в родительском — идентификатор процесса- потомка. Поскольку в остальном процессы идентичны, они должны проверять результат вызова, чтобы определить, какую роль следует играть в дальнейшем. После завершения системного вызова fork дочерний процесс обычно запускает но- вую программу с помощью одного из системных вызовов семейства ехес4. Все вызовы этого семейства выполняют приблизительно одинаковые действия: они замещают сег- 4 В действительности все они, кроме одного, являются библиотечными функциями.
Глава 5. Управление процессами 167 мент кода процесса и устанавливают сегменты памяти в исходное состояние. Формы вызовов ехес различаются только способами указания аргументов командной строки и переменных среды, передаваемых новой программе. Ш Подробная информация о начальной загрузке и демоне init приведена в главе 3. Когда система загружается, ядро самостоятельно запускает несколько процессов. Наи- более важный из них — это демон init, идентификатор которого всегда равен 1. Демон init отвечает за выполнение сценариев запуска системы, хотя характер его действий неодинаков в UNIX и Linux. Все процессы, кроме тех, что создаются ядром, являются потомками демона init. Демон init играет и другую важную роль в управлении процессами. Завершающийся процесс вызывает функцию _exit, чтобы уведомить ядро о своей готовности прекратить работу. В качестве параметра функции _exit передается код завершения — целое число, обозначающее причину останова процесса. Нулевой код свидетельствует об успешном завершении процесса. Ядро системы требует, чтобы, прежде чем процесс окончательно исчезнет, его удале- ние было подтверждено родительским процессом с помощью системного вызова wait. Этот вызов возвращает код завершения потомка (или сообщает о причине его уничто- жения, если завершение не было естественным) и, в случае необходимости, статистику использования ресурсов. Описанный механизм работает нормально, если родительский процесс завершается позже порожденных им процессов и выполняет системные вызовы wait для их уни- чтожения. Если же родительский процесс завершается раньше срока, то ядро “понима- ет”, что вызова wait не последует, и переназначает все “осиротевшие” процессы демону init. Он берет их под свой контроль, осуществляя для каждого из них вызов wait. 5.3. Сигналы Сигналы — это запросы на прерывание, реализуемые на уровне процессов. Опреде- лено свыше тридцати различных сигналов, и они находят самое разное применение. • Сигналы могут посылаться между процессами как средство коммуникации. • Сигналы могут посылаться драйвером терминала для уничтожения или приоста- новки процессов, когда пользователь нажимает специальные комбинации клавиш, такие как <Ctrl+C> или <Ctrl+Z>5. • Сигналы могут посылаться в самых разных целях пользователем или администра- тором с помощью команды kill. • Сигналы могут посылаться ядром, когда процесс выполняет нелегальную инструк- цию, например деление на нуль. • Сигналы могут посылаться ядром для уведомления процесса о “представляющем интерес” событии, таком как прекращение дочернего процесса или доступность данных в канале ввода-вывода. Ш Дамп памяти — это файл, содержащий образ памяти процесса. Его можно использовать для отладки. 5 Функции, связанные с этими комбинациями клавиш, могут назначаться другим клавишам помощью команды stty, но на практике такое встречается очень редко. В этой главе мы под- разумеваем, что с данными клавишами связаны их стандартные функции.
168 Часть I. Основы администрирования Когда поступает сигнал, возможен один из двух вариантов развития событий. Если процесс назначил сигналу подпрограмму обработки, то после вызова ей предоставляется информация о контексте, в котором был сгенерирован сигнал. В противном случае ядро выполняет от имени процесса действия, заданные по умолчанию. Эти действия зависят от сигнала. Многие сигналы приводят к завершению процесса, а в некоторых случаях при этом еще и создается дамп памяти. Процедура вызова обработчика называется перехватом сигнала. Когда выполнение обработчика завершается, процесс возобновляется с той точки, где был получен сигнал. Для того чтобы определенные сигналы не поступали в программу, нужно задать их игнорирование или блокирование. Игнорируемый сигнал просто пропускается и не вли- яет на работу процесса. Блокируемый сигнал ставится в очередь на обработку, но ядро не требует от процесса никаких действий до явного разблокирования сигнала. Обработчик вызывается для разблокированного сигнала только один раз, даже если в течение перио- да блокировки поступило несколько аналогичных сигналов. В табл. 5.1 перечислены сигналы, которые должны быть известны любому системно- му администратору. Традиционно имена сигналов записываются прописными буквами. Иногда к именам добавляется префикс SIG (например, SIGHUP). Таблица 5.1. Сигналы, которые должен знать каждый администратор8 № Имя Описание Реакция по умолчанию Перехваты- вается? Блоки- руется? Дамп памяти? 1 HUP Отбой Завершение Да Да Нет 2 INT Прерывание Завершение Да Да Нет 3 QUIT Выход Завершение Да Да Да 9 KILL Уничтожение Завершение Нет Нет Нет _б BUS Ошибка на шине Завершение Да Да Да 11 SEGV Ошибка сегментации Завершение Да Да Да 15 TERM Запрос на завершение Завершение Да Да Нет _б STOP Останов Останов Нет Нет Нет _ б TSTP Сигнал останова, посылаемый с клавиатуры Останов Да Да Нет _ б CONT Продолжение после останова Игнорируется Да Нет Нет _ б WINCH Изменение окна Игнорируется Да Да Нет _б USR1 Определяется пользователем Завершение Да Да Нет _б USR2 Определяется пользователем Завершение Да Да Нет а Список названий сигналов и номеров также можно получить с помощью встроенной в bash команды kill -1. 6 Зависит от используемой системы. Подробнее см. файл /usr/include/signal .h или man-страницы интерактивного руководства для системного вызова signal (). Существуют и другие сигналы, не показанные в табл. 5.1; большинство из них сооб- щает о всяких загадочных ошибках, например “неверная инструкция”. По умолчанию такие сигналы, как правило, приводят к завершению программы и созданию дампа па- мяти. Перехват и блокирование сигналов обычно разрешены, так как есть достаточно “умные” программы, устраняющие последствия ошибок.
Глава 5. Управление процессами 169 Сигналы BUS и SEGV также посылаются при возникновении ошибок. Мы включили их в таблицу, поскольку они чрезвычайно распространены: обычно программа аварийно завершается именно из-за них. Сами по себе эти сигналы не имеют диагностической ценности. Они лишь указывают на факт неправильного обращения к памяти6. Сигналы KILL и STOP нельзя ни перехватить, ни заблокировать, ни проигнориро- вать. Сигнал KILL приводит к уничтожению процесса, которому он посылается, а сиг- нал STOP приостанавливает выполнение процесса до получения сигнала CONT. Сигнал CONT можно перехватить и проигнорировать, но нельзя заблокировать. Сигнал TSTP представляет собой более “гибкую” версию сигнала STOP. Проще всего описать его как запрос на останов. Он генерируется драйвером терминала при нажатии пользователем комбинации клавиш <Ctrl+Z>. Программы, перехватывающие этот сиг- нал, обычно выполняют операции очистки, а затем посылают сами себе сигнал STOP. С другой стороны, программы могут игнорировать сигнал TSTP, чтобы их нельзя было остановить командой с клавиатуры. Эмуляторы терминалов посылают сигнал WINCH, когда происходит изменение их конфигурационных параметров (например, числа строк на виртуальном терминале). Это позволяет программам, которые взаимодействуют с эмуляторами, таким как текстовые редакторы, автоматически переконфигурировать себя в ответ на изменения. Если размер окна не удается правильно изменить, убедитесь в том, что сигнал WINCH генерируется и корректно обрабатывается7. Хотя назначение сигналов KILL, INT, TERM, HUP и QUIT может показаться одинако- вым, в действительности они совершенно различны. • Сигнал KILL не блокируется и приводит к безусловному завершению процесса на уровне ядра. По сути, процесс не успевает даже принять этот сигнал. • Сигнал INT посылается драйвером терминала при нажатии пользователем комби- нации клавиш <Ctrl+C> и служит запросом на завершение текущей операции. Перехватив этот сигнал, простые программы должны завершить работу или позво- лить уничтожить себя стандартному обработчику сигнала. Программы, в которых есть интерактивный режим командной строки, должны прекратить текущую опе- рацию, выполнить очистку и снова перейти в режим ожидания. • Сигнал TERM представляет собой запрос на завершение программы. Предполага- ется, что процесс, получивший этот сигнал, осуществляет очистку и завершается. • У сигнала HUP есть две распространенные интерпретации. Во-первых, многие де- моны воспринимают его как команду сброса. Если демон способен повторно про- честь свой конфигурационный файл и адаптироваться к изменениям без переза- пуска, сигнал HUP позволяет менять его поведение. 6 Точнее говоря, ошибки на шине возникают в результате нарушения различных требований синхронизации или использования бессмысленных адресов. Нарушения правил сегментирования представляют собой нарушения правил защиты, например к ним относятся попытки выполнить запись в части адресного пространства, доступной только для чтения. На практике это может оказаться не такой уж простой задачей. И эмулятор терминала (на- пример, xterm), и драйвер терминала, и команды пользовательского уровня — все они могут вно- сить свой вклад в распространение сигнала SIGWINCH. Распространенные проблемы — отправка сигнала только фоновому процессу терминала (а не всем связанным с ним процессам) без рас- сылки по сети уведомления об изменении размера удаленным компьютерам. Такие протоколы, как ELnet и SSH, явным образом распознают изменения размера локального терминала и передают ЭТУ информацию удаленному узлу. Более простые протоколы (например, протоколы прямого по- Слсдовательного подключения) лишены этой возможности.
170 Часть I. Основы администрирования • Во-вторых, этот сигнал иногда генерируется драйвером терминала при попытке уничтожить связанные с терминалом процессы. В основном это поведение сохра- нилось со времен использования проводных соединений терминалов и модемов. Отсюда и название “отбой”. • Интерпретаторы семейства csh (tcsh и другие) обычно делают фоновые процес- сы невосприимчивыми к сигналу HUP, чтобы они могли продолжать свою работу, даже когда пользователь выходит из системы. Пользователи интерпретаторов се- мейства sh (ksh, bash и так далее) могут эмулировать такое поведение с помощью команды nohup. • Сигнал QUIT напоминает сигнал TERM, за исключением того, что по умолчанию стандартный обработчик создает дамп памяти. Сигналы USR1 и USR2 не имеют стандартного назначения. Ими можно пользовать- ся в различных целях. Например, веб-сервер Apache интерпретирует сигнал USR1 как запрос на перезапуск. 5.4. Отправка сигналов: команда kill Команду kill чаще всего используют для уничтожения процессов. Эта команда мо- жет послать процессу любой сигнал, но по умолчанию это сигнал TERM. Команду kill могут выполнять как рядовые пользователи (для своих собственных процессов), так и суперпользователь (для любого процесса). Она имеет следующий синтаксис: kill [-сигнал] идентификатор, где сигнал — это номер или символическое имя посыпаемого сигнала (см. табл. 5.1), а идентификатор — номер искомого процесса. Команда kill без номера сигнала не гарантирует, что процесс будет уничтожен, по- скольку сигнал TERM можно перехватывать, блокировать и игнорировать. Команда kill -9 идентификатор “гарантированно” уничтожает процесс, так как сигнал с номером 9 (KILL) не пере- хватывается. Используйте команду kill -9 только в случае, если “вежливый” запрос на завершение программы не был выполнен. Мы написали слово “гарантированно” в кавычках, так как иногда процессы переходят в такое состояние, в котором их нель- зя завершить даже таким способом (обычно это связано с блокировкой ввода-вывода, например, при остановке жесткого диска). Единственный выход в такой ситуации — перезагрузка. Команда killall выполняет различные функции в системах UNIX и Linux. В Linux команда killall уничтожает процессы, заданные именем. Например, следующая ко- манда уничтожает все процессы веб-сервера Apache. ubuntu$ sudo killall httpd Стандартная UNIX-команда killall, предусмотренная в дистрибутивах Solaris, HP- UX и AIX, не принимает параметры и просто уничтожает все процессы текущего поль- зователя. Ее выполнение от имени суперпользователя приведет к уничтожению процес- са init и выключению компьютера. Ух! Команды pgrep и pkill в системах Solaris, HP-UX и Linux (но не в AIX) осущест- вляют поиск процессов, заданных именами (или другими атрибутами). Команда pgrep выводит идентификаторы процессов, удовлетворяющих заданному в командной строке критерию, а команда pkill посылает найденным процессам сигнал. Например, следую-
Глава 5. Управление процессами 171 щая команда посылает сигнал TERM всем процессам, выполняемым от имени пользова- теля ben. $ sudo pkill -u ben 5.5. Состояния ПРОЦЕССА Факт существования процесса не дает ему автоматически права на получение досту- па к центральному процессору. Необходимо помнить о четырех состояниях выполнения процесса (табл. 5.2). Таблица 5.2. Состояния процесса Состояние £ Выполнение Ожидание Зомби Останов Процесс можно выполнять Процесс ждет выделения ресурса Процесс пытается завершиться Процесс приостановлен (не имеет разрешения на выполнение) Выполняемый процесс получил все необходимые ресурсы и ждет, пока системный планировщик предоставит ему доступ к центральному процессору. Если процесс осу- ществляет системный вызов, который нельзя завершить немедленно (например, чтение части файла), ядро переводит его в состояние ожидания. Ожидающий процесс ждет наступления определенного события. Интерактивные ин- терпретаторы команд и системные демоны проводят в этом состоянии большую часть времени, ожидая поступления данных с терминала или из сетевого соединения. По- скольку ожидающий процесс фактически блокирован, доступ к центральному процессо- ру будет предоставлен ему только в случае получения сигнала или ответа на один из его запросов ввода-вывода. Некоторые операции переводят процесс в состояние непрерывного ожидания. Обыч- но это состояние является временным и не отображается в выводе команды ps, о чем свидетельствует флаг D в столбце STAT (см. табл. 5.4). Однако некоторые нестандарт- ные ситуации могут приводить к сохранению этого состояния надолго. Наиболее рас- пространенная причина возникновения такой ситуации — наличие проблем сервера в файловой системе NFS, смонтированной с применением параметра “hard”. Поскольку процессы в состоянии непрерывного ожидания не могут быть активизированы даже для реакции на сигнал, их нельзя уничтожить. Для того чтобы избавиться от них, необходи- мо устранить породившую их проблему или перезагрузить систему. Зомби — это процесс, который закончил выполняться, но информация об этом еще не поступила родительскому процессу. При обнаружении зомби с помощью команды ps проверьте их атрибуты PPID, чтобы выяснить происхождение этих процессов. Остановленному процессу временно запрещено выполняться. Процессы останавли- ваются при получении сигнала STOP или TSTP и возобновляют работу по сигналу CONT. Это состояние аналогично ожиданию, но выход из него возможен только с помощью дру- гого процесса.
172 Часть I. Основы администрирования 5.6. Изменение приоритета выполнения: КОМАНДЫ NICE И RENICE Фактор “уступчивости” — это число, по которому ядро определяет свою политику в отношении процессов, конкурирующих за право доступа к центральному процессору. Чем выше фактор уступчивости, тем ниже приоритет процесса и наоборот, отсюда и на- звание термина. Низкое или отрицательное значение означает использование высокого приоритета: процесс ведет себя не слишком уступчиво. Диапазон допустимых значений фактора уступчивости зависит от используемой си- стемы, и обычно он лежит в пределах от -20 до +19. В некоторых системах используется диапазон такого же размера, но со смещением в область неотрицательных чисел (как правило, от 0 до 39). Диапазоны допустимых значений фактора уступчивости, исполь- зуемые в наших примерах систем, приведены в табл. 5.3. Несмотря на числовые различия, все системы обрабатывают значения фактора уступ- чивости практически одинаково. Если пользователь не предпринимает специальных мер, дочерний процесс наследует приоритет своего родительского процесса. Владелец процесса может увеличить фактор уступчивости, но не может уменьшить его, даже что- бы вернуться к стандартному значению. Это не позволяет процессам с низким приори- тетом порождать высокоприоритетных потомков. Суперпользователь может устанавли- вать произвольные значения фактора уступчивости. В настоящее время администраторам редко приходится определять приоритеты вруч- ную. Когда операционные системы работали на маломощных компьютерах 70—80 гг., на производительность больше всего влияло то, какой процесс занимал основную часть времени центрального процессора. Сегодня, когда на рабочих столах стоят намного бо- лее быстродействующие компьютеры, системный планировщик, как правило, обслужи- вает все процессы весьма оперативно. Добавление классов планирования предоставляет разработчикам дополнительные средства управления в тех случаях, когда важна быстрая ответная реакция. К сожалению, уровень производительности подсистемы ввода-вывода растет не так стремительно, как быстродействие центральных процессоров, поэтому жесткие диски стали основным узким местом в большинстве операционных систем. Фактор уступчи- вости никак не влияет на подсистемы управления памятью и вводом-выводом, поэтому даже низкоприоритетный процесс способен монополизировать эти ресурсы или захва- тить непропорционально большую их часть. Фактор уступчивости можно установить при создании процесса. Это делается с по- мощью команды nice. Команда renice позволяет изменять приоритет выполняемого процесса. Первая из этих команд принимает в качестве аргумента строку запуска про- цесса, а вторая — идентификатор процесса либо имя пользователя. Приведем примеры. $ nice -п 5 ~/bin/longtask // Понижаем приоритет (увеличиваем // фактор уступчивости) на 5 $ sudo renice -5 8829 // Задаем фактор уступчивости равным -5 $ sudo renice 5 -u boggs // Задаем фактор уступчивости процессов // пользователя ’’boggs" равным 5 К сожалению, в системах по-разному реализован способ установки желаемого при- оритета; более того, даже в рамках одной и той же системы не согласованы механизмы действия команд nice и renice. Одни команды требуют указания относительного зна- чения фактора уступчивости, а другие — абсолютного, В одних командах нужно перед
Глава 5. Управление процессами 173 значением фактора уступчивости ставить дефис, в других требуется флаг -п, а третьи “довольствуются” просто числовым значением. Существует также версия команды nice, встроенная в интерпретатор csh и ряд дру- гих популярных интерпретаторов (но не в bash). Если не указать полное имя команды, будет вызвана именно встроенная версия, а не системная. Это многих сбивает с толку, так как синтаксис команд различен: встроенная версия требует, чтобы изменение прио- ритета записывалось в формате +инкр или -декр, а системная версия ожидает флаг -п, за которым следует значение приращения8. Все эти вариации и разбросы приведены в табл. 5.3. Элемент приор для среды, в ко- торой вызывается команда nice или renice, означает абсолютное значение фактора уступ- чивости, а инкр — относительное. Везде, где указывается значение -инкр или -декр, для ввода отрицательных значений можно использовать два дефиса (например —10). Знаки “плюс” в команде nice обязательны только для интерпретатора команд; в осталь- ных случаях они игнорируются. Таблица 5.3. Как выражаются приоритеты в различных версиях команд nice и renice Система Диапазон ОС-команда nice Команда nice в csh Linux 20-19 -инкр ИЛИ -п инкр +инкр ИЛИ -инкр приор Solaris 0-39 -инкр ИЛИ -п инкр +инкр ИЛИ -инкр инкр или —п инкр HP-UX 0-39 -приор ИЛИ —п приор +инкр ИЛИ -инкр -п приор* AIX 20-19 - инкр И Л И - п инкр +инкр ИЛИ -инкр —п инкр а Используется абсолютное значение приоритета, но к заданному значению добавляется число 20. Самый распространенный из высокоприоритетных процессов в современных си- стемах — ntpd, демон тактовой синхронизации. Поскольку для него быстрый доступ к центральному процессору имеет очень большое значение, этому демону обычно назна- чается фактор уступчивости, на 12 позиций ниже стандартного уровня. Если какой-либо процесс займет столько времени центрального процессора, что по- казатель средней загруженности системы достигнет отметки 65, то перед выполнением команд, необходимых для исследования этой проблемы, понадобится запустить с помо- щью команды nice высокоприоритетный интерпретатор. В противном случае выполне- ние даже простейших команд может быть затруднено. 5.7. Текущий контроль процессов: команда ps Команда ps — основной инструмент, которым системный администратор пользуется для текущего контроля процессов. Версии этой команды различаются аргументами и выходным форматом, но, по сути, выдают одну и ту же информацию. В основном, различие в верси- ях — это следствие разных путей развития систем UNIX. Кроме того, поставщики систем могут настраивать эту команду с учетом конфигурации системы, так как она тесно связана с Ос°бенностями обработки процессов в ядре и поэтому часто отражает изменения в ядре. С помощью команды ps можно получить информацию об идентификаторах, прио- ритете и управляющем терминале того или иного процесса. Она также позволяет выяс- нить, какой объем памяти использует процесс, сколько времени центрального процес- с°ра заняло его выполнение, каково его текущее состояние (выполняется, остановлен, 8 Хуже того, системная версия команды интерпретирует строку nice -5 как положительное РИращение, а встроенная версия интерпретирует эту же строку как отрицательное приращение.
174 Часть I. Основы администрирования простаивает и т.д.). Процессы-зомби в листинге команды обозначаются как <exiting> или <defunct>. Команда ps стремительно усложнилась за последние несколько лет. Некоторые по- ставщики бросили попытки стандартизировать выходной формат этой команды и сде- лали ее полностью конфигурируемой. Проведя небольшую настройку, можно получить практически любые требуемые результаты. В Linux команда ps является настоящим ха- мелеоном и понимает наборы опций из ряда других систем. Имеется также специальная переменная среды, с помощью которой можно выбрать нужный набор. Не пугайтесь всех этих сложностей: пусть они будут кошмаром разработчиков ядра, а не системных администраторов! Для повседневной работы достаточно знать лишь не- сколько наиболее важных опций команды ps. Получить список всех процессов, выполняющихся в системах Linux и AIX, можно с помощью команды ps aux. Ключ а используется для отображения всех процессов, х — для отображения процессов, отсоединенных от термина- ла, а ключ и обеспечивает фильтрование по имени или идентификатору поль- зователя, который запустил программу. Ниже показаны результаты работы команды ps aux в системе Red Hat (результат работы той же команды для си- стемы AIX имеет небольшие отличия). redhat$ ps aux USER PID %CPU % MEM VSZ RSS TTY STAT TIME COMMAND root 1 0.1 0.2 3356 560 ? S 0:00 init [5] root 2 0 0 0 0 2 SN 0:00 [ksoftirqd/0] root 3 0 0 0 0 2 S< 0:00 [events/0] root 4 0 0 0 0 2 s< 0:00 [khelper] root 5 0 0 0 0 2 s< 0:00 [kacpid] root 18 0 0 0 0 2 s< 0:00[kblockd/0] root 28 0 0 0 0 2 s 0:00 [pdflush] root 196 0 0 0 0 2 s 0:00 [kjournald] root 1050 0 0.1 2652 448 2 S<s 0:00 udevd root 1472 0 0.3 3048 1008 2 S<s 0:00 /sbin/dhclient -1 root 1646 0 0.3 3012 1012 2 S<s 0:00 /sbin/dhclient -1 root 1733 0 0 0 0 2 S 0:00 [kjournald] root 2124 0 0.3 3004 1008 2 Ss 0:00 /sbin/dhclient -1 root 2182 0 0.2 2264 596 2 Ss 0:00 syslogd -m 0 root 2186 0 0.1 2952 484 2 Ss 0:00 klogd -x rpc 2207 0 0.2 2824 580 2 Ss 0:00 portmap rpcuser 2227 0 0.2 2100 760 2 Ss 0:00 rpc.statd root 2260 0 0.4 5668 1084 2 Ss 0:00 rpc.idmapd root 2336 0 0.2 3268 556 2 Ss 0:00 /usr/sbin/acpid root 2348 0 0.8 9100 2108 2 Ss 0:00 cupsd root 2384 0 0.6 4080 1660 2 Ss 0:00 /usr/sbin/sshd root 2399 0 0.3 2780 828 2 Ss 0:00 xinetd -stayalive root 2419 0 1.1 7776 3004 2 Ss 0:00 sendmail: accept Команды, имена которых заключены в квадратные скобки, в действительности яв- ляются не командами, а потоками ядра, запланированными в качестве процессов. Опи- сание полей приведено в табл. 5.4. Еще один полезный набор аргументов команды ps для систем Linux и AIX — lax, предоставляющий дополнительную техническую информацию. Ключи а и х описаны вы-
Глава 5. Управление процессами 175 ше (отображают все процессы), а ключ 1 означает выбор “длинного” формата вывода данных. Команда ps lax выполняется быстрее, чем команда ps aux, так как не со- поставляет идентификаторы процессов с именами пользователей. Это может оказаться весьма важным фактором, если система уже перегружена каким-то процессом. Таблица 5.4. Пояснения к выходной информации команды ps aux Поле____5^__ user Имя владельца процесса pid Идентификатор процесса %cpu Доля времени центрального процессора (в процентах), выделенная процессу %мем Часть реальной памяти (в процентах), используемая процессом vsz Виртуальный размер процесса RSS Размер резидентного набора (количество страниц памяти) tty Идентификатор управляющего терминала stat Текущий статус процесса: R — выполняется D — ожидает записи на диск S — неактивен (< 20 с) т — приостановлен z — зомби Дополнительные флаги: w — процесс выгружен на диск < — процесс имеет повышенный приоритет N — процесс имеет пониженный приоритет L — некоторые страницы блокированы в оперативной памяти s — процесс является лидером сеанса тIME Количество времени центрального процессора, затраченное на выполнение процесса command имя и аргументы командыа Программы могут модифицировать эту информацию, так что она не всегда точно представляет реальную командную строку. Ниже в сокращенном виде показаны результаты работы команды ps lax. Обратите внимание на дополнительные поля PPID (идентификатор родительского процесса), NI (фактор уступчивости) и WCHAN (ресурс, которого ожидает процесс). redhat$ ps lax F UID PID PPID PRI NI vsz RSS WCHAN STAT TIME COMMAND 4 0 1 0 16 0 3356 560 select S 0:00 init [5] 1 0 2 1 34 19 0 0 ksofti SN 0:00 [ksoftirqd/0 1 0 3 1 5 -10 0 0 worker S< 0:00 [events/0] 1 0 4 3 5 -10 0 0 worker s< 0:00 [khelper] 5 0 2186 1 16 0 2952 484 syslog Ss 0:00 klogd -x 5 32 2207 1 15 0 2824 580 - Ss 0:00 portmap 5 29 2227 1 18 0 2100 760 select Ss 0:00 rpc.statd 1 0 2260 1 16 0 5668 1084 - Ss 0:00 rpc.idmapd 1 0 2336 1 21 0 3268 556 select Ss 0:00 acpid 5 0 2384 1 17 0 4080 1660 select Ss 0:00 sshd 1 0 2399 1 15 0 2780 828 select Ss 0:00 xinetd -sta 5 0 2419 1 16 0 7776 3004 select Ss 0:00 sendmail: a
176 Часть I. Основы администрирования В системах Solaris и HP-UX удобно использовать команду ps -ef. Ключ е по- зволяет выбрать все процессы, а ключ f устанавливает выходной формат. (Ко- манда ps -ef работает и в системах AIX и Linux — обратите внимание на ис- soiaris пользование дефиса.) solaris$ ps -ef UID PID PPID C STIME TTY TIME COMD root 0 0 80 Dec 21 9 0:02 sched root 1 0 2 Dec 21 ? 4:32 /etc/init- root 2 0 8 Dec 21 9 0:00 pageout root 171 1 80 Dec 21 9 0:02 /usr/lib/sendmail-bd trent 8482 8444 35 14:34:10 pts/7 0:00 ps-ef trent 8444 8442 203 14:32:50 pts/7 0:01 -csh Описание полей (как результата выполнения команды ps -ef) приведено в табл. 5.5. Таблица 5.5. Пояснения к выходной информации команды ps -ef Поле Содержимое UID Идентификатор пользователя PID Идентификатор процесса PPID Идентификатор родительского процесса C Информация об использовании/планировании времени центрального процессора STIME Время запуска процесса TIME Количество времени центрального процессора, затраченное на выполнение процесса TTY Терминал COMMAND Имя и аргументы команды Подобно команде ps lax в системах Linux и AIX, команда ps -elf выводит допол- нительные данные по системам Solaris и HP-UX. % ps -elf F S UID PID PPID CPU! ADDR SZ WCHAN TIME COMD 19 T root 0 0 80 0 SY f00c2fd8 0 0:02 sched 8 S root 1 0 65 1 20 ff26a800 88 ff2632c8 4:32 init- 8 S root 142 1 41 1 20 ff2e8000 176 f00cb69 0:00 syslogd Чтобы результаты поместились на странице, поля STIME и TTY были опущены; они идентичны полям, сгенерированным командой ps -ef. Описание полей приведено в табл. 5.6. Таблица 5.6. Пояснения к выходной информации команды ps -elf Поле Содержимое F Флаги процесса (зависят от системы — редко полезны для системных администраторов) S Статус процесса: о — выполняется R — готов к выполнению z — зомби s — неактивен (ожидает событие) т — приостановлен или отслеживается D — полностью неактивен (обычно диск)
Глава 5. Управление процессами 177 Окончание табл. 5.6 Поле Содержимое_________________________________________________________________ с Информация об использовании/планировании времени центрального процессора Р Запланированный приоритет (внутренний для ядра, отличный от значения фактора “уступчивости”) NI Значение фактора “уступчивости”или sy для системных процессов addr Адрес процесса sz Размер (в страницах) процесса в основной памяти wchan Адрес объекта, которого ожидает процесс 5.8. Динамический мониторинг процессов С ПОМОЩЬЮ КОМАНД TOP, PRSTAT И TOPAS Команда ps позволяет сделать только разовый, моментальный, “снимок” системы, но получить полную картину всего происходящего в ней довольно сложно. Для этого служит свободно распространяемая утилита top, которая работает во многих системах, регулярно обновляя сводку активных процессов и используемых ими ресурсов. В AIX эквивалентную функцию выполняет утилита topas, а в Solaris — prstat . Рассмотрим пример. ubuntu$ top top - 16:37:08 up 1:42, 2 users, load average: 0.01, 0.02, 0.06 Tasks: 76 total, 1 running, 74 sleeping, 1 stopped, 0 zombie Cpu(s): 1.1% us, 6.3% sy, 0.6% ni, 88.6% id, 2.1% wa, 0.1% hi, 1.3% si Mem: 256044k total, 254980k used, 1064k free, 15944k buffers Swap: 524280k total, 0k used, 524280k free, 153192k cached PID USER PR NI VIRT RES SHR s %CPU %MEM TIME+ COMMAND 3175 root 15 0 35436 12m 4896 s 4.0 5.2 01:41.9 X 3421 root 25 10 29916 15m 9808 s 2.0 6.2 01:10.5 rhn-applet-gui 1 root 16 0 3356 560 480 s 0.0 0.2 00:00.9 init 2 root 34 19 0 0 0 s 0.0 0 00:00.0 ksoftirqd/0 3 root 5 -10 0 0 0 s 0.0 0 00:00.7 events/0 4 root 5 -10 0 0 0 s 0.0 0 00:00.0 khelper 5 root 15 -10 0 0 0 s 0.0 0 00:00.0 kacpid 18 root 5 -10 0 0 0 s 0.0 0 00:00.0 kblockd/0 28 root 15 0 0 0 0 s 0.0 0 00:00.0 pdflush 29 root 15 0 0 0 0 s 0.0 0 00:00.3 pdflush 31 root 13 -10 0 0 0 s 0.0 0 00:00.0 aio/0 19 root 15 0 0 0 0 s 0.0 0 00:00.0 khubd 30 root 15 0 0 0 3 s 0.0 0 00:00.2 kswapdO 187 root 6 -10 0 0 0 s 0 0 00:00.0 kmirrord/0 196 root 15 0 0 0 0 s 0 0 00:01.3 kjournald По умолчанию эта информация обновляется каждые десять секунд. Наиболее актив- ные процессы отображаются первыми. Команда top позволяет также посылать процес- сам сигналы и использовать команду renice, чтобы пользователь мог наблюдать за тем, как его действия влияют на общее состояние системы.
178 Часть I. Основы администрирования Пользователь root может запустить команду top с опцией -q, чтобы обеспечить ей максимально возможный приоритет. Это очень удобно, если нужно обнаружить про- цесс, который существенно замедлил работу системы. 5.9. Файловая система /proc Версии команд ps и top, используемые в Linux, считывают информацию о состоя- нии процессов из каталога /ргос — псевдофайловой системы, в которой ядро помещает большой объем интересной информации о состоянии системы. Несмотря на имя /ргос (и имя базового типа файловой системы — “ргос”), хранящаяся в этом каталоге инфор- мация не ограничивается одними лишь процессами — здесь хранится вся информация о состоянии и статистические сведения, генерируемые ядром. Некоторые параметры можно даже изменять, записывая новые значения в соответствующий файл каталога /ргос, — ряд примеров приведен в разделе 13.3. Хотя некоторую информацию проще получать с помощью таких интерфейсных ко- манд, как vmstat и ps, некоторую менее популярную информацию придется считывать непосредственно из каталога /ргос. Поэтому имеет смысл просмотреть его, чтобы озна- комиться со всеми помещенными в него файлами. Команда man ргос позволяет озна- комиться с рядом полезных советов и приемов. Поскольку ядро создает содержимое файлов каталога /ргос на лету (во время их счи- тывания), большинство из них выглядят пустыми при их открытии с помощью команды Is -1. Для просмотра действительного содержимого этих файлов придется прибегнуть к командам cat или more. Но будьте осторожны: некоторые файлы содержат двоичные данные либо ссылаются на двоичные данные, непосредственный просмотр которых мо- жет поставить в тупик эмулятор терминала. Информация, относящаяся к конкретным процессам, распределена по подкаталогам, названным по идентификаторам процессов. Например, каталог /ргос/1 всегда содер- жит информацию о демоне init. Наиболее полезные файлы с информацией о процес- сах перечислены в табл. 5.7. Таблица 5.7. Файлы с информацией о процессах каталога /ргос __________ (нумерованные подкаталоги) Файл Содержимое ; ? - л / 4 ' ‘ ........... - cmd Команда или программа, выполняемая процессом cmdlinea Полная командная строка процесса (разделенная нулями) cwd Символьная ссылка на текущий каталог процесса environ Переменные среды процесса (разделенные нулями) ехе Символьная ссылка на файл, который должен выполняться f d Подкаталог, содержащий ссылки на дескрипторы каждого открытого файла maps Информация отображения памяти (сегменты совместного использования, библиотеки и т.п.) root Символьная ссылка на корневой каталог процесса (определенный командой chroot) stat Информация об общем состоянии процесса (для ее получения лучше всего использовать команду ps) statm Информация об использовании памяти а Может быть недоступна, если запись информации о процессе выполняется из памяти.
Глава 5. Управление процессами 179 Отдельные компоненты внутри файлов cmdline и environ разделены символами нуля, а не символами перевода строки. Для того чтобы их содержимое было более чита- бельным, его можно фильтровать с помощью команды tr "\000" "\п". В подкаталоге fd открытые файлы представлены символьными ссылками. Дескрип- торы файлов, которые связаны с каналами или сетевыми сокетами, не имеют связанных с ними имен файлов. Вместо этого в качестве целевой ссылки ядро предоставляет обоб- щенное описание. Файл maps полезен при определении библиотек, с которыми связана или от которых зависит та или иная программа. • В системах Solaris и AIX также используется файловая система на основе ка- талога /ргос, но она не включает дополнительные данные о состоянии си- стемы и статистические сведения, генерируемые ядром (как в Linux). Группа SOLdriS инструментов, именуемая утилитами ргос, отображает некоторую полезную информацию о выполнении процессов. Например, команда procsig в AIX и ее Solaris-эквивалент psig выводят список сигналов для заданного процесса (сигнальные действия и обработчики сигналов). Самые полезные утилиты ргос и их функции приведены в табл. 5.8. Таблица 5.8. Команды чтения /ргос-информации в системах AIX и Solaris ЖЖ2 77"— pored [pid | pid] proccred [pid] Выводит/устанавливает реальный, текущий и со- храненный идентификаторы pldd [-F] [pid | pid] procldd [pid] Отображает библиотеки, связанные с процессом (подобно idd) psig [pid] procsig [pid] Перечисляет сигнальные действия и обработчики pfiles [pid] procfiles [pid] Выводит открытые файлы pwdx [pid] procwdx [pid] Выводит текущий рабочий каталог pwait [pid] procwait [pid] Ожидает завершения процесса а В Solaris некоторые proc-утилиты (это, в основном, инструменты отладки) принимают в качестве входных данных файл core. В системе HP-UX не используется файловая система /ргос или ее эквива- лент. 5.10. Отслеживание сигналов и системных вызовов: команды strace, truss и tusc Иногда определение действий, действительно выполняемых данным процессом, мо- жет быть затруднительным. Умозаключение приходится делать на основе косвенных дан- ных, полученных от файловой системы и с помощью таких средств, как программа ps. Linux позволяет непосредственно следить за процессом с помощью команды strace, которая отображает каждый системный вызов, выполняемый процессом, и каждый по- лучаемый им сигнал. Аналогичной командой для систем Solaris и AIX является команда truss. В HP-UX эквивалентом служит команда tusc, при этом утилиту tusc необходи- мо инсталлировать отдельно.
180 Часть I. Основы администрирования Эту команду можно даже связать с выполняемым процессом, последить за ним в те- чение некоторого времени, а затем отключиться от процесса, не прерывая его9. Хотя системные вызовы выполняются на сравнительно низком уровне абстракции, обыч- но вывод команды s trace позволяет получить достаточно полную информацию об ак- тивности процесса. Например, следующий журнал был получен в результате выполне- ния команды strace применительно к активной копии команды top. redhat$ sudo strace -p 5810 gettimeofday( {1116193814, 213881}, {300, 0} ) =0 open (’’/proc”, O_RDONLY | O_NONBLOCK | O_LARGEFILE | O_DIRECTORY) = 7 fstat64(7, {st_mode=S_IFDIR|0555, st_size=0, ...} ) =0 fcntl64(7, F_SETFD, FD_CLOEXEC) = 0 getdents64(7, /* 36 entries */, 1024) = 1016 getdents64(7, /* 39 entries */, 1024) = 1016 stat64("/proc/1”, {st_mode=S_IFDIR|0555, st_size=0, ...} ) =0 open("/proc/l/stat", O_RDONLY) = 8 read(8, "1 (init) S 0 0 0 0 -1 4194560 73’’..., 1023) = 191 close(8) . = 0 Команда s trace не только отображает имя каждого системного вызова, выполнен- ного процессом, но и раскрывает аргументы и отображает результирующий код, возвра- щенный ядром. Команда strace снабжена флагами, которые описаны в соответствующей man-стра- нице. Например, флаг -f используется для разветвленных процессов, и его полезно при- менять для отслеживания демонов (например, httpd), которые порождают множество дочерних процессов. Опция -е позволяет отображать только файловые операции, что особенно удобно для определения местоположения “неуловимых” файлов конфигурации. В этом примере команда top начинает свою работу с проверки текущего значения времени. Затем она открывает каталог /ргос и считывает его содержимое, тем самым получая список процессов, выполняемых в текущий момент. Команда top обраща- ется к статической копии каталога, представляющей процесс init, а затем открывает /ргос/1/stat, чтобы прочесть информацию о состоянии этого процесса. Вот даже более простой пример (применительно к команде date) использования ко- манды truss в системе Solaris. solaris$ truss date time() = 1242507670 brk(0x00024D30) = 0 brk(0x00026D30) = 0 open("/usr/share/lib/zoneinfo/US/Mountain”, O_RDONLY) = 3 fstat64 (3, OxFFBFFAFO) = 0 read(3, ’’ T Z i f\0\0\0\0\0\0\0\0”. ., 877) = 877 close(3) = 0 ioctl(l, TCGETA, 0xFFBFFA94) = 0 fstat64(l, 0xFFBFF9B0) = 0 write(1, ” S a t May 16 1’’.., 29) = 29 Sat May 16 14:56:46 MDT 2009 _exit (0) 9 По крайней мере, как правило. Команда strace может прерывать системные вызовы. В этих :лучаях отслеживаемый процесс должен быть подготовлен для повторного запуска этих вызовов. Гаково стандартное правило выполнения программ в среде UNIX, но оно не всегда соблюдается.
Глава 5. Управление процессами 181 Здесь после вывода информации о распределении памяти и библиотечных зависимо- стях (не показана), команда date использует системный вызов time для считывания си- стемного времени, открывает файл, соответствующий часовому поясу для определения нужного смещения, и выводит отметку даты и времени с помощью системного вызова write. 5.11. Процессы, вышедшие из-под контроля Ш Об обработке неуправляемых процессов рассказывается также в разделе 29.5. Неуправляемые процессы бывают двух видов: пользовательские, потребляющие слиш- ком много системных ресурсов (например, времени центрального процессора или диско- вого пространства), и системные, которые внезапно выходят из-под контроля и начи- нают вести себя непредсказуемо. Процесс первого вида может быть вполне работоспо- собным, просто он некорректно обращается с ресурсами. В то же время системные про- цессы всегда должны подчиняться определенным правилам. Процессы, занимающие слишком много времени центрального процессора, можно выявить, проанализировав результаты работы команды ps или top. Если очевидно, что пользовательский процесс потребляет больше ресурсов, чем ему действительно необхо- димо, его нужно исследовать. Кроме того, полезно выяснить номер процесса, ожидаю- щего выполнения. Используйте команду uptime, которая (помимо текущего времени и времени, отработанного системой) показывает число пользователей в системе и сред- нюю загруженность системы за последние 1, 5 и 15 минут. Прежде чем принимать к проблемному процессу серьезные меры, необходимо по- нять, какие действия он (этот процесс) старается выполнить. Это стоит сделать по двум причинам. Во-первых, процесс может быть вполне законным и действительно важным для пользователя. Нельзя же уничтожать процесс только из-за того, что он занимает много времени центрального процессора. Во-вторых, процесс может нести угрозу си- стеме и выполнять разрушительные действия. В этом случае нужно точно узнать, что он натворил (например, взломал пароли), и устранить повреждения. Процессы, которые используют значительный объем физической оперативной памя- ти, могут существенно снижать производительность системы. Размер памяти, занимае- мый процессами, можно проверить с помощью команды top. Столбец VIRT содержит информацию об общем объеме виртуальной памяти, зарезервированной каждым про- цессом, а столбец RES — информацию о части этой памяти, которая в текущий момент времени записана в конкретные страницы памяти (“резидентный набор”). В системах Linux приложения, которые используют видеокарту (например, сервер X), получают незаслуженное обвинение”, поскольку видеопамять включается в подсчет объема ис- пользуемой памяти. Оба значения могут отражать ресурсы совместного использования, такие как библи- отеки, что теоретически может приводить к неправильной оценке реальной ситуации. Более точная информация о памяти, потребляемой процессом, содержится в столбце dATa, который по умолчанию не отображается. Для того чтобы добавить этот столбец к информации, отображаемой командой top, после ее запуска нажмите клавишу <f> и выберите столбец DATA из списка. Отображаемое в этом столбце значение представляет °бъем памяти, занимаемый сегментами данных и стека каждого процесса, поэтому оно сРавнительно специфично для отдельных процессов (оно представляет собой остаток Деления на объем сегментов памяти совместного использования). По нему можно су-
182 Часть I. Основы администрирования дить как об относительном увеличении объема используемой памяти, так и об абсолют- ном ее объеме. Результаты работы неуправляемых процессов могут заполнить всю файловую систему и вызвать, таким образом, бесчисленные проблемы. При переполнении файловой си- стемы на экран выдается множество сообщений, и попытки записать что-либо на диск тоже повлекут за собой появление сообщений об ошибках. Первое, что нужно сделать в подобной ситуации, — определить, какая именно фай- ловая система заполнена и каким файлом она заполняется в данный момент. Об ис- пользовании файловой системы можно узнать с помощью команды df -к. В выходных данных этой команды поищите файловую систему, которая заполнена на 100% или бо- лее10. Для того чтобы понять, какой каталог занимает самую большую область памяти, используйте команду du для идентифицированной файловой системы. Повторяйте вы- полнение команды du до тех пор, пока не выявите самые большие файлы. Если вы не можете определить, какие процессы используют эти файлы, попробуйте получить боль- ше информации с помощью команд fuser и Isof (подробнее об этих командах см. раз- дел 6.2). Можно приостановить все подозрительные процессы, пока не обнаружится источник проблем. Выявив “нарушителя”, удалите все созданные им файлы и не забудьте возоб- новить “дисциплинированные” процессы. В случае, если некоторый файл содержит по- лезные или очень важные данные, было бы разумно сжать его с помощью утилиты gzip и переименовать. 5.12. Рекомендуемая литература • Bovet Daniel Р. and Marko Cesati. Understanding the Linux Kernel (3rd Edition). Sebas- topol, CA: O’Reilly Media, 2006. • Mckusick, Marshall Kirk and George V. Neville-Neil. The Design and Implementation of the FreeBSD Operating System. Reading, MA: Addison-Wesley Professional, 2004. • Роберт Лав. Разработка ядра Linux, 2-е изд. (пер. с англ.: ИД “Вильямс”, 2006 г.). 5.13. Упражнения 5.1. Объясните, какая связь существует между значением UID исполняемого файла и реальным и текущим идентификаторами выполняемого процесса. Каково назна- чение текущего идентификатора процесса, помимо контроля доступа к файлам? 5.2. Предположим, что кто-то из пользователей системы запустил длительный и ресур- соемкий процесс. а) как можно было бы распознать процесс, который узурпирует ресурсы? б) вы подозреваете, что этот процесс необходим пользователю и не должен быть уничтожен. С помощью каких команд можно приостановить процесс на время проверки? в) впоследствии выясняется, что процесс запущен начальником и должен быть 10 В большинстве реализаций файловых систем часть всей памяти (около 5%) резервируется “на всякий случай”, но процессы, выполняемые от имени суперпользователя, могут “вторгаться на эту территорию”, в результате чего отчеты могут содержать показатели использования памяти, превышающие 100%.
Глава 5. Управление процессами 35 продолжен. С помощью каких команд можно возобновить выполнение задания? г) теперь предположим, что процесс должен быть уничтожен. Какой сигнал нуж- но ему послать и почему? Что если необходимо гарантированно уничтожить процесс? 5.3. Найдите программу, в которой существует “утечка памяти” (при необходимости напишите собственную программу). Проследите за работой программы с помощью команды ps или top, обращая внимание на показатели использования памяти. 5.4. ★ Напишите простой Perl-сценарий обработки вывода команды ps для определе- ния суммы значений в столбцах VSZ и RSS для процесса, выполняющегося в си- стеме. Как эти показатели соотносятся с реальным объемом физической памяти и размером раздела подкачки?
глава Файловая система Ответьте, не раздумывая, на вопрос: что из перечисленного ниже можно считать эле- ментами файловой системы? • Процессы • Аудиоустройства • Структуры данных ядра и параметры настройки • Каналы межзадачного взаимодействия Если речь идет о системах UNIX или Linux, ответ будет таков: все перечисленное выше. Ну и, конечно же, в файловую систему входят собственно файлы1. Хотя основным назначением файловой системы является упорядочение хранимых ресурсов системы (т.е. файлов), программистам не хотелось каждый раз заново изобре- тать колесо при управлении объектами других типов. Очень часто оказывалось удобным представлять такие объекты в виде элементов файловой системы. Подобный унифи- цированный подход имеет как преимущества (единый программный интерфейс, лег- кий доступ из интерпретатора команд), так и недостатки (реализация файловых систем по методу доктора Франкенштейна), но независимо от того, нравится он вам или нет, именно такой подход применяется в UNIX (а значит, и в Linux). Файловую систему можно представить состоящей из четырех основных компо- нентов: • пространство имен — методы именования объектов и организации их в виде еди- ной иерархии; 1 Точнее говоря, эти элементы представлены внутри файловой системы. В большинстве случаев файловая система служит “местом встречи” клиентов с драйверами и серверами, которые им тре- буются.
Глава 6. Файловая система 185 • API2 — набор системных вызовов для перемещения между объектами и управле- ния ими; • модель безопасности — схема защиты, сокрытия и совместного использования объектов; • реализация — программный код, который связывает логические модели с диско- вой подсистемой. £ Э Сетевая файловая система, NFS, рассматривается в главе 18. В современных ядрах систем определен абстрактный интерфейс, позволяющий рабо- тать с различными файловыми системами. Одни части файлового дерева обрабатываются традиционной дисковой подсистемой, другие — управляются специальными драйверами ядра. Например, за работу файловых систем — как сетевых (Network File System — NFS), так и общих межсетевых (Common Internet File System — CIFS), — отвечает драйвер, ко- торый перенаправляет запросы серверу, расположенному на другом компьютере. К сожалению, концептуальные границы нечетко очерчены, поэтому имеется слиш- ком много “особых” случаев. К примеру, файлы устройств позволяют программам взаи- модействовать с драйверами ядра. Они не являются файлами данных, но обрабатывают- ся файловой системой, а их характеристики записываются на диск. Еще одним усложняющим (но, в конечном счете, полезным) фактором является то, что ядро поддерживает несколько типов дисковых файловых систем. Среди наиболее перспективных на данный момент файловых систем можно назвать ext3 и ext4, которые во многих дистрибутивах являются базовыми, а также ReiserFS, JFS компании IBM, ZFS компании Sun, VxFS компании Veritas. К этому списку можно добавить и Btrfs — новую свободную файловую систему, все еще разрабатываемую при поддержке компании Oracle. Есть много реализаций файловых систем с другой семантикой, таких как FAT и NTFS (используются в Microsoft Windows) и 9660 (применяется на компакт-дисках). Linux поддерживает больше файловых систем, чем любая другая разновидность UNIX. Столь широкий выбор упрощает обмен файлами с другими системами. Организация файловой системы — очень обширная тема, которую мы рассмотрим с нескольких точек зрения. В этой главе рассказывается, где обычно хранятся файлы, и описываются характеристики файлов, а также рассматриваются ключевые команды, по- зволяющие задавать атрибуты файлов. В главе 8 структура файловой системы описыва- ется на более низком уровне. В главе 18 рассматриваются средства совместного доступа к файлам, столь часто используемые в системе Linux. Средства совместного доступа к файлам в системе Microsoft Windows рассматриваются в главе 30. При столь большом разнообразии реализаций файловых систем может показаться странным, что данная глава посвящена всего лишь одной файловой системе. Однако на отдельных реализациях можно специально не останавливаться, поскольку в боль- шинстве современных файловых систем либо предприняты попытки обеспечить более эффективное и надежное применение традиционных функциональных возможностей, либо дополнительные функциональные возможности реализованы в качестве отдель- ного слоя, работающего поверх семантики стандартной файловой системы (некоторые Файловые системы реализуют оба направления). Как бы то ни было, слишком много программных пакетов ориентировано на описанную в этой главе модель, чтобы ею мож- но пренебречь. 2 Интерфейс прикладных программ (Application Programming Interface — API) — общий термин Дла описания набора подпрограмм, организованных в виде библиотеки или совокупности библио- Тек и доступных программистам.
186 Часть I. Основы администрирования 6.1. Имена файлов и каталогов Файловая система — это единая иерархическая структура, которая начинается с ка- талога / и разветвляется, охватывая произвольное число подкаталогов. Каталог само- го верхнего уровня называется корневым. Эта моноиерархическая система отличается от используемой в Windows, где применяется понятие пространства имен, основанное на принципе деления диска на разделы. Абсолютные и относительные пути Цепочка имен каталогов, через которые необходимо пройти для доступа к заданному файлу, вместе с именем этого файла образуют путь к файлу. Путь может быть абсо- лютным (например, /tmp/foo) или относительным (например, book4/filesystem). Последние интерпретируются начиная с текущего каталога. Возможно, многие считают, что текущий каталог задается интерпретатором команд. На самом деле текущий каталог есть у каждого процесса. (Большинство процессов никогда не изменяет свои рабочие ката- логи, и поэтому они просто наследуют текущий каталог процесса, который их запустил.) Термины имя файла и путь в той или иной степени являются взаимозаменяемыми (по крайней мере, так они трактуются в данной книге). Соответственно, имя файла бы- вает полным (абсолютный путь) или сокращенным (относительный путь). Файловое де- рево может иметь произвольную глубину, однако каждый компонент имени файла дол- жен состоять не более чем из 255 символов. Существует также ограничение на длину пути, который вы можете передавать ядру в качестве аргумента системного вызова (4095 байт в Linux и 1023 байт в более старых системах). Для того чтобы получить доступ к файлу, полное имя которого превышает эти ограничения, необходимо с помощью команды cd перейти в промежуточный ката- лог, а затем воспользоваться сокращенным именем. Использование пробелов в именах файлов На имена файлов и каталогов не налагаются никакие ограничения, за исключением того, что длина имени не должна превышать заданный предел и в имя нельзя включать символы косой черты и нулевые символы. В частности, допускаются имена, содержа- щие пробелы. К сожалению, по давней традиции аргументы командной строки в систе- ме UNIX разделяются пробелами, поэтому старые программы интерпретируют пробелы в именах файлов как признак конца одного имени и начала другого. Первоначально пробелы в именах файлов применялись в основном в файловых си- стемах, используемых на компьютерах Мас и PC, но теперь они проникли и в культуру UNIX и их можно встретить в некоторых стандартных программных пакетах. По этому поводу не может быть двух мнений: административные сценарии должны быть готовы к обработке пробелов в именах файлов (не говоря уже об апострофах, звездочках и других “опасных” знаках препинания). В интерпретаторе команд и его сценариях имена с пробелами необходимо просто за- ключать в двойные кавычки. Например, команда $ less "Му excellent file.txt" будет воспринята как попытка передать программе less единый аргумент Му excellent file. txt. Отдельные пробелы можно также предварять символом обратной косой чер- ты. Функция завершения имен файлов, предоставляемая современными интерпретато- рами (обычно она связана с клавишей <ТаЪ>), позволяет это делать автоматически.
Глава 6. Файловая система 187 При написании сценариев полезным инструментом является опция -printO коман- ды find. В сочетании с опцией -0 команды xargs эта опция позволяет сочетанию ко- манд f ind/xargs работать правильно независимо от наличия пробелов в именах фай- лов. Например, команда $ find /home -type f -size +1M -printO | xargs -0 Is -1 выводит длинный ls-список всех файлов, хранящихся в логическом разделе /home, раз- мер которых превышает один мегабайт. КЛ К сожалению, система HP-UX поддерживает команду find -printO, а не xargs -0. Система AIX не поддерживает ни один из этих вариантов. Но • в любой системе вы можете инсталлировать GNU-пакет findutils, чтобы получить текущие версии команд find и xargs. (В качестве альтернативного варианта вместо команды xargs можно использовать опцию -ехес команды find, хотя она работает менее эффективно.) 6.2. Монтирование и демонтирование ФАЙЛОВОЙ СИСТЕМЫ Файловое дерево формируется из отдельных частей, называемых файловыми систе- мами, каждая из которых содержит корневой каталог и список его подкаталогов и фай- лов. Термин “файловая система” имеет, по сути, два значения. С одной стороны, это составная часть файлового дерева, а с другой — все файловое дерево и алгоритмы, с по- мощью которых ядро управляет им. Как правило, значение термина становится ясным из контекста. Большинство файловых систем представляет собой разделы диска или логические то- ма с памятью на дисках, но, как уже было сказано, файловая система может принять об- лик всего, что подчиняется определенным функциональным правилам, — сетевых фай- ловых систем, компонентов ядра, резидентных дисков и т.д. В Linux и Solaris есть даже оригинальная файловая система, позволяющая монтировать отдельные файлы, как если бы они были физическими устройствами. Это очень удобно для разработки образов фай- ловых систем, поскольку отпадает необходимость в перераспределении дисковой памяти. В большинстве случаев файловые системы присоединяются к файловому дереву с по- мощью команды mount3. Эта команда связывает каталог существующего файлового дере- ва, называемый точкой монтирования, с корневым каталогом новой файловой системы. На время монтирования доступ к прежнему содержтаюму точки монтирования становится не- возможным. Впрочем, в большинстве случаев точка монтирования — это пустой каталог. Например, команда $ sudo mount /dev/sda4 /users монтирует на устройстве /dev/hda4 файловую систему /users. По окончании монтиро- вания можно с помощью команды Is /users просмотреть содержимое файловой системы. 3 Мы говорим “в большинстве случаев”, поскольку в файловой системе ZFS (в Solaris) принят несколько другой подход к монтированию и демонтированию, не говоря уже о других аспектах администрирования файловых систем. Возможно, читатели ожидали придирчивых комментариев относительно непозволительной несовместимости в этой части систем, но структура ZFS пред- ставляет собой значительное усовершенствование, и мы с нетерпением ожидаем того дня, когда °но будет взято на вооружение другими системами. Между тем мы считаем своим долгом описы- вать файловую систему ZFS несколько обособленно. Подробнее см. раздел 8.10.
188 Часть I. Основы администрирования Список смонтированных пользователями файловых систем хранится в файле /etc/ fstab, /etc/vfstab (Solaris) или /etc/filesystems (AIX). Благодаря этому возмож- ны автоматическая проверка (с помощью команды f sck) и монтирование (с помощью команды mount) файловых систем на этапе начальной загрузки, а также выполнение коротких команд наподобие mount /usr (точное местонахождение монтируемой фай- ловой системы ищется в файле /etc/f stab). Информация, содержащаяся в этом фай- ле, служит документацией к схеме расположения файловых систем на диске. Подробнее файл fstab описан в разделе 8.9. Файловые системы демонтируются командой umount. “Занятую” файловую систему демонтировать невозможно. В ней не должно быть ни открытых файлов, ни выполняю- щихся процессов с их текущими каталогами. Если демонтируемая файловая система со- держит исполняемые программы, они не должны быть запущены. д В системе Linux предусмотрена возможность “ленивого” демонтирования (с по- мощью команды umount -1), которая удаляет файловую систему из иерархии имен, но в действительности не демонтирует ее до тех пор, пока все существу- ющие файловые ссылки не будут закрыты. Полезность этой опции достаточно спорна. Во-первых, нет никакой гарантии, что существующие ссылки когда- либо будут закрыты сами по себе, кроме того, “наполовину демонтированное” состояние файловой системы может нарушать семантическую целостность для использующих ее программ. Они могут выполнять операции чтения и записи с существующими дескрипторами файлов, но не могут открывать но- вые файлы или выполнять какие-либо другие операции файловой системы. Команда umount -f предназначена для “насильственного” демонтирования заня- той файловой системы и поддерживается во всех рассмотренных нами системах. Однако не стоит использовать ее в системах, не использующих NFS. Кроме того, она может не применяться к определенным типам файловых систем (например, для таких, как систе- мы ext3 или ext4, которые ведут системные журналы). Вместо использования команды umount -f, когда оказывается, что файловая си- стема, которую вы пытаетесь демонтировать, занята, запустите команду fuser, чтобы узнать, какие процессы работают с файловой системой. Команда fuser -с точка_ монтирования выводит идентификаторы всех процессов, обращающихся к файлам или каталогам указанной файловой системы, а также ряд буквенных кодов, которые отобра- жают природу этой активности. $ fuser -с /usr /usr: 157tm 315ctom 474tom 5049tom 84tm 496ctom 490tm 16938c 16902ctm 358ctom 484tm Буквенные коды зависят от конкретной системы. Назначение кодов ниже описано в табл. 6.1, но детали обычно не имеют большого значения; главное для нас — идентифи- каторы процессов (PID). Таблица 6.1. Коды команды fuser -с Коды Значение f ,о Процесс открыл файл для чтения или записи с В файловой системе находится текущий каталог процесса e,t Процесс в данный момент выполняет программу г В файловой системе находится корневой каталог процесса (задается с помощью команды chroot) m,s Процесс отображает в памяти файл или совместно используемую библиотеку
Глава 6. Файловая система 189 Для того чтобы в точности определить, что собой представляют эти процессы, вызови- те команду ps, передав ей список идентификаторов, о которых сообщила команда fuser. ps -fp ’’157 315 5049” UID PID PPID C STIME TTY TIME CMD root 5049 490 0 Oct 14 ? 0:00 /usr/bin/Xll/xdm root 157 1 0 Jun 27 ? 5:26 /usr/sbin/named Ip 315 1 0 Jun 27 ? 0:00 /usr/lib/lpsched Список идентификаторов взят в кавычки, чтобы интерпретатор передал его команде ps как один аргумент. В системах Linux можно избежать необходимости задания идентификаторов (PID) в команде ps, выполнив команду fuser с флагом -v. Этот вариант коман- ды генерирует более читабельный результат, который включает имя команды. $ fuser -cv /usr USER PID ACCESS COMMAND /usr root 444 .. . .m atd root 499 .. . .m sshd root 520 ... .m Ipd Буквенные коды в столбце ACCESS такие же, как в результате выполнения команды fuser -с. Более удачной альтернативой команде fuser является утилита Isof. Утилита Isof — более сложная программа, чем fuser, и, соответственно, результаты ее работы более со- держательны. Она доступна на сайте people. f reebsd. org/~abe и работает во всех на- ших примерах систем. ДВ LicncTeMenux сценарии, предназначеШШ£.для поиска конкретной инфор- мации об использовании файловых систем процессами, располагают возмож- ностью непосредственного чтения файлов, хранящихся в каталоге /ргос. Од- нако команда Isof -F, форматирующая вывод команды Isof для облегчения синтаксического анализа, — более простое и переносимое решение: Для за- проса только той информации, которая действительно необходима, следует использовать дополнительные флаги командной строки. 6.3. Организация файловой системы Файловые системы в UNIX никогда не были хорошо организованы. Одновременно используется много разных, несовместимых соглашений об именовании файлов. Во многих случаях файлы группируются по выполняемым функциям, независимо от того, как часто они изменяются. Это затрудняет обновление операционной системы. Напри- мер, каталог /etc содержит ряд файлов, которые никогда не меняются, а также полно- стью локальные файлы. Как определить, какие файлы нельзя трогать при обновлении системы? Это нужно просто знать... Несмотря на некоторые нововведения, как, например, каталог /var (в качестве ме- ста хранения системных данных), файлы систем UNIX и Linux все еще недостаточно Упорядочены. Впрочем, для всего находится место. Особенно важно не менять стандарт- ИУ10 структуру файлового дерева, поскольку программные пакеты и их инсталляционные
190 Часть I. Основы администрирования утилиты часто ищут те или иные файлы в строго определенных каталогах. А если вы по- пробуете усовершенствовать стандартную структуру, можете столкнуться с проблемами. Ш О конфигурировании ядра рассказывается в главе 13. Корневая файловая система содержит корневой каталог и минимальный набор фай- лов и подкаталогов. Файл ядра находится в недрах корневой файловой системы, но не имеет стандартного имени или точного местоположения; в Solaris это даже не один файл, а, скорее, набор компонентов. Частью корневой файловой системы являются также каталог /etc для критических системных файлов и файлов конфигурации, каталоги /sbin и /bin — для важных ути- лит и иногда каталог /tmp — для временных файлов. Каталог /dev — это обычно ре- альный каталог, который включен в корневую файловую систему, но он (частично или полностью) может перекрываться другими файловыми системами, если ваша система виртуализировала поддержку своих устройств. (Подробнее см. в разделе 13.2.) Одни системы хранят совместно используемые библиотечные файлы и прочие важ- ные программы (например, препроцессор языка С) в каталоге /lib. Другие переместили эти элементы в каталог /usr/lib, оставив для каталога /lib роль символьной ссылки. Ш В разделе 8.6 приводятся аргументы в пользу того, зачем разбивать диск на разделы, и рассказывается, как именно это следует делать. Огромное значение имеют также каталоги /usr и /var. В первом хранится большин- ство стандартных программ и другие полезные компоненты, в частности интерактивная документация и библиотеки. Совсем не обязательно, чтобы каталог /usr был отдельной файловой системой, однако для удобства администрирования его, как правило, монти- руют именно так. Для того чтобы система могла загрузиться в многопользовательском режиме, необходимы оба каталога — /usr и /var. В каталоге /var содержатся буферные каталоги, журнальные файлы, учетная инфор- мация и прочие компоненты, специфичные для каждого компьютера. Поскольку при возникновении проблем журнальные файлы быстро разрастаются, рекомендуется поме- щать каталог /var в отдельную файловую систему. Домашние каталоги пользователей чаще всего хранятся в отдельной файловой си- стеме, которая обычно монтируется в корневом каталоге. Отдельные файловые системы можно использовать и для хранения больших информационных массивов, например би- блиотек исходных кодов программ и баз данных. Наиболее важные стандартные каталоги перечислены в табл. 6.2. Во многих системах man-страница hier (man-страница файловой системы в Solaris) содержит общие рекомендации по формированию файловой системы. Но не стоит ожи- дать, что реальная система во всех отношениях согласует свои действия с “генеральным планом”. Для получения полезной информации по данной теме советуем также обра- титься к странице Википедии “UNIX directory structure” (Структура каталогов UNIX). JS При написании стандарта Filesystem Hierarchy Standard для систем Linux (pathname. com/fhs) предпринимается попытка систематизировать и уни- фицировать стандартные каталоги, а также пояснить их назначение. Это пре- красный информационный ресурс, с которым можно сверяться при возник- новении вопросов, куда инсталлировать тот или иной компонент. Дополнительные соображения, касающиеся иерархии локальных каталогов, приве- дены в разделе 12.10.
Глава 6. Файловая система 191 Таблица 6.2. Стандартные каталоги и их содержимое Каталог OC« ‘ Содержимое* ", /bin Bee Команды операционной системы ядра6 /boot LS Ядро и файлы для его загрузки /dev Bee Файлы устройств: дисков, принтеров, псевдотерминалов и т.д. /etc Bee Важные файлы запуска и конфигурации системы /home Bee Стандартные домашние каталоги пользователей /kernel S Компоненты ядра /lib Bee Библиотеки, совместно используемые библиотеки и компоненты компилято- ра языка С /media LS Точки монтирования файловых систем на съемных носителях /mnt LSA Временные точки монтирования /opt Bee Программные пакеты необязательных приложений (которые пока не находят широкого применения) /proc LSA Информация о всех выполняющихся процессах /root LS Домашний каталог суперпользователя (часто просто /) /sbin Bee Команды, необходимые для обеспечения минимальной работоспособности системы8 /stand H Автономные утилиты, средства диагностики и форматирования дисков /tmp Bee Временные файлы, которые могут удаляться при перезагрузке /usr Bee Иерархия дополнительных файлов и программ /usr/bin Bee Большинство команд и исполняемых файлов /usr/include Bee Файлы заголовков, предназначенные для компиляции С-программ /usr/lib Bee Библиотеки и вспомогательные файлы для стандартных программ /usr/lib64 L 64-разрядные библиотеки для 64-разрядных дистрибутивов Linux /usr/local Bee Локальные программы (программы, создаваемые или устанавливаемые ло- кальным пользователем); отражает структуру каталога /usr /usr/sbin Bee Менее важные команды системного администрирования /usr/share Bee Элементы, общие для различных систем /usr/share/man Bee Страницы интерактивной документации /usr/src LSA Исходные коды нелокальных программных пакетов (не находит широкого применения) /usr/tmp Bee Дополнительный каталог для временных файлов, которые могут сохраняться при перезагрузке /var Bee Системные данные и конфигурационные файлы /var/adm Bee Разное: журнальные файлы, записи об инсталляции системы, администра- тивные компоненты /var/log LSA Системные журнальные файлы /var/spool Bee Буферные каталоги для принтеров, электронной почты и т.д. /var/tmp Bee Каталог для временного хранения файлов (после перезагрузки файлы не ис- чезают) “ L = Unux, S = Solaris, Н = HP-UX, А = AIX. в В системах HP-UX и AIX каталог /bin служит символьной ссылкой на каталог /usr/bin. отличительная особенность команд в каталоге /sbin обычно состоит в том, что они связаны со “стати- ческими” версиями системных библиотек и, следовательно, не имеют много зависимостей от других ча- стей системы.
192 Часть I. Основы администрирования 6.4. Типы ФАЙЛОВ В большинстве реализаций файловых систем определены семь типов файлов: • обычные файлы; • каталоги; • файлы байт-ориентированных (символьных) устройств; • файлы блочно-ориентированных (блочных) устройств; • локальные сокеты; • именованные каналы (реализующие принцип обслуживания FIFO (First in First Out, т.е. “первым поступил — первым обслужен”); • символические ссылки. Даже если разработчики добавляют в файловую систему что-нибудь новое и необыч- ное (например, информацию о процессах в каталог /ргос), им приходится маскировать это под файлы стандартных типов. Определить тип существующего файла можно с помощью команды Is -Id. Первый символ в строке вывода обозначает тип объекта. В следующем примере выдается инфор- мация о каталоге /usr/include. $ Is -Id /usr/include drwxr-xr-x 27 root root 4096 Jul 15 20:57 /usr/include Возможные коды для представления различных типов файлов перечислены в табл. 6.3. Таблица 6.3.Кодирование типов файлов в листинге команды 1s Тип файла Символ Создается командой Удаляется командой Обычный файл - Редакторы, ср и др. rm Каталог d mkdir rmdir, rm -r Файл символьного устройства с inknod rm Файл блочного устройства b mknod rm Локальный сокет S socket(2) rm Именованный канал Р mknod rm Символическая ссылка 1 In -s rm Как видно из табл. 6.3, команда rm является универсальным средством удаления фай- лов. Но как удалить файл, имя которого, скажем, -f? В большинстве файловых систем это абсолютно корректное имя, но команда rm -f не сделает то, что нужно, поскольку выражение -f будет воспринято как флаг команды. Выйти из положения можно, либо указав более полное имя (например, ./-f), либо воспользовавшись специальным аргу- ментом —, который сообщит команде rm о том, что остальная часть командной строки представляет собой имя файла, а не список аргументов: rm — -f. Похожая проблема возникает с файлами, в именах которых присутствуют управляю- щие символы, поскольку такие имена трудно или вообще невозможно воспроизвести с помощью клавиатуры. В подобной ситуации нужно воспользоваться метасимволами интерпретатора команд, чтобы задавать не имя целиком, а лишь его шаблон. Указывайте также опцию -i, чтобы команда rm требовала подтвердить удаление каждого файла. Это позволит не удалить нужные файлы, соответствующие шаблону. Вот как, к примеру, можно удалить файл с оригинальным именем foo<Ctrl+D>bar.
Глава 6. Файловая система $ 1S foo?bar foose kde-root $ rm -i foo* rm: remove ’foo\004bar'? у rm: remove ’foose’? n Команда Is отображает вместо управляющего символа знак вопроса, что иногда сбивает с толку4. Если забыть, что символ “?” тоже является подстановочным знаком интерпретатора, и попытаться выполнить команду rm foo?bar, можно удалить более одного файла (правда, не в данном примере). Ценность флага -i очень велика! Если имена файлов совсем уж сложно набирать, прибегните к последнему средству. rm -i * Еще одна возможность удаления файлов с причудливыми именами — использование другого интерфейса файловой системы, такого как режим представления каталогов ин- терпретатора emacs или визуального средства, подобного Nautilus. Обычные файлы Обычный файл — это просто последовательность байтов. Файловые системы не на- лагают ограничения на его структуру. Текстовые документы, файлы данных, программ- ные файлы, библиотеки функций и многое другое — все это хранится в обычных фай- лах. К их содержимому возможен как последовательный, так и прямой доступ. Каталоги Каталог хранит именованные ссылки на другие файлы. Он создается командой mkdir и удаляется (при условии, что он пуст) командой rmdir. Непустые каталоги можно уда- лить командой rm -г. Специальные ссылки “. ” и “.. ” обозначают сам каталрг и его родительский каталог соответственно. Такие ссылки нельзя удалить. Посколькукорневой каталог находит- ся на вершине иерархии, ссылка “.. ” в нем эквивалентна ссылке “. ”. Имя файла в действительности хранится в родительском каталоге, а не в самом фай- ле. На файл можно ссылаться из нескольких каталогов одновременно и даже из несколь- ких элементов одного и того же каталога, причем у всех ссылок могут быть разные име- на. Это создает иллюзию того, что файл одновременно присутствует в разных каталогах. Эти дополнительные “жесткие” (фиксированные) ссылки (которые следует отличать от символических, или “мягких”) можно считать синонимами для исходных файлов, и с точки зрения файловой системы все ссылки на файл эквивалентны. Файловая система подсчитывает количество ссылок на каждый файл и при удалении файла не освобождает блоки данных до тех пор, пока не будет удалена последняя ссылка на него. Ссылки не могут указывать на файл, находящийся в другой файловой системе. Жесткие ссылки создаются командой In и удаляются командой rm. Синтаксис ко- манды In легко запомнить, поскольку она является “зеркальным отражением” команды ср. Команда ср oldfile newfile создает копию файла oldfile с именем newfile, а команда In newfile oldfile преобразует имя newfile в дополнительную ссылку на файл oldfile. 4 Команда Is -b отображает специальные символы в виде восьмеричных значений, что может пригодиться, если их нужно отдельно идентифицировать. Так символ <Ctrl+A> отображается как “1” (\001 в восьмеричной системе), <Ctrl+B> — как “2” и т.д.
194 Часть I. Основы администрирования Жесткие ссылки можно создавать не только на файлы, но и на каталоги, но это де- лается довольно редко. Для того чтобы узнать, сколько ссылок существует на данный файл, используйте команду Is -1. (См. пример использования команды 1s в разделе 6.5.) Важно понимать, что жесткие ссылки не являются особым типом файлов, просто файловая система позволяет создавать несколько ссылок на один файл. Не только со- держимое, но и атрибуты файла, в частности, права доступа и идентификатор владельца, являются общими для всех ссылок. Файлы символьных и блочных устройств Ш Устройства и драйверы более подробно рассматриваются в главе 13. Файлы устройств позволяют программам получать доступ к аппаратным средствам и периферийному оборудованию системы. Ядро включает (или загружает) специальные программы (драйверы), которые во всех деталях “знают”, как взаимодействовать с каж- дым из имеющихся устройств, поэтому само ядро может оставаться относительно аб- страктным и независимым от оборудования. Драйверы устройств образуют стандартный коммуникационный интерфейс, кото- рый воспринимается пользователем как совокупность обычных файлов. Получив за- прос к файлу символьного или блочного устройства, файловая система передает этот запрос соответствующему драйверу. Важно отличать файлы устройств от драйверов этих устройств. Файлы сами по себе не являются драйверами. Их можно рассматривать как шлюзы, через которые драйвер принимает запросы. Файлы символьных устройств позволяют связанным с ними драйверам выполнять соб- ственную буферизацию ввода-вывода. Файлы блочных устройств обрабатываются драй- верами, которые осуществляют ввод-вывод большими порциями, а буферизацию вы- полняет ядро. В прошлом некоторые типы аппаратных средств могли быть представлены файлами любого типа, но в современных системах такая конфигурация встречается редко. Файлы устройств характеризуются двумя номерами: старшим и младшим. Старший номер устройства позволяет ядру определить, к какому драйверу относится файл, а младший номер, как правило, идентифицирует конкретное физическое устройство. На- пример, старший номер устройства 4 в Linux соответствует драйверу последовательного порта. Таким образом, первый последовательный порт (/dev/ttyO) будет иметь стар- ший номер 4 и младший номер 0. Драйверы могут интерпретировать переданные им младшие номера устройств как угодно. Например, драйверы накопителей на магнитных лентах с помощью этого номе- ра определяют, необходимо ли перемотать ленту после закрытия файла устройства. В далеком прошлом /dev играл роль общего каталога, а файлы устройств, которые в нем хранились, создавались с помощью команды mknod и удалялись командой rm. Стандартизировать работу по созданию файлов устройств помогал сценарий с именем MAKEDEV. К сожалению, эта “сырая” система плохо справлялась с безбрежным морем драйве- ров и типов устройств, которые появились в последние десятиления. Кроме того, она способствовала возникновению разного рода потенциальных конфигурационных несты- ковок: например, файлы устройств ссылались на несуществующие устройства, устрой- ства оказывались недоступными, поскольку они не имели файлов устройств, и т.д. В наши дни в большинстве систем реализована некоторая форма автоматического управления файлами устройств, которая позволяет системе играть более активную роль в конфигурировании собственных файлов устройств. Например, в Solaris каталоги /dev и /devices полностью виртуализированы. В дистрибутивах Linux каталог /dev являет-
Глава 6. Файловая система 195 ся стандартным, но управлением файлами внутри него занимается демон udevd. (Демон udevd создает и удаляет файлы устройств в ответ на изменения в оборудовании, о кото- рых сообщает ядро.) Подробнее о методах решения этой задачи в разных системах на- писано в главе 13. Локальные сокеты Установленные посредством сокетов соединения позволяют процессам взаимодей- ствовать, не подвергаясь влиянию других процессов. В системе UNIX поддерживается несколько видов сокетов, использование которых, как правило, предполагает наличие сети. Локальные сокеты доступны только на локальном компьютере, и обращение к ним осуществляется через специальные объекты файловой системы, а не через сетевые пор- ты. Иногда такие сокеты называют UNIX-сокетами. CQ Подробнее о системе Syslog рассказывается в главе 11. Несмотря на то что другие процессы распознают файлы сокетов как элементы ка- талога, только процессы, между которыми установлено соответствующее соединение, могут осуществлять над файлом сокета операции чтения и записи. В качестве примеров стандартных средств, использующих локальные сокеты, можно назвать системы X Win- dow и Syslog. Локальные сокеты создаются с помощью системного вызова socket. Когда с обеих сторон соединение закрыто, сокет можно удалить командой rm или с помощью систем- ного вызова unlink. Именованные каналы Подобно локальным сокетам, именованные каналы обеспечивают взаимодействие двух процессов, выполняемых на одном компьютере. Такие каналы еще называют фай- лами FIFO (First In, First Out — “первым поступил, первым обслужен”). Они создаются командой mknod и удаляются командой rm. Как и в случае локальных сокетов, реальные экземпляры именованных каналов весь- ма немногочисленны и нечасто встречаются. Они редко требуют административного вмешательства5. Именованные каналы и локальные сокеты имеют практически одинаковое назначе- ние, а их обоюдное существование сложилось исторически. Если бы системы UNIX и Linux разрабатывались в наши дни, то об этих средствах взаимодействия вопрос бы не стоял; сейчас их заменили бы сетевые сокеты. Символические ссылки Символическая, или “мягкая”, ссылка позволяет вместо имени файла указывать его псевдоним. Столкнувшись при поиске файла с символической ссылкой, ядро извлекает хранящееся в ней имя. Разница между жесткими и символическими ссылками состоит в том, что жесткая ссылка является прямой, т.е. указывает непосредственно на индексный дескриптор файла, тогда как символическая ссылка указывает на файл по имени. Файл, адресуемый символической ссылкой, и сама ссылка представляют собой разные объек- ты файловой системы. 5 По словам нашего рецензента, “программа Nagios (см. раздел 21.12) использует именованные каналы, и иногда ей необходима помощь”.
196 Часть I. Основы администрирования Символические ссылки создаются командой In -s и удаляются командой rm. Они могут содержать произвольное имя, т.е. разрешается указывать на файлы, хранящиеся в других файловых системах, и даже на несуществующие файлы. Иногда несколько сим- волических ссылок образуют петлю. Символическая ссылка может хранить как полное, так и сокращенное имя файла. Например, команда $ sudo In -s archived/secure /var/log/secure посредством относительного пути связывает имя /var/log/secure с именем /var /log/archived/secure. Как видно из следующего результата выполнения команды 1s, полученная символическая ссылка будет содержать строку “archived/secure”. $ Is -1 /var/log/secure Irwxrwxrwx 1 root root 18 2009-07-05 12:54 /var/log/secure -> archived/secure6 Каталог /var/log можно переместить куда угодно, но символическая ссылка оста- нется корректной. Часто ошибочно думают, будто первый аргумент команды In -s должен преобразо- вываться с учетом текущего каталога. На самом деле он не раскрывается командой In (как имя файла), а просто записывается в виде литеральной строки, которая становится объектом символической ссылки. 6.5. Атрибуты файлов В традиционной модели файловой системы UNIX и Linux каждому файлу соответ- ствует набор из девяти битов режима. Они определяют, какие пользователи имеют правое читать файл, записывать в него данные или запускать его на выполнение. Вместе с дру- гими тремя битами, которые в основном влияют на работу исполняемых файлов, этот набор образует код, или режим, доступа к файлу. Двенадцать битов режима хранятся вместе с четырьмя дополнительными битами, оп- ределяющими тип файла. Эти четыре бита устанавливаются при создании файла и не подлежат изменению. Биты режима могут изменяться владельцем файла или суперполь- зователем с помощью команды chmod (“change mode” — изменить режим). Просмотр значений этих битов осуществляется с помощью команды Is -1 (или Is -Id в случае каталога). Пример приведен далее в этой главе. Биты режима Девять битов режима определяют, кто и какие операции может выполнять над фай- лом. Традиционная система UNIX не позволяет устанавливать режим на уровне отдель- ного пользователя (хотя теперь списки управления доступом поддерживаются во всех основных системах). Подробнее это описано в разделе 6.6. Вместо этого три различ- ных набора битов определяют права доступа, предоставляемые владельцу файла, чле- нам группы, которой принадлежит файл, и прочим пользователям (в таком порядке). Каждый набор состоит из трех битов: бита чтения, записи и выполнения. 6 Права доступа к файлу, отображаемые командой 1s для символической ссылки Irwxrwxrwx, представляют собой фиктивные значения. Права на создание, удаление или разрешение ссылки управляются содержащим ее каталогом, в то время как права чтения, записи или выполнения для файла, указываемого ссылкой, предоставляются собственными правами целевого файла. Следо- вательно, символическая ссылка не нуждается (и не обладает) ни в какой собственной информа- ции о правах доступа.
Глава 6. Файловая система 197 Код доступа удобно записывать в виде восьмеричного числа, так как каждая цифра в нем представляется тремя битами. Три старших бита (в коде доступа им соответствуют восьмеричные значения 400, 200 и 100) служат для управления доступом к файлу его владельца. Вторые три бита (40, 20 и 10) задают доступ для членов группы. Последние три бита (4, 2 и 1) определяют доступ к файлу остальных пользователей. Старший бит каждой триады — это бит чтения, средний — бит записи, младший — бит выполнения. Каждый пользователь попадает только в одну из категорий прав доступа. В случае неоднозначности выбираются самые строгие права. Например, права владельца файла всегда определяются триадой битов владельца и никогда — битами группы. Возможна ситуация, когда другие пользователи имеют больше прав, чем владелец, но такая конфи- гурация используется редко. Для обычного файла бит чтения означает возможность открывать и читать файл. Бит записи позволяет изменять содержимое файла, в том числе полностью очищать его. Правом удаления и переименования файла управляют биты, заданные для его родитель- ского каталога, поскольку именно там хранится имя файла. Установкой бита выполнения задается разрешение запускать файл. Существует два типа исполняемых файлов: бинарные файлы, которые выполняются непосредственно центральным процессором, и сценарии, обрабатываемые интерпретатором команд или какой-нибудь другой аналогичной программой. В соответствии с принятыми соглаше- ниями, сценарии начинаются со строки примерно такого вида. #! /usr/bin/perl Здесь задается соответствующий интерпретатор. Текстовые исполняемые файлы, в кото- рых не указан конкретный интерпретатор, считаются сценариями bash или sh7. Будучи установленным для каталога, бит выполнения (в этом контексте его часто на- зывают битом поиска) разрешает переходить в каталог или проходить через него при до- ступе к файлу, но без получения списка содержимого каталога. Последнее (т.е. получе- ние списка) становится возможным, если для каталога задана комбинация битов чтения и выполнения. Комбинация битов записи и выполнения позволяет создавать, удалять и переименовывать файлы в данном каталоге. Традиционную девятибитовую модель режимов способны усложнить и переопреде- лить многие такие расширения, как списки управления доступом (см. раздел 6.6), систе- ма SELinux, т.е. Linux с улучшенной безопасностью (см. раздел 22.9), и “бонусные” биты режимов, определяемые отдельными файловыми системами (см. последний подраздел данного раздела). Если окажется, что вы не можете объяснить поведение своей фай- ловой системы, проверьте, оказывает ли на нее влияние один из перечисленных выше факторов. Биты setuid и setgid Биты, которым в коде доступа соответствуют восьмеричные значения 4000 и 2000, — это биты смены идентификатора пользователя (setuid) и идентификатора группы (setgid). Если эти биты установлены для исполняемых файлов, они позволяют про- граммам получать доступ к файлам и процессам, которые при прочих обстоятельствах недоступны пользователю, выполняющему эти программы. Подробнее этот механизм был описан в разделе 4.1. 7 Когда файл начинается с символов # /, он в первую очередь обрабатывается ядром. Но если интерпретатор команд не указан или указан неправильно, ядро откажется выполнять файл. В этом случае текущий интерпретатор предпримет вторую попытку, попытавшись выполнить сценарий в интерпретаторе sh.
198 Часть I. Основы администрирования Если бит setgid установлен для каталога, то создаваемые в нем файлы будут при- нимать идентификатор группы каталога, а не группы, в которую входит владелец фай- ла. Это упрощает пользователям, принадлежащим к одной группе, совместный доступ к каталогам. Следует также учитывать, что для исполняемого файла бит setgid имеет другое значение. Бит setgid можно устанавливать для файлов, не являющихся исполняемыми. Тем самым запрашивается специальный режим блокирования файлов при их открытии. Правда, нам не известны случаи использования этой возможности. Дополнительный бит Бит, которому в коде доступа соответствует восьмеричное значение 1000, называется дополнительным (sticky bit). В первых UNIX-системах дополнительный бит запрещал вы- грузку программ из памяти. Сегодня он утратил свое значение и, попросту, игнорируется. Если дополнительный бит установлен для каталога, то файловая система позволит удалять и переименовывать его файлы только владельцу каталога, владельцу файла или суперпользователю. Иметь одно лишь право записи в каталог недостаточно. Такая мера позволяет несколько лучше защитить каталоги вроде /tmp. Системы Solaris и HP-UX менее строги в обработке дополнительных катало- soians гов: вы можете удалить файл в дополнительном каталоге, если у вас есть на КСа него право записи (даже если вы не являетесь его владельцем). В этом дей- ствительно есть здравый смысл, но об этом отличительном нюансе не стоит забывать. Команда Is: просмотр атрибутов файла Файловая система хранит для каждого файла около сорока информационных по- лей; большая часть из них используется самой файловой системой. Администратора, в основном, интересует количество жестких ссылок, владелец, группа, код доступа, время последнего обращения и последней модификации, размер и тип файла. Всю эту инфор- мацию можно получить с помощью команды Is -1 (или команды Is -Id в случае ката- лога; без флага -d команда 1s перечисляет содержимое каталога). Для каждого файла хранится также время последнего изменения атрибутов. Тради- ционное название этого поля (“crime” от “change time” — время изменения) многих вво- дит в заблуждение, так как они полагают, что это время создания файла. На самом деле здесь зафиксировано время последнего изменения одного из атрибутов файла (владелец, код доступа и так далее), но не его содержимого. Рассмотрим пример. $ Is -1 /bin/gzip -rwxr-xr-x 3 root root 62100 May 28 2010 /bin/gzip В первом поле задается тип файла и режим доступа к нему. Поскольку первый сим- вол — дефис, значит, перед нами обычный файл (см. табл. 6.3). Следующие девять символов — это три набора битов режима. Порядок наборов та- ков: владелец, группа, другие пользователи. В листинге команды 1s биты режима пред- ставляются буквами г, w и х (чтение, запись и выполнение). В показанном примере вла- делец имеет все права доступа к файлу, а остальные пользователи — только право на чтение и выполнение.
Глава 6. Файловая система 199 Если бы был установлен бит setuid, то вместо буквы х, обозначающей право вла- дельца на выполнение, стояла бы буква s. В случае бита setgid вместо буквы х для группы тоже была бы указана буква s. Последний бит режима (право выполнения для других пользователей) представляется буквой t, когда для файла задан sticky-бит. Если бит setuid/setgid или sticky-бит установлен, а надлежащий бит выполнения — нет, эти биты представляются символами S и т, что указывает на игнорирование данных атрибутов вследствие ошибки. Второе поле листинга представляет собой счетчик ссылок на файл. В данном случае здесь стоит цифра 3, свидетельствующая о том, что /bin/gzip — одно из трех имен файла (два других — /bin/gunzip и /bin/zcat). Каждый раз при создании жесткой ссылки на файл этот счетчик увеличивается на единицу. Символические ссылки в счет- чике не учитываются. Любой каталог имеет минимум две жесткие ссылки: из родительского каталога и из специального файла “. ” внутри самого каталога. Следующие два поля определяют владельца и группу файла. В данном примере файл принадлежит пользователю root и одноименной группе. В действительности ядро хра- нит эти данные не в строковом виде, а в виде идентификаторов. Если символьные вер- сии идентификаторов определить невозможно, в этих полях будут отображаться числа. Так происходит, когда запись пользователя или группы была удалена из файла, соот- ветственно, /etc/passwd или /etc/group. Не исключено также, что возникла ошибка в базе данных NIS или LDAP (описана в главе 19), если она используется. В следующем поле отображается размер файла в байтах. Рассматриваемый файл име- ет размер 62100 байт. Далее указана дата последней модификации файла: 28 мая 2010 г. В последнем поле листинга приведено имя файла: /bin/gzip. Для файла устройства команда 1s выдает несколько иную информацию. $ Is -1 /dev/ttyO crw-rw---1 root root 4, 0 Jun 11 20:41 /dev/ttyO Большинство полей те же, но вместо размера в байтах показаны старший и младший номера устройства. Имя /dev/ttyO относится в данной системе (Red Hat) к первой виртуальной консоли, управляемой драйвером устройства 4 (драйвер терминала). При поиске жестких ссылок может пригодиться команда Is -i, отображающая для каждого файла номер его индексного дескриптора. Не вдаваясь в детали реализации файловой системы, скажем, что этот номер представляет собой индекс таблицы, в ко- торой перечислены все файлы системы. Именно на индексные дескрипторы ссылают- ся файловые записи каталогов. Жесткие ссылки, указывающие на один и тот же файл, будут иметь одинаковый номер. Для того чтобы составить представление о “паутине” ссылок, воспользуйтесь командой Is -li для определения числа ссылок и номера ин- дексного дескриптора какого-нибудь файла, а затем поищите его “двойников” с помо- щью команды find8. Другими важными опциями команды 1s являются -а, отображающая все записи в каталоге (даже те файлы, имена которых начинаются с точки), -t, выполняющая сорти- ровку файлов по времени изменения (или -tr, осуществляющая сортировку в обратном хронологическом порядке), -F, отображающая имена файлов с выделением ййталогов и исполняемых файлов, -R, выводящая рекурсивный список, и -h, которая отображает размеры файлов в удобной для человеческого восприятия форме (например, 8К или 53М). 8 Выполните команду find точка монтирования -xdev -inum индексный— де скрип- — А.
200 Часть I. Основы администрирования Команда chmod: изменение прав доступа Код доступа к файлу можно изменить с помощью команды chmod. Такое право есть лишь у владельца файла и пользователя root. В первых UNIX-системах код доступа задавался в виде восьмеричного числа. В современных версиях поддерживается также система мнемонических обозначений. Первый способ удобнее для системного админи- стратора, но при этом можно задать только абсолютное значение кода доступа. В случае использования мнемонического синтаксиса разрешается сбрасывать и устанавливать от- дельные биты режима. Первым аргументом команды chmod является спецификация прав доступа. Второй и последующий аргументы — это имена файлов, права доступа к которым подлежат измене- нию. При использовании восьмеричной формы записи первая цифра относится к владель- цу, вторая — к группе, а третья — к другим пользователям. Если необходимо задать биты setuid/setgid или дополнительный бит, следует указывать не три, а четыре восьмерич- ные цифры: первая цифра в этом случае будет соответствовать трем специальным битам. В табл. 6.4 показано восемь возможных комбинаций для каждого трехбитового набо- ра, где символы г, w и х обозначают право чтения, записи и выполнения соответственно. Таблица 6.4. Коды доступа в команде chmod Двоичное Режим . доступа Восьмеричное Двоичное Режим < доступа ' л число число 0 ООО — 4 100 г— 1 001 —X 5 101 г-х 2 010 -w- 6 110 rw- 3 011 -wx 7 111 rwx Например, команда chmod 711 myprog предоставляет владельцу все права, а осталь- ным пользователям — только право выполнения9. При использовании мнемонического синтаксиса вы объединяете множество испол- нителей (и — пользователь, g — группа или о — другой) с оператором (+ — добавить, ---удалить и = — присвоить) и набором прав доступа. Более подробное описание мне- монического синтаксиса можно найти на man-странице команды chmod, но синтаксис всегда лучше изучать на примерах. В табл. 6.5 приведено несколько примеров мнемони- ческих спецификаций. Таблица 6,5, Примеры мнемонических спецификаций команды chmod 1шйи^|щций Назначение ~J : ” —' ' ' ! ......'........>.......... .....'....,... ....... - u+w Владельцу файла дополнительно дается право записи ug=rw,o=r Владельцу и членам группы дается право чтения/записи, остальным пользователям — право чтения а-х У всех пользователей отбирается право выполнения ug=srx,o= Владельцу и членам группы дается право чтения/выполнения, устанавливаются также биты SUID и SGID; остальным пользователям запрещается доступ к файлу g=u Членам группы предоставляются такие же права, что и владельцу 9 Если файл myprog является сценарием интерпретатора команд, должно быть задано также право чтения для остальных пользователей. Файлы сценариев, запускаемые интерпретатором, от- крываются и читаются в текстовом виде, а бинарные файлы выполняются непосредственно ядром, поэтому для них не нужно задавать право чтения.
Глава 6. Файловая система 201 Символ u (“wser”) обозначает владельца файла, g (“group”) — группу, о (“others”) — других пользователей, a (“oil”) — всех пользователей. В системах Linux и OpenSolaris у существующего файла можно “заимство- soians вать” права доступа. Например, при выполнении команды Д chmod —reference=f ilea f ileb код доступа для файла f ileb будет уста- новлен таким же, как у файла f ilea. При наличии опции -R команда chmod будет рекурсивно обновлять права доступа ко всем файлам указанного каталога и его подкаталогов. Здесь удобнее всего придержи- ваться мнемонического синтаксиса, чтобы менялись только те биты, которые заданы явно. Например, команда $ chmod -R g+w mydir добавляет групповое право записи к каталогу mydir и его содержимому, не затрагивая остальные права. При установке битов выполнения будьте осторожны с выполнением команды chmod -R. Ведь применительно к каталогу и файлу бит выполнения интерпретируется по-разному. Поэтому вряд ли реальный результат выполнения команды chmod -R а-х будет соответствовать ожидаемому вами. Команды chown и chgrp: смена владельца и группы Команды chown и chgrp предназначены для изменения владельца файла и группы соответственно. Синтаксис этих команд подобен синтаксису команды chmod, за ис- ключением того, что первый аргумент содержит нового владельца или группу соот- ветственно. Для того чтобы изменить группу файла, необходимо либо быть владельцем файла и входить в назначаемую группу, либо быть пользователем root. Правила изменения вла- дельца в целом усложнились и зависят от конкретной системы. В большинстве систем предусмотрены средства настройки поведения команды chown в зависимости от выпол- няемого процесса. Как и команда chmod, команды chown и chgrp имеют флаг -R, который задает смену владельца или группы не только самого каталога, но и всех его подкаталогов и файлов. Например, последовательность команд $ sudo chown -R matt ^matt/res tore $ sudo chgrp -R staff ~matt/restore можно применить для восстановления из резервной копии владельца и группы файлов Для пользователя matt. Если вы устанавливаете домашний (исходный) каталог пользо- вателя, не следует пытаться выполнять команду chown для файлов, имена которых на- чинаются с точки. $ sudo chown -R matt ~matt/. * Дело в том, что указанному шаблону соответствует также файл ~matt/. ., поэтому бу- дет изменен владелец родительского каталога и, возможно, домашних каталогов других пользователей. Команда chown может изменить владельца файла и группу одновременно с помощью такого синтаксиса. chown пользователь:группа файл ...
202 Часть I. Основы администрирования Например: $ sudo chown -R matt:staff -matt/restore В системах Linux и Solaris этот синтаксис позволяет опустить либо элемент soians пользователь, либо элемент группа, что делает команду chgrp ненужной. Л Если вы включите в синтаксис команды двоеточие, но не укажете элемент /А группа, в команде chown будет использована стандартная группа пользова- теля. Команда umask: задание стандартных прав доступа Встроенная команда umask позволяет менять стандартный режим доступа к созда- ваемым файлам. Каждый процесс имеет собственный атрибут umask; встроенная в ин- терпретатор команда umask устанавливает собственное значение umask, которое затем наследуется выполняемыми вами командами. Значение umask задается в виде трехзначного восьмеричного числа, которое соот- ветствует аннулируемым правам доступа. При создании файла код доступа к нему уста- навливается равным разнице между величиной, которую запрашивает создающая файл программа, и значением umask. В табл. 6.6 перечислены возможные комбинации битов режима для команды umask. Таблица 6.6. Схема кодирования значения umask еричное Двоичное число ' '--Ж Режим доступа ?» . А...-л4Ж 0 000 rwx 4 100 -wx 1 001 rw- 5 101 -W- 2 010 r-x 6 110 —х 3 011 г— 7 111 — Например, команда umask 027 предоставляет все права владельцу файла, запрещает читать файл членам группы и не дает никаких прав другим пользователям. Стандартное значение umask равно, как правило, 022, т.е. право модификации файла предоставляет- ся только его владельцу. CQ О стандартных конфигурационных сценариях речь идет в главе 7. Нельзя заставить пользователей придерживаться конкретного значения umask, так как они в любой момент могут изменить его. Можно, однако, задать стандартное значе- ние umask в тех копиях файла .profile, которые предоставляются новым пользовате- лям системы. Дополнительные флаги в системе Linux В файловых системах ext2, ext3 и ext4 определен ряд вспомогательных флагов, ус- танавливая которые можно запрашивать особые режимы обработки файлов (здесь важ- но подчеркнуть слово “запрашивать”, поскольку многие флаги еще не реализованы). Например, один флаг делает файл доступным только для дополнения, а другой — недо- ступным для изменения и удаления. В связи с тем что эти флаги являются специфической особенностью файловых си- стем серии ext*, в Linux для их просмотра и изменения предназначены специальные
Глава 6. Файловая система 203 команды Isattr и chattr. В табл. 6.7 перечислены действительно реализованные фла- ги (в настоящее время в интерактивной документации описаны только около половины этих флагов). Таблица 6.7. Дополнительные флаги файловых систем ext2 и ext3 'флаг Назначение 7 7 ^'7Ж^7,. 7}^77‘7 : ~ 7,; А Никогда не обновлять время доступа (в целях повышения производительности) а Разрешить запись в файл только в режиме добавления (может устанавливаться лишь суперполь- зователем) D Включить режим синхронной записи изменений каталога d Не создавать резервные копии (команда dump будет игнорировать такой файл) i Сделать файл неизменяемым и неудаляемым (может устанавливаться лишь суперпользователем) S Включить режим синхронной записи изменений (буферизация отсутствует) Не вполне ясно, имеют ли остальные флаги, за исключением d, практическую цен- ность. Флаги а и i изначально задумывались как дополнительное средство защиты си- стемы от хакеров и злонамеренных программ. К сожалению, они лишь мешают работе полезных программ, отпугивая только тех хакеров, которые не знают о существовании команды chattr -ia. Исследования показали, что эти флаги чаще используются.сами- ми хакерами, чем для защиты от них. Особого внимания заслуживают флаги S и D. Поскольку при внесении измене- ний они заставляют немедленно записывать на диск все страницы памяти, связанные с файлом или каталогом, может показаться, будто это служит дополнительной защитой данных на случай сбоя. На самом же деле порядок выполнения операций, связанных с синхронными обновлениями, весьма необычен и, как стало известно, мешает рабо- те команды f sck. В результате процедура восстановления поврежденной файловой си- стемы усложняется, вместо того чтобы стать более надежной. Обычно лучше использо- вать возможность ведения журнала файловой системы, поддерживаемую ext3 и ext4. Опция j может вызвать запись в журнал информации об определенных файлах (правда, за счет некоторого снижения производительности системы). 6.6. Списки КОНТРОЛЯ ДОСТУПА Традиционная девятибитовая система контроля доступа (access control system — ACL) “владелец/группа/другие” позволяет решать большинство задач администрирования. Хотя ей присущи явные ограничения, она хорошо согласуется с традициями (кое-кто может сказать “с прошлыми традициями”) простоты и предсказуемости UNIX. Практически все другие операционные системы используют значительно более сложный метод управления доступом к файлам: списки управления доступом или ACL. Каждому файлу или каталогу может соответствовать список ACL, в котором перечис- лены правила установки прав доступа к данному файлу или каталогу. Каждое правило в списке ACL называется записью управления доступом (access control entry — АСЕ). В общем, запись контроля доступа идентифицирует пользователя или группу, к кото- рой она применяется, и определяет набор привилегий, которыми наделяются эти поль- зователи. Списки ACL не имеют фиксированной длины и могут содержать определения пРав множества пользователей или групп. Большинство операционных систем ограни-
204 Часть I. Основы администрирования чивает длину отдельного списка ACL, но это ограничение может быть довольно слабым (обычно 32 записи), которое достигается не часто. Более сложные системы позволяют администраторам указывать частичные наборы прав или отрицательные права, а некоторые из систем поддерживают наследование, ко- торое позволяет определять права доступа для передачи их вновь создаваемым элемен- там файловых систем. Конечно, системы ACL предоставляют больше возможностей, чем традиционная мо- дель UNIX, но они и сложнее ее на порядок как для администраторов, так и для разра- ботчиков программ. Используйте их с большой осторожностью. Они не только сложнее в использовании, но и могут порождать проблемы при использовании в сочетании с “не имеющими понятия” об ACL-списках системами резервного копирования, узлами NFS и даже такими простыми программами, как текстовые редакторы. Списки ACL тяготеют к беспорядку, и поэтому со временем они становятся непри- годными для управления. Краткий обзор развития UNIX-списков ACL В следующих разделах рассмотрим различные системы ACL, которые поддерживаются в UNIX и Linux, а также наборы команд, предназначенные для управления ими. Но сна- чала необходимо ответить на вопрос: “Как эти списки ACL превратились в катастрофу?” Обычно объект рассматривается как история политики, денег и ветвлений. В дан- ном случае базовое понимание истории помогает наложить на реальность некоторую структуру. Подкомитет POSIX впервые начал работать над ACL для UNIX в средине 1990-х годов. В первом приближении модель POSIX ACL просто расширила традиционную UNIX-систему прав доступа (rwx), чтобы удовлетворить потребности в привилегиях раз- личных пользователей и групп. К сожалению, проект POSIX не стал официальным стандартом, и рабочая группа бы- ла расформирована в 1998 году. Тем не менее некоторые компании реализовали системы POSIX ACL “на свой вкус”. Нашлись и такие компании, которые создали собственные системы ACL. Но поскольку в этой области лидер четко не обозначился, все реализации выглядели по-разному. Тем временем для систем UNIX и Linux стало практически нормой использовать файловые системы совместно с Windows, которая имеет собственные ACL-соглашения. Здесь напряжение в нашей истории возрастает, поскольку Windows создает множество функций, которых нет ни в традиционной модели UNIX, ни в ее эквиваленте POSIX ACL. Кроме того, списки ACL в системе Windows семантически более сложные; напри- мер, они позволяют использовать отрицательные права (записи с “отказом” в правах) и предусматривают усложненную схему наследования. СЗ Подробнее об NFS написано в главе 18. Архитекторы-разработчики версии 4 протокола NFS — стандартного UNIX-прото- кола по совместному использованию файлов — стремились включить в свое детище си- стемы ACL как элемент первостепенной важности. Из-за “разногласий” между UNIX и Windows и несовместимости между реализациями UNIX ACL стало очевидно, что на стороне соединения NFSv4 могут оказаться системы совершенно разных типов. Все они могут понимать “язык” NFSv4 ACL, POSIX ACL, Windows ACL или совсем не понимать системы ACL. Стандарт NFSv4 должен иметь возможность взаимодействовать с различ- ными мирами без особых сюрпризов и проблем с безопасностью.
Глава 6. Файловая система 205 В таких условиях неудивительно, что системы NFSv4 ACL являются, по сути, объеди- нением всех ранее существовавших систем. Они представляют собой строгое супермно- жество систем POSIX ACL, поэтому любая система POSIX ACL может быть представлена как NFSv4 ACL без потери информации. В то же время системы NFSv4 ACL обеспечи- вают все биты прав доступа, которые предусмотрены в системах Windows, а также имеют большинство семантических свойств Windows. Реализация списков ACL Теоретически ответственность за поддержку и функционирование систем ACL мож- но было бы переложить на ряд других компонентов операционной системы. Системы ACL могли бы быть реализованы ядром от имени всех файловых систем, отдельными файловыми системами или, может быть, такими высокоуровневыми программами, как серверы NFS и CIFS. На практике только файловые системы могут реализовать списки ACL ясно, надежно и с приемлемой производительностью. Следовательно, поддержка ACL зависит от опе- рационной системы (ОС) и файловой системы. Файловая система, которая поддержива- ет списки ACL в одной ОС, может не поддерживать их в другой или может предусматри- вать несколько другую реализацию, поддерживаемую другими командами. В UNIX стандартные системные вызовы, которые обеспечивают управление файла- ми (open, read, unlink и пр.), не создают никаких возможностей для поддержки ACL. Тем не менее они продолжают прекрасно работать в системах со списками ACL благода- ря тому, что базовые файловые системы выполняют собственные действия по контролю прав доступа. Операции, которые не разрешены релевантной системой ACL, просто не выполняются и возвращают общий код ошибки в виде “отсутствия прав доступа”. ACL-ориентированные программы для чтения или установки файловых списков ACL используют отдельный системный вызов или библиотечную утилиту. Если в операцион- ную систему добавляется ACL-поддержка, то обычно модернизируются такие распро- страненные утилиты, как 1s и ср, чтобы обеспечить хотя бы минимальную поддержку ACL (например, с помощью команды ср -р, которая должна хранить списки ACL, если таковые имеются). Кроме того, система должна добавлять новые команды или команд- ные расширения, которые бы разрешили пользователям читать и устанавливать списки ACL из командной строки. К сожалению, эти команды не стандартизированы в опера- ционных системах. Поскольку реализации списков ACL зависят от конкретной файловой системы и опе- рационные системы поддерживают несколько реализаций файловых систем, во многих системах предусматривается поддержка нескольких типов списков ACL. Даже отдельно взятая файловая система может предложить несколько вариантов ACL, как в системе JFS2 (IBM). Если возможно использование нескольких систем ACL, команды по управ- лению ими могут быть одинаковыми или различными — все зависит от конкретной си- стемы. Системная поддержка списков ACL Рассмотрим особенности поддержки списков ACL в разных системах UNIX и Linux, поскольку трудно описать эту область общими словами. • На момент написания этого раздела (2010 г.) POSIX-ориентированные ACL-сис- темы играют ведущую роль по реализации и использованию, но NFSv4 ACL про- грессируют особенно быстро и, по всей вероятности, станут стандартом де-факто.
206 Часть I. Основы администрирования В настоящее время только системы ZFS (компания Sun) и JFS2 (IBM) обладают собственной поддержкой NFS4v4 ACL. « В Linux ACL-списки в POSIX-стиле поддерживаются файловыми системами /> ReiserFS, XFS, JFS, Btrfs и семейством ext*. Обычно они отключены по умол- чанию, но с помощью команды mount с опцией -о acl их можно включить. Управлять записями POSEX ACL позволяют команды getfacl и setfacl. Системы Solaris поддерживают POSIX ACL на основе более старой файловой soians системы UFS и NFSv4 ACL на базе системы ZFS. Версии Solaris-команд 1s и chmod модифицированы для отображения и редактирования обоих типов спи- сков ACL10. В системе Solaris предусмотрены команды setfacl и getfacl, ко- торые отчасти подобны используемым в дистрибутивах Linux, но в действитель- ности они служат только для совместимости и работают лишь для POSIX ACL. ГГЯ В операционной системе HP-UX разработана собственная подсистема ACL для собственной файловой системы HFS (High-performance File System — вы- сокопроизводительная файловая система). Когда компания HP приняла VxFS (Veritas) в качестве своей главной файловой системы, она также включила под- держку ACL в стиле POSEX11. К сожалению, эти две системы ACL управля- ются различными наборами команд. Система HFS в настоящее время не име- ет большого практического значения, но команды HFS ACL остаются в си- ле для совместимости. В этой книге системы HFS ACL не рассматриваются. • В АЕХ файловая система JFS2 поддерживает собственную систему ACL, извест- ную как AIXC. Как и AIX 5.3.0, система JFS2 также поддерживает списки ACL в стиле NFSv4. В AIX используются одинаковые команды (aclget, aclput и acledit) для управления обоими типами списков ACL, а для упрощения пе- рехода из одного формата в другой используется утилита aclconvert. В этой книге системы AIXC не рассматриваются. Обзор POSIX ACL Списки POSIX ACL поддерживаются во многих файловых системах Linux и в порте файловой системы VxFS (компания HP-UX), именуемой JFS. Они также присутствуют в системе Solaris только для файловой системы UFS. Списки POSIX ACL Linux представляют собой практически простое расширение стандартной 9-битовой UNIX-модели прав доступа. Система поддерживает только права чтения, записи и выполнения. Такие дополнительные атрибуты, как setuid- и допол- нительные биты, обрабатываются исключительно традиционными битами определения режима. Списки ACL позволяют устанавливать биты rwx независимо для любой комбинации пользователей и групп. Возможный вид отдельных записей в ACL приведен в табл. 6.8. 10 Убедитесь, что в вашей переменной среды PATH путь /bin указан перед путем /usr/gnu /bin, что позволит вам получить именно Solaris-версии команд 2s и chown, а не GNU-версии. 11 Для того чтобы дезориентировать своих клиентов и держать их в покорном неведении, ком- пания HP использует стратегию “похищения” имен существующих файловых систем, применив их к запатентованным продуктам. Например, файловая система HFS компании HP была названа так специально, чтобы ее можно было легко спутать с файловой системой Hierarchical File System компании Apple, также именуемой HFS. Компания HP для своего порта VxFS выбирает название “JFS”, чтобы пользователям было трудно отличить его от имени JFS, которое выбрала компания IBM для собственной файловой системы.
Глава 6. Файловая система Таблица 6.8. Записи, которые могут встретиться в списке управления доступом Формат : \ 4 user::права_до ступа user:: rw- владельца файла user: имя_ поль зов а теля: права- доступа group::прав а_ доступа user: trent: rw- конкретного пользователя group:: r-х группы, которая владеет файлом group:имя_группы: права_доступа other::права_доступа mask::права_доступа group: staff: rw- конкретной группы other:: - - всех других пользователей mask:: rwx для всех, кроме владельца и других пользователей® а Иногда маски не совсем понятны; пояснения к ним даны далее в этом разделе. Пользователей и группы можно задавать именами или идентификаторами UID/GID. Точное число записей, которое может содержать список ACL, зависит от реализации файловой системы и колеблется от 25 в XFS до практически неограниченного значения в файловых системах ReiserFS и JFS. Файловые системы ext* допускают использование до 32 записей, что, вероятно, вполне оправдано с точки зрения обеспечения возможно- сти управления списком. Взаимодействие между традиционными режимами и списками ACL При использовании ACL файлы сохраняют свои исходные биты режима, но при этом автоматически поддерживается целостность атрибутов, и два набора прав доступа не мо- гут вступить в конфликт. Ниже приведен пример (используется синтаксис Linux-команд) автоматического обновления записей ACL в ответ на изменения, выполненные “старой” командой chmod. $ touch /tmp/example $ Is -1 /tmp/example -rw-rw-r— 1 garth garth 0 Jun 14 15:57 /tmp/example $ getfacl /tmp/example getfacl: Removing leading '/' from absolute path names # file: tmp/example # owner: garth # group: garth user::rw- group::rw- other::r— $ chmod 640 /tmp/example $ getfacl —omit-header /tmp/example user::rw- group::r— other::--- Эта принудительная целостность атрибутов позволяет более старым программам, ко- торые даже не подозревают о существовании ACL, достаточно успешно работать в ис- пользующей эти списки среде. Однако существует и определенная проблема. Несмотря на то что ACL-запись group:: в приведенном примере вроде и отслеживает средний набор традиционных битов режима, это не всегда так. Для того чтобы понять, в чем здесь дело, предположите, что унаследованная про- грамма очищает биты разрешения записи во всех трех наборах прав традиционного ре-
208 Часть I. Основы администрирования жима (например, chmod ugo-w файл). Понятно, что целью выполнения этой команды является запрет выполнения записи в файле кем-либо. Но что произойдет, если резуль- тирующий список ACL выглядит следующим образом? user::г— group::г— group:staff:rw- other::г— С точки зрения унаследованной программы файл выглядит неизменяемым, хотя в действительности он доступен для записи для любого члена группы staff. Подобная ситуация нежелательна. Для снижения вероятности недоразумений приняты следующие правила. • По определению записи user:: и other:: списка ACL идентичны битам режима “владелец” и “другие” традиционного режима файла. Изменение режима ведет к изменению соответствующих записей ACL и наоборот. • Во всех случаях эффективными правами доступа, предоставляемыми владельцу файла и пользователям, которые не указаны как-либо иначе, являются те, кото- рые указаны в соответствующих записях user:: и other:: списка ACL. • Если файл не имеет явно определенного списка ACL или имеет ACL, который состоит только из одной записи user: :, одной записи group: : и одной запи- си other: :, эти записи идентичны трем наборам традиционных битов режима. Именно такой случай продемонстрирован в приведенном выше примере примене- ния команды getfacl. (Подобный ACL называют минимальным, и он не требует действительной реализации в виде логически отдельного ACL.) • В более сложных списках ACL традиционные биты режима соответствуют специ- альной записи ACL, называемой “маской”, а не записи group: :. Маска ограни- чивает доступ так, что ACL может предоставлять права всем названым пользовате- лям, всем названым группам и группе, заданной по умолчанию. Иначе говоря, маска определяет верхний предел прав доступа, которые система ACL может присваивать отдельным группам и пользователям. Концептуально эта маска ана- логична команде umask, за исключением того, что маска ACL действует всегда и указы- вает предоставленные, а не отобранные права. Записи ACL для названых пользователей, названых групп и группы, заданной по умолчанию, могут содержать права доступа, от- сутствующие в маске, но ядро будет просто их игнорировать. В результате традиционные биты режима не в состоянии уменьшить права, глобаль- но предоставленные списком ACL. Более того, удаление бита из части группы традици- онного режима ведет к удалению соответствующего бита в маске ACL и, следовательно, к лишению этих прав всех пользователей, кроме владельца файла и тех, кто относится к категории “другие”. При расширении списка ACL, приведенного в предыдущем примере, для включения в него записей конкретного пользователя и группы команда setfacl автоматически определяет соответствующую маску. $ Is -1 /tmp/example -rw-r-----1 garth garth 0 Jun 14 15:57 /tmp/example $ setfacl -m user: :r,user: trent :rw, group: admin :rw /txnp/example $ Is -1 /tmp/example -r—rw-----+ 1 garth garth 0 Jun 14 15:57 /tmp/example $ getfacl —omit-header /txnp/example
Глава 6. Файловая система 209 J user::г— user:trent:rw- group::r— group:admin:rw- mask::rw- other::-- Как видите, Linux-версия команды setfacl генерирует маску, которая позволяет вступить в действие всем правам, предоставленным в списке ACL. Для определения ма- ски вручную нужно включить ее в список записей ACL, переданный команде setfacl, либо использовать опцию -п, чтобы помешать ее повторному генерированию командой setfacl. (В системе Solaris команда setfacl по умолчанию не пересчитывает запись с маской; поэтому для ее повторного генерирования используйте флаг -г.) Обратите внимание на то, что в результате выполнения второй команды Is -1 (после команды setfacl) в конце режима файла выводится знак “+”, означающий, что с ним те- перь связан реальный список ACL. Первая команда Is -1 не выводит знак “+”, посколь- ку на данный момент список ACL является “минимальным”. Другими словами, он пол- ностью описан 9-битовым режимом, и поэтому нет необходимости хранить его отдельно. Следует иметь в виду, что применение традиционной команды chmod для манипу- лирования правами доступа группы в файле, связанном с ACL, сказывается только на маске. Продолжим рассмотрение предыдущего примера. $ chmod 770 /tmp/example $ Is -1 /tmp/example -rwxrwx--+ 1 garth staff 0 Jun 14 15:57 /tmp/example $ getfacl —omit-header /tmp/example user::rwx user:trent:rw- group::r— group:admin:rw- mask::rwx other::-- В данном случае результат выполнения команды 1s вводит в заблуждение. Несмотря на обширные права, предоставленные группе, ни один из ее членов в действительно- сти не обладает правами выполнения файла на одном лишь основании принадлежности к группе. Для того чтобы предоставить это право, придется отредактировать список ACL вручную. Определение прав доступа При попытке получения процессом доступа к файлу эффективный UID сравнива- ется с UID владельца файла. Если они совпадают, права доступа определяются правами user:: в списке ACL. В противном случае, при наличии соответствия записи конкрет- ного пользователя в ACL, права определяются этой записью и маской ACL. При отсут- ствии подходящей записи конкретного пользователя файловая система пытается найти подходящую запись группы, предоставляющую запрошенные права. Эти записи также обрабатываются в сочетании с маской ACL. При отсутствии подходящей записи права Доступа определяются записью other::. Наследование списка ACL Кроме типов записей, перечисленных в табл. 6.8, списки ACL каталогов могут содер- жать записи, определенные “по умолчанию”, которые передаются спискам ACL новых
210 Часть I. Основы администрирования файлов и подкаталогов внутри них. Подкаталоги получают свои записи как в форме за- писей активного ACL, так и в форме записей, заданных по умолчанию. Следовательно, исходные заданные по умолчанию записи могут со временем распространяться по не- скольким уровням иерархии каталогов. Связь между родительским и дочерними ACL не сохраняется при копировании за- данных по умолчанию записей. Изменения в заданных по умолчанию записях родитель- ского каталога не отражаются в списках ACL существующих подкаталогов. Списки NFSv4 ACL В этом разделе рассмотрим характеристики списков NFSv4 ACL и синтаксис Solaris- команд, используемых для их установки и просмотра. Система AIX также поддерживает списки NFSv4 ACL, но для работы с ними использует другие команды (aclget, aclput, acledit и пр.). Не останавливаясь на деталях синтаксиса конкретного набора команд, сосредоточимся на теоретической основе, не зависящей от системы. Понимая основные принципы, нетрудно будет освоить соответствующие команды в интересующей вас си- стеме. С точки зрения структуры, списки NFSv4 ACL аналогичны спискам ACL в системе Windows. Основное различие между ними состоит в спецификации категории, к которой относится запись контроля прав доступа. В списках ACL обеих систем запись хранится в виде строки. Для списков Windows ACL эта строка обычно содержит идентификатор защиты Windows (Windows security identi- fier — SID), в то время как NFSv4-cTpoKa, как правило, имеет такой формат: user: имя_ пользователя или group: имя_группы. Она также может иметь один из специальных маркеров: owner®, group® или everyone®. В действительности эти “специальные” за- писи можно считать самыми популярными, поскольку они связаны с битами режима доступа, установленными для каждого файла. Такие системы, как Samba, которые разделяют файлы между системами UNIX и Win- dows, должны обеспечивать определенный способ преобразования данных между Win- dows и NFSv4. Модель прав доступа систем Windows и NFSv4 отличается большей детализацией по сравнению с традиционной UNIX-моделью “чтение-запись-выполнение”. Рассмотрим ее основные отличительные черты. • В системе NFSv4 разрешение на создание файлов в каталоге отличается от разре- шения создавать подкаталоги. • В системе NFSv4 предусмотрен отдельный бит разрешения на “добавление”. • В системе NFSv4 предусмотрены отдельные биты разрешения на чтение и запись для данных, файловых атрибутов, расширенных атрибутов и ACL. • В системе NFSv4 реализовано управление возможностью пользователей менять владельца файла посредством стандартной системы ACL. В традиционной моде- ли UNIX возможность менять владельца файла обычно имеет только суперполь- зователь. В табл. 6.9 приведены различные разрешения (права доступа), которые могут назна- чаться в системе NFSv4, а также однобуквенные коды, используемые для их представле- ния, и имена, отображаемые и принимаемые Solaris-командами 1s и chmod.
Глава 6. Файловая система 211 Таблица 6.9. Права доступа к файлам в системе NFSv4 Код Имя Права доступа *' ~ ‘‘ ~ Г read_data list_directory Чтение данных (для файла) или получение содержимого каталога (для каталога) W write_data add_file Запись данных (для файла) или создание файла (для каталога) р append_data add_subdirectory Добавление данных (для файла) или создание подкаталога (для каталога) R read_xattr Чтение именованных (“расширенных”) атрибутов W write_xattr Запись именованных (“расширенных”) атрибутов X execute Выполнение файла как программы D delete_child Удаление дочернего объекта в каталоге а read_attributes Чтение нерасширенных атрибутов А write_attributes Запись нерасширенных атрибутов d delete Удаление с read_acl Чтение списка управления доступом С write_acl Запись списка управления доступом о write_owner Изменение владельца S synchronize Синхронное завершение записи Некоторые права доступа имеют несколько имен, поскольку они представлены оди- наковым значением флага, но интерпретируются по-разному для файлов и каталогов. Этот вид перегрузки, вероятно, вам знаком из традиционных UNIX-систем управления доступом. (Например, код х в традиционной системе означает право на выполнение обычного файла и “транзитное” разрешение применительно к каталогу.) Несмотря на то что в NFSv4 модель прав доступа достаточно детализирована, от- дельные разрешения должны быть очевидны, т.е. не должны требовать дополнительных разъяснений. Разрешение “synchronize” позволяет клиенту указать, что модификации файла должны быть синхронизированы, т.е. вызовы, связанные с записью данных, не должны завершиться до тех пор, пока данные не будут реально сохранены на диске. Расширенный атрибут — это именованная часть данных, которая сохраняется вместе с файлом. Большинство современных файловых систем поддерживает такие атрибуты, хотя они пока не нашли широкого применения. В настоящее время расширенные атри- буты, в основном, используются для сохранения самих списков ACL. Однако модель прав доступа в NFSv4 предусматривает обработку списков ACL отдельно от других рас- ширенных атрибутов. Объекты NFSv4, для которых можно задавать права доступа В дополнение к обычным спецификаторам user •. имя_пользователя или group: ИМя^гРУппы9 в системе NFSv4 определено еще несколько объектов, которые могут быть Указаны в списке ACL. Самыми важными из них являются owner@, group® и everyone®, которые связаны с традиционными категориями в 9-битовой модели прав доступа. В системе NFSv4 спецификация (RFC3530) определяет еще несколько таких специ- альных объектов, как dialup® и batch®. С точки зрения системы UNIX все они немно- го странные. Насколько нам известно, их назначение — способствовать совместимости с Windows.
212 Часть I. Основы администрирования Система NFSv4 отличается от POSIX по ряду признаков. Прежде всего, тем, что NFSv4 не имеет стандартного объекта, используемого по умолчанию для управления ACL- наследованием. Вместо этого любая отдельная запись управления доступом (АСЕ) мо- жет быть помечена как передающаяся по наследству (см. ниже раздел “Наследование списков ACL”). Кроме того, система NFSv4 не использует маску для согласования прав доступа, заданных в режиме файла с помощью списка ACL. Режим, необходимый для согласования с параметрами, задаваемыми для owner@, group@ и everyone@, а также файловые системы, которые реализуют списки NFSv4 ACLs, должны сохранять эту со- вместимость при обновлении режима либо списка ACL. Определение прав доступа В системе POSEX ACL файловая система пытается сопоставить идентификатор поль- зователя с одной, но самой важной записью управления доступом. Эта запись (АСЕ) за- тем предоставляет полный набор управляющих прав для доступа к файлу. Система NFSv4 отличается тем, что АСЕ может задавать только частичный набор прав. Каждая запись NFSv4 АСЕ либо разрешает, либо запрещает доступ. Запись дей- ствует больше как маска, чем официальная спецификация всех возможных прав12. К лю- бой конкретной ситуации можно применить несколько записей АСЕ. Принимая решение о том, разрешать ли выполнение конкретной операции, фай- ловая система считывает список ACL и обрабатывает записи АСЕ до тех пор, пока все затребованные права не будут разрешены или какое-то затребованное право не будет отклонено. При этом рассматриваются только те записи АСЕ, строки которых соответ- ствуют текущему идентификатору пользователя. Файловая система может “пройти” список NFSv4 ACL до конца, не получив опреде- ленного ответа на запрос прав доступа. В этом случае стандарт NFSv4 считает получен- ный результат неопределенным, однако большинство существующих реализаций выбе- рут доступ с отказом, во-первых, потому, что такое соглашение используется в системе Windows, и, во-вторых, потому, что это — единственный вариант, который имеет смысл. Наследование списка ACL Подобно спискам POSIX ACL, списки NFSv4 ACL позволяют созданным объектам наследовать записи управления доступом от включающего их каталога. Однако система NFSv4 при небольшом выигрыше в возможностях гораздо более запутана по сравнению с POSIX. И вот почему. • Любая запись может быть отмечена как наследуемая. Признаки наследования для создаваемых подкаталогов (disinherit или d) и создаваемых файлов (file_ inherit или f) устанавливаются по отдельности. • Можно применять различные записи управления доступом для новых файлов и новых каталогов путем создания отдельных записей управления доступом в ро- дительском каталоге с соответствующими признаками. Можно также применить одну запись АСЕ ко всем новым дочерним записям (любого типа) за счет включе- ния обоих флагов d и f. 12 Помимо записей “разрешения” и “отказа”, спецификация NFSv4 также позволяет использо- вать записи “аудита” и “аварийного сигнала”, которые не оказывают влияния на вычисления прав, но являются потенциально полезными для контроля регистрации и безопасности. Точное значение этих записей зависит от конкретной реализации.
Глава 6. Файловая система 213 • С точки зрения определения прав доступа, записи управления доступом оказы- вают одинаковое влияние на родительский (исходный) каталог независимо от того, наследуемый он или нет. Если вы хотите применить запись к дочернему, но не к родительскому каталогу, включите для соответствующей записи АСЕ флаг inherit_only (i). • Новые подкаталоги обычно наследуют две копии каждой записи АСЕ: с отключен- ными флагами наследования (применяется к самому подкаталогу) и с включенным флагом inherit only (устанавливает новый подкаталог для распространения своих передаваемых по наследству записей АСЕ). Вы можете подавить создание этой второй записи АСЕ включением флага no_propagate (п) для копии записи АСЕ родительского каталога. Конечный результат состоит в том, что запись АСЕ распространяется только на прямых потомков исходного каталога. • Не путайте распространение записей управления доступом с настоящим наследо- ванием. Установка связанного с наследованием флага для записи АСЕ просто оз- начает, что данная запись АСЕ будет скопирована в новые записи. Она не создает никаких постоянных отношений между родителем и его потомком. Если вы позже измените записи АСЕ для родительского каталога, дочерние каталоги при этом не будут обновлены. Различные флаги наследования приведены в табл. 6.10. Таблица 6.10. Флаги наследования в системе NFSv4 АСЕ Код имя; f file_inherit d disinherit i inherit_only n no_propagate Распространение записи АСЕ на создаваемые файлы Распространение записи АСЕ на создаваемые подкаталоги Распространение, но не применение к текущему каталогу Распространение на новые подкаталоги, но не на их потомков Использование списков NFSv4 ACL в системе Solaris В системе Solaris поддержка списков ACL интегрирована в команды 1s и soians chmod, что является простым расширением обычных функций этих команд. Таким удачным способом поддерживаются как POSIX-, так и NFSv4-cnncKH ACL, но здесь мы демонстрируем только примеры NFSv4-cnncKOB. Конкрет- ные детали чтения или установки списков ACL зависят от используемой фай- ловой системы. При выполнении команды Is -v отображается ACL-информация для объектов фай- ловой системы. Как и в случае использования флага -1, вы должны включить флаг -d, если хотите получить список ACL для каталога; в противном случае команда Is -v ото- бразит список ACL каждого потомка каталога. Рассмотрим следующий простой (!) пример. Solaris $ mkdir /var/tmp/example solaris$ Is -dv /var/tmp/example drwxr-xr-x 2 garth staff 2 Jan 11 07:19 /var/tmp/example 0:owner@::deny 1:owner@:list_directory/read_data/add_file/write_data/add_subdirectory /append_data/write_xattr/execute/write_attributes/write_acl /write_owner:allow 2:group@:add_file/write_data/add_subdirectory/append_data:deny
214 Часть I. Основы администрирования 3:group@:list_directory/read_data/execute:allow 4:everyone®:add_file/write_data/add_subdirectory/append_data/write_xattr /write_attributes/writfe_acl/write_owner:deny 5:everyone®:list_directory/read_data/read_xattr/execute/read_attributes /read_acl/synchronize:allow Может показаться, что создаваемый каталог получает сложный список ACL, но на самом деле это не так: список ACL — всего лишь 9-битовый код режима, отображаемый в первой строке результата, преобразуемого в формат списка ACL. Совсем не обязательно для файловой системы хранить реальный список ACL, поскольку список ACL и режим доступа эквивалентны. (Такие списки ACL получили название “тривиальных”.) Если бы каталог имел реальный список ACL, команда 1s, чтобы обозначить наличие списка ACL, отображала бы биты режима со знаком “+” в конце (например, drwxr-xr-x+). Каждое нумерованное выражение представляет одну запись управления доступом. Вот как выглядит ее формат. индекс: объект:права_доступа: флаги_наследования: тип Числа поля индекс добавляются командой 1s для порядка и не являются частью ре- ального списка ACL. Их можно использовать в последующих командах chmod для иден- тификации специальной записи АСЕ, подлежащей замене или удалению. Поле объект может занимать одно из таких ключевых слов, как owner®, group®, everyone®, или элемент в такой форме: user: имя__пользователя либо group :имя_ группы. Поле тип в записи АСЕ задает один из двух возможных вариантов: allow, т.е. “раз- решить”, или deny, т.е. “отказать”. Теоретически возможно использование вариантов alarm (аварийный сигнал) и audit (аудит), но в ZFS эти возможности не реализованы. Оба поля права_доступа и флаги_наследования представляют собой списки оп- ций, разделенные слешами. Удивительно, но команда 1s опускает поле флаги_насле- дования (и одно из двоеточий), если все эти флаги отключены, но это не касается поля права_доступа. Еще больше добавляет “тумана” тот факт, что команда 1s отображает сразу несколь- ко имен для таких битов прав доступа, как г (чтение данных/содержимого каталога), * w (запись данных/добавление файла) и р (добавление данных /подкаталога), как если бы они были отдельными элементами прав доступа. В действительности они передают файловые и каталоговые интерпретации одних и тех же битов и всегда представляют ' “объединенное” наличие или отсутствие конкретной привилегии. Эти индивидуальные особенности (с учетом использования в качестве разделителя символа двоеточия в рамках поля объект) усложняют сценариям анализ результата вы- полнения команды Is -V. Если вам необходимо организовать программную обработку списков ACL, поищите сначала библиотеку, например, такую, как модуль Solaris::ACL Perl из архива документации и программного обеспечения CPAN (Comprehensive Perl Archive Network), который существенно упростит этот процесс. В крайнем случае можно использовать результат выполнения команды Is -V (см. ее описание ниже), поскольку этот формат более подходит для анализа. С помощью команды Is -V можно получить табличное представление записей спи- ска ACL. В этом случае права доступа отображаются их однобуквенными кодами, как показано в табл. 6.9. Для каждой записи управления доступом отображены все возмож- ные биты. “Отключенные” права представлены прочерками (подобно тому, как коман- да 1s отображает традиционный режим файла).
Глава 6. Файловая система 215 Solaris $ Is -dV /var/tmp/example drwxr-xr-x 2 garth staff 2 Jan 11 07:19 /var/tmp/example owner@: --------------:-------:deny owner® : rwxp---A-W-Co-:-----: allow group® : -w-p----------:-------:deny group®: r-x-----------:-----: allow everyone® : -w-p---A-W-Co-:------: deny everyone®: r-x----a-R-c—s:------:allow Взаимодействие между списками ACL и традиционными режимами Рассмотрим некоторые аспекты преобразования режимов в списки ACL. Во-первых, обратите внимание на то, что записи group® и everyone® в приведенном выше гейме- ре отличаются друг от друга, несмотря на то что соответствующие части в коде режима (r-х) совпадают. И это не потому, что правила преобразования различны для категорий group® и everyone®; все дело в том, что определенные права доступа невозможно ре- ально экстраполировать из традиционного режима. Эти “неустановленные” биты прав доступа принимают стандартные значения благо- даря дополнениям только к записям АСЕ категории everyone®. Права доступа write_ xattr, write attributes, write_acl и write_owner всегда означают запрещенный доступ, а права read_xattr, read_attributes, read_acl и synchronize всегда раз- решены. Если вы “выведите” эти права из набора everyone®, то увидите, что оставшие- ся записи АСЕ для категории everyone® такие же, как для категории group®. Безусловно, эти “совместимые” права применяются только к тривиальным спискам ACL. Редактируя напрямую список ACL, вы можете установить биты в любой комбинации. Режим и список ACL должны оставаться совместимыми, поэтому при корректиро- вании одного из этих вариантов другой обновляется автоматически. Файловая система ZFS успешно определяет соответствующий режим для заданного списка ACL, но ее ал- горитм для генерирования и обновления списков ACL в ответ на изменения режимов остается рудиментарным. Результаты с функциональной точки зрения нельзя назвать некорректными, но они зачастую излишне детализированы, нечитабельны и с трудом поддаются интерпретации. В частности, для категорий owner®, group® и everyone® система может сгенерировать несколько наборов записей (и притом противоречивых), которые будут зависеть от порядка вычисления. Возьмите себе за правило никогда не трогать режим файла или каталога после при- менения списка ACL. В самом худшем случае с помощью команды chmod А- файл уда- лите список ACL и начните все заново. Модифицирование списков NFSv4 ACL в системе Solaris Поскольку файловая система ZFS усиливает соответствие между режимом файла и ее списком ACL, все файлы имеют по крайней мере тривиальный список ACL. (виртуаль- ный или нет). Следовательно, изменения списка ACL всегда являются обновлениями. Изменения списка ACL выполняйте с помощью команды chmod. Ее основной синтак- сис такой же, как всегда. chmod [-R] ас1_операция файл ... В табл. 6.11 приведены различные типы ACL-операций, “понимаемых” командой chmod. К сожалению, не существует ACL-аналога для инкрементного варианта команды chmod, символического синтаксиса для управления традиционными режимами. Невоз- можно добавить или удалить из записи АСЕ индивидуальные права доступа — вам при- дется заменить запись полностью.
216 Часть I. Основы администрирования Таблица 6.11. ACL-операции, принимаемые Solaris-командой chmod Операция J А- Заменяет весь список ACL его тривиальной версией, “взятой” из режима Аиндекс- Удаляет одну запись управления доступом в заданной позиции А-асе Удаляет заданную запись управления доступом в любой позиции Аиндекс=асе [, асе...] Заменяет целиком одну или несколько записей управления доступом А+асе Добавляет запись управления доступом в начало списка ACL Аиндекс+асе [, асе...] Добавляет записи управления доступом перед записью, отмеченной задан- ным значением индекс Числа поля индекс (см. табл. 6.11) показаны выше на примере команды Is -v. Это числа, которыми по порядку, начиная с нуля, нумеруются записи управления доступом. Вы можете закодировать поля асе либо именами, либо однобуквенными кодами прав доступа. Например, команда solaris$ chmod A+user:ben:С:allow /var/tmp/example предоставляет пользователю ben право редактировать список ACL для каталога /var/ txnp/example. Помните, что определение доступа — это итеративный процесс, который выполня- ется по всему списку ACL, поэтому пользователь ben сохраняет все права, которые он имел при использовании предыдущей версии списка ACL. Новая запись управления до- ступом помещается в начало списка ACL (с нулевым индексом), поэтому команда Solaris $ chmod АО- /var/tmp/example удаляет только что добавленную запись АСЕ и возвращает список ACL в исходное со- стояние. 6.7. Упражнения 6.1. Что такое атрибут umask? Задайте такое значение атрибута umask, которое запре- щало бы членам группы и рядовым пользователям доступ к создаваемым файлам. 6.2. В чем разница между жесткими и символическими ссылками? Когда предпочти- тельнее использовать ссылки того или иного типа? 6.3. ★ Какие действия необходимо выполнить в вашей системе для автоматического монтирования NTFS-раздела с локального жесткого диска? Какой будет наиболее подходящая точка монтирования для такого раздела в соответствии с соглашения- ми, действующими в вашей системе и используемыми на вашем узле? 6.4. ★ При инсталляции новой системы важно разбить жесткий диск на разделы та- ким образом, чтобы для каждой файловой системы (/var, /usr и так далее) было достаточно свободного места. Предположим, в дистрибутиве Foobar Linux исполь- зуются следующие установки: / 2 Гбайт; /var 100 Мбайт; /boot 100 Мбайт; < раздел подкачки> 2 Гбайт; /usr оставшееся свободное место.
Глава 6. Файловая система 217 6.5. Какие проблемы при такой конфигурации могут возникнуть на интенсивно экс- плуатируемом сервере? 6.6. ★ Почему рекомендуется помещать некоторые разделы (в частности, /var, /home и раздел подкачки) на отдельные диски, чтобы отделить их от файлов данных и программ? А как насчет каталога /tmp? Приведите аргументы по каждой из пе- речисленных файловых систем. 6.7. ★ Напишите сценарий, который находит все жесткие ссылки в системе. 6.8. ★ Какими командами реализуются перечисленные ниже действия? а) предоставьте владельцу файла README право чтения/записи, а остальным поль- зователям — только право чтения б) установите для файла бит setuid, не меняя текущие права доступа (и даже не просматривая их) в) отобразите содержимое текущего каталога, отсортировав список по дате по- следней модификации, причем файлы, которые редактировались последними, должны стоять в конце списка г) поменяйте группу файла shared с “user” на “friends” 6.9. ★ По соглашению каталог / tmp доступен для всех пользователей, которых забо- тит создание в нем файлов. Что мешает одному пользователю читать временные файлы другого пользователя или удалять их? Что должно удержать рассерженного пользователя от заполнения каталога / tmp ненужными файлами? Каковы были бы последствия такой атаки?
Глава добавление новых пользователей Подключение новых пользователей и удаление старых — рутинная задача в большин- стве систем. Выполнение этих задач не представляет особой сложности, но достаточно трудоемко. Большинство администраторов создают различные средства автоматизации этого процесса, а затем поручают выполнение реальной работы своему заместителю или оператору. В наши дни мы являемся свидетелями возвращения эпохи централизованных сер- веров с сотнями учетных записей, которые теперь используются наряду с распределен- ными серверами, предназначенными для обслуживания всего нескольких пользовате- лей. Администраторы должны глубоко понимать подсистему учета пользователей, чтобы уметь настраивать работу сетевых служб и надлежащим образом конфигурировать ло- кальные учетные записи. Зачастую управление учетными записями в серверах являет- ся всего лишь небольшой частью общей задачи по инициализации учетных записей для всего предприятия. Современным производственным средам необходимо иметь не просто средство до- бавления пользователей на заданные компьютеры, а инструмент для управления пользо- вателями и их бесчисленными учетными записями и паролями в вычислительной среде, т.е. систему управления учетной информацией (Identity Management System). Широко используются такие службы управления каталогами, как Active Directory (Microsoft), OpenLDAP и Fedora Directory Server, поэтому мы подробно рассмотрим, как эти системы влияют на решение задач управления учетными записями. (Как обычно, “близорукие” инструменты Microsoft плохо взаимодействуют с другими без помощи службы Active Directory. Увы!)
Глава 7. Добавление новых пользователей 219 Потребности некоторых узлов могут расширить возможности даже таких систем. Мы не намерены подробно останавливаться на коммерческих системах управления учет- ной информацией, но все же отметим несколько заслуживающих внимания вариантов. К ним, вероятно, стоит присмотреться получше, особенно в случае очень большого узла, в котором требуется соответствие определенным законам, например, HIPAA или Сарбейнза-Оксли (в США). См. раздел 7.11. Правильное управление учетными записями является залогом безопасности системы. Редко используемые учетные записи становятся главными мишенями атак злоумышлен- ников, как и те записи, пароли к которым легко подобрать. Даже если для подключения и удаления пользователей применяются автоматизированные системные утилиты, важно понимать, какие при этом происходят изменения в системе. Поэтому мы начинаем наш разговор об управлении учетными записями с рассмотрения неструктурированных фай- лов, которые необходимо модифицировать для добавления пользователей на компьютер. Затем рассмотрим автоматизированные средства, поставляемые со всеми описыва- емыми здесь примерами операционных систем, а также файлы конфигурации, управ- ляющие их поведением. Вызывает некоторое недоумение то, что во всех наших при- мерах систем инструменты управления пользователями называются useradd, userdel и usermod, хотя эти утилиты не одинаковы. (Кроме того, в системе AIX соответствие имен достигается за счет заключения в оболочку ее “родных” программ mkuser, rmuser и chuser с помощью специальных сценариев.) Стандартная команда useradd работает вполне хорошо и удовлетворяет потребно- стям большинства организаций. К сожалению, этого нельзя сказать о команде userdel. Кроме того, для добавления и удаления пользователей во многих системах исполь* зуются простые GUI-инструменты, хотя эти средства обычно не реализуют пакетный режим или усовершенствованную локализацию. Они достаточно просты, и мы считаем нецелесообразным подробно их описывать, но предоставим ссылки на документацию по каждой системе. В этой главе сосредоточимся на добавлении и удалении пользователей. Многие темы, связанные с управлением учетными записями, описаны в других главах (здесь вы найде- те соответствующие ссылки). • Подключаемые модули аутентификации (Pluggable authentication modules — РАМ) — набор библиотек, предназначенных для создания сильных паролей; опи- сан в главе 22 (см. раздел 22.5). • Хранилища паролей описаны в главе 4 (см. раздел 4.3). • О таких службах управления каталогами, как NIS и OpenLDAP, рассказывается в главе 19 (см. раздел 19.3). Отдельные комментарии по использованию службы Active Directory можно найти в главе 30 (см. раздел 30.9). • Наконец, вопросы стратегии и методики управления являются основными темами главы 32. В следующих трех разделах речь пойдет об основных файлах, используемых в систе- ме управления пользователями. 7.1. Файл /etc/passwd Файл /etc/passwd содержит список пользователей, которые известны системе. Его можно расширить или заменить службой управления каталогами, поэтому его можно считать полным и заслуживающим доверия только в автономных системах.
220 Часть I. Основы администрирования В процессе регистрации пользователя система обращается к файлу /etc/passwd в поисках идентификатора пользователя и его домашнего каталога. Каждая строка файла описывает одного пользователя и содержит семь следующих полей, разделенных двое- точиями: • регистрационное имя; • шифрованный пароль или “заполнитель” пароля (вопросы применения шифро- ванных паролей описаны далее в этом разделе); • идентификатор пользователя; • идентификатор группы по умолчанию; • поле GECOS (полное имя, номер офиса, рабочий и домашний телефоны); • домашний каталог; • регистрационная оболочка. Вот примеры правильно составленных записей файла /etc/passwd. root:х:0:0:The System,,х6096, :/:/bin/sh j1:!:100:0:Jim Lane,ECOT8-3,,:/staff/jl:/bin/sh dotty:x:101:20: :/home/dotty:/bin/tcsh Шифрованные пароли занимают второе поле, но их уже нельзя считать безопасны- ми: современные быстрые компьютеры позволяют взламывать такие пароли за считан* ные минуты. Все версии UNIX и Linux в настоящее время скрывают шифрованные па- роли, помещая их в отдельный файл, недоступный для чтения. В системах Linux, Solaris и HP-UX файл passwd в поле шифрованного пароля содержит элемент х, а в системе AIX — элемент ! или * (в системах AIX заполнитель блокирует учетную запись). В системах Linux, Solaris и HP-UX зашифрованные пароли хранятся в файле /etc/ shadow, а в системе AIX — в файле /etc/security/passwd. Форматы этих файлов раз- личны. Ш Подробнее о файле nsswitch. conf рассказывается в разделе 19.5. Если пользовательские учетные записи подлежат совместному использованию по- средством таких служб управления каталогами, как NIS или LDAP, вы можете увидеть специальные записи в файле passwd, которые начинаются с символа “+” или Эти записи сообщают системе, как интегрировать данные службы управления каталога- ми в содержимое файла /etc/passwd. Эта интеграция также может быть реализована в файле /etc/nsswitch. conf (в системе AIX это файл /etc/nscontrol. conf). В следующих разделах рассмотрим поля файла /etc/passwd более детально. Регистрационное имя Ш Подробнее о СУБД NIS можно прочитать в разделе 19.3. Регистрационные имена (называемые также именами пользователей) должны быть уникальными и, в зависимости от системы, могут иметь ограничения на длину и на- бор символов. Правила построения регистрационных имен для разных систем приведе- ны в табл. 7.1. Пользовательские имена не могут содержать двоеточия и символы новой строки, поскольку эти символы применяются в качестве разделителей полей и записей соответственно. Если у вас используется база данных NIS или NIS+, длина имени огра- ничена восемью символами независимо от операционной системы.
'лава 7. Добавление новых пользователей 221 Таблица 7.1. Правила формирования регистрационных имен Система Дймн* Набор символов Первый СИМВОЛ Linux 32а a-z0-9_- a-z_ Некоторые дистрибутивы не столь строгие Solaris 8® A-Za-z0-9+. A-Za-z Должна быть хотя бы одна строчная буква HP-UX 8 A-Za-z0-9_ A-Za-z AIX 8B POSIX; не используются пробелы, кавычки и # , = / ? \ Не использу- ются Все буквы не должны быть прописными; не используется пароль“с!еТаи1Г или “ALL” 1 Несмотря на то что система Linux позволяет использовать 32 символа, унаследованное программное обе- спечение (например, программы top и rsh) принимает имена, состоящие только из 8 (или еще меньшего мела) символов. 5 Это число должно увеличиться. 3 В систему AIX 5.3 (и в более поздние версии) могут быть внесены изменения; см. ниже. Изначально в системах UNIX допустимый диапазон ограничивался алфавитно- цифровыми символами, а длина имени не должна была превышать 8 символов. По- скольку правила в различных системах, как правило, разные, рекомендуется придер- живаться наиболее строгих ограничений. Это дает возможность избежать конфликтов со старыми программами, а также использовать одно и то же регистрационное имя на любом компьютере. Считается повсеместно приемлемой комбинация из восьми (или меньше) строчных букв, цифр и символов подчеркивания. Регистрационные имена могут включать как строчные, так и прописные буквы. Однако документ RFC822 призывает не обращать внимания на регистр букв в адресах электронной почты. Смешение регистров в именах не приводит к возникновению про- блем, но имена, состоящие из строчных букв, считаются традиционными, к тому же их проще вводить. Проблемы обязательно возникнут при использовании почтовой службы, если, например, такие регистрационные имена, как john и John, будут принадлежать различным людям. Следует выбирать такие регистрационные имена, которые легко запомнить, поэтому имя, состоящее из случайной последовательности букв, является не самым удачным ва- риантом. Избегайте также кличек и прозвищ, даже если они допустимы в вашей органи- зации: имена типа DarkLord или QTPie часто включаются в адреса электронной почты (например, перед частью адреса @hotmail. com), так что не забывайте о самоуважении. Поскольку регистрационные имена часто используются в адресах электронной по- чты, полезно определить стандартную процедуру их формирования. Пользователям должна быть предоставлена возможность делать обоснованные предположения о реги- страционных именах друг друга. Имена, фамилии, инициалы и сочетания этих элемен- тов — вот приемлемые варианты для схем формирования имен. Любая жестко заданная схема в конечном счете приводит к появлению дубликатов или слишком длинных имен, поэтому иногда придется делать исключения. Выберите стандартный способ разрешения конфликтов, добавив, например, в конец имени циф- ру. В случае появления длинного имени можно использовать предоставляемую почтовой системой функцию определения псевдонимов, чтобы задать две версии одного и того же имени, по крайней мере, для электронной почты. В крупных организациях в адресах электронной почты часто используются полные имена (например, John. Q. PublicGmysite. com), благодаря чему регистрационные имена скрываются от внешнего мира. Это прекрасная идея, но, чтобы облегчить работу
222 Часть I. Основы администрирования администраторам, необходимо установить четкое и понятное соответствие между реги- страционными именами и реальными именами пользователей. Регистрационные имена должны быть уникальными в двух отношениях. Во-первых, необходимо, чтобы имя пользователя на всех компьютерах было одинаковым. Это удоб- но как самому пользователю, так и администратору. Во-вторых, регистрационное имя всегда должно относиться к одному и тому же лицу. Некоторые команды (например, ssh) можно настроить так, чтобы они аутентифициро- вали удаленных пользователей по регистрационным именам. Даже если адреса scott@ boulder. Colorado. edu и scott@refuge. Colorado. edu относятся к разным пользо- вателям, то в случае неправильной настройки учетных записей (со слабыми средствами защиты) оба пользователя могут при определенных обстоятельствах получить доступ к файлам друг друга, не вводя пароль. Опыт также показывает, что дублирующиеся имена сбивают с толку пользователей почтовых систем. Почтовая система различает, кому именно принадлежат имена, однако пользователи часто посылают письма не по тому адресу. CQ Почтовые псевдонимы подробно рассматриваются в разделе 20.5. Если в организации имеется глобальный файл почтовых псевдонимов, то все новые регистрационные имена должны отличаться от псевдонимов, присутствующих в этом файле. В противном случае почта будет доставляться не новому пользователю, а пользо- вателю с соответствующим псевдонимом. ©Система AIX позволяет изменить максимальную длину регистрационного имени с помощью команды chdev. Релевантное устройство в этом слу- чае называется sysO. Для получения списка стандартных атрибутов устрой- ства выполните команду Isattr -D -1 sysO. Среди них есть атрибут тах_ logname, который “отвечает” за максимальную длину регистрационных имен. Следующая команда позволит вам получить информацию только об одном этом атрибуте. aix$ Isattr -El sysO -a max_logname max_logname 9 Maximum login name length at boot time True Для того чтобы изменить значение максимальной длины имени, используйте следу- ющие команды. Изменения вступят в силу после следующей перезагрузки системы1. aix$ sudo su - aix# chdev -1 sysO -a max__logname=16 Стандартная максимальная длина имени равна девяти символам, но AIX-специ- фикация длины определяется размером буфера и поэтому должна учитывать наличие нулевого символа в качестве признака завершения строки. Следовательно, реальный стандартный максимум составляет восемь символов, а наша команда chdev устанавли- вает его равным 15 символам. Система AIX поддерживает мультибайтовые символы (для азиатских языков, напри- мер), но рекомендует не использовать их. В качестве альтернативного варианта для соз- дания имен файлов предлагается использовать переносимый POSIX-набор символов. ’ Сначала мы не смогли реализовать эти действия из-за использования программы sudo (см. раздел 4.3), ведь переменные среды, установленные командой sudo, обычно отличаются от описанных выше. Поэтому сначала необходимо выполнить команду sudo su -, а затем изменить значение атрибута. В новых версиях программы sudo (1.70 или более поздние) предусмотрен флаг -1 для корректного выхода из такой ситуации.
Глава 7. Добавление новых пользователей 223 Зашифрованный пароль Современные системы помещают в файл /etc/passwd некий заполнитель для за- шифрованного пароля, а затем во время первой регистрации предлагают пользователю ввести реальный пароль. Они также поддерживают ряд схем шифрования (помимо стан- дартного UNIX-алгоритма crypt). Зашифрованный пароль необходим для идентифика- ции формы шифрования, используемой для его генерирования. Наши примеры систем поддерживают разнообразные алгоритмы шифрования: традиционный crypt (постро- енный на базе DES), MD5, Blowfish и итеративная версия MD5, унаследованная от про- екта веб-сервера Apache. Длина пароля — это еще один важный атрибут, который часто определяется алго- ритмом шифрования. В табл. 7.2 приведены стандартные максимальные и минимальные значения длины паролей, а также системы шифрования, доступные в наших примерах систем. В некоторых системах разрешается вводить пароли произвольной длины, которые затем “молча” усекаются до действующего максимума длины (показанного в таблице). Таблица 7.2. Алгоритмы шифрования паролей и предельные значения длины паролей Система Минимум Максиму»*' М^йи... .' -2ЯЖ Linux 5 8 crypt, MD5, Blowfish3 /etc/login.defs Solaris 6 8б crypt, MD5, Blowfish, SHA256 /etc/security/policy.conf /etc/security/crypt. conf HP-UX 6В 8 crypt /usr/includfe/limits.hr AIX 0 8 crypt, MD5 (BSD), Apache Параметр для команды passwd а Blowfish — стандартный алгоритм в системах SUSE и openSUSE; большинство других систем использует алгоритм MD5. 6 Максимальная длина зависит от выбранного алгоритма. в Суперпользователь может установить пароль пользователя любой длины. г Этот файл содержит много конструкций #ifdef и поэтому его трудно прочитать и понять. Если вы решили не пользоваться системными средствами добавления пользовате- лей и для создания новой учетной записи вручную редактировать файл /etc/passwd (конечно же, с помощью редактора vipw — см. раздел 7.4), поставьте звездочку (*) или символ “х” в поле зашифрованного пароля. Звездочка воспрепятствует несанкциони- рованному использованию учетной записи до установки реального пароля. Никогда не оставляйте это поле пустым, иначе безопасность системы окажется под серьезной Угрозой, поскольку для доступа к такой учетной записи пароль не требуется. С криптографической точки зрения, алгоритм MD5 лишь немногим более устойчив, чем предыдущий стандарт DES (используемый алгоритмом crypt), зато в нем допуска- ются пароли произвольной длины. Чем длиннее пароли, тем они надежнее. Алгоритм MD5 не лишен некоторых криптографических недостатков, но вряд ли какая-нибудь за- шита может устоять против подбора пароля методом грубой силы. Сильными алгорит- мами считаются SHA256 и Blowfish. Некоторые советы по выбору паролей можно найти в разделе 22.4. Зашифрованные пароли имеют постоянную длину (34 символа в случае MD5 и 13 символов в случае DES) независимо от длины исходного пароля. Пароли шифруют- ся с добавлением случайной “примеси”, чтобы одному исходному паролю соответство- вало много зашифрованных форм. Таким образом, факт выбора пользователями оди- наковых паролей не может быть выявлен путем просмотра зашифрованных паролей.
224 Часть I. Основы администрирования Пароли MD5 легко распознать, так как они всегда начинаются с последовательности “$1$” или “$md5$”2. Пароли Blowfish начинаются с последовательности “$2а$”, а паро- ли SHA256 — с последовательности “$5$”. В системе SUSE для новых паролей в качестве стандарта принят алгортм ши- фрования Blowfish (использует префикс “$2а$”). оО В настоящее время система OpenSolaris перешла на стандарт SHA256 (с пре- фиксом хотя предыдущие версии этой системы использовали по умол- чанию алгоритм MD5. Идентификатор пользователя Идентификатор пользователя (UID) — это, как правило, 32-битовое целое число без знака, которое идентифицирует пользователя в системе. Регистрационные имена используются для удобства пользователей, а идентификаторы UID применяются (вну- тренне) программными средствами и файловой системой. Но для обеспечения совме- стимости со старыми системами рекомендуем, чтобы значение самого старшего иден- тификатора по возможности не превышало 32767 (наибольшее 16-битовое целое число со знаком). CQ Описание учетной записи суперпользователя можно найти в разделе 4.1. По определению пользователь root имеет идентификатор (UID) 0. В большинстве систем есть также псевдопользователи bin и daemon, что позволяет им быть владель- цами команд и файлов конфигурации. Как правило, такие псевдоимена помещаются в начало файла /etc/passwd, и им назначаются маленькие идентификаторы, а также фиктивный интерпретатор команд (например, /bin/false). Это не позволит кому- либо зарегистрироваться под такими псевдоименами. Чтобы зарезервировать побольше номеров для неперсонифицированных пользователей, рекомендуем присваивать реаль- ным пользователям идентификаторы, начиная с номера 500 или выше. (Желаемый диа- пазон для новых идентификаторов можно указать в файлах конфигурации для утилиты useradd.) Ш Подробнее о “пустой” учетной записи (nobody account) написано в конце раздела 18.2. Предусмотрен еще один специальный идентификатор, именуемый псевдопользо- вателем (nobody), которому обычно назначаются такие значения, как —1 или —2 (эти значения, представленные в виде целых без знака для установки поля UID, оказываются максимально большими идентификаторами). Регистрационное имя псевдопользователя используется в случае, если суперпользователь на одном компьютере пытается получить доступ к файлам, смонтированным (посредством системы NFS) с другого компьютера, который не доверяет первому. Нежелательно создавать более одной учетной записи с идентификатором 0. Может показаться удобным иметь несколько суперпользовательских записей с разными ин- терпретаторами команд и паролями, но в действительности это лишь создает дополни- тельные бреши в системе защиты и приводит к ненужным трудностям. Если несколь- ким пользователям необходимо быть администраторами, пусть они применяют утилиту sudo. 2 Последовательность “$1$” представляет собой своего рода маркер для алгоритма BSD MD5; компания Sun использует собственную реализацию MD5 с маркировочной последовательностью “$md5$”.
Глава 7. Добавление новых пользователей 225 Избегайте повторного использования идентификаторов, даже идентификаторов тех пользователей, которые уволились из организации и учетные записи которых были уда- лены. Такая мера предосторожности позволит избежать путаницы, если файлы впослед- ствии будут восстанавливаться из резервных копий, где пользователи могут быть иден- тифицированы по номерам, а не по регистрационным именам. Идентификаторы должны быть уникальными в пределах всей организации, т.е. кон- кретный идентификатор должен соответствовать одному и тому же регистрационному имени и физическому лицу на каждом компьютере. Если уникальность идентификато- ров нарушена, то в такой системе, как NFS, появятся проблемы безопасности; кроме того, это может привести в замешательство пользователей, переходящих из одной рабо- чей группы в другую. Трудно соблюдать уникальность идентификаторов, когда группы компьютеров нахо- дятся в административном подчинении разных лиц и даже организаций. Это проблема как техническая, так и концептуальная. Лучшим ее решением является создание цен- тральной базы данных или сервера каталогов, содержащих для каждого пользователя уникальную запись. Проще всего назначить каждой группе в пределах организации от- дельный диапазон идентификаторов и позволить распоряжаться им по своему усмотре- нию. В результате решится вопрос с уникальностью пользовательских идентификаторов, но останется проблема уникальности регистрационных имен. Популярным средством управления идентификаторами пользователей становится также база данных LDAP. Она кратко описана в этой главе (см. раздел 7.11), а более под- робно — в главе 19. Идентификатор группы по умолчанию Как и идентификатор пользователя (UID), идентиф^йЖГор группы (GID) является 32-битовым целым числом. Идентификатор 0 зарезервирован для группы с именем root или system. Как и в случае идентификаторов пользователей, системы используют не- сколько предопределенных групп для собственных нужд, так сказать для служебного пользования. Увы, в этом вопросе согласованности среди коллег-производителей систем не наблюдается. Например, группа bin имеет идентификатор GID, равный 1, в системах Red Hat и SUSE и GID, равный 2, — в системах Ubuntu, Solaris, HP-UX и AIX. В те далекие времена, когда компьютеры были еще дорогим удовольствием, группы были полезны для выполнения вычислений, но так, чтобы использованное вами дис- ковое пространство, секунды центрального процессора и минуты процесса регистрации оплачивал соответствующий отдел. В наши дни группы используются, в основном, для организации совместного доступа к файлам. Ш О каталогах с установленным битом setgid рассказывалось в разделе 6.5. Группы определяются в файле /etc/group, а поле идентификатора группы в файле /etc/passwd задает стандартный (“эффективный”) идентификатор на момент реги- страции пользователя в системе. Этот идентификатор не играет особой роли при опре- делении прав доступа; он используется лишь при создании новых файлов и каталогов. Новые файлы обычно включаются в эффективную группу своего владельца, но если вы хотите разделять файлы с другими участниками проектной группы, не забудьте вручную изменить для этих файлов владельца группы. При этом следует иметь в виду, что если у каталогов установлен бит set gid (02000) или файловая система смонтирована с опцией grpid, новые файлы вкл^Ьчаются в груп- пу родительского каталога.
226 Часть I. Основы администрирования Поле GECOS Это поле, в основном, используется для хранения персональной информации о каж- дом пользователе. Оно не имеет четко определенного синтаксиса. В принципе структура поля GECOS может быть произвольной, но команда finger интерпретирует разделен- ные запятыми элементы поля в следующем порядке: • полное имя (часто используется только это поле); • номер офиса и здания; • рабочий телефон; • домашний телефон. Ш О базе данных LDAP можно почитать в разделе 19.3. С помощью команды chfn можно изменять информацию, содержащуюся в поле GECOS3. Эта команда используется для ведения и обновления списка телефонных но- меров, но ею часто злоупотребляют: например, пользователь может изменить инфор- мацию так, что она станет нецензурной или некорректной. Некоторые системы можно сконфигурировать, установив определенные ограничения, а именно указать, какие поля может модифицировать команда chfn. Администраторы сетей большинства универси- тетских городков совсем отключают команду chfn. Во многих системах команда chfn “понимает” только файл /etc/passwd, поэтому, если для управления регистрационной информацией вы используете базу данных LDAP или какую-либо иную службу управле- ния каталогами, команда chfn может не работать вовсе. еВ системе AIX для команды chfn предусмотрен флаг -R модуль, который по- зволяет загрузить заданный модуль для выполнения реального обновления. Доступные модули находятся в каталоге /usr/lib/security. Среди них на- ходится модуль, отвечающий за функционирование службы LDAP. Домашний каталог Войдя в систему, пользователь попадает в свой домашний каталог. Следует иметь в виду, что если домашние каталоги смонтированы вне файловой системы, то в случае проблем с сервером или с самой сетью они могут оказаться недоступными. Если на момент регистрации этот каталог отсутствует, выводится сообщение вроде “no home directory” (домашний каталог отсутствует)4 и пользовательские данные помещаются в каталог /. Если в файле /etc/login.defs системы Linux в качестве значения поля DEFAULT HOME, в котором задается домашний каталог по умолчанию, указано значение по, продолжение регистрации пользователя будет невозможно. Регистрационная оболочка В качестве регистрационной оболочки, как правило, задается интерпретатор команд, например /bin/sh или /bin/csh, но в принципе это может быть любая программа. 3 Исключение составляет система Solaris, где команды chfn нет. Суперпользователь может из- менить информацию о пользователе с помощью команды passwd -g. 4 Это сообщение появляется при регистрации в системе через консоль или терминал, но не через экранный диспетчер, такой как xdm, gdm или kdm. В последнем случае пользователь вообще будет немедленно выведен из системы, поскольку программа-диспетчер не сможет осуществить запись в нужный каталог (например, ~/ .gnome).
Глава 7. Добавление новых пользователей 227 По умолчанию для систем UNIX используется интерпретатор sh, для систем Linux и Solaris — интерпретатор bash (GNU-версия sh), а для AIX — интерпретатор ksh (Adm s/zell). В Linux имена sh и csh являются всего лишь ссылками на bash и tcsh (усовер- шенствованный С-интерпретатор с командами редактирования) соответственно. В некоторых системах пользователи могут менять интерпретатор с помощью коман- ды chsh, но, подобно chfn, эта команда может не работать, если для управления ре- гистрационной информацией вы используете базу данных LDAP или какую-либо иную службу управления каталогами. Если вы используете файл /etc/passwd, системный ад- министратор всегда может заменить интерпретатор пользователя, отредактировав файл passwd с помощью программы vipw. Д Система Linux поддерживает команду chsh и варианты замены интерпрета- торов, перечисленные в файле /etc/shells. В системе SUSE этот список является обязательным для соблюдения, а в Red Hat в случае выбора неза- регистрированного интерпретатора будет лишь выдано предупреждение. При добавлении записей в файл /etc/shells убедитесь в том, что они содержат полные пути, поскольку команда chsh и другие программы работают только с полностью заданными именами файлов. ®В системах AIX пользователи могут заменить свои интерпретаторы с помощью команды chsh и длинного списка вариантов замены5. Файл /etc/security/ login. cfg содержит список проверенных интерпретаторов. Файл /etc/ shells включает лишь подмножество этого списка и используется только FTP-демоном in. f tpd. Многие из интерпретаторов, указанных в длинном списке, представляют собой жесткие ссылки на одни и те же двоичные файлы. HanpHM^,_sh,Jkjsh, rksh, psh и tsh (в каталогах /bin и /usr/bin) — это, по сути, одна и та же программа, которая изменяет свое поведение в зависимости от своего имени. Как и в случае с командой chfn, команда chsh принима- ет флаг -R модуль для предоставления базы данных LDAP и других служб управления каталогами. В системе Solaris только суперпользователь может заменить интерпретатор SOiariS пользователя (с помощью команды passwd -е). Список разрешенных ин- терпретаторов содержится в файле /etc/shells (который не существует по умолчанию, несмотря на наличие его man-страницы). 7.2. Файлы /etc/shadow и /etc/security/passwd Файл скрытых (теневых) паролей доступен для чтения только суперпользователю и предназначен для хранения зашифрованных паролей подальше от любопытных глаз. В нем также содержится учетная информация, которая отсутствует в исходном файле /etc/passwd. В настоящее время механизм скрытых паролей используется по умолча- нию практически во всех системах. В IBM-системах файл, в котором хранятся зашифрованные пароли, называется /etc/security/passwd, в других системах для этой цели используется файл /etc 5 Используйте команду chsec для замены файлов в каталоге /etc/security, вместо того что- бы редактировать их напрямую.
228 Часть I. Основы администрирования /shadow. Эти файлы различаются по формату. Сначала рассмотрим содержимое файла /etc/shadow. Файл shadow не включает в себя файл passwd, и последний не генерируется автома- тически при изменении файла shadow. Оба файла необходимо хранить независимо друг от друга (или использовать команду наподобие useradd для автоматического управле- ния файлами). Как и /etc/passwd, файл /etc/shadow содержит одну строку для каж- дого пользователя. Каждая строка состоит из 9 полей, разделенных двоеточиями: • регистрационное имя; • зашифрованный пароль; • дата последнего изменения пароля; • минимальное число дней между изменениями пароля; • максимальное число дней между изменениями пароля; • количество дней до истечения срока действия пароля, когда выдается предупре- ждение; • количество дней по истечении срока действия пароля, когда учетная запись анну- лируется (в Linux); количество дней до автоматического аннулирования учетной записи (в Solaris/HP-UX); • срок действия учетной записи; • зарезервированное поле, которое в настоящее время всегда пустое (за исключени- ем Solaris). Лишь первые два поля обязательно должны быть заполнены. Поля дат в файле /etc/ shadow задаются в виде числа дней (а не секунд), прошедших с 1-го января 1970 года, что не является стандартным способом вычисления времени в системах UNIX и Linux. При этом вы можете преобразовать секунды в дни с помощью такой команды. solaris$ expr 'date +%s' / 864006 Типичная запись выглядит так. millert:$md5$em5J8hL$a$iQ3pXe0sakdRaRFyy7Ppj. : 14469:0:180:14 : : : Вот более подробное описание каждого поля. • Регистрационное имя берется из файла /etc/passwd. Оно связывает записи фай- лов passwd и shadow. • Зашифрованный пароль идентичен тому, который ранее хранился в файле /etc/ passwd; отображается фиктивный пароль Solaris MD5. • Третье поле содержит дату последнего изменения пользователем своего пароля. • Это поле обычно заполняется командой passwd. • В четвертом поле задано количество дней, спустя которые пользователь сможет снова изменить пароль. Это не позволяет пользователям немедленно возвращать- ся к привычным паролям после их обязательного изменения. Такая возможность кажется нам опасной, если в течение указанного времени будет обнаружено на- рушение безопасности системы. Поэтому мы рекомендуем устанавливать данное поле равным нулю. • В пятом поле задано максимальное число дней между двумя изменениями паро- ля. С помощью этой установки администраторы заставляют пользователей менять 6 В сутках содержится 86 400 секунд: 60 х 60 х 24.
Глава 7. Добавление новых пользователей 229 свои пароли (подробнее механизм устаревания паролей описан в разделе 22.4). В системе Linux максимальное время жизни пароля определяется суммой значе- ний данного и седьмого (льготный период) полей. • В шестом поле задано количество дней, оставшихся до момента устаревания паро- ля, когда программа login должна предупреждать пользователя о необходимости сменить пароль. • Системы Solaris и HP-UX отличаются от системы Linux их интерпретацией седь- мого поля. В системе Linux седьмое поле определяет, через сколько дней после устаревания пароля отменяется учетная запись. В системах Solaris/HP-UX ситуация такова. Если пользователь не зарегистриро- вался в течение определенного числа дней, заданных в седьмом поле, учетная за- пись блокируется. Неиспользуемые учетные записи — любимая мишень хакеров, и здесь предусмотрена возможность объявить такие учетные записи устарелыми (“off the market”). Однако она действует только в том случае, если пользователь “прописан” в файле /var/adm/lastlog; те же пользователи, которые ни разу не зарегистрировались, автоматически не блокируются. Следовательно, эта функция реально не работает в сетевой среде, поскольку каждый узел имеет собственный файл lastlog. • В восьмом поле задана дата отмены учетной записи. По прошествии этой даты пользователь не сможет зарегистрироваться в системе, пока администратор не сбросит значение поля. Если поле оставлено пустым, учетная запись всегда будет активной. В системе Linux, чтобы установить поле даты истечения срока, можно использо- вать команду usermod (даты здесь должны быть в формате гггг-мм-чч). В системе Solaris команда usermod также вычисляет дни, прошедшие с 1-го января 1970 года. Даты здесь принимаются примерно в 30 форматах, которые заданы в файле /etc/ datemsk, но, увы, не в Linux-формате гггг-мм-чч. • В системах Linux и HP-UX девятое поле зарезервировано на будущее, но в систе- ме Solaris последние четыре бита используются для подсчета неудачных попыток регистрации. Теперь, когда назначение полей понятно, вернемся к рассмотренному выше примеру, millert:$md5$em5J8hL$a$iQ3pXe0sakdRaRFyy7Ppj. : 14469:0:180:14: : : В этой записи говорится о том, что пользователь millert последний раз менял свой пароль 13 августа 2009 года. Следующий раз пароль должен быть изменен через 180 дней. За две недели до этого пользователь начнет получать предупреждения о необходимости сменить пароль. Учетная запись не имеет срока действия. В системах Solaris, HP-UX и Linux с помощью утилиты pwconv можно согласовать содержимое файлов shadow и passwd. В Linux большинство параметров файла shadow берется из стандартных установок файла /etc/login. def s. Суперпользователь в системе Solaris может использовать команду passwd soiaris -f имя_пользователя, чтобы заставить пользователя изменить его (или ее) пароль во время следующей регистрации. Это средство полезно в том случае, если вы регулярно запускаете утилиту crack для выявления неудачных (не- надежных) паролей. (В Linux тот же самый флаг -f позволяет пользователям изменить информацию о себе.)
230 Часть I. Основы администрирования еВ системе AIX не используется термин “теневые пароли”, но на практике их идея успешно реализована. Зашифрованные AIX-пароли хранятся в файле /etc/security/passwd, причем их формат совершенно отличается от фор- мата файла /etc/passwd. Рассмотрим пример из исходной инсталляции си- стемы AIX, где в качестве стандартного алгоритма генерирования паролей ис- пользуется crypt7. trent: password = ulO.0aYxRx4qI lastupdate = 1224876639 flags = ADMCHG evi: password = PiIr2qOPabZ.Q lastupdate = 1235785246 flags = Формат должен быть самоочевиден. Здесь записи разделяются одной или нескольки- ми пустыми строками. Этот же формат используется для большинства AJX-файлов кон- фигурации в каталоге /etc/security при использовании имени пользователя, общего для любого управляемого или регистрируемого объекта. В системе AIX предусмотрено множество возможностей для управления всеми аспек- тами процесса регистрации (включая генерирование паролей). В некоторых случаях ре- зультат зависит от конкретного пользователя и порта (при управлении портами TTY, на которых может зарегистрироваться данный пользователь). Более подробную информа- цию можно получить, просмотрев комментарии в файлах /etc/security/login. cfg и /etc/security/user. Удобно также использовать команду pwdadm, которая дозволяет заставить пользователя изменить его пароль при следующей регистрации. 7.3. Файл /etc/group Файл /etc/group содержит имена UNIX-групп и списки членов каждой группы. Вот как выглядит фрагмент файла group из системы AIX. system: ! :0:root,pconsole,esaadmin staff: ! :1: ipsec,esaadmin,trent,ben,garth,evi bin: ! :2:root,bin sys:!:3:root,bin,sys adm: 1 :4:bin,adm nobody: ! : 4294967294:nobody,Ipd Каждая строка представляет одну группу и содержит следующие четыре поля: • имя группы; • зашифрованный пароль или заполнитель; • идентификатор группы; • список членов, разделенный запятыми (пробелов быть не должно). Как и в файле /etc/passwd, поля разделяются двоеточиями. Длина имени группы не должна превышать 8 символов из соображений совместимости, хотя во многих си- стемах такого ограничения нет. Несмотря на наличие поля пароля (с помощью кото- 7 Для новых версий дистрибутивов AIX первым в списке задач первоочередной важности не- обходимо поставить переход к более сильному алгоритму шифрования.
Глава 7. Добавление новых пользователей 231 рого пользователи могут присоединиться к группе, выполнив команду newgrp) пароль задается редко8. Пароль можно установить с помощью команды gpasswd; а его зашиф- рованная форма сохранится в файле /etc/gshadow. Групповые пароли используются довольно редко. Имена групп и их идентификаторы должны быть одинаковыми на всех компьютерах, получающих совместный доступ к файлам через систему NFS. Этого трудно достичь в гетерогенной среде, поскольку в разных операционных системах используются разные идентификаторы для одних и тех же групп. Мы считаем, что по умолчанию пользователь не должен регистрироваться как член системной группы. В некоторых системах групповое право собственности использу- ется вместе с битами прав доступа для управления характером выполнения команд. Противоречия в использовании групповых идентификаторов в различных системах соз- дают проблемы при обслуживании узлов, а именно при обновлении и инсталляции про- граммных продуктов. Если в файле /etc/passwd пользователь объявлен членом определенной группы, а в файле /etc/group — нет, пользователь все равно включается в группу. На этапе реги- страции членство в группе проверяется по обоим файлам, но лучше все же согласовы- вать их содержимое. В некоторых системах ограничивается количество групп, к которым может принад- лежать пользователь. В качестве предельного значения обычно используется число 8, но в Solaris оно сейчас равно 16, в HP-UX — 20, а в AIX и Linux ограничений нет вообще. Для того чтобы избежать конфликтов, связанных с идентификаторами стандартных групп, рекомендуем выбирать идентификаторы локальных групп начиная со значе- ния 500. Согласно традиции UNIX, новые пользователи добавляются в группу, название ко- торой отражает их категорию, например “students” или “finance”. Однако следует учи- тывать, что подобная традиция повышает вероятность доступа пользователей к файлам друг друга из-за неаккуратной установки прав. Чтобы этого избежать, рекомендуем соз- давать для каждого пользователя уникальную группу. Лучше всего выбирать одинаковое имя для пользователя и группы. Можно также выбрать одинаковый номер пользователя и группы. Утилита useradd всех выбранных в качестве примеров дистрибутивов Linux, за ис- ключением SUSE, по умолчанию помещает пользователей в персональные группы. Системы семейства UNIX по умолчанию помещают всех новых пользователей в одну и ту же группу, но их утилиты useradd также можно сконфигурировать на поддержку персональных групп. В такую персональную группу должен входить лишь сам пользователь. Если нужно позволить другим пользователям совместно работать с файлами посредством группового владения, создайте для этих целей отдельную группу. Идея персональных групп состо- ит не в том, чтобы запретить механизм группового доступа как таковой, а в том, чтобы создать более строгую стандартную группу для каждого пользователя и предотвратить случайный коллективный доступ к файлам. Этой цели можно также достичь с помощью команды umask (см. раздел 6.5). В системах Linux, Solaris и HP-UX поддерживаются команды, которые создают, мо- дифицируют и удаляют группы: groupadd, groupmod, groupde 1. В системе AIX вам для 8 Для того чтобы установить групповой пароль в системе Solaris, необходимо выполнить ко- манду passwd, а также команды вырезки и вставки пароля в файл /etc/дхоир. Здесь не использу- ется файл /etc/gshadow или его эквивалент.
232 Часть I. Основы администрирования этого придется модифицировать файл /etc/group с помощью текстового редактора. Но для проверки синтаксиса в этом файле предусмотрена команда grpck. 7.4. Подключение пользователей: основные действия Прежде чем создавать учетную запись для нового пользователя в правительственном учреждении, учебном заведении или в крупной коммерческой компании, крайне важно заставить его подписать соглашение о правилах работы в системе. (Как?! У вас нет та- кого соглашения? Немедленно прочтите материал в разделе 32.7, чтобы узнать, для чего оно нужно и как его составлять.) У пользователей нет веских причин подписывать такое соглашение, поэтому в инте- ресах администратора убедить их сделать это, чтобы иметь рычаги влияния. После того как учетная запись создана, добиться подписи будет трудно, так что лучше получить ее заранее. Процесс подключения нового пользователя состоит из ряда этапов, определяемых системными требованиями; два связаны с формированием пользовательской среды, а еще несколько этапов может понадобиться для целей системного администрирования. • Обязательные этапы: • добиться, чтобы пользователь подписал соглашение о правилах работы в си- стеме; • отредактировать файлы passwd и shadow с целью создания учетной записи пользователя; • добавить запись нового пользователя в файл /etc/group (в действительности это не необходимо, а желательно); • задать пароль; • создать для нового пользователя домашний каталог, назначив его владельца с помощью команды chown и задав режим доступа с помощью команды chmod; • сконфигурировать роли и права доступа (если вы используете RBAC; см. чуть ниже). • Пользовательские этапы: • скопировать в домашний каталог пользователя стандартные конфигурацион- ные сценарии; • создать каталог электронной почты и настроить почтовые псевдонимы. • Административные этапы: • проверить правильность создания учетной записи; • добавить контактную информацию о пользователе, а также сведения о статусе учетной записи в административную базу данных. Для выполнения этого списка действий необходимо иметь сценарий или утилиту, и, к счастью, во всех наших примерах систем предусмотрена таковая в форме команды useradd. Все описываемые операции по добавлению пользователей необходимо выполнять с правами суперпользователя. В системе AIX вы должны иметь привилегии UserAdmin. Именно в этом случае наступает звездный час для использования утилиты sudo. Об ути- лите sudo рассказывалось в разделе 4.3.
Глава 7. Добавление новых пользователей 233 Редактирование файлов passwd и group Если вам придется добавлять пользователя вручную, используйте команду vipw, что- бы отредактировать файлы passwd и shadow. По умолчанию выбирается редактор vi, но эту установку можно изменить, задав новое значение переменной среды EDITOR. Более важно то, что команда vipw блокирует редактируемый файл, позволяя только одному пользователю редактировать его. Это не допускает никаких конфликтов между действиями разных пользователей. В системах Solaris и Red Hat команда vipw (после редактирования файла passwd) автоматически интересуется желанием пользователя редактировать файл shadow. В си- стемах SUSE и Ubuntu для этого используйте команду vipw -s. В системах HP-UX и AIX рекомендуется не редактировать файл password вруч- ную — с помощью команды vipw или без нее (в системе AIX соответствующая утилита даже не инсталлирована). Здесь лучше использовать утилиту user add или специальные инструменты системных администраторов sxnh и SMIT соответственно. Утилита useradd рассматривается в разделе 7.5. Если новый пользователь должен стать членом нескольких групп, а не просто одной группы, заданной по умолчанию в файле passwd, вам необходимо отредактировать файл /etc/group и добавить регистрационное имя пользователя во все дополнитель- ные группы. Задание пароля 03 Правила выбора удачных паролей приведены в разделе 4.3. Никогда не оставляйте без пароля новую учетную запись или запись с доступом к ин- терпретатору команд. Определенная сложность работы с паролями может быть связана с файлами конфигурации (см. разделы в конце этой главы, чтобы узнать, какие именно файлы и переменные применяются в ваших операционных системах). Установите па- роль для нового пользователя с помощью следующей команды. $ sudo пароль новое_имя_пользователя Вам будет предложено ввести реальный пароль. В некоторых автоматизированных системах при добавлении новых пользователей необязательно вводить начальный па- роль. Задание пароля в таких случаях происходит при первой регистрации. Несмотря на удобство, этот вариант приводит к образованию огромной дыры в системе безопасно- сти; тот, кто может угадать новые регистрационные имена (или узнать их в файле /etc/ passwd), может выполнить “пиратские” действия по отношению к учетным записям, прежде чем соответствующие пользователи получат возможность зарегистрироваться. Создание домашнего каталога пользователя и инсталляция конфигурационных файлов Вы можете создать домашний каталог пользователя с помощью простой команды ®kdir. Вам также понадобится установить права владения на новый каталог и права до- ступа к нему, но лучше всего сделать это после инсталляции локальных конфигурацион- ных файлов. Имена таких файлов традиционно начинаются с точки и заканчиваются суффиксом гс (сокращение от “run command” — команда запуска) — “отголосок” операционной системы CTSS. Предшествующая точка заставляет команду 1s не включать эти файлы
234 Часть I. Основы администрирования в листинги каталогов, если только не указана опция -а. Мы рекомендуем предоставлять стандартные файлы запуска для всех интерпретаторов команд, которые популярны в ва- ших системах, чтобы пользователи по умолчанию продолжали работать в корректной среде даже при смене командной оболочки. Наиболее часто встречающиеся конфигура- ционные файлы перечислены в табл. 7.3. Таблица 7.3. Распространенные конфигурационные файлы ^Команда Имя файла Применение sh .profile Установка пути поиска, типа терминала и среды basha .bashrc .bash_jorofile Установка типа терминала (если это необходимо) Установка опций программ biff и mesg Установка переменных среды Установка псевдонимов команд Установка пути поиска Установка атрибута umask для управления правами доступа Установка переменной cdpath для поиска имен файлов Установка переменных PS1 (строка приглашения) и histcontrol csh/tcsh .login .cshrc Аналог файла . cshrc для интерпретатора csh Аналог файла . login для интерпретатора csh vi/vim .exrc/.vimrc Установка опций редакторов vi/vim emacs .emacs Установка опций редактора emacs и функциональная привязка его клавиш mail/mailx .mailrc Задание персональных почтовых псевдонимов Установка параметров оригинального почтового UNIX-клиента GNOME .gconf .gconfpath Среда GNOME: конфигурация среды пользователя посредством команды gconf Путь для дополнительного варианта конфигурации среды пользова- теля посредством команды gconf KDE . kde/ Среда KDE: каталог файлов конфигурации а Интерпретатор bash также читает файл .profile или /etc/profile в эмуляции оболочки команд sh. Образцы файлов запуска традиционно хранятся в каталоге /etc/skel (Linux, Solaris, HP-UX) или /etc (все системы). Система AIX, как всегда отличаясь от других, исполь- зует для этого каталог /etc/security. Если вы будете редактировать примеры конфи- гурационных файлов, каталог /usr/local/etc/skel — самое удачное место для хра- нения модифицированных копий. Система Linux также хранит важные детали файлов запуска в каталоге /etc/profile. d, в который “заглядывают” интерпретаторы команд, чтобы отыскать указатели на параметры вывода результатов команды 1s (чтобы сделать их нечитабельными на темном фоне) или путь к исполняемым Kerberos-файлам. В зависимости от интерпретатора, в каталоге /etc могут содержаться системные конфигурационные файлы, обрабатываемые раньше пользовательских. Например, ин- терпретатор bash читает файл /etc/profile до начала обработки файла */ .profile и ~/ .bashjprofile. В эти файлы стоит помещать стандартные установки, необходимые для функционирования вашего узла, но следует иметь в виду, что пользователи могут пе- реопределять свои установки в собственных конфигурационных файлах. Информацию о других интерпретаторах можно найти в документации (см. соответствующие man- страницы).
Глава 7. Добавление новых пользователей 235 Не забудьте задать разумное значение umask (рекомендуем 077, 027 или 022, в зави- симости от “дружелюбности” среды и размеров организации). Если вы не используете индивидуальные группы, рекомендуем установить для umask значение 077, поскольку оно предоставляет владельцу полный доступ, а для группы и вообще для всех осталь- ных — никакого доступа. Подробнее о umask см. раздел 6.5. Конфигурационные файлы и каталоги, перечисленные для настольных сред GNOME и KDE, представляют собой лишь вершину айсберга. Утилита gconf предназначена для хранения предпочтений в выборе приложений для программ под управлением GNOME (подобно тому, как это реализовано в системном реестре Windows). Установка прав доступа и прав собственности После установки домашнего каталога переходите к пользователю и убедитесь, что он имеет соответствующие права доступа. Команда $ sudo chown -R новыи_пользователь: новая_группа ~новый_пользователь должна надлежащим образом установить права собственности. Обратите внимание на невозможность использования команды $ sudo chown новый_пользователь: новая_группа ~новый_пользователь/ .★ применительно к файлам, имена которых начинаются с точки, поскольку новый_ пользователь станет владельцем не только собственных файлов, но и родительского каталога “.. ” (например, /home). Это распространенная и опасная ошибка. Назначение каталога для электронной почты Пользователи зачастую предпочитают получать почту на одном компьютере. Эта схе- ма часто реализуется с помощью записи в файле глобальных псевдонимов /etc/mail/ aliases или установки параметра userDB программы sendmail на центральном почто- вом сервере. Об электронной почте можно прочитать в главе 20. Конфигурирование ролей и административных привилегий Управление доступом на основе ролей (role-based access control — RBAC) позволя- ет “подогнать” системные права к отдельным пользователям и обеспечивается на мно- гих наших примерах систем. Политика RBAC не является традиционной частью моде- ли управления доступом UNIX или Linux, но если на вашем узле она используется, то конфигурация ролей должна быть частью процесса добавления пользователей. Модель RBAC подробно описана в разделе 4.2. Ш Подробнее о SOX и GLBA написано в главе 32. Принятые в США законы Сарбейнза-Оксли (Sarbanes-Oxley Act) и Грэма-Лич- Блайли (Gramm-Leach-Bliley Act), предназначенные, в частности, для защиты инфор- мации заказчика, полученной или используемой финансовыми организациями США, от кражи, неавторизованного доступа или злоупотребления, усложнили многие аспекты системного администрирования в корпоративной сфере, включая управление пользо- вателями. Поэтому использование ролей может быть вашим единственным жизнеспо- собным вариантом, позволяющим выполнить некоторые требования, устанавливаемые законами SOX/GLBA.
236 Часть I. Основы администрирования Заключительные действия Для того чтобы удостовериться, что новая учетная запись сконфигурирована надле- жащим образом, завершите сеанс работы (т.е. выйдите из системы), а затем снова вой- дите в систему под именем нового пользователя и выполните следующие команды. $ pwd /* для проверки домашнего каталога */ $ Is -la / * для проверки владельца/группы файлов конфигурации */ Вам необходимо уведомить новых пользователей об их регистрационных именах и начальных паролях. Многие узлы отправляют эту информацию по электронной по- чте, но из соображений безопасности это не приветствуется. Делайте это при личном контакте или по телефону. Но если вам приходится добавлять сразу 500 новичков на университетские компьютеры CS-1, переложите эту задачу на преподавателей! Именно в это время стоит напомнить пользователям о пользе ознакомления с дополнительной документацией на предмет местных обычаев, если таковые имеют место. CQ Подробнее о заключении контрактов с пользователями можно прочитать в разде- ле 32.10. Если на вашем узле требуется, чтобы пользователи подписывали соответствующее соглашение, убедитесь в реализации этого действия до создания их учетных записей. Такая проверка предотвратит возможные упущения и усилит правовую основу санкций, которые, возможно, вам придется позже применить. Напомните новым пользователям о необходимости немедленного изменения их па- ролей. При желании это можно обеспечить путем установки действия паролей в течение некоторого короткого времени. Еще один вариант состоит в создании сценария, кото- рый бы проверял новых пользователей и удостоверялся в том, что их зашифрованные пароли в файле shadow были изменены9. Если вы знаете пользователей лично, то в та- кой среде относительно несложно проследить, кто использует систему и с какой целью. Но если в подчинении администратора большой и часто меняющийся штат пользова- телей, необходим более формальный способ контроля учетных записей. Ведение базы данных с контактной информацией и сведениями о статусе учетных записей поможет, в случае необходимости, легко выяснить, кто есть кто и зачем тому или иному пользова- телю понадобилась учетная запись. 7.5. Добавление пользователей С ПОМОЩЬЮ ПРОГРАММЫ USERADD Во всех системах программа useradd реализует одну и ту же базовую процедуру, опи- санную выше. Но ее можно сконфигурировать под конкретную среду. Поскольку в каж- дой системе имеются свои представления о том, что именно следует настраивать, где следует реализовать настройки и каково должно быть стандартное поведение, мы опи- сываем эти подробности в соответствующих разделах. В табл. 7.4 приведены команды и файлы конфигурации, имеющие отношение к управлению пользователями. Все рассматриваемые нами системы имеют “джентль- менские” наборы команд для управления пользователями (как правило, к ним относят- 9 Поскольку один и тот же пароль может иметь множество зашифрованных представлений, этот метод проверяет только сам факт изменения пользователем своего пароля, а не то, что пароль реально был заменен другим паролем.
Глава 7. Добавление новых пользователей 237 ся команды useradd, usermod и userdel). Поскольку все эти команды сконфигуриро- ваны одинаково, рассмотрим только команду useradd и дополним ее запись другими командами, в зависимости от конкретной системы. Обратите внимание на то, что, несмотря на одинаковое имя (useradd), сами утили- ты реализованы в разных системах по-разному. Таблица 7.4. Команды и файлы конфигурации для управления пользователями Система Команды Конфигурационные файлы Комментарии - Ubuntu useradd adduser /etc/login.defs /etc/default/useradd /etc/adduser.conf Более дружественная Perl-версия SUSE useradd /etc/login.defs /etc/default/useradd /etc/default/passwd /usr/sbin/useradd.local /usr/sbin/userdel.local /usr/sbin/userdel-pre.local /usr/sbin/userdel-post.local Для локальных настроек Для локальных настроек Для локальных настроек Для локальных настроек Red Hat useradd /etc/login.defs /etc/default/useradd Solaris useradd /etc/default/{login tpasswd} /etc/security/policy.conf HP-UX useradd smh /etc/default/useradd /etc/default/security GUI-инструмент, также именуемый sam AIX useradd inkuser chuser rmuser SMIT /etc/security/user /etc/security/login.cfg /etc/security/mkuser.defaults Вызывается useradd Вызывается usermod Вызывается userdel GUI-инструмент а В старых системах AIX этот файл находится в каталоге /usr/lib/security. Команда useradd в системе Ubuntu В системе Ubuntu предусмотрено два способа добавления пользователей: adduser и useradd. Команда adduser представляет собой Perl-оболочку для команды useradd, что увеличивает ее “коэффициент полезного действия”, позволяя создавать домашние каталоги, копировать файлы конфигурации и пр. Команда adduser конфигурируется в файле /etc/adduser. conf по таким направ- лениям: • правила размещения домашних каталогов: по группе, по имени пользователя и пр.; • установки прав доступа для новых домашних каталогов; • диапазоны индивидуальных и групповых идентификаторов (UID и GID) для си- стемных и общих пользователей; • возможность создания индивидуальной группы для каждого пользователя; • дисковые квоты (к сожалению, с использованием только типа Boolean);
238 Часть I. Основы администрирования • сопоставление имен пользователей и имен групп с заданными регулярными вы- ражениями. Другие типы параметров команды useradd (такие, как правила создания паролей) устанавливаются как параметры, передаваемые модулю РАМ, который выполняет регу- лярную аутентификацию паролей. О подключаемых модулях аутентификации (Pluggable Authentication Modules — РАМ) можно прочитать в разделе 22.5. У команды adduser есть “близнец” addgroup и “кузины” deluser и delgroup. Команда useradd в системе SUSE В системе SUSE с помощью команды useradd по умолчанию не создается до- ™ * машний каталог для нового пользователя и не копируются конфигурационные файлы. Эти дополнения придется “заказать” с помощью флага -т. (Файлы за- пуска находятся в каталоге /etc/skel.) Команда useradd не создает и почто- вый файл спулинга для новых пользователей. Кроме того, SUSE-команда useradd не создает пользовательские группы; по умол- чанию идентификатор группы (GID) в файле passwd задается с помощью переменной GROUP в файле /etc/default/useradd. Новые пользователи также добавляются в группы, задаваемые переменной GROUPS. По умолчанию это группы video и dialout, они предоставляют доступ к системному буферу кадров и программам, обеспечивающим работу с сетью по коммутируемым телефонным каналам (pppd). Для того чтобы компенсировать эти недостатки, SUSE-команда useradd вызывает bash-сценарий /usr/sbin/useradd. local, в который можно добавить нужные вам настройки. Файл /etc/login.defs в SUSE управляет следующими аспектами: • разрешать ли регистрацию, если домашний каталог пользователя не существует; • степень устойчивости (задержка и блокировка) для неудачных попыток реги- страции; • местоположение “сообщения дня” и файлов ttytype (ввод с терминала); • ограничения на использование chsh и chfn; • контроль за сроками действия паролей; • диапазоны системных, пользовательских и групповых идентификаторов; • правила формирования допустимых имен пользователей и групп; • пользовательские значения umask (по умолчанию оно равно 022); • локальные сценарии, которые “монтируются” в команды useradd и userdel; Различные параметры и их значения достаточно полно описаны в man-странице для файла login. def s и комментариях в самом файле. Команда useradd в системе Red Hat Программа useradd в системе Red Hat Enterprise Linux принимает параметры конфигурации из файла /etc/login.defs, в котором хранятся результаты решения таких задач, как контроль устаревших паролей, алгоритмы шифро- вания, почтовые файлы спулинга и диапазоны идентификаторов UID/GID. Назначение различных параметров разъясняется с помощью комментариев, содержащихся в этом файле.
Глава 7. Добавление новых пользователей 239 С помощью команды useradd -D можно отобразить значения, которые исполь- зуются командой useradd для регистрации новых пользователей по умолчанию. Эти стандартные значения устанавливаются в файле /etc/default/useradd. В системе Red Hat новые пользователи включаются в собственные индивидуальные группы. В файле passwd символ “х” используется в качестве заполнителя пароля, а в файле shadow сим- вол “!! ” работает как код, который запрещает регистрацию и требует, чтобы системный администратор установил пароль для нового пользователя. По умолчанию используется алгоритм шифрования MD5. Домашний каталог нового пользователя заполняется кон- фигурационными файлами, “взятыми” из каталога /etc/skel. Команда useradd в системе Solaris В системе Solaris одна часть стандартных параметров, связанных с регистраци- soians онными именами и паролями, хранится в каталогах /etc/default/login и /etc/def ault/passwd; другая — встроена в саму команду useradd. Команда useradd -D позволяет отобразить стандартные значения некоторых параме- тров. Используя дополнительные флаги, эти стандартные значения можно восстановить. Формат файлов default/login и default/passwd подобен формату Linux-файла login.defs в том, что пустые строки и строки, начинающиеся с символа игнори- руются, а каждая строка, не являющаяся комментарием, назначает переменной некото- рое значение. Однако синтаксические строки NAME=значение И NAME Спробельный символ> значение не эквивалентны. Файл /etc/default/passwd позволяет управлять следующими параметрами: • минимальная длина пароля; • срок действия пароля; • необходимая степень сложности пароля; • контроль взломанных паролей. Файл /etc/default/login позволяет управлять следующими аспектами: • часовой пояс; • предельные значения размеров файлов, которые может создавать пользователь; • может ли суперпользователь регистрироваться только на консоли; • для каждого ли пользователя требуется пароль; • обработка неудачных попыток регистрации; • начальный путь поиска пользователя; • стандартное значение umask для пользователя (по умолчанию устанавливается равным 022); • протоколировать ли действия суперпользователя и неудачные попытки регистра- ции посредством утилиты syslog. Файлы /etc/security/policy, conf и /etc/security/crypt. conf определяют алгоритмы шифрования, которые можно использовать для паролей.
240 Часть I. Основы администрирования Команда useradd в системе HP-UX По умолчанию HP-UX-команда useradd не позволяет создавать домашние ЛЗЕЛ каталоги или включать пользователя в индивидуальную группу. Однако с по- мощью опции -т домашние каталоги можно создавать, а также заполнять их файлами запуска из каталога /etc/skel. Параметры конфигурации для команды useradd устанавливаются в файлах /etc/ default/useradd и /etc/default/security, причем файл useradd принимает па- раметры в стиле Linux (NAME <пробел> значение), а файл security — в стиле Solaris (ЫАМЕ=значение). Синтаксис должен быть ясен по другим записям в каждом файле, но если вы примените неправильный формат, переменная, которую вы попытаетесь уста- новить, будет молча проигнорирована. Никакие сообщения о синтаксических ошибках при этом не генерируются. Файл /etc/default/useradd управляет следующими опциями: • стандартная группа и командная оболочка; • корень дерева домашнего каталога; • истечение срока действия учетной записи; • создавать ли домашние каталоги; • разрешать ли дублированные идентификаторы пользователя. Файл /etc/default/security содержит дополнительные параметры конфигура- ции, и некоторые из них имеют отношение к управлению пользователями: • разрешать ли регистрационные имена с опущенным домашним каталогом; • разрешать ли нулевые (пустые) пароли; • минимальная длина пароля; • обработка неудачных попыток регистрации; • обработка неактивных учетных записей; • стандартное значение umask для новых пользователей (по умолчанию 027). По именам переменных в этом файле несложно понять их назначение. Команда useradd в системе AIX • В системе AIX программа useradd представляет собой всего лишь ksh-обо- лочку для команды mkuser. Подобным образом команда usermod вызывает программу chuser, а команда userdel — программу rmuser. Для этих ко- манд имеются соответствующие man-страницы, которые можно найти по их исходным именам. Файлы конфигурации, управляющие многочисленными аспектами регистрационных имен и паролей, хранятся в каталоге /etc/security. Существует три файла: login, cfg, user и mkuser. default. В первых двух файлах символ используется в каче- стве символа комментария; а третий файл комментариев не имеет. Эти файлы организо- ваны с использованием следующей формы. метка: атрибут - значение сл едующий_ а трибут = зна чение следующая_метка : атрибут = значение
Глава 7. Добавление новых пользователей 241 Например, в файле /etc/security/user элементы метка представляют собой имена пользователей (или слово default), а список возможных атрибутов приведен в табл. 7.5. Таблица 7.5. Опции управления учетными записями пользователей в файле /etc/security/user (AIX) Опция ; . Д; •• account_locked Булев Блокирует регистрационное имя, если равен true admin Булев Предоставляет права администратора, если равен true authl Список методов Основной метод аутентификации auth2 Список методов Второстепенный метод аутентификации dictionlist Имена файлов Словари, которые должны включать пароли expires Дата Дата истечения срока действия учетной записи пользователя histexpire Недели Период, когда пользователь не может повторно использовать пароль histsize Число Количество предыдущих значений пароля, которое не может быть повторно использовано ogin Булев Можно зарегистрировать? Подходит для таких регистрационных имен, bin oginretries Число Количество попыток регистрации до блокирования учетной записи ogintimes Временной диа- пазон Временные границы, когда пользователь может зарегистриро- ваться maxexpired Недели Льготный период для недействительных паролей maxrepeats Число Количество раз, которое символ может появиться в пароле minage, maxage Недели Минимальный и максимальный “возраст” пароля minalpha Число Минимальное количество буквенных символов в пароле mindiff Символы Количество символов старого пароля, разрешенных в новом па- роле minlen Число Минимальная длина пароля (не устанавливайте его равным 0) minother Число Минимальное количество небуквенных символов в пароле pwdchecks Имена файлов Функции, вызываемые для проверки безопасности паролей pwdwarntime Дни Льготный период для предупреждения пользователя об изменении пароля rlogin Булев Может ли использовать протокол rlogin или telnet для данной учетной записи? su Булев Могут ли другие пользователи использовать su для данной учет- ной записи? ttys Список устройств Терминалы, с которых данный пользователь может регистриро- ваться __ umask Восьмеричный Стандартные права доступа для файлов, созданных пользователем Ну и ну, что за список! В комментариях файла указываются значения по умолчанию, которые вполне корректны для инсталляции с низким уровнем безопасности. Мы реко- мендуем некоторые параметры изменить: • значение umask с 022 на 077;
242 Часть I. Основы администрирования • значение loginretries с 0 (неограниченное) на небольшое целое, скажем, чис- ло 5; • значение minlen с 0 (нет пароля) на хотя бы число 6 или 7; • значение expires с 0 (никогда) на год (только в случае, если у вас есть инстру- мент периодического обновления дат истечения срока для действительных поль- зователей). £□ Подробнее о РАМ рассказывается в разделе 22.5. К сожалению, это лишь один из файлов конфигурации, который управляет процес- сом регистрации нового пользователя. Файл /etc/security/login.cfg содержит па- раметры управления дефектными регистрационными именами (время задержки между приглашениями ввести имя и пароль, количество дефектных регистрационных имен, разрешаемых до блокирования учетной записи, длительность блокирования учетной записи, время ее восстановления и прочее), значения моментов времени, когда реги- страционные имена разрешаются, вид запроса на ввод пароля пользователя, список действующих интерпретаторов команд, максимально допустимое количество одновре- менных регистраций, длительность времени ожидания пароля пользователя, тип авто- ризации регистрационного имени (т.е. где бы вы задали РАМ10, если бы должны были его использовать) и алгоритм шифрования паролей (по умолчанию crypt). Кроме того, чтобы запутать вас еще больше, некоторые параметры задаются в двух файлах, иногда с одинаковыми именами (например, logintimes), а иногда — с разными (loginretries и logindisable). Наверное, чтобы жизнь медом не казалась! Команда useradd в системе AIX не имеет опции -D, которая отображает стандартные значения для новых пользователей. Она помещает новых пользователей в одну группу ц не создает домашние каталоги, если не был указан флаг -т (в этом случае выполняется копирование данных в файл .profile из каталога /etc/security). Пример использования команды useradd Для того чтобы создать в системе Linux новую учетную запись “hilbert” стандартны- ми системными средствами, можно просто выполнить следующую команду. $ sudo useradd hilbert При выполнении этой команды будет создана следующая запись в файле /eta /passwd. hilbert:х:1005:20: :/home/hilbert:/bin/sh Команда useradd блокирует учетную запись, помещая символ “х” в поле пароля^ Чтобы сделать учетную запись используемой, ей необходимо назначить реальный пароль. Рассмотрим более реалистичный пример. Мы хотим, чтобы основной группой поль- зователя hilbert была faculty и чтобы он был добавлен в группу famous. Для этого переопределим стандартное местоположение домашнего каталога и интерпретатор, а также велим команде useradd создать домашний каталог (если таковой еще не создан). $ sudo useradd -с "David Hilbert" -d /home/math/hilbert -g faculty -G famous -m -s /bin/tcsh hilbert Эта команда создает следующую запись passwd. hilbert:х:1005:30:David Hilbert:/home/math/hilbert:/bin/tcsh 10 PAM — подключаемые модули аутентификации — относительно недавнее дополнение к си- стеме AIX, которое должно быть полностью функциональным в версии 5.3 и более поздних.
Глава 7. Добавление новых пользователей 243 Назначенный идентификатор (UID) оказывается больше наибольшего идентифика- тора в системе, и соответствующая запись имеет следующий вид. hilbert: ! :14322:0:99999:7:0: : В файлах passwd и shadow используются разные символы-заполнители пароля, ко- торые зависят от конкретной операционной системы. Команда useradd также добавит пользователя hilbert в соответствующую группу (в файле /etc/group), создаст ката- лог /home/math/hilbert и заполнит его файлами из каталога /etc/skel. 7.6. Добавление пользователей "пакетом” С ПОМОЩЬЮ КОМАНДЫ NEWUSERS (LlNUX) ДПри выполнении Linux-команды newusers одновременно создается несколь- ко учетных записей из содержимого подготовленного текстового файла. Это не вполне формальный способ, но им удобно пользоваться в случае, если нужно добавить много пользователей сразу, например при создании учетных записей для учебной группы. Команда newusers в качестве аргумента полу- чает входной файл, состоящий из строк, подобно файлу /etc/passwd, за ис- ключением того, что его поле пароля содержит начальный пароль, заданный открытым текстом. Поэтому хорошо подумайте о защите такого файла. Команда newusers принимает связанные со сроком действия пароля параметры, установленные в файле /etc/login.defs, но не копирует стандартные конфигураци- онные файлы, как это делает команда useradd. Единственный файл, который предо- ставляется в этом случае, — файл .xauth. В университетских системах действительно важно применять “пакетный” сценарий adduser, который использует список студентов из данных регистрации для генерирова- ния входной информации для команды newusers. Для этого необходимо иметь имена пользователей, подготовленные в соответствии с локальными правилами при гарантии их уникальности (на локальном уровне), а также метод случайного генерирования па- ролей при увеличивающихся значениях идентификаторов пользователей и Щупловых идентификаторов для каждого студента. Возможно, вам лучше написать собственную оболочку для команды useradd на языке Perl или Python, чем пытаться приспособить свои нужды к тому, что предлагает команда newusers. 7.7. Удаление пользователей Когда пользователь покидает организацию, его учетная запись и файлы должны быть Удалены из системы. Эта процедура включает удаление всех ссылок на регистрационное имя, которые были введены вручную или с помощью команды useradd. При ручном Удалении учетной записи последовательность операций будет примерно такой: • удалить записи пользователя из локальных баз данных и телефонных списков; • удалить пользовательские псевдонимы из файла aliases либо организовать пере- направление поступающих ему сообщений; • удалить пользовательские задания из crontab-файла, из очереди команды at, а также из заданий на печать; • уничтожить пользовательские процессы, которые еще выполняются;
244 Часть I. Основы администрирования • удалить записи пользователя из файлов passwd, shadow11, group и gshadow; • удалить домашний каталог пользователя; • удалить почтовый каталог пользователя; • удалить записи в совместно используемых календарях, системах бронирования но- меров и пр. • удалить или преобразовать права владения любыми списками рассылки, исполь- зуемыми удаленным пользователем. Перед тем как удалять домашний каталог пользователя, необходимо переместить из него в другие каталоги все файлы, которые нужны остальным пользователям. Поскольку не всегда можно с уверенностью сказать, какие файлы понадобятся, а какие — нет, луч- ше предварительно скопировать пользовательские домашний и почтовый каталоги на какой-то носитель. После удаления учетной записи пользователя убедитесь, что в системе не осталось файлов с его идентификатором. Чтобы узнать точный путь к этим файлам, восполь- зуйтесь командой find с аргументом -nouser. Поскольку команда find может вести поиск на сетевых серверах, проверяйте файловые системы по отдельности, задавая оп- цию -xdev. $ sudo find filesystem -xdev -nouser Прекращение выполнения процессов удаленного пользователя может оказаться про- блематичным в распределенной среде. Совместно используемые календари и системы бронирования номеров могут иметь еще работающие элементы (сгенерированные бо- лее несуществующим пользователем), которые внезапно “осиротели” и должны быть удалены. Возможно, в вашей системе найдутся и другие места, подлежащие “зачистке”. Имеет смысл составить собственный список, может быть, в форме соответствующего сценария. Если в организации за пользователями закреплены отдельные рабочие станции, эффективнее всего переинсталлировать систему, прежде чем предоставлять ее новому пользователю. Но не забудьте сбросить на системный жесткий диск локальные файлы, которые могут понадобиться в будущем. Каждая система из наших примеров имеет команду userdel, которая автоматизиру- ет процесс удаления пользователя. Если она не отвечает вашим высоким требованиям, можете дополнить ее функциональные возможности предоставлением ей расширенного списка мест хранения данных о пользователях. ®В системе Ubuntu команда deluser представляет собой Perl-сценарий, ко- торый вызывает обычную команду userdel, аннулируя все деяния команды adduser. При этом вызывается сценарий deluser.local, если таковой су- ществует, чтобы реализовать несложную операцию локализации. Файл кон- фигурации /etc/deluser. conf позволяет установить следующие опции: • удалять ли домашний и почтовый каталоги пользователя; • резервировать ли файлы пользователя и куда поместить резервные копии; • удалять ли все файлы, которыми владел пользователь; • удалять ли группу, если в данный момент она не имеет членов. 11 В системе AIX /etc/security/{passwd,group}.
Глава 7. Добавление новых пользователей 245 Система SUSE поддерживает набор префиксных и постфиксных сценари- • " ™ ев, а также сценарий userdel. local, который помогает команде userdel (и вам), вооружая соответствующие программные инструменты знаниями о ваших местных особенностях. Сконфигурируйте соответствующие параме- тры в файле /etc/login.defs. В системе Red Hat предусмотрен сценарий userdel. local, но не предусмо- трены префиксные и постфиксные сценарии для автоматизации операций по резервированию файлов пользователя, подлежащего удалению. В системах Solaris и AIX есть дополнительные “тайники”, в которых утаи- SOLSriS вается информация о пользователях. В основном, это файлы, обеспечиваю- щие управление ролями и классами авторизации. Следовательно, команды userdel этих систем имеют более длинный “список действий” по удалению всех ссылок на удаляемого пользователя. Например, в дополнение к файлам /etc/passwd и /etc/group, Solaris-команда userdel обновляет файлы /etc/shadow, /etc/project и /etc/user_attr. В систе- ме AIX команда userdel обновляет содержимое следующих файлов в каталоге /etc/ security: user, user.roles, lastlog, environ, audit/config, limits, passwd и group. От Solaris не следует ожидать образцового исполнения: ее команда userdel оставляет тестовое регистрационное имя с профилем, сконфигурированным в базе дан- ных user_attr, которую необходимо “привести в порядок”. KCV в системе HP-UX команда userdel лишена “интеллекта”, т.е. вполне зауряд- но ликвидирует изменения, внесенные командой useradd. Она обновляет со- держимое только файлов passwd, shadow и group. 7.7. Отключение учетной записи Иногда нужно временно отключить учетную запись пользователя. Проще всего сде- лать это, поставив звездочку (*) или какой-то другой символ в поле зашифрованного пароля в файле /etc/security/passwd (AIX) или /etc/shadow. Эта мера препятству- ет большинству типов доступа, управляемых паролем, поскольку дешифровка больше не может привести к получению какого-либо приемлемого пароля. Однако такие команды, как ssh, которые не всегда проверяют системные пароли, могут продолжать работать. ДВо всех дистрибутивах Linux, рассматриваемых нами в качестве примеров, ко- манды usermod -L пользователь и usermod -U пользователь позволяют легко соответственно блокировать и разблокировать пароли. Флаг -L просто помещает символ “! ” перед зашифрованным паролем в файле /etc/shadow, а флаг -и удаляет его. Суперпользователь в системе Solaris может заблокировать учетную запись с по- soians мощью команды passwd ~ 1 locfin имя9 заставить пользователя изменить па роль с помощью флага -f или разблокировать учетную запись с помощью фла- га -и. При блокировке учетной записи в поле пароля (в файле /etc/shadow) добавляются символы *LK*. Они также представляют собой значение, уста- навливаемое командой useradd для новых пользователей. ЕЯ Система HP-UX поддерживает только зашифрованные с помощью crypt па- роли. Символ никогда не может принадлежать полю пароля, сгенериро-
246 Часть I. Основы администрирования ванного системой crypt, поэтому добавление символа к зашифрованно- му паролю не позволит пользователю войти в систему. • В системе AIX, если поле пароля в файле /etc/passwd содержит символ “*” вместо символа “ ’ учетная запись блокируется. AIX-команда pwdadm может заставить пользователя изменить пароль или заблокировать учетную запись, чтобы только администратор мог изменить пароль. К сожалению, модификация пароля пользователя просто приводит к блокированию регистрационных имен. При этом пользователь не уведомляется о блокировке паро- ля и не получает разъяснений, почему его учетная запись больше не работает. Альтер- нативный способ блокировать регистрационные имена состоит в замене интерпретато- ра команд пользователя программой, которая выдает сообщение, поясняющее, почему учетная запись отключена, и содержащее инструкции по исправлению ситуации. Затем программа завершается, завершая сеанс регистрации. Этот метод имеет как преимущества, так и недостатки. Те формы доступа, которые проверяют пароли, но не обращают внимания на интерпретатор команд, не будут забло- кированы. Многие демоны, предоставляющие доступ к системе без регистрации (напри- мер, ftpd), проверяют, упомянут ли интерпретатор пользователя в файле /etc/shells. Если он там не указан, вход в систему будет запрещен (именно это нам и требуется). К сожалению, этот метод нельзя назвать универсальным. Поэтому, если для блокирова- ния учетных записей вы решите модифицировать интерпретатор команд, вам придется провести дополнительные исследования своей системы. Кроме того, поясняющее сообщение нельзя увидеть, если пользователь пытается за- регистрироваться в системе в оконной среде или посредством эмулятора терминала, ко- торый не позволяет увидеть сообщения после выхода из системы. По умолчанию программа sendmail не доставляет почту тем пользователям, чьи ин- терпретаторы не указаны в файле /etc/shells. Как правило, не рекомендуется вмеши- ваться в доставку почты, даже если получатель не может прочитать ее немедленно. Для того чтобы “обмануть” программу sendmail, добавьте в файл /etc/shells ложный интерпретатор с именем /SENDMAIL/ANY/SHELL (конечно, это может вызвать нежела- тельные побочные эффекты). 7.9. Управление учетными записями СИСТЕМНЫМИ СРЕДСТВАМИ Системы HP-UX и АЕХ предоставляют комплексные инструментарии системного администрирования, в которые заложены “знания”, как управлять пользователями, по крайней мере, на базовом уровне. В системе AIX это интерфейс SMIT (System Mana- gement Interface Tool), а в HP-UX — интерфейс, который сейчас называется smh (Sys- tem Management Homepage). В более ранних версиях HP-UX этот инструмент носил на- звание sam (System Administration Manager). Все эти инструменты используют экраны для добавления пользователей и управления ими, с применением либо оконного (GUI), либо терминального интерфейса на базе библиотеки curses. Если вы — начинающий системный администратор или уже опытный специалист, но осваивающий новую опера- ционную систему, эти инструменты — как раз то, с чего вам нужно начать для решения многих рутинных задач системного администрирования.
Глава 7. Добавление новых пользователей 247 AIX-инструмент smithy отличается удобной функциональностью. Нажав клавишу <F6>, вы увидите команду (с возможными параметрами), предлагаемую для выполне- ния. Этот инструмент регистрирует все действия и хранит файл сценария с командами, выполняемыми от вашего имени. Он может послужить хорошим подспорьем в изучении особенностей системы AIX. Если вы работаете в системе HP-UX, то, вероятно, вам по- нравится инструмент sinh, который оснащен односимвольными клавиатурными коман- дами, принимаемыми его интерфейсом curses. Эти команды отображаются на каждой странице меню, и поэтому вы сможете быстро с ними познакомиться. 7.10. Уменьшение риска с помощью РАМ Подключаемые модули аутентификации (Pluggable Authentication Modules — РАМ) подробно описаны в разделе 22.5. В них сосредоточено управление системными сред- ствами аутентификации посредством стандартных библиотечных утилит, чтобы такие программы, как login, sudo, passwd и su, не должны были предоставлять собственный код аутентификации. Модули РАМ уменьшают риск, присущий отдельно взятым про- граммным продуктам, позволяют администраторам устанавливать политики безопасно- сти, действующие в рамках всего узла сети, а также определяют простой способ добавле- ния в систему новых методов аутентификации. Добавление и удаление учетных записей пользователей не предусматривает измене- ние конфигурации модулей РАМ, но используемые для этих целей инструменты долж- ны действовать по правилам РАМ и в соответствии с требованиями РАМ. Кроме того, многие параметры конфигурации РАМ подобны тем, которые используются командами useradd или usermod. Если вы измените какой-нибудь параметр (как описано ниже в этой главе), а команда useradd, казалось бы, не обратит на это внимания, проверьте, не аннулировала системная конфигурация РАМ ваше новое значение. 7.11. Централизация управления учетными записями В средних и крупных корпорациях всех типов (академических, частных или госу- дарственных) важно использовать определенную форму централизованного управления учетными записями. Каждый пользователь должен иметь в узле уникальное, удобное и безопасное регистрационное имя, идентификатор (UID) и пароль. Администраторам нужна централизованная система, которая бы немедленно обеспечивала повсеместное распространение изменений (например, аннулирование конкретной учетной записи). Такая централизация может быть достигнута различными способами, большинство из которых (включая систему Active Directory компании Microsoft) в той или иной степе- ни (от бесплатных инсталляций с открытым исходным кодом до дорогих коммерческих систем) использует упрощенный протокол доступа к сетевым каталогам (Lightweight Directory Access Protocol — LDAP). Протокол LDAP и служба Active Directory Ш Подробнее о протоколе LDAP и его реализациях рассказывается в разделе 19.3. Протокол LDAP представляет собой обобщенный репозиторий (наподобие базы дан- Ных)> который может хранить данные, связанные с управлением пользователями, а так- Же другие типы данных. Он использует иерархическую модель “клиент/сервер”, которая поддерживает несколько серверов и несколько одновременно работающих клиентов.
248 Часть I. Основы администрирования Одно из самых больших преимуществ LDAP как общеузлового репозитория для реги- страционных данных состоит в том, что он может обеспечить в системах уникальность идентификаторов UID и GID. Кроме того, он хорошо стыкуется с Windows, хотя обрат- ное утверждение справедливо лишь в самой малой степени. Служба Active Directory использует протоколы LDAP и Kerberos (сетевой протокол аутентификации) и может управлять множеством типов данных, включая данные поль- зователей. Она ведет себя несколько “эгоистично”, навязывая “свою линию” при взаи- модействии с UNIX- или Linux-репозиториями LDAP Если вам нужна единая система аутентификации для узла, который включает Windows-компьютеры, а также UNIX- и Linux-системы, то, возможно, проще всего позволить службе Active Directory использо- вать ваши UNIX-базы данных LDAP в качестве вспомогательных серверов. Для реализации такой конфигурации вам понадобится служба Active Directory и Microsoft-службы для UNIX (Services for UNIX) или такая коммерческая интеграцион- ная платформа Active Directory, как Quest Authentication Services (ранее именуемая Vin- tela Authorization Services). Система Virtual Directory (Sun) может состыковать несколько различных систем авторизации/аутентификации. Все наши примеры систем поддерживают LDAP как встроенный компонент, хотя иногда лишь на стороне клиента (например, это касается системы HP-UX). Протокол LDAP для выполнения задач аутентификации часто связывается с модулями РАМ. Протокол LDAP — это, по сути, база данных, поэтому хранимая там информация должна быть построена по определенной схеме. Под схемами в данном случае пони- маются XML-файлы, имена полей в которых должны отвечать релевантным форматам RFC (Request for Comments — запрос комментариев, т.е. документ из серии пронуме- рованных информационных документов Интернета), в основном RFC2307 для данных управления пользователями. Подробнее написано в главе 19. Системы “единого входа” Системы с однократной идентификацией пользователей (single sign-on — SSO) уравновешивают удобства пользователя с проблемами безопасности. Их основная идея состоит в том, чтобы пользователь, один раз зарегистрировавшись (в ответ на соответ- ствующее приглашение, в веб-странице или в окне Windows), мог затем переходить, к примеру, из одного раздела в другой без повторной аутентификации. Другими словами, пользователь получает аутентификационный мандат (обычно в неявном виде, чтобы не требовалось больше никакого активного управления), который затем можно использо- вать для доступа к другим компьютерам и приложениям. Пользователь должен помнить только одну последовательность (а не много), состоящую из регистрационного имени и пароля. Эта схема позволяет усложнять мандаты (поскольку пользователю не нужно помнить о них и вообще иметь с ними дело), которые теоретически повышают степень сложно- сти. Однако влияние скомпрометированной учетной записи в этом случае усиливается, поскольку одно регистрационное имя предоставляет взломщику доступ сразу к несколь- ким компьютерам и приложениям. Системы SSO переносят “арену действий” из на- стольного компьютера (пока вы спокойно регистрировались) в зону особой уязвимости. Кроме того, узким местом системы становится сервер аутентификации. Если он “упа- дет”, вся работа организации остановится. Несмотря на то что в основе системы SSO лежит простая идея, она предполагает большую внутреннюю сложность, поскольку различные приложения и компьютеры,
Глава 7. Добавление новых пользователей 249 к которым пользователь хотел получить доступ, должны понимать процесс аутентифи- кации и SSO-мандаты. В некоторых системах SSO мандатами пользователей управляет протокол Kerberos (подробнее он описан в разделе 22.10). Существует ряд систем SSO с открытым исходным кодом: • JOSSO, сервер SSO с открытым исходным кодом, написанный на языке Java; • служба CAS (Central Authentication Service), созданная Йельским университетом (на языке Java); • продукт Likewise Open, средство интеграции, которое заставляет службу Microsoft Active Directory хорошо работать с системами Linux и UNIX. Существуют также коммерческие системы, большинство из которых интегрировано с семействами программных продуктов, предназначенными для управления учетными данными (о них пойдет речь в следующем разделе). Системы управления учетными данными Управление учетными данными (identity management) — это последний писк моды в области управления пользователями. Если говорить проще, то этот термин означает идентификацию пользователей конкретной системы, аутентифицирование их лично- стей и предоставление привилегий на основе этих аутентифицированных личностей. Стандартизация этой деятельности проводится такими организациями, как World Wide Web Consortium и The Open Group. Коммерческие системы управления учетными данными сочетают несколько клю- чевых концепций UNIX в виде графического интерфейса, “приправленного” терми- нами из сферы маркетинга. Основным элементом для всех этих систем является база- данных, которая содержит информацию, связанную с аутентификацией и авторизацией пользователей, часто хранимую в формате LDAP. Управление реализуется на базе таких понятий, как группы UNIX, а ограниченные административные права усиливаются по- средством таких утилит, как sudo. Большинство таких систем было разработано с целью урегулирования требований, диктуемых с точки зрения возможности идентификации, использования контрольных записей и слежения за ними. Создано много коммерческих систем в этой сфере, например: Identity Management (Oracle), Sun Identity Management Suite12, Courion, Avatier Identity Management Suite (AIMS) и BMC Identity Management Suite. Оценивая системы управления учетными дан- ными, ищите следующие функции: • генерирование глобальных уникальных идентификаторов пользователей; • возможность создания, изменения и удаления пользовательских учетных записей в организации на оборудовании и операционных системах всех типов; • безопасный веб-интерфейс для управления, доступного как изнутри, так и снару- жи организации; • возможность простого отображения имен всех пользователей, которые имеют определенный набор привилегий; • простой способ узнать все права, предоставленные конкретному пользователю; • возможность разрешить пользователям изменять (и восстанавливать) собственные пароли при соблюдении правил выбора сильных паролей; 12 Теперь, когда компания Oracle купила Sun, не ясно, выживет ли эта система как продукт по- сле завершения процесса поглощения.
250 Часть I. Основы администрирования • возможность для пользователей менять их пароли глобально в одной операции; • механизм организации действий; например, многоуровневые одобрения до того, как пользователь получит определенные права; • возможность согласования с базами данных кадров для автоматического удаления доступа для служащих, которые уволены или сокращены; • регистрация с перестраиваемой конфигурацией всех изменений и действий адми- нистратора; • реконфигурируемые отчеты на основе регистрационных данных (по пользователю, по дате и пр.); • управление доступом на основе ролей, включая инициализацию учетных записей пользователей с использованием ролевого принципа; • интерфейс, при использовании которого наем менеджеров может потребовать, чтобы учетные записи предоставлялись в соответствии с ролью; • исключения для предоставления прав на основе ролей, включая организацию дей- ствий для рассмотрения исключений. Рассмотрите также, как реализована система с точки зрения того, какие в действи- тельности выполняются аутентификации и авторизации. Требуется ли системе повсе- местная инсталляция пользовательских агентов или возможно самостоятельное согласо- вание с базовыми системами? 7.12. Рекомендуемая литература “The Complete Buyer's Guide for Identity Management. ”// Sun Microsystems white paper, 2008, sun.systemnews.com/articl'es/12 9/4/sec/20930. 7.13. Упражнения ; 7.1. Как определить стандартную группу, в которую входит пользователь? Как изме- нить ее? 7.2. Объясните разницу между следующими значениями umask: 077, 027, 022 и 755/ Как сделать одно из этих значений стандартной общесистемной установкой дл^ новых пользователей? Можно ли заставить пользователей придерживаться одного и того же значения umask? 7.3. Каково назначение файла скрытых паролей? 7.4. ★ Определите, какую систему аутентификации использует программа login в ва- шей системе. Если это модуль РАМ, определите, какие другие программы в систе- ме также используют РАМ. 7.5. ★ Перечислите действия, которые необходимо выполнить для добавления поль- зователя в систему без помощи команды useradd. Какие действия дополнительно необходимы в вашей организации? 7.6. ★ Разработайте схему выбора пользовательских имен для вашей организации. Какие правила устанавливает данная схема? Как обеспечить уникальность имен? Есть ли недостатки у этой схемы? Как происходит удаление пользователей?
Глава 7. Добавление новых пользователей 7.7. ★★ Возьмите список имен (например, из телефонного справочника) зуйте его в качестве входной информации для сценария, генерирующегс ционные имена в соответствии с разработанной выше схемой. Скольк записей удалось получить до возникновения конфликта? Сколько во< фликтов возникло? На основании полученных результатов дайте оценку бора пользовательских имен и предложите улучшения к ней. 7.8. Напишите сценарий проверки файла /etc/passwd, выполняющие ленные ниже действия (для осуществления второго и последнего пунк потребоваться доступ с правами суперпользователя): а) поиск записей с идентификатором пользователя, равным нулю; б) поиск записей без пароля (требуется файл /etc/shadow); в) поиск группы записей с одинаковыми идентификаторами пользо! г) поиск записей с одинаковыми регистрационными именами; д) поиск записей, для которых не установлен срок действия (требуеа etc/shadow). f ' 7.9. Напишите модуль РАМ для выполнения аутентификации тг рирования случайного PIN-кода, отправляемого на мобильный телефс вателя в качестве SMS-сообщения, с последующим приглашением bi PIN-код для подтверждения. Инсталлируйте свой модуль и сконфигур) в стеке РАМ-регистрации для получения двухфакторного процесса aj кации.
Глава 8 Дисковая память Дисковая память системы UNIX все больше напоминает фрагменты огромной го- ловоломки, которые можно соединять друг с другом, создавая бесчисленное множество вариантов конфигурации. Что желаете собрать? Истребитель? Самосвал? Современней- ший вертолет с воздушными подушками безопасности и приборами ночного видения? Традиционные жесткие диски остаются доминирующим средством для создания ин- терактивных хранилищ данных, но при создании высокопроизводительных приложений они все чаще объединяются с флеш-дисками (solid state drive — SSD). Для всего этого аппаратного обеспечения разработаны программные компоненты, играющие роль по- средников между устройствами для хранения данных и файловой иерархией, которую видит пользователь. К этим компонентам относятся драйверы устройств, соглашения о разделении дисков, реализации массивов дисков (RAID), менеджеры логических томов, системы виртуализации дисков в сети и реализации самих файловых систем. В главе обсуждаются административные проблемы и решения, возникающие на каж- дом из этих уровней. Мы начнем с простых инструкций, позволяющих добавить базовый диск в каждую из рассматриваемых операционных систем. Затем опишем технологии, лежащие в основе современного аппаратного обеспечения для дисковой памяти, и рас- смотрим общую архитектуру программного обеспечения для дисковой памяти. Затем мы опишем проблемы, связанные с дисковой памятью, начиная с низкоуровневого форма- тирования и заканчивая файловой системой. По ходу изложения рассмотрим вопросы, связанные с логическим разделением дисков, системами RAID, менеджерами логических томов и системами для реализации сетей хранения данных (storage area network — SAN). Несмотря на то что все производители используют стандартизованное дисковое обо- рудование, в области программного обеспечения наблюдается огромное разнообразие. Соответственно, в главе рассматривается множество особенностей, присущих отд ель-
глава 8. Дисковая память 253 ным производителям. Мы старались достаточно подробно описать каждую систему, чтобы читатели могли хотя бы идентифицировать команды и системы, которые они ис- пользуют, и найти соответствующую документацию. 8.1. Добавление диска Прежде чем погрузимся в многостраничное повествование об архитектуре и теории дисковых систем, рассмотрим самый обычный сценарий: мы хотим инсталлировать жесткий диск и сделать его доступным посредством файловом системы. В этом сцена- рии нет ничего особенного: нет никакого массива RAID, все пространство диска нахо- дится на одном логическом томе, а тип файловой системы выбирается по умолчанию. На первом этапе присоединим диск и повторно загрузим систему. Некоторые си- стемы допускают подключение дисков без перезагрузки, но мы не будем рассматривать этот случай. Кроме того, конкретные инструкции могут изменяться в зависимости от операционной системы. Независимо от операционной системы, в которой вы работаете, очень важно пра- вильно идентифицировать и форматировать дисковое устройство. Вновь добавленному диску не всегда соответствует файл устройства с самым большим порядковым номером. В некоторых системах добавление нового диска может изменить имена существующих дисков. Дважды проверьте идентичность нового диска, проверив его производителя, раз- мер и номер модели, прежде чем начнете выполнять потенциально опасные операции. Инструкции для системы Linux Д Выполните команду sudo fdisk -1, чтобы увидеть список системных дисков и идентифицировать новое устройство. Затем запустите любую утилиту для логического разбиения дисков и создания таблицы разделов для данного уст- ройства. Для устройств 2ТВ и ниже инсталлируйте таблицу разделов MBR для системы Windows. Проще всего это сделать с помощью утилиты cfdi.sk, но для этой цели можно также использовать утилиты fdisk, sfdisk, parted или gparted. Более крупные диски требуют использования таблицы раз- делов GPT, поэтому их следует разбивать на логические разделы с помощью утилиты parted или ее интерфейса gparted в среде GNOME. Программу gparted использовать намного проще, но она, как правило, не инсталлиру- ется по умолчанию. Поместите все дисковое пространство в один раздел “неформатированного” типа. Не инсталлируйте файловую систему. Запомните логическое имя устройства в новом раз- иении, прежде чем запускать утилиту разбиения диска; допустим, что она называется 'dev/sdcl. ^атем выполните следующую последовательность команд, выбирая подходящие име- ^У1111 тома (vgname), логического тома (volname) и точки монтирования (mount- 1пч, например homevg, home или /home. $ 8udo pvcreate /dev/sdcl #Готовимся использовать w/LVM $ Sudo vgcreate vgname /dev/sdcl #Создаем группу тома $ Su^° Ivcreate -1 100%FREE -n volname vgname #Создаем логический том $ U ° “t ext4 /dev/vgname/volname #Создаем файловую систему $ 0° ^dir mountpoint #Создаем точку монтирования /etc/fstab #3адаем опции монтирования
254 Часть I. Основы администрирования Откройте файл /etc/fstab, скопируйте строку, соответствующую существующей файловой системе, и уточните ее. Монтируемым устройством должен быть диск /dev /vgname/volname. Если ваш существующий файл f stab идентифицирует тома по стан- дарту UUID, замените пункт UUID=xxx файлом устройства; для томов LVM идентифика- ция по стандарту UUID не нужна. В заключение выполните команду sudo mount mountpoint, чтобы смонтировать файловую систему. Более подробную информацию о файлах устройств для дисков в системе Linux мож- но найти в разделе 8.5. Информация о разбиении диска на логические разделы приведе- на в разделе 8.6, а о менеджере логических томов — в разделе 8.8. Семейство файловых систем ext4 обсуждается в разделе 8.9. Инструкции для системы Solaris Выполните команду sudo foxmat и проверьте меню, состоящее из имен из- soiaris вестных дисков, чтобы выяснить имя нового устройства. Допустим, что оно называется c9t0d0. Нажмите комбинацию клавиш <Ctrl+C>, чтобы отменить выполнение этой команды. Выполните команду zpool create имя_пула c9t0d0. Выберите простое имя пула, например home или extra. Система ZFS создаст новую файловую систему и смонтирует ее в каталоге /имя__пула. Более подробно дисковые устройства описаны в разделе 8.5. Обзор системы ZFS при- веден в разделе 8.10. Инструкции для системы HP-UX ®ыполните команду sudo ioscan -fNn -Cdisk, чтобы идентифицировать файлы устройств для нового диска. Допустим, что они называются /dev/disk /disk4 и /dev/rdisk/disk4. Затем выполните следующую последовательность команд, выбирая подходящие име- на для групп тома (vgname), логического тома (volname) и точки монтирования (mount- point), например homevg, home или /home. $ sudo pvcreate /dev/rdisk/disk4 #Готовимся использовать w/LVM $ sudo vgcreate vgname /dev/disk/disk4 #Создаем группу тома $ vgdisplay vgname Free PE freespace #0тметьте это значение $ sudo Ivcreate -1 freespace -n volname vgname #Создаем логический том $ sudo mkfs /dev/vgname/volname #Создаем файловую систему $ sudo mkdir mounpoint #Создаем точку монтирования $ sudo vi /etc/fstab #3адаем опции монтирования Откройте файл /etc/fstab, скопируйте строку, соответствующую существующей файловой системе, и уточните ее. Монтируемым устройством должен быть диск /dev /vgname/volname. В заключение выполните команду sudo mount mountpoint, чтобы смонтировать файловую систему. Более подробную информацию о файлах устройств для дисков в системе HP-UX мож- но найти в разделе 8.5. Информация о разбиении диска на логические разделы приведе- на в разделе 8.6. Файловая система VxFS обсуждается в разделе 8.9.
Слава 8. Дисковая память 255 Инструкции для системы AIX Выполните команду Isdev -С -с disk, чтобы увидеть список известных дисков в системе. Затем выполните команду Ispv, чтобы увидеть, какие ди- ски уже настроены для управления томами. Устройство, которое есть в пер- вом списке, но не во втором, и есть ваш новый диск. Допустим, что он назы- вается hdiskl. Затем выполните следующую последовательность команд, выбирая подходящие име- на для групп тома (vgname), логического тома (volname) и точки монтирования (mount- point), например homevg, home или /home. $ sudo mkvg -у vgname hdiskl #Создаем группу тома $ Isvg vgname #Отмечает значение freespace MAX LVs: 256 FREE PPs: 325 (freespace, Мб) $ sudo crfs -v jfs2 -g vgname -m mountpoint -a size=freespaceM $ sudo mkdir mounpoint $ sudo mount mounpoint Более подробную информацию о файлах устройств для дисков в системе AIX можно найти в разделе 8.5. Информация о разбиении диска на логические разделы в системе AIX приведена в разделе 8.6. Файловая система JFS2 обсуждается в разделе 8.9. 8.2. Аппаратное обеспечение дисковой памяти Даже сегодня в мире Интернета есть лишь несколько способов хранения компьютер- ных данных: жесткие диски, флеш-память, магнитные ленты и оптические устройства. Последние две технологии имеют существенные ограничения, которые не позволяют рассматривать их в качестве средства для создания базовой файловой системы. Однако они по-прежнему широко используются для резервного копирования и организации хранения данных с автоматически устанавливаемыми носителями (“near-line” storage), поскольку в этих ситуациях мгновенный доступ и возможность повторной записи не яв- ляются главными факторами. Ш Обзор современных технологий, основанных на использовании магнитных лент, приведен в разделе 10.2. После 40 лет развития технологии жестких дисков разработчики систем наконец-то получили реальную альтернативу — флеш-диски (SSD). Эти устройства предлагают дру- гой набор функциональных возможностей, которые отличаются от возможностей жест- ких дисков и которые в ближайшие годы окажут сильное влияние на архитектуру баз дан- ных, файловых и операционных систем. о то же время традиционные жесткие диски продолжают резко увеличивать свою ем- кость. Двадцать лет назад жесткий диск емкостью 60 Мбайт стоил одну тысячу долла- ров. В настоящее время существует широкий выбор жестких дисков емкостью 1 Тбайт, оторые стоят около 80 долл. Это означает, что за те же деньги можно в 200 тысяч раз етеличить емкость дисковой памяти, а объем памяти каждые 1,15 года вдвое превыша- За^е стоимость. Этот показатель почти в два раза превышает скорость, предсказанную мас°Н°М В этот же период последовательная пропускная способность устройств сового производства увеличилась с 500 Кбайт/с до 100 Мбайт/с, что составляет всего
256 Часть I. Основы администрирования лишь 200-кратное увеличение. В то же время организация прямого доступа к памяти по- прежнему стоит дорого. В общем, “с этих пор по-новому остается все по-старому”. В последние годы появилась третья, гибридная, категория жестких дисков с больши- ми буферами флеш-памяти, которые пока не вышли на уровень массового производ- ства. Пока неизвестно, по каким причинам это не произошло: техническим, производ- ственным или рыночным. Они могут появиться на рынке, но их потенциальное влияние на состояние дел пока остается неясным. Размеры дисков указываются в гигабайтах, которые составляют миллиарды байтов, в отличие от памяти, объем которой указывается в двоичных гигабайтах, которые равны 230 байт (1 073 741 824 байт). Разница составляет около 7%. При оценке и сравнении ем- кости дисков и устройств памяти об этом следует помнить. CQ Более подробная информация о стандартных единицах измерения приведена в разде- ле 1.8. Жесткие и флеш-диски довольно похожи друг на друга, поэтому они где-то взаимо- заменяемы, по крайней мере на уровне аппаратного обеспечения. Они используют оди- наковые интерфейсы аппаратного обеспечения и интерфейсные протоколы. Однако они имеют разные параметры, которые приведены в табл. 8.1. Таблица 8.1. Максимальные размеры передаваемых блоков в сетях различных типов Характеристики ' ЖЙЙёДИски Объем Терабайты Гигабайты Время прямого доступа 8мс 0,25 мс Последовательное считывание 100 Мбайт/с 250 Мбайт/с Случайное считывание 2 Мбайт/с 250 Мбайт/с Стоимость 0,10 долл./Пбайт 3 долл./Пбайт Надежность Средняя Неизвестна Ограничения записи Нет Да В следующих разделах мы рассмотрим эти технологии более подробно. Жесткие диски Обычный жесткий диск состоит из нескольких вращающихся пластин, покрытых магнитным слоем. Считывание и запись данных осуществляются с помощью маленьких скользящих головок, смонтированных на металлическом рычаге, который перемещает их вперед и назад. Головки расположены близко к поверхности пластин, но не при- касаются к ним. Считывание с пластины осуществляется быстро; оно сводится к механическому пере- мещению головки в требуемый сектор. В то же время существует два источника задержки. Рычаг, на котором расположены головки, должен резко перескакивать на соответ- ствующую дорожку. Время, которое требуется для этого, называется задержкой поиска (seek delay). Затем система должна подождать, пока требуемый сектор не окажется под головкой при вращении пластины. Время, которое требуется для этого, называется вре- менем ожидания (rotational latency). Если последовательность операций чтения органи- зована оптимально, то диски могут передавать данные со скоростью до десятков мега- байтов в секунду, но скорость прямого доступа в лучшем случае составляет несколько мегабайтов в секунду.
g дисковая память 257 Совокупность дорожек на разных пластинах, которые находятся на одинаковом тоянии от оси вращения, называется цилиндром. Данные, расположенные на ци- Р*0 лое можно считывать, не перемещая рычаг. Несмотря на то что головки работают ЛИ вычайно быстро, они перемещаются намного медленнее, чем вращается диск. Сле- ЧРвательно, любой доступ к диску, не требующий перемещения головки в новую пози- цию, будет выполняться быстрее. Со временем скорость вращения пластин увеличилась. В настоящее время стан- дартная скорость вращения на дисках массового производства, ориентированных на высокую скорость доступа, составляет 7 200 оборотов в минуту (RPM — revolutions per minute), а лучшие диски достигают скорости 10 и 15 тысяч оборотов в минуту. Более высокая скорость вращения уменьшает время ожидания и увеличивает пропускную спо- собность при передаче данных, но при этом диски нагреваются. Жесткие диски часто выходят из строя. В 2007 году подразделение Google Labs, изу- чив 100 тыс. дисков, удивило техническое сообщество сообщением, что средний ежегод- ный процент отказов (annual failure rate — AFR) жестких дисков, проработавших более двух лет, превышает 6%, что намного больше показателя, предсказанного производи- телями на основе экстраполяции результатов краткосрочных тестирований. Поведение дисков можно описать так: несколько месяцев риска “детской смертности”, два года безупречной работы, а затем ежегодный процент отказов взлетает до 6—8%. В целом, ве- роятность пятилетнего “выживания” жестких дисков в исследовании компании Google не превышает 75%. Интересно, что компания Google не нашла корреляции между процентом отказов и двумя факторами внешней среды, которые ранее считались важными, — температурный режим работы и активность диска. Полный отчет можно найти по адресу: tinyurl. com/fail-pdf. Отказы дисков, как правило, связаны с повреждением либо поверхности пластин (сбойные блоки), либо механических компонентов. Программно-аппаратные средства и интерфейсы аппаратных устройств после сбоя обычно остаются работоспособными, поэтому существует возможность выяснить детали происшедшего сбоя (см. раздел 8.5). Надежность диска производители обычно измеряют с помощью среднего времени между двумя сбоями (mean time between failures — MTBF), которое измеряется часами. Обычно значение показателя MTBF у промышленного диска составляет 1,2 млн часов. Однако этот показатель носит статистический характер и означает, что конкретный диск проработает 140 лет до первого сбоя. Показатель MTBF является обратным по отношению к показателю AFR, вычислен- ному для установившегося режима работы диска, т.е. после включения в систему, но до износа. Показатель MTBF, указываемый производителями и равный 1,2 млн часов, со- ответствует показателю AFR, равному 0,7% в год. Это значение почти (но не совсем) совпадает с показателем, выявленным компанией Google (1-2%) на протяжении первых Двух лет работы их тестовых дисков. Возможно, показатель MTBF, указываемый производителями, точен, но он получен на основе преднамеренного подбора данных о самом благополучном периоде работы Дисков. Следовательно, этот показатель можно считать лишь верхней границей надеж- ности, но его нельзя использовать для прогнозирования фактического процента отказов Долгосрочной перспективе. Основываясь на приведенных выше данных, следует раз- елить показатель MTBF, объявленный производителями, на 7,5 или перейти к более Мистичным методам выявления частоты отказов за пять лет.
258 Часть I. Основы администрирования Жесткие диски представляют собой товар. Одна модель может оказаться лучше дру- гой, имея одинаковые скорость вращения, интерфейс аппаратного обеспечения и уро- вень надежности. В настоящее время существуют специализированные лаборатории, которые проводят сравнительный анализ конкурирующих дисков. Флеш-диски Флеш-диски (SSD) распределяют операции считывания и записи по группам ячеек памяти, каждая из которых по отдельности медленнее, чем современные жесткие диски. Однако, благодаря параллельной работе, диски SSD в целом соответствуют ширине по- лосы пропускания традиционных дисков и даже превосходят ее. Огромное преимуще- ство флеш-дисков в том, что они продолжают хорошо работать даже тогда, когда проис- ходит прямой доступ к данным для чтения или записи. Эта особенность является очень привлекательной в реальных условиях. Производители дисковой памяти любят приводить скорость последовательной пере- дачи данных для своей продукции, поскольку эти числа впечатляюще высокие. Однако для традиционных жестких дисков этот показатель практически не связан с пропускной способностью, наблюдаемой при чтении и записи с прямым доступом. Например, ско- рость последовательной передачи данных высокопроизводительных дисковых устройств компании Western Digital может достигать 120 Мбайт/с, но их скорость прямого досту- па составляет примерно 2 Мбайт/с. В противоположность этому, современные диски SSD производства компании Intel обеспечивают скорость передачи данных, равную 30 Мбайт/с в обоих режимах работы. Тем не менее эта производительность достигается дорогой ценой. Накопители SSD не только дороже в перерасчете на гигабайт, чем жесткие диски, но и порождают новые сложности и неопределенности. Каждая страница флеш-памяти на диске SSD (в современных дисках ее размер ра- вен четырем двоичным килобайтам) может быть перезаписана ограниченное количество раз (обычно 100 тысяч, в зависимости от использованной технологии). Для того что- бы ограничить износ страницы, программное обеспечение дисков SSD ведет таблицы отображений и распределяет записи по всем страницам накопителя. Эти отображения остаются скрытыми от операционной системы, которая рассматривает накопитель как последовательный ряд блоков. Такой накопитель можно считать виртуальной памятью. Еще одна сложность заключается в том, что страницы флеш-памяти должны быть очищены, прежде чем использовать их для перезаписи. Очистка представляет собой от- дельную операцию, которая выполняется медленнее, чем сама запись. Кроме того, не- возможно очистить отдельные страницы — кластеры или смежные страницы (как пра- вило, они составляют 128 или 512 Кибибайт). Если пул заранее очищенных записей исчерпан, то производительность записи на SSD-накопитель может значительно сни- зиться и устройство должно восстановить страницы на лету, чтобы продолжить запись. Перестроить буфер очищенных страниц труднее, чем кажется, потому что файловые системы обычно не отмечают и не очищают блоки данных, которые больше не исполь- зуются. Накопитель не знает, что файловая система считает данный блок свободным; он знает только, что кто-то когда-то записал в него данные для хранения. Для того чтобы SSD-накопитель мог поддерживать работу кеша очищенных страниц (а значит, обеспечи- вать высокую производительность записи), файловая система должна иметь возможность сообщать SSD-накопителю, что определенные страницы больше не нужны. Этой воз- можностью обладают только файловые системы ext64 и NTFS в операционной системе
гияна 8. Дисковая память__________________________________________ 259 Windows 7. Однако, учитывая огромный интерес к SSD-накопителям, можно не сомне- ваться, что и другие файловые системы в ближайшем будущем внедрят этот механизм. Дополнительной сложностью является выравнивание. Размер стандартного блока на иске равен 512 байт, но этот размер слишком мал для того, чтобы файловая система могла эффективно с ним работать.’ Файловые системы управляют кластерами, размеры которых колеблются от одного до восьми двоичных килобайтов, а слой трансляции ото- бражает кластеры файловой системы в дисковые блоки для чтения и записи. На жестком диске нет различия между началом и концом кластеров. Однако, по- скольку SSD-накопители могут читать и записывать данные только на страницах раз- мером четыре двоичных килобайта (несмотря на эмуляцию традиционных 512-байтовых блоков), границы кластеров и страниц на SSD-накопителе должны совпадать. Неже- лательно, чтобы логический кластер размером четыре двоичных килобайта начинался в средине одного физического кластера на SSD-накопителе и заканчивался в средине следующего. В этом случае SSD-накопитель может дважды считать и записать данные стольких физических страниц, сколько помещается в заданном количестве логических кластеров. Поскольку файловые системы отсчитывают свои кластеры начиная с того места, куда их записал накопитель, проблему выравнивания можно было бы решить путем выравни- вания разделов дисков по границам, начинающимся с байта, номер которого представ- ляет степень двойки. Эти разделы больше, чем размер SSD-накопителя или страницы файловой системы (например, 64 двоичных килобайта). К сожалению, схема разбиения диска Windows MBR, которую система Linux унаследовала, не выполняет такое выравни- вание автоматически. Проверьте диапазоны блоков, которые вы получили при разбие- нии диска, и убедитесь, что они выровнены, помня, что сама схема MBR занимает один блок. (Система Windows 7 выравнивает разделы для SSD-накопителей по умолчанию.) Теоретические лимиты перезаписи флеш-памяти, вероятно, меньше, чем казалось вначале. Исходя из простых арифметических соображений, можно понять, что при по- токе данных на скорости 100 Мбайт/с и объеме SSD-накопителя, равном 150 Гбайт, ли- мит перезаписей будет исчерпан за четыре года непрерывной работы. Однако более об- щие вопросы долгосрочной надежности SSD-накопителей еще не изучены. Флеш-диски представляют собой еще незрелый продукт и могут преподносить сюрпризы. Контроллеры, используемые внутри SSD-накопителей, быстро развиваются и в на- стоящее время сильно различаются по производительности. В результате рынок должен прийти к какой-то одной стандартной архитектуре этих устройств, но на это уйдет еще один или два года. В более короткой перспективе при покупке таких устройств следует проявлять осторожность. 20п^ТаТЬЯ ^нанда Шимпи (Anand Shimpi) о технологии SSD, появившаяся в марте 9 года, представляет собой превосходное описание преимуществ и недостатков этой технологии. Ее можно найти по адресу tinyurl. com/dexnbt. 8.3. Интерфейсы устройств хранения данных в настоящее время существует лишь несколько наиболее распространенных стандар- в интерфейса. Если система поддерживает несколько разных интерфейсов, следует ис- к ЛЬз°вать тот, который наилучшим образом удовлетворяет требования, предъявляемые скорости, надежности, мобильности и стоимости. * байтовый стандарт для жестких дисков постепенно выходит из употребления; см. Iwn. /Articles/377895.
260 Часть I. Основы администрирования • Интерфейс АТА (Advanced Technology Attachment), ранее известный под названи- ем IDE, был разработан как простой и недорогой интерфейс для персональных компьютеров. Вначале он был назван Integrated Drive Electronics, потому что кон- троллер устройства находился в той же коробке, что и пластины диска, а для обе- спечения взаимодействия между компьютером и дисками применялся протокол относительно высокого уровня. В настоящее время так работают все жесткие ди- ски, но в то время это было новшеством. Традиционный параллельный интерфейс АТА (РАТА) связывал диски с материн- ской платой с помощью ленточного кабеля, имеющего 40 или 80 жил. Этот тип дисков устарел, но все еще установлен на огромном количестве компьютеров. Диски с интерфейсом РАТА часто маркируются как IDE, чтобы отличить их от устройств SATA, которые будут описаны ниже, но на самом деле они являются устройствами АТА. Диски РАТА имеют умеренную скорость, большую память и невероятно низкую стоимость. • Последовательный интерфейс АТА (SATA) является наследником интерфейса РАТА. Кроме поддержки более высокой скорости передачи данных (в настоящее время она составляет 6 Гбайт), интерфейс SATA упрощает соединение с помощью более аккуратных и длинных кабелей. Интерфейс SATA имеет собственную под- держку замены дисков без перезагрузки системы (hot-swapping) и (необязательно) поддерживает создание очереди команд. Эти две функциональные возможности превратили интерфейс АТА в перспективную альтернативу устройствам SCSI на серверах. • Несмотря на то что интерфейс SCSI в настоящее время уже не так популярен, как раньше, он остается одним из наиболее широко распространенных дисковых ин- терфейсов. Он имеет несколько разновидностей, которые все, без исключения, поддерживают работу нескольких дисков на одной шине, а также разные уровни скорости и способы связи. Более подробно устройства SCSI описаны ниже. Производители накопителей памяти обычно используют интерфейсы SCSI в са- мых быстрых и надежных устройствах. Эти устройства стоят дороже, но это объяс- няется особенностями накопителей, а не интерфейса. • Fibre Channel — это последовательный интерфейс, популярный в промышленно- сти благодаря широкой полосе пропускания и большому количеству накопителей, которые он может соединять одновременно. Устройства Fibre Channel соединяются с помощью волоконно-оптических или коаксиальных медных кабелей. Скорость их работы колеблется от 1 до 40 Гбайт/с, в зависимости от версии протокола. Как правило, топология этих устройств представляет собой кольцо, которое на- зывается Fibre Channel Arbitrated Loops (FC-AL), или фабрику (коммутируемые сети — Примеч. ред.) с коммутаторами Fibre Channel. Интерфейс Fibre Channel поддерживает несколько разных протоколов, включая SCSI и даже IP. Устройства идентифицируются по “зашитым” восьмибайтовым идентификаторам (“World Wide Name”), напоминающим адреса Ethernet MAC. • Последовательные интерфейсы Universal Serial Bus (USB) и FireWire (IEEE 1394) стали популярными средствами соединения внешних жестких дисков. В настоя- щее время скорость их работы составляет 480 Мбайт/с для USB и 800 Мбайт/с для Firewire. Обе системы являются слишком медленными для того, чтобы принимать быстрые потоки данных с диска на полной скорости. Прогнозируемые изменения
глаВа 8. Дисковая память 261 обоих стандартов предусматривают более высокую скорость передачи данных (до 5 Гбайт/с для USB 3.0). В жестких дисках никогда не используются интерфейсы USB или FireWire. Вместо этого в дисковые модули, подсоединенные к этим портам, встраиваются конвер- торы SATA. Интерфейсы АТА и SCSI до сих пор доминируют среди накопителей, поэтому только ИХ мы обсудим подробно. Интерфейс РАТА Интерфейс РАТА (Parallel Advanced Technology Attachment), называемый также IDE, задумывался как простой и недорогой. Его чаще всего можно найти в дешевых персо- нальных компьютерах. Оригинальный интерфейс IDE стал популярен в конце 1980-х годов. Последующие версии протокола, кульминацией которых стала версия АТА-7 (известная также как Ultra АТА/133), включали в себя дополнительно режимы прямого доступа к памяти (DMA), свойства plug-and-play, адресацию логических блоков (LBA), управление электропитанием, возможности самоконтроля и скорость работы шины до 133 Мбайт/с. С момента появления интерфейса АТА-4 стандарт АТА объединился с про- токолом АТА Packet Interface (ATAPI), допускавшим присоединение к шине IDE диско- водов CD-ROM и лентопротяжных устройств. Разъем РАТА имеет 40 контактов, соединяющих накопитель с интерфейсной пла- той посредством грубого ленточного кабеля. Стандарты АТА, появившиеся после Ultra DMA/66, использовали кабель с 80 жилами, большим количеством заземляющих кон- тактов и вследствие этого с более низким уровнем электрических помех. Более изящ- ные кабели, допускающие скручивание ленты в толстую кабельную муфту, позволяют сделать шасси компактнее и улучшают воздухообмен. Кабель питания для накопителей РАТА использует массивный четырехконтактный штепсель Molex. Если кабель и/или накопитель не имеют ключа, то следует убедиться, что контакт 1 на накопителе входит в контакт 1 в гнезде интерфейса. Контакт 1 обычно обозначается маленькой цифрой “1” на одной стороне разъема. Если он не помечен, то его можно найти по следующему правилу: первый контакт ближе всего к разъему питания. Первый контакт на ленточном кабеле обычно маркируется красным цветом. Если вы не видите красной полосы на краю ленточного кабеля, то сделайте так, чтобы первый контакт ка- беля был соединен с первым контактом разъема, и пометьте кабель красным маркером. Большинство персональных компьютеров имеет две шины РАТА, к каждой из ко- торых присоединены два накопителя. Если к шине РАТА присоединено больше одно- го накопителя, вы должны назначить один из них главным, а другой — подчиненным, еремычка “выбора кабеля” на современных накопителях (обычно предусматриваемая по умолчанию) позволяет накопителям самим выбирать, какой из них будет главным, какой подчиненным. Иногда этот механизм работает неправильно. Тогда необходимо явно назначить главный и подчиненный накопители. лавный накопитель не имеет никаких преимуществ по производительности. Неко- Р*?е из стаРых накопителей РАТА не могут быть подчиненными, поэтому возникают дый ЛеМы’ которые решаются перестановкой ролей. Если же и это не помогает, то каж- накопитель РАТА следует поместить на отдельную шину. м азРешение конфликтов между главным и подчиненным накопителями на шине РАТА Hav 0Казаться относительно медленным, поэтому по возможности следует размещать °пители РАТА на отдельных шинах.
262 Часть I. Основы администрирования Интерфейсы SATA По мере возрастания скорости передачи данных для накопителей РАТА, недостатки этого стандарта становились все более очевидными. Электромагнитная интерференция и другие электрические проблемы снижали надежность работы накопителей на больших скоростях. Для решения этой проблемы были изобретены последовательные интерфей- сы АТА и SATA. В настоящее время они являются доминирующими среди устройств для хранения данных. Интерфейс SATA сгладил многие недостатки интерфейса РАТА. Он повысил ско- рость передачи данных (потенциально до 750 Мбайт/с и 6 Гбайт/с в перспективе) и реа- лизовал отличный механизм для проверки ошибок. Этот стандарт поддерживает замену накопителя без перезагрузки системы, создание очереди команд и многие другие сред- ства для повышения производительности. Интерфейс SATA отменил необходимость на- значать главный и подчиненный накопители, поскольку к каждому каналу подключен только один накопитель. Интерфейс SATA преодолел ограничение, связанное с использованием 18-дюмовых кабелей в интерфейсе РАТА, и ввел новые стандарты для кабелей питания и информа- ционных кабелей, состоящих из 7 и 15 жил соответственно.2 Эти кабели намного гибче и проще в работе, чем их ленточные предшественники, — больше нет необходимости из- гибать и скручивать кабели, чтобы подсоединить несколько накопителей на один ка- бель. Тем не менее похоже, что новый стандарт более чувствителен к качеству материала, чем старые ленточные кабели интерфейса РАТА. Мы видели несколько дешевых кабелей SATA, которые при попытке их использования приводили к отказу материнской платы.3 Кабели SATA легко входят в разъемы, но так же легко из них выпадают. Существуют кабели с фиксаторами, но они имеют как преимущества, так и недостатки. На материн- ских платах, в которых разъемы SATA упакованы по шесть или восемь штук, может ока- заться трудно высвободить фиксирующие разъемы без помощи тонких клещей. Интерфейс SATA ввел в действие новый стандарт кабелей под названием eSATA. С точ- ки зрения электрических свойств, эти кабели аналогичны кабелям SATA, но их разъемы немного отличаются. Вы можете добавить порт eSATA в систему, имеющую только вну- тренние разъемы SATA, инсталлировав недорогой конвертер. С внешними модулями, содержащими несколько накопителей, имеющих только один порт eSATA, следует быть осторожными — некоторые из них являются интеллекту- альными устройствами (RAID) и требуют оригинальные драйверы. (Эти драйверы редко поддерживают системы UNIX или Linux.) Другие модули не имеют сложной логики и содержат встроенный переходник для порта SATA. В принципе они допускают исполь- зование системы UNIX, но поскольку не все адаптеры ведущего контроллера SATA под- держивают расширение порта, следует уделить особое внимание вопросам совмести- мости. Модули с несколькими портами eSATA — по одному на накопитель — всегда являются безопасными. Параллельный интерфейс SCSI Интерфейс SCSI (Small Computer System Interface) определяет обобщенный кон- вейер данных, который можно использовать для любых периферических устройств. В прошлом он использовался для подсоединения дисков, лентопротяжных устройств, 2 Это правильно: по некоторым причинам кабель питания сложнее, чем информационный. 3 В США превосходным поставщиком качественных и дешевых кабелей SATA является сайт monoprice.com.
Глава 8. Дисковая память 263 сканеров и принтеров, но сейчас в большинстве случаев производители этих устройств отказались от интерфейса SCSI в пользу интерфейса USB. После 1986 года, когда был принят стандарт ANSI под названием SCSI-1, появилось много разновидностей интерфейса SCSI. Традиционный интерфейс SCSI использует от 8 до 16 жил. К сожалению, в названиях разновидностей параллельного интерфейса SCSI нет ни- какого смысла. Термины “fast”, “wide” и “ultra” вводились для того, чтобы подчеркнуть значительные преимущества интерфейса SCSI, но сейчас эти функциональные возмож- ности стали стандартными, и эти эпитеты исчезли из названий. Несмотря на свое на- звание, интерфейс Ultra SCSI на самом деле обеспечивает скорость передачи данных 20 Мбайт/с, что в настоящее время уже не является мечтой, но за ним последовали Ultra2, Ultra3, Ultra-320 и Ultra-640 SCSI. Для тех, кому интересно, приведем регулярное вы- ражение, соответствующее всевозможным разновидностям параллельного интерфейса SCSI. (Fast(-Wide)?|Ultra(( Wide)?|2 (Wide )?|3|-320|-640)?) SCSI|SCSI-[ 1 -3] Использовалось также множество разных разъемов. Они зависели от версии интер- фейса SCSI, типа соединения (внутреннее или внешнее) и количества бит пересылае- мых данных. На рис. 8.1 показаны некоторые из них. Каждый разъем показан спереди, как будто вы смотрите на них прямо. Centronics 50 контактов, SCSI-1/2, внешний Ленточный разъем (гнездо) 50 контактов, SCSI-1/2, внутренний Mini-micro, он же HD50 50 контактов, SCSI-2, внешний Wide mini-micro, он же HD68 68 контактов, SCSI-2/3, внутр/внеш SCA-2 80 контактов, SCSI-3, внутренний Рис. 8.1. Параллельные разъемы SCSI (вид спереди, все со штекерами, за исключе- нием указанного отдельно) В настоящее время продолжен выпуск только разъема SCA-2, имеющего 80 контак- тов, включая контакты питания и шины. Каждый конец шины SCSI должен иметь согласующий резистор (terminating resistor), называемый терминатором. Этот резистор поглощает сигналы, достигающие конца шины, и предотвращает отражение шума обратно в шину. Терминаторы бывают разны- ми — от небольших внешних разъемов, которые вставляются в обычный порт, до акку- ратных пакетов резисторов, встроенных в монтажные платы устройства. Большинство ^временных устройств предусматривает автоматическое отключение согласующего ре- зистора при подключении к разъему кабеля.
264 Часть I. Основы администрирования Если на вашей шине SCSI возникают проблемы, которые кажутся случайными, сна- чала проверьте согласующие резисторы на обоих концах шины. Неправильная работа согласующих резисторов является одной из основных проблем в старых системах SCSI, а ошибки, которые при этом возникают, могут быть нераспознанными и перемежающи- мися. Параллельные шины SCSI используют гирляндную цепь, так что большинство внешних устройств имеет два порта SCSI.4 Эти порты идентичны и взаимозаменяемы — любой из них может быть входом. Внутренние устройства SCSI (включая устройства с разъемами SCA-2) присоединяются к ленточному кабелю, поэтому для устройства ну- жен только один порт. Каждое устройство имеет SCSI-адрес, или “целевой номер”, отличающий его от дру- гих устройств, присоединенных к шине. Отсчет целевых номеров начинается с нуля и заканчивается семью или пятнадцатью, в зависимости от вида шины — узкой или широ- кой. Сам контроллер SCSI также рассматривается как устройство и обычно имеет номер 7. Целевые номера других устройств должны быть уникальными. Типичная ошибка воз- никает, когда пользователи забывают, что контроллер SCSI имеет свой целевой номер, и присваивают устройству тот же целевой номер. Если вам повезет, то устройство будет иметь внешний манипулятор, с помощью которого можно задать целевой номер. Еще одним распространенным способом установки целевых номеров являются переключа- тели DIP и перемычки. Если неясно, как установить целевой номер на устройстве, пои- щите справочное руководство в Интернете. Интерфейс SCSI поддерживает разновидность частичной адресации, которая исполь- зует “номера логических модулей”. Каждое целевое устройство может иметь внутри себя несколько логических модулей. Например, можно представить себе массив накопителей с несколькими дисками, но с одним контроллером SCSI. Если устройство SCSI имеет только один логический модуль, то он обычно по умолчанию устанавливается равным нулю. Использование логических номеров обычно ограничивается большими массивами накопителей. Если вы услышите выражение “номер модуля SCSI”, то должны предпо- ложить, что на самом деле речь идет о целевом номере, пока не доказано обратное. Системному администратору, работающему с аппаратным обеспечением SCSI, следу- ет помнить о следующем. • Не беспокойтесь о точных версиях SCSI, которые поддерживает устройство; смо- трите на разъемы. Если два устройства SCSI имеют одинаковые разъемы, значит, они совместимы. Однако это еще не значит, что они могут обеспечить одинаковую скорость работы. Передача данных будет происходить со скоростью, на которой работает более медленное устройство. • Даже если разъемы отличаются друг от друга, устройства все равно могут быть со- вмещены с помощью адаптера, если их разъемы имеют одинаковое количество контактов. • Многие старые рабочие станции имеют внутренние устройства SCSI, такие как лентопротяжные механизмы и дисководы гибких дисков. Перед тем как переза- грузить систему, после добавления нового устройства, проверьте список текущих устройств. 4 “Гирляндная цепь” — это общепринятое название, но оно может ввести в заблуждение. Параллельный интерфейс SCSI физически представляет собой цепь, а с электротехнической точ- ки зрения — это отдельная шина.
Глава 8. Дисковая память 265 • Добавив новое устройство SCSI, проверьте список устройств, выдаваемый ядром при перезагрузке, чтобы убедиться, что все в порядке. Большинство драйверов SCSI не распознает ситуации, в которых несколько устройств имеют одинаковые SCSI-адреса (это недопустимо). Конфликт SCSI-адресов порождает неправильное поведение системы. • Если вы наблюдаете ненадежную работу системы, проверьте, не возник ли кон- фликт целевых номеров, а также проверьте согласующие резисторы на шине. • Помните, что ваш контроллер SCSI использует один из SCSI-адресов. Последовательный интерфейс SCSI Аналогично устройствам РАТА, параллельному интерфейсу SCSI соответствует по- следовательный интерфейс SCSI (Serial Attached SCSI — SAS), являющийся аналогом интерфейса SATA. С точки зрения аппаратного обеспечения интерфейс SAS улучшает практически все аспекты традиционного параллельного интерфейса SCSI. • Сцепленные шины устарели. Подобно интерфейсу SATA, интерфейс SAS пред- ставляет собой позиционную систему (point-to-point system). Интерфейс SAS по- зволяет использовать расширители (expanders) для присоединения нескольких устройств к одному порту компьютера. Они напоминают мультипликаторы порта SATA, но в то время как поддержка мультипликаторов иногда реализуется, а ино- гда нет, расширители поддерживаются всегда. • Интерфейс SAS не использует терминаторы. • Целевые номера устройств SCSI больше не используются. Вместо этого каждое уст- ройство SAS имеет назначенное производителем 64-битовое имя World Wide Name (WWN), характерное для оптико-волоконных полей. Они аналогичны адресам Ethernet МАС. • Количество устройств на шине SCSI (фактически, “домен SAS”) больше не огра- ничено восемью или шестнадцатью. К шине можно присоединять до 16 384 уст- ройств. Интерфейс SAS в настоящее время функционирует на скорости 3 Гбайт/с, но ско- рость вскоре планируется довести до 6 Гбайт/с, а в 2012 году — до 12 Гбайт/с. Что лучше: SCSI или SATA? В прошлом интерфейс SCSI был очевидным выбором для серверных приложений. Он обеспечивал максимально широкую полосу пропускания, выборочное выполнение команд (что эквивалентно созданию очередей помеченных команд), меньшую загрузку Центрального процессора, более простое обслуживание большого количества накопите- лей и доступ к самым современным дискам. После появления интерфейса SATA интерфейс SCSI больше не обеспечивает от- дачу от вложенных средств. Устройства SATA сравнимы с эквивалентными дисками SCSI практически в каждой категории (а иногда даже превосходят их). В то же время и Устройства SATA, и интерфейсы, и кабели, используемые для их соединения, дешевле и более распространены. Впрочем, интерфейс SCSI по-прежнему имеет несколько “козырей”. • Производители продолжают использовать разделение SATA/SCSI для стратифика- ции рынка накопителей. Для того чтобы обосновать высокие цены, самые быстро-
266 Часть I. Основы администрирования действующие и надежные накопители по-прежнему поставляются только с интер- фейсами SCSI. • Интерфейс SATA ограничен глубиной очереди, вмещающей 32 незавершенные операции. Интерфейс SCSI может обслуживать тысячи операций. • Интерфейс SAS может обслуживать много накопителей (сотни и тысячи) с помо- щью одного компьютера. Однако следует иметь в виду, что все эти устройства ис- пользуют один и тот же канал связи с этим компьютером; вы по-прежнему огра- ничены общей шириной полосы пропускания, составляющей 3 Гбайт/с. Споры об интерфейсах SAS и SATA могут в конце концов оказаться бессмысленны- ми, поскольку стандарт SAS включает поддержку устройств SATA. Разъемы SAS и SATA достаточно похожи друг на друга, чтобы одна кабельная укладка могла работать с любым типом. На логическом уровне команды интерфейса SATA просто туннелируются через шину SASA. Это сходство является удивительным техническим достижением, но экономиче- ское обоснование для него менее очевидно. Расходы на инсталляцию интерфейса SAS, в основном, относятся к адаптеру компьютера, кабельной укладке и инфраструктуре; накопители SAS сами по себе не слишком дорогие. Однажды вложив средства в уста- новку интерфейса SAS, вы будете вынуждены придерживаться его до конца. (С другой стороны, возможно, умеренная стоимость накопителей SAS является результатом того, что их легко заменить накопителями SATA.) 8.4. Программное обеспечение накопителей Если вам когда-нибудь приходилось подсоединять диск и система Windows спраши- вала вас, не желаете ли вы его отформатировать, вы могли поразиться тому, насколько сложным является управление накопителями в системах UNIX и Linux. Почему же оно такое сложное? Для начала отметим, что на некоторых системах вы можете зарегистрироваться на системном компьютере, присоединить к нему накопитель USB и работать практически так же, как в системе Windows. Вы получите возможность выполнить простую процедуру установки накопителя для хранения персональных данных. Если это все, что вам нужно, то все в порядке. Как обычно, в этой книге нас интересуют промышленные системы хранения данных: файловые системы, доступ к которым имеет множество пользователей (локальных и удаленных) и которые в то же время являются надежными, высокопроизводительными, допускающими простое резервирование и обновление. Такие системы требуют немного больше осторожности, и системы UNIX и Linux дают для этого достаточно оснований. Типичный набор компонентов программного обеспечения, обеспечивающих взаимо- действие между накопителем и его пользователями, приведен на рис. 8.2. Архитектура, показанная на рис. 8.2, относится к системе Linux, но и другие операционные системы обладают аналогичными возможностями, хотя и не обязательно в точно таком же виде. Стрелки на рис. 8.2 означают “могут быть построены из”. Например, файловая си- стема Linux может быть создана на основе раздела, массива RAID или логического тома. Создание стека модулей, соединяющих каждый накопитель с его окончательным при- ложением, является одной из задач администратора. Внимательный читатель заметит, что этот граф имеет цикл, а в реальных конфигу- рациях циклов не бывает. Система Linux допускает создание стеков из массивов RAID
Глава 8. дисковая память 267 0 логических томов в любом порядке, но ни один из компонентов не может использо- ваться больше одного раза (хотя с технической точки зрения это возможно). Файловые системы, области подкачки, хранение в базе данных | ---- ------------------------------------------.........................у.-.......,ийнВ yin iinni.iinw Логические томы | Разделы Массивы RAID Группы томов I ..I"; < * * ........♦ 1 пт— Накопители Рис, 8.2, Уровни управления накопителем Рассмотрим фрагменты рис. 8.2. • Накопитель (storage device) — это все, что напоминает диск. Это может быть жест- кий диск, флеш-накопитель, диск SSD, внешний массив RAID, реализованный в виде аппаратного обеспечения, и даже сетевая служба, обеспечивающая доступ к удаленному устройству на уровне блока. Конкретный вид оборудования значения не имеет, поскольку устройство допускает прямой доступ, обрабатывает блочный ввод-вывод и представлено файлом устройства. • Раздел (partition) — это фрагмент накопителя, имеющий фиксированный размер. Каждый раздел имеет собственный файл устройства и действует как независимый накопитель. Для обеспечения эффективности разделы создаются с помощью того же драйвера, который используется для управления устройством. Большинство схем разделения занимает несколько блоков в начале накопителя для записи диа- пазонов блоков, которые занимает каждый раздел. Разделение диска постепенно становится исчезающей функциональной возмож- ностью. Системы Linux и Solaris сохранили ее для обеспечения совместимости с дисками, разделенными на разделы с помощью системы Windows. Системы HP- UX и AIX практически отказались от разделения дисков в пользу управления логи- ческими томами, но в системах HP-UX, основанных на микропроцессоре Itanium, разделение дисков остается обязательным. • Массив RAID (избыточный массив недорогих и независимых дисков) объединя- ет многочисленные накопители в одно виртуальное устройство. В зависимости от настройки этого массива, эта конфигурация может повысить производительность (путем чтения и записи дисков в параллельном режиме) или надежность (путем дублирования и проверки данных с контролем четности на всех дисках) или оба этих показателя. Как следует из названия, массив RAID обычно интерпретируется как совокуп- ность обычных дисков, но современные реализации позволяют использовать в ка- честве компонента этого массива все, что функционирует как диск. • Группы томов и логические тома ассоциируются с менеджерами логических то- мов (LVM — logical volume manager). Эти системы объединяют физические устройства и формируют пул накопителей, которые называются группами томов.
268 Часть I. Основы администрирования Администратор может разделить этот пул на логические тома почти так же, как диски разбиваются на разделы. Например, диск объемом 750 Гбайт и диск объе- мом 250 Гбайт можно объединить в группу томов объемом 1 Тбайт, а затем разбить на два логических тома по 500 Гбайт. По крайней мере, один том будет содержать блоки данных, относящиеся к обоим жестким дискам. Поскольку менеджер логических дисков добавляет уровень косвенной адресации между логическими и физическими блоками, он может зафиксировать логиче- ское состояние тома, просто сделав копии таблицы отображений. Следовательно, менеджеры логических томов часто обеспечивают возможность “мгновенных ко- пий”. Затем том связывается с новыми блоками, и менеджер LVM сохраняет ста- рую и новую таблицы отображений. Разумеется, менеджер LVM должен хранить как исходный образ, так и все модифицированные блоки, поэтому в конце концов он исчерпает память, если мгновенные копии никогда не удаляются. • Файловая система служит посредником между набором блоков, представленных разделом, массивом RAID, логическим блоком и стандартным интерфейсом фай- ловой системы, ожидаемым программами: путями вроде /var/spool/mail, типа- ми файлов системы UNIX, разрешениями системы UNIX и т.п. Файловая систе- ма решает, где и как хранится содержимое файлов, как представить пространство имен и организовать поиск на диске, а также как избежать сбоя (и восстанавли- ваться после него). Большая часть накопителя является частью файловой системы, но область подкач- ки и хранение в базе данных могут быть потенциально чуть более эффективными без “помощи” от файловой системы. Ядро или база данных навязывают накопите- лю свою собственную структуру, делая файловую систему излишней. Если вы считаете, что эта система содержит слишком много маленьких компонентов, которые просто реализуют один блочный накопитель через другой, то совершенно пра- вы. В последнее время наблюдается тенденция в сторону консолидации этих компонен- тов, чтобы повысить эффективность и устранить дублирование. Хотя менеджеры логи- ческих томов изначально не функционировали как контроллеры RAID, большинство из них воплотили некоторые функциональные возможности массивов RAID (в частности, распределение данных и мониторинг). Как только администраторы получили удобные средства управления логическими томами, разделы также исчезли. В настоящее время на передовом крае находятся системы, объединяющие файловую систему, контроллер RAID и систему LVM в один интегрированный пакет. Ярким при- мером является файловая система ZFS, но и файловая система Btrfs для Linux предна- значена для решения аналогичных задач. Система ZFS описывается в разделе 8.10. Большинство установок относительно просты. На рис. 8.3 показана традицион- ная схема разбиения диска, которую можно найти на многих дисках в системе Linux. (Загрузочный диск не показан.) Если подставить вместо разделов логические тома, то установка станет похожей на инсталляцию других систем. В следующих разделах мы детальнее рассмотрим этапы, из которых состоят фазы конфигурирования носителей, — контроль устройств, разбиение, RAID, управление ло- гическим томом и инсталляция файловой системы. В заключение мы опишем систему ZFS и сети хранения данных.
Глава 8. Дисковая память 269 Уровень файловой системы Уровень раздела Физический уровень Рис. 8.3. Традиционная схема разбиения диска (имена устройств в системе Linux) 8.5. Присоединение и низкоуровневое УПРАВЛЕНИЕ НАКОПИТЕЛЯМИ Способ присоединения диска к системе зависит от используемого интерфейса. Ос- тальное определяется монтажными кронштейнами и кабелями. К счастью, разъемы SAS и SATA хорошо защищены. При работе с параллельным интерфейсом SCSI необходимо перепроверить, что оба конца шины SCSI имеют терминаторы, длина кабеля не превышает максимально до- пустимую и новый целевой номер SCSI не конфликтует с контроллером или другим устройством, присоединенным к шине. Даже если интерфейсы допускают подключение без перезагрузки системы (“горячее” подключение), все же безопаснее выключить систему перед тем, как вносить измене- ния в аппаратное обеспечение. Некоторые старые системы, такие как AIX, устанавлива- ют конфигурацию устройств только во время загрузки, поэтому “горячее” подключение аппаратного обеспечения может не сразу вступить в силу на уровне операционной систе- мы. При работе с интерфейсами SATA, “горячее” подключение зависит от реализации. Некоторые адаптеры компьютеров не поддерживают эту функциональную возможность. Верификация инсталляции на уровне аппаратного обеспечения После инсталляции нового диска следует убедиться, что система знает о его суще- ствовании на самом низком из возможных уровней. Для персональных компьютеров это несложно: система BIOS показывает диски IDE и STAT, а большинство микросхем SCSI имеет собственный экран настроек, который вызывается перед загрузкой системы. Для других типов аппаратного обеспечения может потребоваться перезагрузка систе- мы и проверка результатов диагностики, выполняемой ядром. Например, одна из про- веренных нами систем вывела на экран следующие сообщения для старого диска SCSI, присоединенного к адаптеру SCSI BusLogic. scsiO: BusLogic ВТ-948 scsi: 1 host. vendor: SEAGATE Model: ST446452W Rev: 0001 Type: Direct-Access ANSI SCSI revision: 02 Detected scsi disk sda at scsiO, channel 0, id 3, lun 3 scsiO: Target 3: Queue Depth 28, Asynchronous SCSI device sda: hdwr sector=512 bytes. Sectors=91923356 [44884 MB] [44,8 GB]
270 Часть I. Основы администрирований Эту информацию можно обнаружить в файлах системного журнала после загрузки системы. Более подробно обработка сообщений, выдаваемых ядром при загрузке, опи- сывается в разделе 11.2. Файлы накопителя Вновь добавленный диск представляется файлами накопителя в каталоге /dev. Все рассмотренные нами системы создают такие файлы автоматически, но систем- ный администратор по-прежнему обязан знать, где искать файлы накопителя и какие из них соответствуют новому устройству. Форматирование неправильного накопителя — это прямой путь к катастрофе. В табл. 8.2 приведены соглашения об именах дисков, принятые в рассматриваемых операционных системах. Вместо демонстрации абстракт- ного шаблона, по которому дискам присваиваются имена, в табл. 8.2 приводится ти- пичный пример выбора имени первого диска в системе. Таблица 8.2. Стандарты именования дисков Система Блочноеустройство Устройство Раздел Linux /dev/sda не используется /dev/sda 1 Solaris /dev/dsk/c0t0d0s2 /dev/rdsk/c0t0d0s2 /dev/dsk/cOtOdOsO HP-UX а /dev/disk/diskO /dev/rdisk/diskO /dev/disk/disk0_p1 6 AIX /dev/hdiskO /dev/rhdiskO а Для сохранения совместимости система HP-UX использует также имена устройств, принятые в системе Solaris. 6 Только для системы на процессоре Itanium; остальные системы не имеют разделов. Столбцы, соответствующие блокам и устройствам, содержат пути к диску в целом, а столбец, соответствующий разделу, демонстрирует путь к конкретному разделу. Дисковые накопители для системы Linux ДИмена дисков в системе Linux присваиваются ядром последовательно при нумерации разных интерфейсов и устройств, существующих в системе. При добавлении нового диска имя старого может измениться. Фактически даже перезагрузка системы может вызвать изменение имен.5 Никогда не вносите изменения, не идентифицировав диск, с которым работаете, даже в устойчи- вой системе. Система Linux предлагает несколько способов решения этой проблемы. Подкаталоги каталога /dev/disk содержат характеристики дисков, например их идентификаци- онный номер, присвоенный производителем, или информацию о разъеме. Эти имена устройств (которые на самом деле представляют собой обычные ссылки на /dev/sd*) являются постоянными, но они длинные и громоздкие. На уровне файловых систем и массивов дисков система Linux использует уникальные строки, которые персистентно идентифицируют объект. Во многих случаях эти длинные строки скрыты, так что вам не придется работать с ними непосредственно. 5 Для того чтобы решить эту проблему, система Linux использует идентификаторы UUID из файла /etc/f stab, а не имена устройств (см. раздел 8.9).
Глава 8. Дисковая память 271 Система Linux не хранит файлы для отдельных накопителей или разделов дисков, поэтому следует указывать блочные устройства, когда необходимо сослаться на отдель- ное устройство. Команда parted -1 перечисляет размеры, таблицы разделов, номера моделей и про- изводителей каждого диска, существующего в системе. дисковые накопители для системы Solaris Система Solaris присваивает дискам имена, подобные /dev/ [г] dsk/cWtXdYsZ, soiaris где W — номер контроллера, X — целевой номер SCSI, Y — номер логического модуля SCSI (или номер LUN, который практически всегда равен 0), a Z — номер раздела (сектора). Здесь существует множество тонкостей: накопители АТА называются cWdYsZ (без пункта t), а диски могут иметь как ряд раз- делов в стиле DOS, обозначаемых как pZ, так и сектора в стиле Solaris, обо- значаемые как sZ. Эти файлы устройств на самом деле представляют собой всего лишь символические ссылки в дереве /devices, в котором размещены реальные файлы устройств. В целом, система Solaris предприняла попытку обеспечить постоянство имен устройств, даже при изменении аппаратного обеспечения. Как только диску присвоено определенное имя, он будет найден под этим именем в любой момент в будущем, если вы не измените кон- троллеры или целевые номера SCSI. По соглашению сектор 2 соответствует полному, не разбитому на разделы диску. В отличие от системы Linux, система Solaris создает файлы устройства для каждого сек- тора и раздела, независимо от того, существуют ли они на самом деле. Система Solaris также поддерживает перекрывающиеся разделы, но это просто безумная идея. С таким же успехом компания Oracle могла бы поставлять системы Solaris вместе с заряженным пистолетом в нагрузку. В системе Solaris “горячее” подключение должно работать хорошо. Когда вы добав- ляете новый диск, команда devf sadmd должны распознать его и создать соответствую- щие файлы устройств. При необходимости эту команду можно выполнить вручную. Дисковые накопители для системы HP-UX ЕЗ Традиционно система HP-UX заимствовала правила именования дисков у си- стемы Solaris, которая записывает в каталогах много информации об аппарат- ном устройстве. Однако в версии HP-UX Hi v3 эти каталоги были исключе- ны и предпочтение было отдано гибким адресам, имеющим вид /dev/disk/ diskl. Такие пути являются более устойчивыми и не заполняются деталями, относящимися к конфигурации системного аппаратного обеспечения. Прежде чем загружать систему UNIX, от монитора PROM можно получить листинг системных устройств SCSI. К сожалению, точный способ выдачи этого листинга зави- сит от компьютера. После загрузки можно получить список дисков, выполнив команду ioscan. $ sudo ioscan -fNn -C disk Class I H/W Path Driver S/W State H/W TypeDescription disk 3 64000/0xfa00/0x0 esdisk CLAIMED DEVICE TEACDV-28E-B /dev/disk/disk3 /dev/rdisk/disk3 disk 4 64000/0xfa00/0xl esdisk CLAIMED DEVICE HP 73.4GMAS3735NC /dev/disk/disk4 /dev/rdisk/disk4
272 Часть I. Основы /dev/disk/disk4_pl /dev/rdisk/disk4_pl /dev/disk/disk4_p2 /dev/rdisk/disk4_p2 /dev/disk/disk4_p3 /dev/rdisk/disk4_p3 disk 5 64000/0xfa00/0x2 esdisk CLAIMED DEVICE HP 73.4GMAS3735NC /dev/disk/disk5 /dev/rdisk/disk5 /dev/disk/disk5_pl /dev/rdisk/disk5_pl /dev/disk/disk5_p2 /dev/rdisk/disk5_p2 /dev/disk/disk5_p3 /dev/rdisk/disk5_p3 В каталогах /dsk и /rdsk все еще используются имена дисков старого стиля, при желании их можно использовать, по крайней мере, пока. Для того чтобы уви- деть соответствие между имена в старом и новом стилях, следует выполнить команду ioscan -m dsf. hp-ux$ ioscan -m dsf Persistent DSF6 Legacy DSF(s) /dev/rdisk/disk3 /dev/rdisk/disk4 /dev/rdisk/disk4_pl /dev/rdisk/disk4_p2 Zdev/rdisk/disk4_p3 /dev/rdisk/disk5 /dev/rdisk/disk5_pl /dev/rdisk/disk5_p2 /dev/rdisk/disk5_p3 /dev/rdsk/cOtOdO Zdev/rdsk/c2tld0 /dev/rdsk/c2tld0sl /dev/rdsk/c2tld0s2 Zdev/rdsk/c2tld0s3 /dev/rdsk/c2tld0 /dev/rdsk/c2tld0sl /dev/rdsk/c2tld0s2 /dev/rdsk/c2tld0s3 Обратите внимание на то, что разделы теперь обозначаются буквой р, а не s, как в системе Solaris (“s” означает “slice” — сектор). В отличие от системы Solaris, для пред- ставления целых дисков система HP-UX использует такие имена, как disk3 без суф- фикса раздела. В системе Solaris раздел 2 соответствует целому диску, а в системе HP- UX — это просто другой раздел. Система, из которой взят данный пример, основана на процессоре Itanium и поэто- му имеет разделы дисков. Другие системы HP-UX вместо разбиения дисков используют управление логическими томами. Дисковые накопители для системы AIX • Пути /dev/hdisk и /dev/rhdisk являются очень простыми. К сожалению, при изменении конфигурации аппаратного обеспечения имена дисков изме- няются. Однако большинство дисков в системе AIX управляется менеджера- ми логических томов, поэтому имена устройств не имеют большого значения. Включая диск в группу томов, менеджер логического тома записывает на него уникальный идентификатор. Эти метки позволяют системе автоматически классифицировать диски, так что изменения в именах устройств не имеют та- ких последствий, как в других системах. Для того чтобы увидеть список дисков, инсталлированных в системе, следует выпол- нить команду Isdev -С -с disk. 6 DSF - device special file (специальный файл устройства).
Глава 8. Дисковая память 273 Форматирование и плохое управление блоками Все жесткие диски поступают отформатированными, причем фабричное форматиро- вание не хуже любого другого. Лучше избегать низкоуровневого форматирования, если это не диктуется крайней необходимостью. В общем, никогда не следует форматировать заново новые диски. Если на диске обнаруживаются ошибки чтения или записи, сначала необходимо про- верить кабели, терминаторы и адресацию. Каждый из них может вызвать симптомы, по- хожие на существование плохих блоков. Если после проверки вы все еще уверены, что на диске есть дефект, лучше заменить его сразу на новый диск, а не ждать много часов, пока он отформатируется, в надежде, что проблемы исчезну сами по себе. В процессе форматирования происходит запись адресов и времениых отметок на пластинах, для того чтобы установить размеры каждого сектора. Кроме того, обнаружи- ваются плохие блоки и дефекты покрытия, препятствующие надежному чтению или за- писи. Все современные блоки имеют встроенные механизмы управления плохими бло- ками, поэтому ни вам, ни драйверу не следует беспокоиться об управлении дефектами. Для этой цели встроенные программы накопителя хранят в резервной области адреса хороших блоков. Плохие блоки, проявившиеся после форматирования диска, могут обрабатываться автоматически, но могут и не обрабатываться. Если программа накопителя полагает, что эти блоки можно восстановить надежным образом, то вновь выявленный дефект может быть исправлен на лету, а данные записаны в новое место. При выявлении более се- рьезных или менее очевидных ошибок, накопитель прекращает выполнение операций чтений или записи и сообщает об ошибке операционной системе компьютера. Диски АТА обычно не предназначены для форматирования за пределами фабрики. Однако вы можете получить информацию о программном обеспечении для формати- рования дисков от его производителей, как правило, для системы Windows. Убедитесь, что программное обеспечение предназначено именно для того накопителя, который вы собираетесь форматировать, и точно следуйте инструкциям производителя.7 Диски SCSI форматируются сами по стандартной команде, поступающей от ком- пьютера. Процедура отправки этой команды зависит от системы. На персональных компьютерах часто существует возможность посылать эту команду из системы BIOS контроллера SCSI. Для того чтобы отдать команду на форматирование диска SCSI от имени операционной системы, следует выполнить команду sg_format в системе Linux, format — в системе Solaris и mediainit — в системе HP-UX. Для проверки целостности диска существуют разнообразные утилиты, которые вы- полняют запись данных в случайно выбранные области и считывают их оттуда. Тщатель- ные тесты занимают много времени и, к сожалению, имеют небольшое прогностическое значение. Если вы подозреваете, что диск испорчен, и можете его просто заменить (или заказать новый в течение часа), то эти тесты можно проигнорировать. В противном слу- чае запустите тест на ночь. Не беспокойтесь об “изнашивании” диска вследствие из- быточного или агрессивного тестирования. Промышленные диски предназначены для постоянной работы. 7 С другой стороны, если накопитель емкостью 1 Тбайт стоит 80 долл., зачем беспокоиться?
274 Часть I. Основы администрировани. Безопасное стирание дисков АТА Начиная с 2000 года диски РАТА и АТА реализуют команду “безопасного стирания”, которая переписывает все данные на диске, используя метод, разработанный произво- дителями для защиты от несанкционированного извлечения информации. Безопасное стирание сертифицировано Национальным институтом стандартов и технологии (NIST) и в большинстве случаев вполне удовлетворяет пользователей. По классификации Министерства обороны США, оно одобрено к использованию на уровне конфиденци- альности ниже, чем “секретно”. Зачем вообще нужна такая функциональная возможность? Во-первых, файловые системы сами ничего не стирают, поэтому команды вроде rm -rf * оставляют данные, находящиеся на диске, нетронутыми и допускают их восстановление с помощью специ- альных программ. При ликвидации дисков об этом очень важно помнить, чтобы конфи- денциальная информация попала в мусоросборник, а не на аукцион eBay. Во-вторых, даже неавтоматическая запись каждого сектора на диске может оставлять магнитные следы, которые злоумышленник может выявить в лаборатории. Безопасное стирание переписывает данные столько раз, сколько нужно для того, чтобы уничтожить побочные сигналы. Остаточные магнитные сигналы для большинства организаций не составляют большой проблемы, но всегда полезно знать, что вы защищены от разглаше- ния конфиденциальных данных организации. В заключение, безопасное стирание делает накопители SSD абсолютно пустыми. Это позволяет повысить их производительность в ситуациях, в которых нельзя использовать команду TRIM в стандарте АТА (команду для стирания блока) либо потому, что файло- вая система, используемая на накопителе SSD, не способна ее выполнить, либо потому, что накопитель SSD присоединен через адаптер компьютера или интерфейс RAID, ко- торые не пропускают команду TRIM. К сожалению, поддержка команды безопасного стирания диска в системе UNIX остается слабой. С этой точки зрения для очистки накопителей их лучше переключить в систему Windows или Linux. Программное обеспечение операционной системы DOS можно найти на сайте исследовательской группы Center of Magnetic Recording Research tinyurl. com/2xoqqw. Утилита MHDD также поддерживает безопасное стирание с по- мощью команды fasterase (см. сайт tinyurl. com/2g6r98). В системе Linux можно использовать команду hdparm. $ sudo hdparm —user-master u -security-set-pass password /dev/sda8 $ sudo hdparm —user-master u -security-set-erase password /dev/sda Команда безопасного стирания в стандарте АТА не имеет аналогов в стандарте SCSI, но команда “форматировать модуль” в стандарте SCSI, описанная выше, представляется вполне разумной альтернативой. Другой возможностью является обнуление секторов с помощью команды dd if=/dev/zero ъ£=накопитель bs=8k. Многие системы имеют утилиту shred, которая выполняет безопасное стирание от- дельных файлов. К сожалению, ее работа основана на предположении, что блоки фай- лов могут быть перезаписаны на том же месте. Однако во многих ситуациях это условие не выполняется (в частности, это относится к любым файловым системам на любых на- копителях SSD, любым логическим томам, имеющим механизм мгновенных копий, и, 8 Команда безопасного стирания в стандарте АТА защищена паролем, для того чтобы затруд- нить к ней доступ. Следовательно, перед ее вызовом необходимо ввести пароль. Впрочем, не стоит его записывать, вы можете установить его заново, когда захотите. В этом случае блокировка нако- пителя никакой опасности не несет.
Глава 8. Дисковая память 275 возможно, ко всей файловой системе ZFS), поэтому полезность универсальной утилиты shred вызывает сомнения. Для очистки всей дисковой системы на персональном компьютере существует про- грамма Darik’s Boot and Nuke (dban.org). Этот инструмент запускается со своего за- грузочного диска, поэтому он не используется каждый день. Тем не менее он довольно удобен для вывода из эксплуатации старого аппаратного обеспечения. Команда hdparm: параметры диска и интерфейса (Linux) ДВ системе Linux команда hdparm имеет немного больше возможностей, чем команды безопасного стирания. Обычно она используется для взаимодействия со встроенными программами жестких дисков SATA, IDE и SAS. Помимо прочего, команда hdparm может устанавливать настройки электропитания накопителя, включать или отключать подавление шумов, устанавливать флаг “только для чтения” и распечатывать информацию о накопителе. Некоторые из этих опций относятся и к накопителям SCSI (в современных ядрах систе- мы Linux). Синтаксис этой команды выглядит следующим образом. hdparm [параметры] накопитель Источники параметров доступны, но большинство из них интересно только для раз- работчиков драйверов и ядер. Параметры, представляющие интерес для администрато- ров, приведены в табл. 8.3. Таблица 8.3. Параметры команды hdparm, полезные для системных администраторов Параметр -la -M значение -S значение Выдает много идентифицирующей информации и данных о состоянии накопителя Устанавливает акустические параметры Устанавливает временную задержку для режима ожидания (замедление вращения) -у -С -т t Немедленно переводит накопитель в режим ожидания Посылает запросы о текущем состоянии системы управления электропитанием накопителя Быстро тестирует полосу пропускания интерфейса (без реального чтения диска) Быстро тестирует скорость считывания данных с пластины в компьютер Это прописная буква I, как в слове India. Для того чтобы проверить, что каждое устройство работает в максимально быстром режиме DMA, следует использовать команду hdparm -I. Команда hdparm перечисля- ет все поддерживаемые модели дисков и помечает их текущий режим звездочкой, как показано в примере, приведенном ниже. linux$ sudo hdparm -I /dev/sdf /dev/sdf ATA device, with non-removable media Model number: WDC WD1001FALS-00J7B0 Serial Number: Firmware Revision: WD-WMATV0998277 05.00K05 Transport: Serial, SATA 1.0a, SATA II Extensions, SATA Rev 2.5
276 Часть I. Основы администрирования" Capabilities: LBA, IORDY (can be disabled) Queue depth: 32 Standby timer values: spec’d by Standard, with device specific minimum R/W multiple sector transfer: Max = 16 Current =16 Recommended acoustic management value: 128, current value: 254 DMA: mdmaO mdmal mdma2 udmaO udmal udma2 udma3 udma4 udma5 *udma6 Cycle time: min=120ns recommended=120ns PIO: pioO piol pio2 pio3 pio4 Cycle time: no flow control=120ns IORDY flow control=120 ns Во всех современных системах оптимальный режим DMA устанавливается по умол- чанию. Если это не так, проверьте систему BIOS и журналы ядра для поиска информа- ции, которая поможет понять причины. Многие накопители предлагают управление акустическим режимом, позволяя за- медлять движение считывающих головок и уменьшать громкость тиканья и звуковых импульсов. Накопители, поддерживающие такую возможность, обычно поставляют- ся с уже включенным механизмом управления акустическим режимом, но это иногда не важно для накопителей, установленных в серверной комнате. Для того чтобы отклю- чить эту возможность, следует выполнить команду hdparm -М 254. Большая часть электроэнергии, потребляемой накопителем, расходуется на враще- ние пластин. Если ваши диски используются редко и вы имеете возможность установить задержку на 20 с или управлять повторным запуском двигателя дисков, выполните ко- манду hdparm -S, чтобы включить возможность внутреннего управления электропита- нием дисков. Аргумент -S задает время простоя, после которого накопитель переходит в режим ожидания и отключает двигатель. Эта величина занимает один байт, поэтому кодирование представляет собой нелинейную задачу. Например, значения от 1 до 240 умножаются на 5 секунд, а значения от 241 до 251 — на 30 минут. В ходе выполнения ко- манда hdparm демонстрирует свою интерпретацию этого значения. Его проще угадать, подобрать и повторить, чем определить, точно следуя правилам кодирования. Команда hdparm предусматривает простой тест производительности накопителя, позволяющий оценить влияние изменений конфигурации. Параметр -Т означает счи- тывание данных из кеша накопителя и выдачу скорости передачи данных по шине, не зависящую от пропускной способности физических устройств накопителя. Параметр -t означает считывание с пластин. Как и следовало ожидать, считывание с пластин проис- ходит намного медленнее. $ sudo /shin/hdparm -Tt /dev/hdb /dev/sdf: Timing cached reads: 2092 MB in 2.00 seconds = 1046.41 MB/sec Timing buffered disk reads: 304 MB in 3.00 seconds = 101.30 MB/sec Скорость, равная 100 Мбайт/с, близка к максимальному пределу современных на- копителей емкостью 1 Тбайт, так что эти результаты (и информация, приведенная выше при иллюстрации команды hdparm -1) подтверждают, что накопитель настроен пра- вильно. Мониторинг жесткого диска с помощью стандарта SMART Жесткие диски представляют собой отказоустойчивые системы, использующие ко- дирование с исправлением ошибок, и встроенные программы с развитой логикой для
Глава 8. Дисковая память 277 сокрытия своих недостатков от операционной системы компьютера. В некоторых слу- чаях жесткие диски сообщают операционной системе о неисправимой ошибке только после многочисленных попыток исправить ее. Было бы хорошо заранее распознавать такие ошибки, пока не разразился кризис. Устройства АТА, включая накопители SATA, реализуют подробную форму отчетов о состоянии накопителя, которая иногда позволяет предсказать сбой. Этот стандарт под названием SMART (“self-monitoring, analysis, and reporting technology”) предусматривает более 50 параметров, которые может анализировать компьютер. Ссылаясь на исследование дисков, проведенное компанией Google (см. раздел 8.11), часто утверждают, что данные стандарта SMART не могут предсказать отказ накопителя. Это не совсем так. На самом деле компания Google обнаружила, что четыре параметра стандарта SMART обладают высокой прогнозной точностью, но сам сбой невозможно предотвратить с помощью изменения настроек стандарта SMART. Среди накопителей, давших сбой, 56% не содержали изменений в этих четырех параметрах. С другой сто- роны, мы считаем, что предсказание сбоя у более половины дисков является неплохим результатом! Четырьмя чувствительными параметрами стандарта SMART являются количество ошибок сканирования (scan error count), количество повторного распределения памяти (reallocation count), количество автономного повторного распределения памяти (off-line reallocation count) и количество секторов “с испытательным сроком” (number of sectors “of probation”). Все эти значения должны быть равны нулю. Ненулевые значения этих параметров повышают вероятность отказа в течение 60 дней в 39, 14, 21 и 16 раз соот- ветственно. Для того чтобы извлечь пользу из параметров стандарта SMART, необходимо иметь специальное программное обеспечение, которое опрашивает накопители и прогнози- рует вероятность сбоя. К сожалению, стандарты отчетов варьируются в зависимости от производителей накопителей, поэтому декодирование параметров не всегда является простой задачей. Большинство мониторов SMART накапливают основные параметры, а затем ищут внезапные изменения в неблагоприятном направлении, вместо того что- бы интерпретировать их абсолютные величины. (В соответствии с отчетом компании Google, учет этих “мягких” параметров стандарта SMART в дополнение к “большой чет- верке” позволяет предсказать 64% сбоев.) Стандартным программным обеспечением стандарта SMART для контроля нако- пителей в системах UNIX и Linux является пакет smartmontool с сайта smartmontool. sourceforge. net. В системах SUSE и Red Hat он инсталлируется по умолчанию; в си- стеме Ubuntu для его инсталляции необходимо выполнить команду apt-get install smartmontools. Для того чтобы запустить этот пакет в системе Solaris, его необходимо скомпилировать из исходного кода. Пакет smartmontool состоит из демона smartd, который постоянно следит за на- копителями, и команды smartctl, которую можно использовать для выполнения ин- терактивных запросов или сценариев. Демон имеет один конфигурационный файл, как правило, /etc/smartd.conf, содержащий подробные комментарии и много примеров. Накопители SCSI имеют собственную систему отчетов о нестандартном состоя- нии, но, к сожалению, они менее подробные, чем отчеты системы SMART. Пакет smartmontools пытается включить накопители SCSI в свою схему, но прогнозируемая значимость данных стандарта SCSI является мнее ясной.
278 Часть I. Основы администрирования 8.6. Разбиение диска Разбиение логического тома и управление им — это два способа разделения диска (или совокупности дисков в случае менеджера LVM) на отдельные части определенного объема. Все рассматриваемые нами операционные системы поддерживают управление логическими томами, но только Linux, Solaris и иногда HP-UX допускают традиционное разбиение. Каждый раздел можно отдать под контроль менеджера логических томов, но сам логический том разделить нельзя. Разбиение — это самый низкий уровень управление дисками. В системе Solaris разбиение необходимо, но по существу носит рудиментар- soiaris ный характер; система ZFS скрывает его так хорошо, что пользователь может об этом даже не догадываться. В этом разделе приведена общая информа- ция, которая может оказаться полезной для администратора системы Solaris, но поскольку с процедурной точки зрения система Solaris резко отличается от систем Linux, HP-UX и AIX, читатель может сразу перейти к разделу 8.10. (Впрочем, читая этот раздел дальше, вы узнаете, что команда zpool create новый_пул новый_накопитель решает большую часть проблем, связанных с конфигурацией.) И разбиение диска, и логические тома облегчают резервное копирование, предот- вращая незаконный захват пользователями дискового пространства и потенциальные повреждения от программ, вышедших из-под контроля. Все системы имеют корневой “раздел”, содержащий большинство данных о конфигурации локального компьютера. Теоретически, для того чтобы перевести систему в однопользовательский режим работы, достаточно одного корневого раздела. Различные подкаталоги (самые распространенные из них — /var, /usr, /Ьпр, /share и /home) можно разделять на более подробные раз- делы или тома. Большинство систем имеет, по крайней мере, одну область подкачки. Мнения о наилучшем способе разбиения диска по умолчанию разделяются. Рас- смотрим некоторые из них. • Целесообразно иметь резервный корневой накопитель, который можно загрузить в ситуации, когда с обычным корневым разделом что-то не так. В идеале резервный корневой раздел и обычный корневой раздел (root device) должны существовать на разных дисках, чтобы иметь возможность защищаться от проблем, связанных с ап- паратным обеспечением и повреждениями. Однако даже если резервный корневой раздел находится на том же диске, все равно он имеет определенную ценность.9 • Проверьте, можете ли вы загружаться с резервного корневого раздела. Эта проце- дура зачастую нетривиальна. Возможно, во время загрузки вам понадобится пере- дать специальные аргументы для ядра или внести минимальные изменения в кон- фигурацию альтернативного корневого раздела, чтобы все работало гладко. Поскольку корневой раздел часто дублируется, он должен быть достаточно неболь- шим, чтобы две его копии не потребляли неразумно большой объем дискового про- странства. Это основная причина, по которой каталог /usr часто представляет собой отдельный том; он содержит большинство системных библиотек и данных. 9 Системы Solaris и HP-UX имеют даже файловые системы “динамического корневого диска”, облегчающие эксплуатацию нескольких корней. См. справочные страницы, посвященные коман- дам beadm или lucreate в системе Solaris и drd в системе HP-UX.
Глава 8. Дисковая память 279 Размещение каталога / tmp в отдельной файловой системе ограничивает размеры временных файлов и позволяет их не восстанавливать. Некоторые системы для повы- шения производительности используют для хранения каталога /tmp файловую систему, расположенную в оперативной памяти. Файловые системы, расположенные в оператив- ной памяти, поддерживаются областью подкачки, поэтому они хорошо работают в боль- шинстве ситуаций. Поскольку файлы системного журнала хранятся в каталоге /var, целесообразно, чтобы каталог /var представлял собой отдельный раздел диска. Если каталог /var хра- нится в маленьком корневом разделе, то легко переполнить этот раздел и вызвать оста- новку машины. Пользовательские рабочие каталоги полезно размещать в отдельном разделе или ка- талоге. В этом случае, даже если корневой раздел будет поврежден или разрушен, поль- зовательские данные с высокой вероятностью останутся целыми. И наоборот, система сможет продолжать работу, даже если ошибочный пользовательский сценарий перепол- нит каталог /home. Разделение области подкачки между несколькими физическими дисками повышает производительность работы. Этот метод работает и по отношению к файловым систе- мам; размещайте интенсивно используемые файловые системы на разных дисках. Эта тема освещается в разделе 29.4. Добавляя модули памяти в компьютер, увеличьте область подкачки. Более подробно виртуальная память описывается в разделе 29.4. Резервное копирование раздела можно упростить, если весь раздел заполняет один фрагмент памяти надиске (см. раздел 10.1). Старайтесь разделять быстро изменяющуюся информацию на кластеры, размещен- ные в нескольких разделах, которые часто подвергаются резервному копированию. Традиционное разбиение Системы, допускающие разбиение, реализуют его, записывая “метку” в начало дис- ка, чтобы определить диапазон блоков, включенных в каждый раздел. Подробности этой процедуры могут варьироваться; метка часто может существовать одновременно с другой установочной информацией (например, загрузочным блоком) и часто содержит дополнительную информацию, например имя или уникальный идентификатор всего диска. В системе Windows эта метка называется MBR (master boot record — главная за- грузочная запись). Драйвер устройства, представляющий диск, считывает эту метку и использует таблицу разбиения диска для вычисления физического местоположения каждого раздела. Как пра- вило, каждому разделу соответствует один или два файла устройства (для блочного устрой- ства и для устройства посимвольного ввода-вывода; в системе Linux есть только блочные Устройства). Кроме того, отдельный набор файлов устройств представляет диск в целом. В системе Solaris разделы называются секторами (“slices”). Точнее, они на- soians зываются секторами, если реализованы с помощью метки в стиле системы Solaris, и разделами, если реализованы с помощью метки MBR в стиле си- стемы Windows. Сектор 2 содержит все пространство диска, иллюстрируя не- сколько устрашающий факт, что один блок диска может принадлежать не- скольким секторам одновременно. Возможно, слово “сектор” было выбрано потому, что “раздел” предполагает простое разбиение, а секторы могут пере- крываться. В остальных ситуациях эти термины являются синонимами.
280 Часть I. Основы администрирования Несмотря на всеобщую доступность менеджером логических томов, в некоторых си- туациях необходимо или желательно традиционное разбиение. • На персональных компьютерах загрузочный диск может иметь таблицу разбиения. Большинство систем предпочитает разбиение с помощью метки MBR (см. далее раздел “Разбиение диска в стиле системы Windows”), но системы на процессоре Itanium требуют разбиения с помощью таблицы GPT (см. ниже). Диски с данны- ми могут оставаться неразделенными. CQ Более подробно двойственная загрузка системы Windows описывается в разделе 3.3. • Инсталлирование меток MBR делает диск понятным для системы Windows, даже если содержание его отдельных разделов остается недоступным. Если вы хотите взаимодействовать с системой Windows (например, посредством двойственной за- грузки), необходимо инсталлировать метки Windows MBR. Однако даже если вы не собираетесь делать что-нибудь подобное, иногда целесообразно учесть повсе- местную распространенность системы Windows и вероятность того, что ваш диск в один прекрасный день может вступить с ней в контакт. • Текущие версии системы Windows являются хорошо продуманными и никогда не записывают данные на диск, который они не могут расшифровать. Однако они определенно могут предложить эти действия администратору, который на них за- регистрируется. На соответствующем диалоговом окне даже есть полезная кнопка “ОК, преврати этот диск в кашу!”.10 Ничего плохого не произойдет, пока кто-то не сделает ошибку, но обеспечение безопасности — это структурный и организаци- онный процесс. • Разделы занимают точно определенное место на диске и гарантируют локальность ссылок. Логические тома этого не обеспечивают (по крайней мере, по умолча- нию). В большинстве случаев это не имеет большого значения. Однако поиск в смежных областях выполняется быстрее, нежели поиск в отдаленных ячейках, и пропускная способность внешних цилиндров диска (т.е. цилиндров, содержащих блоки с наименьшими номерами) может превосходить пропускную способность внутренних цилиндров на 30% и более.11 Для ситуаций, в которых требуется вы- сокая производительность, разбиение диска можно использовать для достижения дополнительного выигрыша. (Для восстановления потерянной гибкости всегда можно применить управление логическими томами внутри раздела.) • Системы RAID (см. раздел 8.7) используют диски или разделы одинакового объ- ема. Хотя конкретная реализация системы RAID может допускать диски разных объемов, вероятно, она будет использовать только те диапазоны блоков, которые являются общими для всех дисков. Вместо того чтобы терять избыточное про- странство, его можно изолировать в отдельном разделе. Однако в этом случае сле- дует предусмотреть запасной раздел для редко используемых данных, иначе такое разбиение снизит производительность работы массива RAID. 10 Хорошо, хорошо. Возможно, на ней написано просто “Форматировать” или “ОК”, но это именно то, что на ней должно быть написано. 11 Использование только внешних цилиндров диска для повышения производительности на- зывается “коротким рабочим ходом” (short stroking). Здесь ходом называется перемещение головки диска.
Глава 8. Дисковая память 281 Разбиение диска в стиле системы Windows Метка Windows MBR занимает один блок диска размером 512 байт; большую часть этого блока занимает код загрузки. Оставшегося места достаточно для определения только четырех разделов. Эти разделы называются первичными, потому что они опреде- ляются непосредственно в метке MBR. Один из первичных разделов можно определить как “расширенный”. Это значит, что он содержит собственную вспомогательную таблицу разделов. Расширенный раз- дел _ это обычный раздел, который занимает определенное место на физическом диске. Вспомогательная таблица разделов хранится в начале данных, относящихся к разделу. Разделы, создаваемые внутри расширенного раздела, называются вторичными. Они являются частью расширенного раздела. Запомните следующие эмпирические правила установки дисков, разбитых в стиле системы Windows. Первое из них является настоящим правилом. Остальные относятся к работе с системами BIOS, загрузочными блоками или операционными системами. • На диске может существовать только один расширенный раздел. • Расширенный раздел должен быть последним разделом, определенным в метке MBR; после него нельзя определять никаких первичных разделов. • В некоторых старых операционных системах вторичные разделы нежелательны. Для того чтобы избежать неприятностей, инсталлируйте операционную систему в первичном разделе. Схема разбиения дисков в системе Windows позволяет пометить один из разделов как “активный”. Загрузчики ищут активный раздел и пытаются загрузить операционную си- стему из него. Кроме того, каждый раздел имеет однобайтовый атрибут типа, который обозна- чает содержимое раздела. Как правило, эти коды представляют либо типы файловой системы, либо операционные системы. Эти коды не присваиваются централизован- но, но со временем были приняты определенные соглашения. Они сформулированы Андрисом Э. Брауэром (Andries Е. Brouwer) на сайте tinyurl. com/part-types. Команда MS-DOS, осуществляющая разбиение жесткого диска, называется fdisk. Большинство операционных систем, поддерживающих разбиение в стиле системы Windows, унаследовали это имя для обозначения своих собственных команд разбиения, но они очень разнообразны. Сама система Windows от нее отказалась: ее современная версия инструмента для разбиения диска называется diskpart. Кроме того, система Windows имеет графический пользовательский интерфейс для разбиения дисков, кото- рый доступен благодаря утилите Disk Management из консоли управления штс. Не имеет значения, с помощью какой операционной системы вы разбили диск на разделы — Windows или какой-то другой. Окончательный результат будет таким же. GPT: таблица разделов CUID Проект компании Intel по созданию расширяемого микропрограммного интерфейса (extensible firmware interface — EFI) был направлен на замену неустойчивых соглашений, касающихся систем BIOS персональных компьютеров, более современной и функцио- нальной архитектурой.12 Несмотря на то что системы, полноценно использующие рас- Проект EFI недавно был переименован в UEFI. Буква U означает “unified” (универсальный), от проект поддерживается многими производителями. Однако название EFI употребляется ац1е. По существу, названия UEFI и EFI являются синонимами.
282 Часть I. Основы администрирования ширяемый микропрограммный интерфейс, в настоящее время являются редкостью, схема разбиения EFI получила широкое распространение среди операционных систем. Основная причина этого заключается в том, что метка MBR не поддерживает диски, объем которых больше 2 Тбайт. Поскольку диски объемом 2Тбайт стали широко доступ- ными, эту проблему нужно срочно решать. Схема разделения EFI, известная как “таблица разделов GUID”, или GPT, устраняет очевидные недостатки метки MBR. Она определяет только один тип разбиения, а самих разделов может быть сколько угодно. Каждый раздел имеет тип, определенный 16-бай- товым идентификатором (глобально уникальным ID, или GUID), который не требует централизованного управления. Следует подчеркнуть, что таблица GPT сохраняет простейшую совместимость с си- стемами, использующими метку MBR, записывая метку MBR в первый блок таблицы разделов. Эта “ложная” метка MBR позволяет диску выглядеть так, будто он содержит только один раздел MBD (по крайней мере, в пределах до 2 Тбайт). Само по себе это не имеет значения, но присутствие “ложной” метки MBR защищает диск от переформати- рования простыми системами. Версии системы Windows, начиная с версии Vista, открыли эру дисков GPT для хра- нения данных, но только системы, поддерживающие расширяемый микропрограммный интерфейс, могут загружаться с этих дисков. Система Linux и ее загрузчик GRUB про- двинулись дальше: они поддерживают диски GPT, с которых могут загружаться любые системы. Системы Mac OS, основанные на процессорах компании Intel, поддерживают обе схемы разбиения EFI и GPT. Система Solaris понимает схему разбиения GPT, а си- стема ZFS использует ее по умолчанию. Однако загрузочные диски системы Solaris не могут использовать разбиение GPT. Несмотря на то что разбиение GPT хорошо принято ядрами операционных систем, ее поддержка среди утилит управления дисками остается эпизодической. Разбиение GPT остается форматом “далекого будущего”. В настоящее время нет разумных причин для его использования на дисках, которые этого не требуют (т.е. на дисках объемом до 2 Тбайт). Разбиение дисков в системе Linux Д Системы семейства Linux предусматривают несколько вариантов разбиения дисков. В них основным средством для разбиения дисков является команда fdisk. Инструмент для разбиения дисков в системе GNU запускается из ко- мандной строки, понимает несколько форматов меток (включая метки систе- мы Solaris), может перемещать разделы и изменять их размеры, а также просто создавать и удалять их. Его версия с графическим пользовательским интер- фейсом под названием gparted запускается в среде GNOME. Другой возмож- ностью является утилита cfdisk, представляющая собой прекрасную альтер- нативу команде fdisk, использующую терминалы. Утилиты parted и gparted теоретически могут изменять размеры некоторых типов файловых систем вместе с разделами, которые они содержат, но на домашней странице соответствующего проекта эта функциональная возможность названа “дефектной и не- надежной”. Утилиты, предназначенные для файловых систем, лучше выполняют их на- стройку, но, к сожалению, утилита parted не имеет команды “изменить размер раздела, но не файловой системы”. Если это необходимо, следует использовать утилиту fdisk.
Глава 8. Дисковая память 283 В целом, мы рекомендуем использовать утилиту gparted, а не parted. Обе утилиты просты, но gparted позволяет задавать размеры разделов, а не начало и конец диапа- зона блоков. Для разбиения загрузочного диска лучше всего использовать графические инсталляторы из дистрибутивных пакетов, так как они обычно предлагают разбиение, которое является оптимальным для данного дистрибутива. Разбиение дисков в системе Solaris Файловая система ZFS автоматически помечает диски, применяя таблицу SOiariS разделов GPT. Однако разбить диски на разделы можно и вручную, исполь- зуя команду format. В операционных системах х86 можно также применять команду fdisk. Оба инструмента предусматривают работу с меню и являются относительно простыми. Команда format предоставляет пользователю удобный список дисков, в то время как команда fdisk требует указать диск в командной строке. К счастью, утилита format имеет команду fdisk, запускающую ее как подпроцесс, поэтому утилиту format можно рассматривать как оболочку, позволяющую найти требуемый диск. Система Solaris допускает три схемы разбиения дисков: Windows MBR, GPT и старые таблицы разбиения Solaris, известные как SMI. Для загрузочных дисков следует исполь- зовать схемы MBR или SMI, в зависимости от аппаратного обеспечения и версии систе- мы, Solaris или OpenSolaris. Пока, вероятно, лучше придерживаться этих правил для всех дисков объемом до 2 Тбайт, разбиваемых на разделы вручную. Разбиение дисков в системе HP-UX Операционная система HP применяет разбиение только для загрузочных дис- ков компьютеров на процессорах Itanium (Integrity), требующих использова- ния таблицы GPT и разбиения загрузочного диска с помощью интерфейса EFI. Команда idisk распечатывает и создает таблицы разделов. Она не ра- ботает в интерактивном режиме, а просто считывает план разбиения из файла или со стандартного средства ввода и использует его для создания таблицы разделов. Спецификации команды idisk очень просты. Первая строка содержит только коли- чество создаваемых разделов. Каждая следующая строка содержит тип разбиения (EFI, HPUX, HPDUMP или HPSP для подкачки), символ пробела и спецификацию объема, например 128 Мбайт или 100%. Если используются проценты, то они интерпретируются по отношению к пространству на накопителе, оставшемуся после выделения памяти Для предыдущих разделов. 8.7. RAID: избыточные массивы недорогих дисков Даже при резервном копировании последствия сбоя диска на сервере могут быть раз- рушительными. RAID (redundant arrays of inexpensive disks — избыточные массивы не- дорогих дисков) — это система, распределяющая или дублирующая данные с помощью многочисленных дисков.13 Система RAID не только помогает избежать потери данных, бь Аббревиатуру RAID иногда расшифровывают как “redundant arrays of independent disks” (“из- гг°чнЬ1е массивы независимых дисков”). Оба варианта с исторической точки зрения являются правильными.
284 Часть I. Основы администрирования но и минимизирует время простоя, связанного с отказом аппаратуры (часто сводя его к нулю), и потенциально повышает производительность. Систему RAID можно реализовать с помощью специального оборудования, благо- даря которому операционная система интерпретирует группу жестких дисков как один составной накопитель. Кроме того, ее можно реализовать так, чтобы операционная си- стема просто считывала или записывала данные на жестких дисках по правилам систе- мы RAID. Программная и аппаратная реализации системы RAID Поскольку диски сами по себе являются узким местом в реализации системы RAID, нет причин предполагать, что аппаратная реализация системы RAID всегда будет рабо- тать быстрее, чем оперативная. В прошлом аппаратная система RAID была доминирующей по двум причинам: из-за недостатка программной поддержки (отсутствие прямой поддержки со стороны опера-;; ционных систем) и способности аппаратного обеспечения буферизовать записи в форме некой энергонезависимой памяти. Последнее свойство, упомянутое выше, повышает производительность, поскольку^ записи заполняются мгновенно. Кроме того, оно защищает диск от потенциального/ повреждения, которое получило название “RAID 5 write hole”. Этот эффект описыва-' ется ниже. Однако будьте осторожны: многие широко распространенные “микросхем^ RAID” для персональных компьютеров вообще не имеют энергонезависимой памяти; на* самом деле они представляют собой хорошо известный интерфейс SATA с элементами' встроенного программного обеспечения RAID. Реализации системы RAID на материи^ ских платах персональных компьютеров также относятся к этой категории. В таких слу- чаях лучше вообще отказаться от возможностей RAID в системах Linux или OpenSolarfe. Недавно произошел сбой контроллера диска на важном промышленном сервере. Несмотря на то что данные были скопированы на нескольких физических накопителях, неисправный контроллер RAID разрушил данные на всех дисках. В результате пришлось более двух месяцев долго и нудно восстанавливать магнитную ленту, пока сервер не был восстановлен полностью. Для управления средой RAID восстановленный сервер теперь использует программное обеспечение ядра, тем самым исключая возможность нового сбоя контроллера RAID. Уровни системы RAID Система RAID может выполнять две основные операции. Во-первых, она может по- высить производительность, “разбросав” данные по многим накопителям и позволив нескольким дискам одновременно передавать или получать поток данных. Во-вторых, она может реплицировать данные по многим накопителям, уменьшая риск, связанный со сбоем одного диска. Репликация может осуществляться в двух видах: зеркальное отражение (mirroring), при котором блоки данных побитово репродуцируются на нескольких накопителях, и схемы четности (parity schemes), в которых один или несколько накопителей содержат контрольную сумму для проверки ошибок на остальных накопителях. Зеркальное отра- жение быстрее, но занимает много места на диске. Схемы четности более экономно ис- пользуют дисковую память, но работают медленнее. Система RAID традиционно описывается в терминах “уровней”, определяющих кон- кретные детали параллелизма и избыточности. Возможно, этот термин является неудач-
Глава 8. Дисковая память 285 ным, потому что более высокий уровень не обязательно оказывается лучшим. Уровни — это просто разные конфигурации; вы можете использовать любой из них. На рисунках, приведенных ниже, числа обозначают магнитные ленты, а буквы а, b и с — блоки данных на этих лентах. Блоки, помеченные буквами р и q, являются блоками четности. • “Линейный режим”, известный также как JBOD (just a bunch of disks — просто группа дисков), нельзя даже назвать реальным уровнем системы RAID. Его реа- лизует каждый контроллер RAID. В режиме JBOD адресные блоки нескольких на- копителей конкатенируются, образуя один большой виртуальный накопитель. Это не обеспечивает ни избыточности данных, ни повышения производительности. В настоящее время функциональная возможность JBOD лучше обеспечивается с помощью менеджера логических томов, а не контроллера RAID. • Уровень RAID 0 используется только для повышения производительности. Он объединяет два или более накопителей одинаковых размеров, но, вместо их объ- единения последовательно один за другим, он распределяет данные между диска- ми, входящими в пул. Операции последовательного чтения и записи в этом случае оказываются распределенными между несколькими дисками, что снижает время записи и доступа к диску. RAID О Обратите внимание на то, что надежность уровня 0 ниже, чем надежность отдель- ных дисков. Вероятность отказа массива из двух дисков в течение года примерно в два раза выше, чем у отдельного диска, и т.д. • Уровень RAID 1 известен как “зеркальное отражение”. Записи дублируются од- новременно на нескольких дисках. Эта схема замедляет процесс записи по срав- нению с записью данных на отдельный диск. Однако она обеспечивает скорость считывания, сравнимую с уровнем RAID 0, потому что чтение можно распреде- лять между несколькими дублирующими накопителями. RAID1 • Уровни RAID 1+0 и 0+1 представляют собой группы зеркал или зеркала групп. С логической точки зрения они представляют собой сочетание уровней RAID 0 и RAID 1, но многие контроллеры и программы обеспечивают их непосредственную поддержку. Цель обоих режимов ~ одновременно достичь производительности Уровня RAID 0 и избыточности уровня RAID 1.
286 Часть I. Основы администрирования RAID 1+0: Группа зеркал • Уровень RAID 5 распределяет и данные, и информацию о четности, добавляя из- быточность и одновременно повышая производительность чтения. Кроме того, уровень RAID 5 более эффективно использует дисковое пространство, чем уро- вень RAID 1. Если массив состоит из N накопителей (требуется не менее трех), то N-1 из них могут хранить данные. Следовательно, эффективность использования дисковой памяти на уровне RAID 5 превышает 67%, в то время как зеркальное от- ражение не может превысить 50%. RAID 5 • Уровень RAID 6 аналогичен уровню RAID 5 с двумя дисками четности. Массив RAID 6 может сохранить работоспособность при полном отказе двух накопителей без потери данных. Уровни RAID 2, 3 и 4 хотя и определены, но используются редко. Менеджеры логи- ческих томов обычно могут и распределять данные (RAID 0), и осуществлять зеркальное отражение (RAID 1).
Глава 8. Дисковая память 287 Для обычных конфигураций распределения и зеркального отражения система Linux предоставляет выбор: использовать специальную систему RAID (напри- мер, команду md; см. ниже) или менеджер логического диска. Подход LVM, вероятно, является более гибким, хотя команда md может оказаться немного более предсказуемой. Если у вас есть возможность использовать команду md, вы можете продолжать использовать механизм LVM для управления простран- ством на томе RAID. Для уровней RAID 5 и RAID 6 вы должны использовать команду md. файловая система ZFS в операционной системе Solaris осуществляет и рас- soians пределение данных, и зеркальное отражение, и конфигурации, аналогичные уровням RAID 5 и RAID 6, как будто система RAID, менеджер логического тома и файловая система объединились в одно целое. Архитектура ZFS поме- щает зеркальное отражение и организацию проверки четности на самый низ- кий уровень, в то же время автоматически выполняя распределение данных среди накопителей, входящих в пул (уровень этой конфигурации на единицу выше). Это прекрасный способ реализации таких возможностей, поскольку он сохраняет ясность конфигурации RAID. Более подробно система ZFS опи- сывается в разделе 8.10. Управление логическим томом расширяет поддержку конфигурации RAID со сторо- ны операционных систем HP-UX и AIX. (Компания HP даже предлагает приобретать средства для зеркального отражения отдельно, хотя в некоторых промышленных кон- фигурациях она включена изначально.) Если вы хотите иметь систему, основанную на проверке четности, вам понадобится дополнительное аппаратное обеспечение. В то же время система AIX поставляется с интегрированными инструментами для управления аппаратным обеспечением RAID; см раздел Disk Array under Devices справочной систе- мы SMIT. Восстановление диска после сбоя Исследование причин отказов дисков, проведенное компанией Google, свидетель- ствует о том, что в большинстве промышленных компаний необходимо обеспечивать избыточность хранения информации на диске. При ежегодном уровне отказов, равном 8%, вашей организации потребуется около 150 жестких дисков только для того, чтобы снизить этот показатель до одного сбоя в месяц. Режимы IBOD и RAID 0 ничем не могут помочь, когда возникает проблема с про- граммным обеспечением, — необходимо выполнять резервное копирование. Другие конфигурации RAID при сбое отмечают вышедшие из строя диски как неисправные. С точки зрения клиентов массивы RAID продолжают нормально функционировать, хотя и на более низком уровне производительности. Неисправные диски необходимо как можно быстрее заменить новыми, чтобы вос- становить избыточность массива. Массив RAID 5 или двухдисковый массив RAID 1 мо- жет только смягчить последствия отказа отдельного накопителя. Как только один сбой произошел, массив подвергается опасности второго сбоя. Процедура замены диска очень простая. Следует заменить неисправный диск дру- гим диском, имеющим такой же или больший объем памяти, а затем сообщить системе RAID о том, что старый диск был заменен новым. После этого последует продолжитель- ный период, в течение которого информация о четности будет переписана на новый, чистый, диск. Часто эту операцию выполняют в ночное время. В течение этого периода
288 Часть I. Основы администрирования массив остается доступным для клиентов, но производительность, скорее всего, будет очень низкой. Для того чтобы ограничить время простоя и уменьшить уязвимость массива при вто- ром сбое, большинство систем RAID позволяет назначать один или несколько дисков на роль “горячего резерва”. Когда возникает сбой, неисправный диск автоматически за- меняется резервным и немедленно начинается процесс повторной синхронизации мас- сива. Если в массиве предусмотрены диски “горячего резерва”, то их, разумеется, также следует использовать. Недостатки конфигурации RAID 5 RAID 5 — популярная конфигурация, но у нее есть ряд недостатков. Все, что будет сказано ниже, относится и к конфигурации RAID 6, но для простоты мы ограничим об- суждение системой RAID 5. Ш Общие рекомендации по резервированию системы см. в главе 10. Во-первых, что следует особо подчеркнуть, конфигурация RAID 5 не отменяет регу- лярное автономное резервирование. Она защищает систему лишь от сбоя диска, и все. Она не защищает систему ни от случайного удаления файлов, ни от сбоев контроллера, ложного срабатывания, хакеров и других опасностей. Во-вторых, конфигурация RAID 5 не отличается высокой производительностью. Она записывает блоки данных на N-1 диск, а блоки четности — на N-й диск.14 После записи случайного блока должны быть обновлены, по крайней мере, один блок данных и один блок четности данных для указанной последовательности дисков. Более того, система RAID не знает, что именно должен содержать новый блок четности, пока не прочитает старый блок четности и старые данные. Следовательно, каждая запись в случайно вы- бранное место состоит из четырех операций: двух операций считывания и двух опера- ций записи. (Если реализация обладает развитой логикой, то последовательные записи могут оказаться намного эффективнее.) И наконец, конфигурация RAID 5 уязвима к повреждениям при определенных об- стоятельствах. Ее последовательное обновление данных о четности является более эф- фективным, чем чтение всей последовательности дисков и повторное вычисление ее четности на основе исходных данных. С другой стороны, это значит, что данные о чет- ности больше нигде не вычисляются и не хранятся. Если будет нарушена синхрониза- ция какого-нибудь блока в последовательности дисков с блоком четности, этот факт в нормальном режиме никак не проявится; операции считывания блоков данных по- прежнему будут возвращать правильные данные. Эта проблема выяснится только при сбое диска. Блок четности, вероятно, будет перезаписан много раз, пока не проявится исходная десинхронизация. Следовательно, реконструированный блок данных на запасном диске будет состоять, по существу, из случайных данных. Эта разновидность десинхронизации между блоками данных и четности не един- ственная проблема. Дисковые накопители не являются трансакционными устройства- ми. Без дополнительного уровня защиты сложно гарантировать, что на разных дисках будут правильно обновлены либо два блока, либо ни одного. Для искажения синхронно- 14 Данные о четности распределяются между всеми накопителями массива; каждая полоса име- ет свою информацию о четности, которая хранится на отдельном диске. Поскольку в массиве нет специального диска для хранения информации о четности, маловероятно, что любой отдельный диск может затормозить работу системы.
Глава 8. Дисковая память 289 сти между блоком данных и блоком четности достаточно, чтобы произошел сбой, отказ электропитания или разрыв связи в неподходящий момент. Эта проблема известна под названием “дыра записи” RAID 5 (RAID 5 “write hole”). Она является объектом пристального изучения в течение последних пяти лет. Одним из полезных ресурсов, посвященных борьбе с RAID 5 (Battle Against Any Raid Five — BAARF), является сайт baarf. org, содержащий ссылки на статьи, посвященные этому вопросу. Вы сами должны решить, действительно ли это важная проблема или искус- ственно раздута. (Мы склоняемся к тому, что она является важной.) Авторы файловой системы ZFS в операционной системе Solaris утверждают, <тго, бла- годаря переменной длине последовательности дисков в системе ZFS, она защйщена от проблемы “дыры записи RAID 5”. Кстати, это одна из причин, по которой авторы на- звали свою реализацию системы RAID в ZFS именем RAID-Z, а не RAID 5, хотя на практике эти концепции похожи. Еще одним потенциальным решением является “чистка” (“scrubbing”), которая со- стоит из поочередной проверки блоков четности во время простоя массива. Многие реа- лизации системы RAID имеют ту или иную функцию очистки. Команда mdadm: программное обеспечение RAID в системе Linux Стандартная реализация программного обеспечения RAID для системы Linux назы- вается md, драйвер “нескольких дисков” (“multiple disks” driver). Его внешний интер- фейс обеспечивает команда mdadm. Драйвер md поддерживает все конфигурации RAID, перечисленные выше, а также RAID 4. Более ранняя система под названием raidtools больше не используется. Следующий сценарий выполняет конфигурацию массива RAID 5, состоящего из трех идентичных жестких дисков объемом 500 Гбайт. Несмотря на то что драйвер md может использовать в качестве компонентов необработанные диски, мы предпочитаем снаб- дить каждый диск таблицей разделов, поэтому начинаем с запуска утилиты gparted, создающей таблицу разделов MBR на каждом диске (утилита gparted предпочтает соз- давать таблицы разделов в стиле “msdos”), и выделения всего дискового пространства одному разделу типа “неформатированный” (к сожалению, именно так это бывает в дей- ствительности). Совершенно не обязательно задавать тип раздела, но это будет полезной информацией для тех, кто станет просматривать таблицу разделов позднее. Кроме того, существует битовый флаг “raid”, который можно установить на разделе, хотя с помощью утилиты gparted сделать это довольно сложно: вы должны создать раздел, выполнить не- законченные операции, а затем вернуться в новый раздел и отредактировать его флаги. Следующая команда создает массив RAID 5 из наших трех разделов SCSI. linux$ sudo mdadm —create /dev/mdO —level=5 —raid-devices=3 /dev/sdbl /dev/sdcl /dev/sddl mdadm: array /dev/mdO started. Виртуальный файл /ргос/mdstat всегда содержит краткое описание состояния драйвера md, а также состояния всех массивов RAID, существующих в системе. Он осо- бенно полезен для анализа файла /ргос/mdstat после добавления нового диска или замены неисправного. (Рекомендуем запомнить команду cat /ргос/mdstat.) linux$ cat /ргос/mdstat Personalities : [linear] [multipath] [raidO] [raidl] [raid6] [raid5] [raid4] IraidlO]
290 Часть I. Основы администрирования mdO : active raid5 sddl[3] sdcl[l] sdbl[O] 1023404544 blocks level 5, 64k chunk, algorithm 2 [3/2] [UU_] ...........................] recovery = 0.1% (672640/511702272) finish=75.9min speed=112106K/sec unused devices: <none> Драйвер md не следит за тем, какой блок в массиве был использован, поэтому он должен вручную синхронизировать все блоки четности с их соответствующими блоками данных. Драйвер md вызывает операцию “recovery”, потому что, по существу, она совпа- дает с процедурой, использованной для замены неисправного диска. Для больших мас- сивов она может выполняться несколько часов. В файле /var/log/messages также записаны полезные сообщения. mdO:RAID5 conf printout: --- rd:3 wd:2 disk 0, o:l, dev:sdbl disk 1, o:l, dev:sdcl disk 2, o:l, dev:sddl md: recovery of RAID array mdO md: minimum _guaranteed_ speed: 1000 KB/sec/disk. md: using max available idle IO bandwidth (but not more than 200000 KB/sec) for recovery. md: using 128k window, over a total of 511702272 blocks. Команда первоначального создания также предназначена для “активирования” мас- сива (т.е. для приведения его в состояние, пригодное для использования), но при после- дующих загрузках может понадобиться активировать массив отдельно, как правило, за рамками сценария загрузки. Системы Red Hat и SUSE имеют простые сценарии загруз- ки для массивов RAID, а система Ubuntu активирует эти массивы по умолчанию. Формально, команда mdadm не требует наличия файла конфигурации, но если он есть, она его использует (как правило, это файл /etc/mdadm.conf). Мы настоятельно реко- мендуем использовать файл конфигурации. Он документирует конфигурацию системы RAID стандартным образом, позволяя администратору просмотреть информацию при возникновении проблемы. В качестве альтернативы использованию файла конфигура- ции можно задавать конфигурацию в командной строке при каждой активации массива. Команда mdadm —detail —scan записывает текущие настройки системы RAID в файл конфигурации. К сожалению, конфигурация, которую она записывает в файл, является неполной. Для получения полной конфигурации необходимо выполнить сле- дующие команды. linux$ sudo sh -с 'echo DEVICE /dev/sdbl /dev/sdcl /dev/sddl > /etc/mdadm.conf' linux$ sudo sh -c 'mdadm —detail —scan » /etc/mdadm.conf' linux$ cat /etc/mdadm.conf DEVICE /dev/sdbl /dev/sdcl /dev/sddl ARRAY /dev/mdO level=raid5 num-devices=3 metadata=00.90 spares=l UUID=f18070c5:e2b6aal8:e368bf24:bd0fce41 Теперь команда mdadm может читать этот файл при загрузке или закрытии, чтобы легко управлять массивом. Для того чтобы активировать массив с помощью вновь соз- данного файла /etc/mdadm.conf, можно выполнить следующую команду. $ sudo mdadm -As /dev/mdO Для того чтобы остановить массив вручную, можно выполнить такую команду. $ sudo mdadm -S /dev/mdO
Глава 8. Дисковая память 291 Создав файл mdadm.conf, распечатайте его и передайте на сервер. Если что-то прои- зойдет, восстановить компоненты массива RAID бывает сложно. Команда mdadm имеет режим -monitor, в котором она выполняется постоянно как демон и сообщает по электронной почте о проблемах, возникших в массиве RAID. Используйте эту возможность! Для того чтобы ее настроить, добавьте строку MAILADDR в свой файл mdadm. conf, чтобы указать адресата, которому следует отправлять предупре- ждения, и настройте демон монитора так, чтобы он запускался во время загрузки. Рас- смотренные нами дистрибутивные пакеты операционных систем содержали первичный сценарий, реализующий эту задачу, но имена и процедуры могут немного отличаться. ubuntu$ sudo update-rc.d mdadm enable suse$ sudo chkconfig -s mdadmd on redhat$ sudo chkconfig mdmonitor on Что произойдет, если диск действительно выйдет из строя? Попробуем разобрать- ся! Команда mdadm предоставляет нам прекрасную возможность сымитировать сбой- ный диск. $ sudo mdadm /dev/mdO -f /dev/sdcl mdadm: set /dev/sdcl faulty in /dev/mdO $ sudo tail /var/log/messages May 30 16:14:55 harp kernel: raid5: Disk failure on sdc, disabling device. Operation continuing on 2 devices kernel: RAID5 conf printout: kernel: -- rd:3 wd:2 fd:l kernel: disk 0, o:l, dev:sdbl kernel: disk 1, o:0, dev:sdcl kernel: disk 2, o:l, dev:sddl kernel: RAID5 conf printout: kernel: -- rd:3 wd:2 fd:l kernel: disk 0, o:l, dev:sdbl kernel: disk 2, o:l, dev:sddl $ cat /proc/mdstat Personalities : [raid6] [raid5] [raid4] [linear] [multipath] [raidO] [raidl] [raidlO] mdO : active raid5 sdbl[0] sddl[2] sdcl[3] (F) 1023404544 blocks level 5, 64k chunk, algorithm 2 [3/2] [U_U] unused devices: <none> Поскольку RAID 5 представляет собой избыточную конфигурацию, массив продол- жает функционировать в режиме деградации, так что пользователи могут не заметить возникшей проблемы. Для того чтобы удалить накопители из конфигурации RAID, выполните команду mdadm -г. $ sudo mdadm /dev/mdO -г /dev/sdcl mdadm: hot removed /dev/sdcl Как только диск будет логически удален, вы можете остановить систему и заменить накопитель. Аппаратное обеспечение, допускающее “горячую замену”, позволяет про- изводить замену дисков без остановки системы и ее перезагрузки. Если компонентами массива RAID являются необработанные диски, вы должны за- менить их только идентичными дисками. Компоненты, имеющие разделы, можно заме-
292 Часть I. Основы администрирования нить любым разделом такого же размера, хотя, с точки зрения соответствия полос про- пускания, лучше, если аппаратное обепечение дисков является одинаковым. (Если ваша конфигурация RAID построена на основе разделов, вы должны запустить утилиту раз- биения диска и правильно определить разделы, прежде чем добавлять диск в массив.) В нашем примере сбой всего лишь смоделирован, поэтому мы можем добавить на- копитель обратно в массив, не заменяя никакого аппаратного обеспечения. $ sudo mdadm /dev/mdO -a /dev/sdcl mdadm: hot added /dev/sdcl Драйвер md немедленно начнет перестраивать массив. Как обычно, за выполнением этой процедуры вы можете следить с помощью файла /ргос/mdstat. Перестройка мо- жет идти часами, так что учтите этот факт, составляя план по восстановлению системы после сбоя. 8.8. Управление логическими томами Представьте себе ситуацию, в которой вы не знаете, насколько большим должен быть раздел. Через шесть месяцев после создания раздела выясняется, что он слишком боль- шой, а в соседнем разделе недостаточно памяти... Знакомо? Менеджер логического тома позволяет вам динамически перераспределить память между переполненным разделом и разделом, испытывающим нехватку памяти. Управление логическими томами, по существу, является максимально эффективной и абстрактной версией процедуры разделения диска. Оно группирует отдельные накопят тели в “группу томов”. Блоки в группе томов могут быть затем выделены “логическим томам”, которые представлены файлами блочных устройств и функционируют как раз- делы диска. Однако логические тома являются более гибкими и мощными, чем разделы дисков. Перечислим некоторые операции, которые можно выполнять с помощью менеджера тома. • Перемещение логических томов между несколькими физическими устройствами. • Увеличение и уменьшение логических томов на лету. • Копирование при записи “моментальных снимков” логических томов. • Замена накопителей без прекращения работы. • Создание зеркал или дисковой последовательности на логических томах. Компоненты логического тома можно объединить в одно целое разными способами. При конкатенации физические блоки устройств объединяются вместе путем их после- довательного расположения друг за другом. При создании последовательности дисков компоненты чередуются так, чтобы соседние виртуальные блоки действительно распре- делялись по нескольким физическим дискам. При устранении узких мест, связанных с отдельными дисками, создание последовательности дисков часто позволяет расширить полосу пропускания и снизить время простоя. Реализации управления логическими томами Почти все рассмотренные нами операционные системы поддерживали управление логическими томами. За исключением системы Solaris с ее файловой системой ZFS, все системы похожи друг на друга.
Глава 8. Дисковая память 293 Кроме файловой системы ZFS, операционная система Solaris поддерживает предыду- щую версию менеджера управления системными дисками под названием Solaris ХЫшпе Manager или Solstice DiskSuite. Этот менеджер томов по-прежнему поддерживается, но для инсталляции новых версий требуется использование файловой системы ZFS. Менеджер логических томов (logical volume manager — LVM) в системе Linux, кото- рый называется LVM2, по существу, представляет собой клон менеджера логических то- мов системы HP-UX, который в свою очередь основан на программном обеспечении Veritas. Команды в этих двух системах практически идентичны, но мы покажем вариан- ты для обеих систем, поскольку вспомогательные команды все же немного отличаются друг от друга. Система AIX основана на тех же абстракциях, но использует другой син- таксис команд. Параллели между этими системами приведены в табл. 8.4. Таблица 8.4. Сравнение команд LVM Операция Linux HP-UX AIX Физический том Создать pvcreate pvcreate - Инспектировать pvdisplay pvdisplay Ispv Изменить pvchange pvchange chpv Проверить pvck pvck — Группа томов Создать vgcreate vgcreate mkvg Изменить vgchange vgchange chvg Расширить vgextend vgextend extendvg Инспектировать vgdisplay vgdisplay Isvg Проверить vgck — - Enable vgscan vgscan varyonvg Логический том Создать Ivcreate Ivcreate mklv Изменить Ivchange Ivchange chlv Изменить объем Ivresize Ivextend, Ivreduce extendlv Инспектировать Ivdisplay Ivdisplay Islv Кроме команд, работающих с группами томов и логическими томами, в табл. 8.4 так- же показана совокупность команд, относящихся к “физическим томам”. Физический том — это накопитель, к которому применяется метка LVM; применение этой мет- ки является первым этапом использования устройства с помощью менеджера логиче- ских томов. Для применения этой метки системы Linux и HP-UX используют команду pvcreate, а в системе AIX эту задачу автоматически выполняет команда mkvg. Кроме регистрационной информации, эта метка содержит уникальный идентификатор, позво- ляющий однозначно распознавать накопитель. Физический том”— неудачный термин, потому что физические тома не должны иметь прямого соответствия с физическими устройствами. Они могут быть дисками, но °Ни могут быть и разделами дисков, и массивами RAID. Для менеджера логических то- ов это не имеет значения.
294 Часть I. Основы администрирования Управление логическими томами в системе Linux Менеджером логических томов в системе Linux (LVM2) можно управлять с по- мощью либо большой группы простых команд (приведенных в табл. 8.4), либо одной команды Ivm и ее многочисленных подкоманд. Все эти опции име- ют одно и то же назначение; фактически отдельные команды действительно прямо обращаются к команде Ivm, которая проверяет, как ее вызвали, чтобы знать, как реагировать. Хорошим описанием этой системы и ее инструментов является справочная страница man Ivm. Процесс настройки менеджера логических томов в системе Linux состоит из несколь- ких этапов. • Создание (на самом деле, определение) и инициализация физических томов. • Добавление физических томов в группу томов. • Создание логических томов по группе томов. Команды LVM начинаются с буквы, определяющей уровень абстракции, на котором они действуют: команды с префиксом pv манипулируют физическими томами, vg — группами томов, a lv — логическими дисками. Команды, имеющие префикс Ivm (на- пример, Ivmchange), оперируют системой в целом. В следующем примере мы установили устройство /dev/mdO RAID 5, созданное ра- нее, для использования менеджером логических томов и создания логического тома. Поскольку создание последовательности дисков и избыточность обеспечиваются базо- вой конфигурацией RAID, мы не будем использовать соответствующие возможности менеджера LVM2, хотя они существуют. $ sudo pvcreate /dev/mdO Physical volume "/dev/mdO" successfully created Наше физическое устройство теперь готово для добавления в группу томов. $ sudo vgcreate DEMO /dev/mdO Volume group "DEMO” successfully created Несмотря на то что в этом примере используется только одно физическое устройство, мы, разумеется, могли добавить дополнительные накопители. В данном случае было бы странным добавлять еще один массив RAID 5, поскольку частичная избыточность не принесет никакой выгоды. Имя DEMO было выбрано произвольным образом. Для проверки наших действий используем команду vgdisplay. $ sudo vgdisplay DEMO -- Volume group --- VG Name System Format Metadata Areas Metadata Sequence No VG Access VG Status MAX LV Cur LV Open LV Max Cur Act DEMO ID lvm2 1 1 read/write resizable 0 0 0 0 1 1 pv PV PV
Глава 8. Дисковая память 295 VG Size PE Size Total PE Alloc РЕ / Size Free РЕ / Size VG UUID 975.99 GB 4.00 MB 249854 0/0 249854 / 975.99 GB NtbRLu-RqiQ-3Urt-iQZn-vEvJ-uOTh-FVYKWF Аббревиатура “PE” обозначает физический блок — единицы памяти, на которые раз- деляется группа томов. На последних этапах создается логический том в группе DEMO, а затем создается файловая система внутри этого тома. Мы создаем логический том размером 100 Гбайт. $ sudo Ivcreate -L 100G -n webl DEMO Logical volume ’’webl'’ created Большинство интересных возможностей менеджера LVM2 относится к уровню логи- ческого тома. В частности, они включают в себя возможности создания последователь- ности дисков, зеркал и смежного размещения. Теперь к логическому тому можно обращаться по имени /dev/DEMO/webl. Мы об- судим файловые системы в разделе 8.9, а пока кратко опишем создание стандартной файловой системы для демонстрации некоторых особенностей работы менеджера LVM. $ sudo mkfs /dev/DEMO/webl $ sudo mkdir /mnt/webl $ sudo mount /dev/DEMO/webl /mnt/webl Мгновенные копии тома Вы можете создать копию при записи любого логического тома LVM2, независимо от того, содержит он файловую систему или нет. Это свойство удобно для создания стати- ческого образа файловой системы, предназначенного для резервного копирования, но, в отличие от мгновенных копий системы ZFS, мгновенные снимки LVM2, к сожалению, не очень полезны для контроля версий. Проблема заключается в том, что логические тома имеют фиксированный размер. Когда создается логический том, пространство на диске выделяется из группы томов. Копирование при записи изначально не потребляет дисковую память, но при модифи- кации блоков менеджер тома должен найти место для хранения как старой, так и новой версии. При создании мгновенных копий это пространство, необходимое для модифи- цированных блоков, должно резервироваться, причем, как и любой том LVM, выделен- ная память должна иметь фиксированный размер. При этом не имеет значения, что модифицируется — оригинальный том или его мгновенная копия (которая по умолчанию должна записываться). В любом случае затра- ты на дублирование блоков перекладываются на мгновенные копии. Выделение памяти для мгновенных копий можно сократить за счет активности тома, играющего роль ис- точника данных, во время простоя мгновенных копий. Если объем памяти, выделенный для мгновенной копии, не совпадает с объемом памяти, выделенным для тома, образ которого копируется, возможен выход за преде- лы памяти, выделенной для мгновенной копии. Намного хуже, чем кажется, поскольку менеджер томов не сможет обеспечить хранение согласованного образа мгновенной ко- пии; потребуется дополнительная память только лишь для хранения самой копии. В ре- зультате выхода за пределы выделенного пространства менеджер LVM прекращает под- держивать мгновенные копии, и они безвозвратно повреждаются.
296 Часть I. Основы администрирования Итак, как показывает практика, мгновенные копии должны быть либо краткосроч- ными, либо такими же большими, как их источники. Эти аргументы свидетельствуют в пользу “многочисленных дешевых виртуальных копий.” Для того чтобы создать том /dev/DEMO/webl-snap как мгновенную копию тома /dev/DEMO/webl, можно использовать следующую команду. $ sudo Ivcreate -L 100G -s -n webl-snap DEMO/webl Обратите внимание на то, что мгновенная копия имеет самостоятельное имя, а ее источник должен быть задан как группа_томов/том. Теоретически том /mnt/webl сначала необходимо демонтировать, чтобы гаранти- ровать согласованность файловой системы. На практике система ext4 защищена от по- вреждения, хотя существует вероятность потерять самые свежие изменения блоков дан- ных. Это идеальный компромисс для мгновенных копий, используемых при резервном копировании. Для того чтобы проверить состояние мгновенных копий, следует выпонить команду Ivdisplay. Если она сообщает, что мгновенная копия “не активна”, это значит, что она вышла за пределы выделенного пространства и должна быть удалена, поскольку с такой мгновенной копией практически ничего сделать нельзя. Резервирование файловых систем Переполнение файловых систем происходит чаще, чем сбои дисков, и одно из пре- имуществ логических томов заключается в том, что манипулировать ими гораздо легче, чем жесткими разделами. Мы сталкивались с разными ситуациями: от хранения личных;, файлов MP3 на сервере до департаментов, компьютеры которых переполнены почтовым мусором. Менеджер логических дисков ничего не знает о содержимом своих томов, но изме- нять размеры необходимо на уровне как тома, так и файловой системы. Порядок за- висит от конкретной операции. При уменьшении размера следует работать с файловой системой, а при увеличении — с томом. Это правило запоминать не стоит: просто сле- дуйте здравому смыслу. Предположим, что в нашем примере том /mnt/webl увеличился больше, чем пред- полагалось, и ему нужно дополнительно 10 Гбайт дисковой памяти. Сначала проверим группу томов, чтобы убедиться, что дополнительное место существует. $ sudo vgdisplay DEMO --- Volume group - VG Name DEMO System ID Format lvm2 Metadata Areas 1 Metadata Sequence No 18 VG Access read/write VG Status resizable MAX LV 0 Cur LV 2 Open LV 1 Max PV 0 Cur PV 1 Act PV 1 VG Size 975.99 GB PE Size 4.00 MB Total PE 249854
Глава 8. Дисковая память 297 Alloc РЕ / Size_____________51200 / 200.00 GB_______________________ Р Free РЕ / Size 198654 / 775.99 GB VG UUID NtbRLu-RqiQ-3Urt-iQZn-vEvJ-uOTh-FVYKWF Итак, есть много свободной дисковой памяти, поэтому мы должны демонтировать файловую систему и использовать команду Ivresize, чтобы добавить место на логиче- ском томе. $ sudo umount /mnt/webl $ sudo Ivchange -an DEMO/webl $ sudo Ivresize -L +10G DEMO/webl $ sudo Ivchange -ay DEMO/webl Extending logical volume webl to 110.00 GB Logical volume webl successfully resized Команды Ivchange необходимы для того, чтобы деактивировать том, изменить его объем, а потом вновь активировать. Эта часть необходима только потому, что существует копия тома webl из предыдущего примера. После изменения объема копия “увидат” дополнительные 10 Гбайт, но поскольку файловая система содержит только 100 Мбайт, копию можно по-прежнему использовать. Теперь мы можем изменить объем файловой системы с помощью команды resize2f s. (Цифра 2 взята из имени оригинальной файловой системы ext2, но команда поддерживает все версии этой файловой системы.) Поскольку команда resize2fs мо- жет определять объем новой файловой системы по тому, нам не обязательно указывать новый объем явным образом. Это необходимо только при уменьшении размера файло- вой системы. $ sudo resize2fs /dev/DEMO/webl resize2fs 1.41.9 (22-Aug-2009) Please run ’e2fsck -f /dev/DEMO/webl' first. Ой! Команда resize2fs вынуждает дважды проверять согласованность файловой системы до изменения объема. $ sudo e2fsck -f /dev/DEMO/webl e2fsck 1.41.9 (22-Aug-2009) Pass 1: Checking inodes, blocks, and sizes /dev/DEMO/webl: 6432/6553600 files (0.1% non-contiguous), 473045/26214400 blocks $ sudo resize2fs /dev/DEMO/webl resize2fs 1.41.9 (22-Aug-2009) Resizing the filesystem on /dev/DEMO/webl to 28835840 (4k) blocks. The filesystem on /dev/DEMO/webl is now 28835840 blocks long. Ну вот! Проверка информации, которая выводится командой df, снова показывает изменения. $ sudo mount /dev/DEMO/webl /mnt/webl $ df -h /mnt/webl Filesystem Size Used Avail Use% Mounted on /dev/mapper/DEMO-web 1109G 188M 103G 1% /mnt/webl
298 Часть I. Основы администрирования Управление логическими томами в системе HP-UX в системе HP-UX 10.20 существует полноценный менеджер логических томов. ЛЗЕЛ это прекрасное дополнение, особенно если учесть, что в прошлом система HP-UX вообще не поддерживала концепции разбиения дисков. Менеджер то- мов называется LVM, так же как в системе Linux, хотя версия системы HP-UX является совершенно самостоятельной. (На самом деле это программное обе- спечение компании \feritas...) В качестве простого примера посмотрим, как конфигурировать жесткий диск объе- мом 75 Гбайт с помощью менеджера LVM. По сравнению с ранее рассмотренным при- мером, относящимся к системе Linux, новая процедура выглядит знакомой. Есть не- сколько незначительных отличий, но в целом процесс тот же. Команда pvcreate идентифицирует физические тома. $ sudo pvcreate /dev/rdisk/disk4 Creating "/etc/lvmtab_p”. Physical volume "/dev/rdisk/disk4" has been successfully created. Если диск будет использоваться как загрузочный, добавьте в команду pvcreate оп- цию -В, чтобы зарезервировать пространство для загрузочного блока, а затем запустите команду mkboot, чтобы инсталлировать его. Определив диск как физический том, добавьте его в новую группу томов с помощью команды vgcreate. Для групп томов существует два формата метаданных — версии 1.0 и 2.0. Номер версии задается с помощью опции -V при создании группы томов; вер- сия 1.0 задается по умолчанию. Версия 2.0 предусматривает более высокие пределы для объема, но не может использоваться для загрузочных накопителей или для замены то- мов. Даже метаданные версии 1.0 имеют щедрые лимиты, поэтому она используется в большинстве случаев. Точные пределы можно увидеть с помощью команды Ivmadm. Для примера посмотрим на пределы, предусмотренные для версии 1.0. $ sudo Ivmadm -t -V 1.0 --- LVM Limits --- VG Version 1.0 Max VG Size (Tbytes) 510 Max LV Size (Tbytes) 16 Max PV Size (Tbytes) 2 Max VGs 256 Max LVs 255 Max PVs 255 Max Mirrors 2 Max Stripes 255 Max Stripe Size (Kbytes) 32768 Max LXs per LV 65535 Max PXs per PV 65535 Max Extent Size (Mbytes) 256 Добавить дополнительные диски в группу томов можно с помощью команды vgextend, но в данном примере группа томов содержит только один диск. $ sudo vgcreate vgOl /dev/disk/disk4 Increased the number of physical extents per physical volume to 17501. Volume group ”/dev/vg01" has been successfully created. Volume Group configuration for /dev/vg01 has been saved in Ietc/lvmconf/vgOl.con
Глава 8. Дисковая память 299 Добавив диски в подходящую группу томов, пул дискового пространства, относя- щийся к данной группе томов, можно снова разбить на логические тома. Новый логи- ческий том создает команда Ivcreate. Объем тома в мегабайтах задается опцией -L, а в терминах логических диапазонов (как правило, 4 двоичных мегабайта) — с помощью флага -1. Размеры, заданные с помощью двоичных мегабайтов, округляются до ближай- шего целого числа, кратного размеру логического диапазона. Для доступа к объему свободного пространства, оставшегося в группе томов, необ- ходимо выполнить команду vgdisplay имя_группы_томов как корневую. Результаты содержат размер данного логического диапазона и количество свободных логических диапазонов. $ sudo Ivcreate -L 25000 -n webl vgOl Logical volume ”/dev/vg01/webl" has been successfully created with character device "/dev/vgOl/rwebl". Logical volume "/dev/vgOl/webl" has been successfully extended. Volume Group configuration for /dev/vgOl has been saved in /etc/lvmconf/vgOl.conf Приведенная выше команда создает логический том объемом 25 Гбайт С Име- нем webl. Создав логические тома, можно верифицировать их, выполнив команду vgdisplay -v /dev/имя_группы_томов и проверив их размеры, и убедиться, что они установлены правильно. В большинстве сценариев после этого можно создать файловую систему /dev/vgOl/ webl и смонтировать ее во время загрузки. Детали изложены в разделе 8.9. Еще одним распространенным способом создания логического тома является выпол- нение команды Ivcreate, которая создает том нулевого объема, и команды Ivextend, чтобы добавить в этот том дополнительную память. Таким образом можно точно ука- зать, какие физические тома в группе томов должны образовывать логический том. Если память выделяется с помощью команды Ivcreate (как в приведенном выше примере), она просто использует свободные логические диапазоны из любых доступных физиче- ских томов в группе томов. Это удобно во многих ситуациях. Как и в системе Linux, создание последовательности дисков (striping), которая в сис- теме HP-UX называется “распределенным выделением памяти”, а также создание зер- кал происходят на уровне логического тома. Эту операцию можно выполнить при соз- дании логического тома с помощью команды Ivcreate или позднее с помощью ко- манды Ivchange. В противоположность системе Linux, менеджер логических томов не позволяет делать мгновенные копии. Однако временные копии доступны как свойство файловой системы VxFS в рамках операционной системы HP-UX. Если вы планируете использовать логический том как загрузочный, менять накопите- ли или хранить снимки памяти ядра системы, должны указать непрерывную область па- мяти и отключить некорректные блоки с помощью опций -С и -г команды Ivcreate.15 # Ivcreate -С у -г n -L 1500 -n root vgOl Logical volume "/dev/vgOl/root” has been successfully created with character device "/dev/vg01/rroot". 15 Для того чтобы удовлетворить требования системы HP-UX, необходимо сначала создать том подкачки, так чтобы первые два двоичных гигабайта физического диска и загрузочный том были Расположены на первом логическом томе. Создание корневого тома объемом 1,5 Гбайт и тома под- качки объемом 500 Мбайт в приведенном примере выполнялось именно из-за упомянутых ограни- чений. Корневой раздел может иметь больше памяти, чем указано здесь, но загрузочный и корне- Вой тома должны быть разными. Подробности можно найти на справочной странице для команды ^loboot.
300 Часть I. Основы администрирования Logical volume ’’/dev/vgOl/root" has been successfully extended. Volume Group configuration for /dev/vgOl has been saved in /etc/lvmconf/vgOl.conf # Ivcreate -С у -r n -L 500 -n swap vgOl Logical volume "/dev/vgOl/swap" has been successfully created with character device "/dev/vgOl/rswap". Затем необходимо выполнить команду Ivlnboot, чтобы уведомить систему о новом корневом томе и томе подкачки. Более подробную информацию о процедурах для томов загрузки, подкачки и создания снимков памяти можно найти на справочной странице Ivlnboot. Управление логическими томами в системе AIX е Набор команд менеджера логических томов в системе AIX отличается от на- боров команд менеджеров томов в системах Linux и HP-UX, но его базовая архитектура и подход являются аналогичными. Существует одна тонкость: система AIX вызывает объекты, которые известны как “диапазоны” (т.е. еди- ницы памяти в группе томов). Поскольку эти сущности обычно называются разделами, которых на самом деле в системе AIX не существует, никаких про- тиворечий не возникает. Однако пользователи других систем должны учиты- вать сложившуюся терминологию. По отношению к физическим томам, группам томов и логическим томам термино- логия системы AIX является стандартной. Интерфейс SMIT для управления логически- ми томами предусматривает практически полный набор функций, но, кроме них, можно использовать команды, перечисленные в табл. 8.4. Следующие четыре команды создают группу томов с именем webvg, логический том с именем webl и файловую систему JFS2 в томе webl. Затем файловая система монтируется в томе /mnt/webl. $ sudo mkvg -у webvg hdiskl webvg $ sudo crfs -v jfs2 -g webvg -m /mnt/webl -a size=25G File system created successfully. 26213396 kilobytes total disk space. New File System size is 52428800 $ sudo mkdir /mnt/webl $ sudo mount /mnt/webl Система AIX не требует использования меток дисков для включения их в физические тома. Команды mkvg и extendvg автоматически наносят метки на диски в процессе ин- дукции. Отметим, что команда mkvg получает имя накопителя, а не путь к дисковому накопителю. Логический том и файловую систему можно создать на разных этапах (с помощью команд mklv и mkfs соответственно), но команда crfs выполняет обе эти задачи, а также обновляет файл /etc/filesystems. Точное имя логического тома, содержащего файловую систему, создается в рамках сценария crfs, но его можно определить, про- верив файл /etc/filesystems или выполнив команду mount. (С другой стороны, если возникнут проблемы, будет трудно расшифровать файловые системы на томах, имею- щих обобщенные имена.) Если команда mklv выполняется непосредственно, можно не только задать имя на- копителя по своему выбору, но и указать разные параметры менеджера томов, например
Глава 8. Дисковая память 501 конфигурации для создания последовательности дисков или зеркал. Мгновенные копии реализуются посредством файловой системы JFS2, а не менеджера томов. 8.9. Файловые системы Даже после разбиения жесткого диска на разделы или логические тома он еще не готов хранить файлы. Для этого необходимо реализовать все абстракции и функции, описанные в главе 6, в терминах блоков. Они реализуются кодом, который называется файловой системой и требует дополнительных затрат ресурсов и данных. Первым стандартом файловой системы, получившим широкое распространение сре- ди систем UNIX, стала система Berkeley Fast File System, реализованная Мак-Кьюзиком и его соавторами (McKusick et al.) в 1980-х годах. С некоторыми поправками она в кон- це концов стала известна как UNIX File System (UFS) и заложила основы для разработ- ки других файловых систем, включая семейство файловых систем ext в системе Linufc, UFS в системе Solaris и JFS компании IBM. В ранних версиях операционных систем реализация файловой системы была встрое* на в ядро, но вскоре стало ясно, что поддержка многочисленных типов файловьвЙи- стем является важной целью. Разработчики систем UNIX создали хорошо определенный интерфейс ядра, позволявший одновременно активировать ИЙЙйолько типов файловых систем. Кроме того, базовое аппаратное обеспечение была ябстрагировано с помощью интерфейса файловой системы, так что файловые системы видели примерно такой же интерфейс для накопителей, что и другие программы системы UNIX, имеющие доступ к дискам через файлы устройств в каталоге /dev. Изначально поддержка нескольких типов файловых систем объяснялась необходимо- стью поддерживать системы NFS и файловые системы для сменных носителей. Однако как только шлюз был открыт, началась эра поисков; многие группы стали работать над улучшением файловых систем. Некоторые из этих файловых систем были предназначе- ны для конкретных операционных систем, а другие (например, ReiserFS) не были связа- ны ни с какими определенными операционными системами. Если бы у вас было право выбора файловых систем, разве должны вы исследовать раз- ные варианты и выбирать “лучший”? Конечно, нет, если только вы не работаете с дан- ными, предназначенными для очень специфичного приложения. Практически во всех ситуациях лучше работать с решениями, принятыми в системе по умолчанию. Именно это, вероятно, предполагается разработчиками документации и административных ин- струментов для операционных систем. Не подвергаются сомнению только несколько функциональных возможностей. • Высокая производительность. • Устойчивость к отказам и перебоям электропитания без повреждения файловой системы. • Способность работать с дисками и файловыми системами, которые являются до- статочно большими для того, чтобы удовлетворить потребности пользователей. К счастью, решения, принятые по умолчанию в современных файловых системах, Уже соответствуют этим требованиям. Любое улучшение, которое можно ожидать от из- менения файловых систем, будет незначительным и, в лучшем случае, зависящим от контекста. В следующих разделах мы обсудим файловые системы, реализованные по умолчанию в системах Linux, HP-UX и AIX. Файловая система ZFS, используемая в операционной
302 Часть I. Основы администрирования системе Solaris, управляется особым образом и заслуживает описания в отдельном раз- деле (см. раздел 8.10). Файловые системы Linux: семейство ext Д “Вторая расширенная файловая система” (“second extended filesystem”), по- лучившая название ext2, долгое время была основным стандартом в систе- ме Linux. Она была разработана и реализована Реми Кардом (Remy Card), Теодором Тс’о (Theodore Ts’o) и Стивеном Твиди (Stephen Tweedie). Помимо того, что код файловой системы ext2 был написан специально для систе- мы Linux, с функциональной точки зрения он похож на файловую систему Berkeley Fast File System. Файловая система ext3 расширяла возможности журналирования (journaling), кото- рые имелись в существовавшем коде ext2, и представляла собой концептуально простую модификацию, резко повышавшую надежность. Еще более интересным является то, что расширения в файловой системе ext3 были реализованы без изменения фундамен- тальной структуры файловой системы ext2. Фактически вы можете монтировать фай- ловую систему ext3 так, будто это файловая система ext2, просто без дополнительных возможностей журналирования. Файловая система ext3 резервирует область памяти на диске для журнала. Журнал размещается на диске так, будто он представляет собой обычный файл в корневом раз- деле файловой системы и не является отдельным структурным компонентом. При выполнении операции с файловой системой требуемые модификации сначала записываются в журнал. Когда обновление журнала завершено, в него вносится “запись о фиксации” (“commit record”), чтобы отметить конец вводимых данных. Только затем происходит модификация обычной файловой системы. Если в процессе обновления происходит сбой, файловая система использует журнал для реконструкции полностью согласованной файловой системы.16 Журналирование уменьшает время, необходимое для проверки согласованности файловой системы (см. раздел, посвященный команде fsck), примерно на одну секунду в расчете на одну файловую систему. После сбоя аппаратного обеспечения определенно- го типа состояние файловой системы ext3 можно практически мгновенно восстановить. Файловая система ext4 представляет собой определенное улучшение своих предшест- венников. Она расширяет пределы максимально допустимой памяти, увеличивает про- изводительность некоторых операций и позволяет использовать для выделения памяти не отдельные блоки диска, а “логические диапазоны” (“extents”). Дисковый формат вполне совместим с файловыми системами ext2 и ext3 и допускает их монтирование в виде файловой системы ext4. Более того, если не используются логические диапазоны, то файловые системы ext4 могут монтироваться так, будто они являются файловыми си- стемами ext3. При работе в операционной системе Linux с ядром 2.6.28 рекомендуется использо- вать файловую систему ext4, а не предыдущие версии.17 В системах Ubuntu и SUSE она используется по умолчанию, а система Red Hat сохраняет файловую систему ext3. 16 В большинстве случаев в журнал заносятся только метаданные. Реальные данные хранятся непосредственно в файловой системе. Однако это можно изменить с помощью опции data ко- манды mount. Подробности можно найти на справочной странице, посвященной команде mount. 17 Некоторые утверждают, что требование использовать файловую систему ext4 в ядре 2.6.28 яв- |Дяется преждевременным. Тем не менее текущая версия этой файловой системы является надежной.
Глава 8. Дисковая память 303 В существующую файловую систему ext2 легко добавить журнал, тем самым рас- ширив ее возможности до систем ext3 или ext4 (благодаря обратной совместимости, от- личия между ними трудно уловимы). Для этого достаточно просто выполнить команду tune2fs с опцией - j. # tune2fs -j /dev/hda4 После этого, возможно, потребуется модификация некоторой записи в файле /etc/ fstab, чтобы заменить строки ext4 строками ext2 (информация о файле fstab при- водится далее). Файловые системы HP-UX: VxFS и HFS КЛ Файловая система VxFS является основной в операционной системе HP-UX. Она основана на файловой системе, изначально разработанной компанией Veritas Software, которая в настоящее время стала частью компании Symantec. Поскольку она содержит журнал, ее иногда называют JFS (Journaled File System — журналируемая файловая система). Тем не менее не следует путать ее с файловой системой JFS2 в операционной системе AIX; это разные фай- ловые системы. Файловая система VxFS — уникальное явление среди файловых систем. Ойа отлича- ется тем, что поддерживает кластеризацию, т.е. одновременную модификацию со сторо- ны многих независимых компьютеров. Этот вид операции связан с определенным сни- жением производительности, поскольку файловая система выполняет дополнительные действия, чтобы обеспечить согласованность кеша среди компьютеров. По умолчанию функциональные возможности кластеризации отключены; для того чтобы их включить, необходимо использовать опцию -о cluster команды mount Ранее основной файловой системой в системе HP-UX считалась HFS, которая была основана на файловой системе UNIX File System. В настоящее время она устарела, хотя и поддерживается до сих пор. Файловая система JFS2 в операционной системе AIX • Еще одной файловой системой, ведущей свое происхождение от системы Berkeley Fast File System, является JFS2. Буква J означает “журналируемая” (“journaled”), хотя система JFS2 имеет и другие особенности. Например, логи- ческие разделы, динамическое размещение индексных дескрипторов (inodes) и использование структуры дерева В+ для хранения элементов каталога. Кроме того, файловая система JFS2 интересна тем, что она доступна по лицензии GNU General Public License и работает в операционной системе Linux тоже. Терминология файловой системы Благодаря своему родству с файловыми системами UFS, многие файловые системы используют общую описательную терминологию. Реализации базовых объектов часто изменяются, но термины по-прежнему широко употребляются системными администра- торами как обозначения фундаментальных понятий. Например, индексные дескрипто- ры (“inodes”) — это записи фиксированной длины в таблице, каждый элемент которой хранит информацию об отдельном файле. Ранее они заносились в эту таблицу в момент создания файловой системы, но в настоящее время некоторые файловые системы созда-
304 Часть I. Основы администрирования ют их динамически при необходимости. В любом случае индексный дескриптор обычно имеет идентификационный номер, который можно увидеть с помощью команды Is -i. Индексные дескрипторы указывают на элементы каталога. При создании жесткой ссылки на существующий файл создается новый элемент каталога, но не новый индекс- ный дескриптор. В системах с заранее размещенными индексными дескрипторами необходимо зара- нее решить, сколько их следует создать. Поскольку невозможно предсказать, сколько их понадобится в будущем, команды создания файловой системы используют эмпириче- скую формулу, основанную на объеме тома и среднем размере файлов. Если вы плани- руете хранить огромное количество маленьких файлов, это число следует увеличить. Суперблок (superblock) — это запись, описывающая характеристики файловой систе- мы. Она содержит информацию о длине блока диска, размере и местоположении та- блиц индексных дескрипторов, карту блоков и информацию о их использовании, раз- мер групп блоков и некоторые другие важные параметры файловой системы. Поскольку повреждение суперблока может привести к потере очень важной информации, его не- сколько копий хранятся в разных местах. Для повышения производительности файловые системы кешируют блоки диска. Кешировать можно все блоки диска, включая суперблоки, блоки индексных дескрипто- ров и информацию о каталоге. Кеши обычно не допускают “сквозной записи” (“write- through”), поэтому может возникнуть задержка между моментом, когда приложение считает, что блок записан, и моментом, в который блок действительно записывается на диск. Приложения могут требовать от файла более предсказуемого поведения, но в этом случае пропускная способность снизится. Системный вызов sync направляет модифицированные блоки в место их постоянно- го хранения на диске, стараясь моментально обеспечить полную согласованность дис- ковой файловой системы. Это периодическое сохранение минимизирует потерю дан- ных, которая может произойти при сбое из-за многочисленных несохраненных блоков. Файловые системы могут самостоятельно выполнять синхронизацию своего расписания или предоставить это операционной системе. Современные файловые системы имеют механизм журналирования, минимизирующий или исключающий возможность повреж- дения их структуры при сбое, поэтому частота синхронизации должна зависеть от того, сколько блоков могут оказаться потерянными при сбое. В файловой системе карта дисковых блоков — это таблица содержащихся в ней сво- бодных блоков. При записи новых файлов система изучает эту карту, чтобы найти эф- фективную схему хранения. Записи об использовании блоков содержат важную инфор- мацию об уже используемых блоках. В файловых системах, поддерживающих логические разделы, эта информация может быть значительно сложнее, чем обычная битовая карта, которая применялась в старых файловых системах. Полиморфизм файловых систем Файловая система — это программное обеспечение, состоящее из многочисленных компонентов. Одна ее часть находится в ядре (или же в пользовательском пространстве системы Linux; наберите в поисковой машине google аббревиатуру FUSE) и реализует основные операции, связанные с трансляцией прикладного интерфейса стандартной файловой системы в операции чтения и записи блоков диска. Другие части состоят из пользовательских команд для форматирования новых томов, проверки целостности файловой системы и выполнения других специальных операций, связанных с формати- рованием.
Глава 8. Дисковая память 305 Ранее стандартные пользовательские команды знали о файловой системе, которую использовала операционная система, и просто реализовали требуемые функциональные возможности. Команда mkfs создавала новые файловые системы, команда f sck устра- няла проблемы, а команда mount, в основном, просто вызывала системные функции. Современные файловые системы являются более модульными, поэтому эти команды те- перь вызывают реализации утилит, связанных с файловой системой. Точный способ реализации зависит от операционной системы. Например, операци- онная система Linux помещает отдельные команды с именами mkfs. имя_файловой__си- стемы, fsck .имя файловой системы и так далее в обычные каталоги, предназначен- ные для системных команд. (Эти команды можно также выполнить непосредственно, но такие ситуации возникают редко.) Система AIX имеет переключатель /etc/vfg, в который записываются метаданные для файловых систем (не следует его путать с пере- ключателем /etc/vfstab в системе Solaris, который эквивалентен файлам fstab йли filesystems в других системах; впрочем, в системе ZFS он не нужен). Команда mkfs: форматирование файловых систем Для создания новой файловой системы следует выполнить следующую команду. mkfs [-Т тип_файловой_системы ] [-о опции] накопитель По умолчанию тип_файловой_системы может быть жестко закодирован в упаков- щике или задан в файле /etc/default/fs. Допустимые опции зависят от конкретной файловой системы, но использовать их приходится редко. Система Linux использует флаг -t, а не -Т, игнорирует флаг -о и не имеет файлов устройств, непосредственно со- ответствующих накопителям. Система AIX использует флаг -V, а не -Т. е Команда erf s в системе AIX может выделять новый логический том, созда- вать файловую систему на нем и обновлять файл /etc/filesystems за один шаг. Кроме того, можно либо включить возможность создания мгновенных копий в фай- ловых системах, которые допускают эту операцию (JFS2 и VxFS), либо разместить жур- нал файловой системы на отдельном диске. Вторая возможность в соответствующих си- туациях может обеспечить резкий прирост производительности. Команда fsck: проверка и исправление файловых систем Из-за буферизации блока и того факта, что накопители на самом деле не являются трансакционными устройствами, структуры данных на файловых системах могут стать рассогласованными. Если эти проблемы не удается быстро устранить, то это превратит- ся в лавину. Вначале это повреждение исправлялось с помощью вызова команды fsck (“filesystem consistency check”; читается как “FS check” или “fisk”), которая тщательно проверяла все стРУктуры данных и просматривала дерево выделения для каждого файла. Она исполь- зовала набор эвристических правил, описывающих возможный внешний вид файловой системы после повреждения, в разные моменты времени в процессе ее обновления. Оригинальная схема fsck работала удивительно хорошо, но поскольку она преду- сматривала чтение всех данных с диска, для больших дисков процедура могла занимать несколько часов. Одно из первых решений этой задачи было основано на концепции чистого бита файловой системы”, который устанавливался в суперблоке, когда систе- ма Демонтировалась некорректно. При повторной загрузке системы можно было уви-
306 Часть I. Основы администрирования деть чистый бит и таким образом узнать, что проверку с помощью команды f sck можно пропустить. В настоящее время журналы файловой системы позволяют команде f sck сосредото- чить свое внимание на том, что произошло во время сбоя. Команда f sck может просто восстановить предыдущее согласованное состояние файловой системы. Как правило, диски обрабатываются командой f sck автоматически во время загруз- ки, если они перечислены в системных файлах /etc/fstab, /etc/vfstab или /etc/ filesystems. Файлы fstab и vfstab содержат поля, заполненные последовательно- стью команд f sck, которые обычно используются для параллельного распределения проверок файловой системы. Однако в настоящее время команда f sck выполняется так быстро, что для нее имеет значение только один фактор — чтобы корневая файловая система проверялась первой. Команду f sck можно запустить вручную, чтобы выполнить глубокую проверку, ко- торая была характерна для ее первых версий, но для этого потребуется время. Л Семейство файловых систем ext в операционной системе Linux может бьгп^ настроено так, чтобы выполнять повторную проверку после демонтирований г определенное количество раз или по истечении определенного периода вре- > мени, даже если все демонтированные файловые системы были “чистыми”. Это полезная процедура, и в большинстве ситуаций приемлемым является значение, задаваемое по умолчанию (около 20 монтирований). Однако если ! файловые системы монтируются часто, как это происходит в настольных ра- бочих станциях, то даже эта частота выполнения команды f sck может стать* чрезмерной. Для того чтобы увеличить интервал времени до 50 монтирований, следует использовать команду tune2f s. $ sudo /sbin/tune2fs -с 50 /dev/sda3 tune2fs 1.41.9 (22-Aug-2009) Setting maximal mount count to 50 Если файловая система повреждена и команда f sck не может восстановить ее авто- матически, то не следует с ней экспериментировать, пока не создан надежный резерв* Лучшая политика страхования — применить ко всему диску команду dd и создать ре- зервный файл или диск. Большинство файловых систем создает каталог lost+found в корневом разделе каж- дой файловой системы, где команда f sck может хранить файлы, для которых невоз- можно определить родительский каталог. Каталог lost+found имеет дополнительное пространство, чтобы команда fsck могла хранить “осиротевшие” файлы, не создавая дополнительных каталогов в нестабильной файловой системе. Не удаляйте этот каталог.1’ Поскольку имя, присвоенное файлу, записывается только в родительском ката- логе, имена “осиротевших” файлов недоступны, и файлы, хранящиеся в каталоге lost+found, именуются по названиям их индексных дескрипторов. Однако таблица ин- дексных дескрипторов содержит идентификаторы UID владельца файла, что позволяет легко возвращать файл его владельцу. Монтирование файловой системы Файловую систему необходимо смонтировать до того, как она станет видимой для процессов. Точкой монтирования для файловой системы может быть любой каталог, но 18 В некоторых системах для восстановления этого каталога после удаления используется ко- манда mklost+f ound.
Глава 8. Дисковая память 307 файлы и подкаталоги, которые расположены ниже этой точки в иерархии, останутся не- доступными, пока файловая система не будет смонтирована в этой точке. Более подроб- ную информацию можно найти в разделе 6.2. После инсталляции нового диска необходимо смонтировать новые файловые систе- мы вручную, чтобы убедиться, что все работает правильно. Например, команда $ sudo mount /dev/sdal /mnt/temp монтирует файловую систему в разделе, представленном файлом устройства /dev/sdla (имена устройств зависят от операционной системы), в каталоге /mnt, который является традиционным для временных точек монтирования. Размер файловой системы можно проверить с помощью команды df. В приведен- ном ниже примере флаг -h системы Linux используется для выдачи результатов в понят- ном для человека виде. К сожалению, большинство системных значений, заданных по умолчанию для команды df, относятся к бесполезным сущностям, таким как “дисковые блоки”, но есть флаг, заставляющий команду df выдавать конкретную информацию, на- пример двоичные кило- или гигабайты. $ df -h /mnt/webl Filesystem Size Used Available Use% Mounted on /dev/mapper-DEMO-webl 109G 188M 103G 1% /mnt/webl Настройка автоматическо^йМ^рования Обычно требуется конфигурировать операционную систему так, чтобы монтировать локальные файловые системы на этапе загрузки. Файл конфигурации в каталоге /etc содержит имена устройств и точки монтирования всех системных дисков (среди прочей информации). В большинстве систем этот файл называется /etc/fstab (сокращение от “filesystem table”), но в системах Solaris и AIX он был реструктурирован и переименован: /etc/vfstab в системе Solaris и /etc/filesystems в системе AIX. Ссылаясь на эти три файла, мы используем в книге обобщенный термин “каталог файловой системы”. По умолчанию файловые системы ZFS монтируют себя автоматически и не SOiariS требуют записей из файла vfstab. Однако это поведение можно изменить, задав свойства файловой системы ZFS. Области подкачки и точки монтиро- вания нефайловых систем должны по-прежнему указываться в файле vfstab. Команды mount, umount, swapon и fsck читают каталог файловой системы, поэтому желательно, чтобы представленные в этом каталоге данные были правильными и полны- ми. Команды mount и umount используют этот каталог, чтобы выяснить, что мы хотим, указывая в командной строке только имя раздела или точку монтирования. Например, при конфигурации команды f stab в системе Linux, приведенной далее, команда $ sudo mount /media/cdromO эквивалентна следующей команде. $ sudo mount -t udf -о user,noauto,exec,utf8 /dev/scdO /media/cdromO Команда mount -а монтирует все регулярные файловые системы, перечисленные в каталоге файловой системы; обычно эта команда выполняется в рамках сценария за- пуска на этапе загрузки.19 Флаги -t, -F и -v (-t — в системе Linux, -F — в системах Solaris и HP-UX и -v — в системе AIX) в сочетании с аргументом тип_файловой_си- 19 Опция noauto команды momit исключает указанную файловую систему из процесса авто- матического монтирования с помощью команды mount -а.
308 Часть I. Основы администрирования стемы ограничивают операции над файловой системой определенного типа. Например, команда $ sudo mount -at ext4 монтирует все локальные файловые системы ext4. Команда mount читает файл fstab последовательно. Следовательно, файловые системы, смонтированные под другими файловыми си- стемами, должны следовать за своими родительскими разделами, указанными в файле fstab. Например, строка для файла /var/log должна следовать за строкой /var, если /var — отдельная файловая система. Команда umount, предназначенная для демонтирования файловых систем, имеет аналогичный синтаксис. Файловую систему, которую некий процесс использует в ка- честве своего текущего каталога или которая содержит открытый файл, демонтировать нельзя. Существуют команды, позволяющие идентифицировать процессы, препятству- ющие попыткам выполнить команду umount; см. раздел 6.2. Файл fstab в системе HP-UX встречается во всех операционных системах. Рассмот- рим его записи о системе, имеющей только одну группу томов. # Device Mount point Type Options Seq /dev/vg00/lvol3 / vxf s delaylog 0 1 /dev/vgOO/lvoll /stand vxfs tranflush 0 1 /dev/vg00/lvol4 /tmp vxfs delaylog 0 2 /dev/vg00/lvol5 /home vxfs delaylog 0 2 /dev/vg00/lvol6 /opt vxfs delaylog 0 2 /dev/vg00/lvol7 /usr vxfs delaylog 0 2 /dev/vg00/lvol8 /var vxfs delaylog 0 2 Каждая строка содержит шесть полей, разделенных пробелами, и описывает отдель- ную файловую систему. Для повышения читабельности поля обычно выравниваются, но в принципе это не требуется. Ш Более подробно система NSF описана в главе 18. Первое поле содержит имя устройства. Файл fstab может содержать точки монтиро- вания из удаленных систем. В этом случае первое поле содержит путь NFS. Обозначение server'./export означает каталог /export на машине с именем server. Второе поле задает точку монтирования, а третье — тип файловой системы. Точное название типа, идентифицирующего локальные файловые системы, зависит от конкрет- ной машины. Четвертое поле задает опции команды mount, которые должны применяться по умолчанию. Существует множество возможностей; опции, общие для всех типов фай- ловых систем, можно найти на справочной странице для команды mount. Отдельные файловые системы обычно имеют собственные опции. Все приведенные выше опции относятся к файловой системе VxFS. Например, опция delaylog снижает уровень чита- бельности, но повышает скорость выполнения команды. Более подробную информацию об этой и других опциях монтирования файловой системы VxFS можно найти на спра- вочной странице mount_yxfs. Пятое и шестое поля являются рудиментарными. Предположительно они задавали “частоту создания копии” и параметр управления параллельным выполнением команд fsck. Ни одна из этих возможностей в современных системах не актуальна. Ниже приводятся примеры файла fstab из системы Ubuntu. Общий формат тот же, но системы семейства Linux часто имеют разные особенности.
Глава 8. Дисковая память 309 ргос /ргос proc defaults О О UUID=a8e3...8f8а / ext4 errors=remount-ro О 1 UUID=13e9...b8d2 none swap sw О О /dev/scdO /media/cdromO udf,iso9660 user,noauto,exec,utf8 О 0 /dev/scdl /media/cdroml udf,iso9660 user,noauto,exec,utf8 О 0 /dev/fdO /media/floppyO auto rw,user,noauto,exec,utf8 О 0 Первая строка относится к файловой системе /ргос, которая фактически представ- лена драйвером ядра и не имеет вспомогательного запоминающего устройства. Уст- ройство ргос, указанное в первом столбце, просто занимает место. Вторая и третья строки для идентификации томов используют идентификаторы раз- делов (идентификаторы UUID, которые мы сократили, чтобы не снизить читабельность текста), а не имена устройств. Эта альтернатива полезна для систем семейства Linux, поскольку имена устройств для разделов диска являются нестабильными; добавление или удаление диска может вызвать изменение имен всех дисков (например, с /dev/sdbl на /dev/sdcl). Идентификатор UUID связан только с содержанием раздела. Это позволяет отследить раздел, если ой не был скрыт. Отметим, что это соглашение работает также и для раздела подкачки, 6для корневого раздела. Последние три строки конфигурируют поддержку дисководов CD-ROM и гибких дисков. Опция noauto предотвращает попытки системы монтировать эти устройства во время загрузки. (Если носители не вставлены, то попытки монтирования завершатся сбоем и затормозят процесс загрузки.) Опция user назначает владельцем всех файлов, записанных на сменные носители, пользователя, который их монтировал. В системах семейства Solaris формат файла /etc/vfstab был немного изме- soians нен, и некоторые поля находятся на других местах, по сравнению с системами Linux и HP-UX. Однако данные по-прежнему выводятся в виде таблицы и легко читаются без дешиф- ровки. Отличительные особенности формата файла vfstab заключаются в том, что он имеет отдельный столбец “device to f sck” и отдельный столбец “mount at boot”. еФайл /etc/filesystems в системе AIX организован как ряд списков свойств, напоминающих YAML или JSON, хотя его формат может немного ва- рьироваться. Рассмотрим пример конфигурации для одной файловой системы. /opt: dev = /dev/hdlOopt vfs = jfs2 log = /dev/hd8 mount = true check = true vol = /opt free = false Этот формат позволяет ассоциировать с каждой файловой системой произвольные свойства, так что параметры ее типа можно легко записать в каталоге filesystems. Система AIX автоматически поддерживает этот файл, когда пользователь выполняет Дисковые операции посредством интерфейса SMIT, но можно легко редактировать этот файл непосредственно.
310 Часть I. Основы администрирования Монтирование USB-накопителя Гибкие диски окончательно ушли в прошлое. Их место заняли удобные, быстрые и забавные USB-накопители. Применение этих устройств весьма разнообразно: напри- мер, персональные флешки, цифровые видеокамеры, устройства iPod и крупные внеш- ние диски. Большинство из них поддерживается системами семейства UNIX в качестве накопителей данных. В прошлом для управления USB-накопителями приходилось прибегать к специ- альным трюкам. Однако в настоящее время, когда операционные системы реализуют управление динамическими устройствами в качестве фундаментального требования, USB-накопители представляют собой просто еще один тип накопителей, которые по- являются и исчезают без предупреждения. С точки зрения управления, с USB-накопителями связаны следующие проблемы. • Ядро должно распознавать устройство и назначать ему файл устройства. • Необходимо выяснять, какие назначения были сделаны. Первый этап обычно выполняется автоматически, но в системах есть команды (на- пример, команда cfgmgr в системе AIX), которые можно выполнять непосредственно. Как только файл устройства назначен, можно использовать стандартные процедуры, описанные в разделе 8.5. Дополнительную информацию об управлении динамическими устройствами можно найти в главе 13. Включение подкачки Как правило, в качестве области подкачки используются разделы или логические тома, а не структурированные файловые системы. Вместо использования файловой си- стемы для слежения за содержимым области подкачки, ядро поддерживает собственное упрощенное отображение блоков памяти в блоки области подкачки. В некоторых системах можно выполнять подкачку с помощью файла из раздела фай- ловой системы. В старых операционных системах эта конфигурация может работать медленнее, чем при использовании специального раздела, но в редких случаях это быва- ет очень удобным. В любом случае менеджеры логических томов исключают большин- ство причин, по которым вам может понадобиться использовать файл подкачки, а не том подкачки. Ш Информацию о разделении области подкачки можно найти в разделе 29.3. Чем больше область подкачки, которую вы используете, тем больше виртуальной па- мяти могут занимать ваши процессы. Максимальная производительность виртуальной памяти достигается, когда область подкачки разделена между несколькими накопите- лями. Разумеется, лучше всего вообще не использовать подкачку; если вам необходимо оптимизировать производительность подкачки, лучше подумайте об увеличении опера- тивной памяти. Л В системах семейства Linux области подкачки должны инициализироваться с 1Л помощью команды mkswap, получающей в качестве аргумента имя накопите- ля, на котором располагается том подкачки. Вы можете самостоятельно назначить накопитель в качестве инструмента подкачки с помощью команды swapon накопитель в большинстве систем или команды swap -а накопитель в системе Solaris. Однако в большинстве случаев предпочтительнее, чтобы
Глава 8. Дисковая память 311 эта функция автоматически выполнялась на этапе загрузки. За исключением системы AIX, существует возможность перечислять области подкачки в обычном каталоге фай- ловой системы (fstab или vfstab), указав swap в качестве их типа. В системе AIX этот список хранится в отдельном файле с именем /etc/swapspaces. Для того чтобы просмотреть текущую конфигурацию подкачки, следует выполнить команды swapon -sb системах семейства Linux, swap -s — в системах Solaris и AIX и swapinfo — в системе HP-UX. В системах семейства AIX с помощью команды mkps можно создать логический том, предназначенный для подкачки, добавить его в файл /etc/swapspaces и приступить к его использованию. Эта команда вызывается из интерфейса SMIT. 8.10. Файловая система ZFS: все проблемы решены Система ZFS появилась в 2005 году как компонент операционной системы OpenSo- laris и быстро оказалась составной частью системы Solaris 10 и различных дистрибутив- ных пакетов, основанных на лицензии BSD. В 2008 году она уже могла использоваться как корневая файловая система и с тех пор стала основным выбором для операционной системы Solaris. Несмотря на то что система ZFS обычно называется файловой, на самом деле она представляет собой глобальный механизм управлений хранением данных, который включает в себя функции менеджера логических томбв и контроллера RAID. Кроме того, он заново определяет многие аспекты управления хранением данных, делая их проще, легче и более логичными. Несмотря на то что текущая версия системы ZFS име- ет несколько ограничений, большинство из них относится к категории “еще не реали- зовано”, а не “невозможно по архитектурным причинам”. Преимущества интегрирован- ного подхода, реализованного в системе ZFS, очевидны. Даже если вы еще не знакомы с системой ZFS, мы уверены, что она вам понравится. Мы почти не сомневаемся, что эта система будет широко распространена в течение следующих десяти лет. Остается неясным лишь, как долго придется ждать реализации аналогичных функций в других системах. Несмотря на то что файловая система ZFS является открытым программным обеспечением, условия ее текущей лицензии запрещают включение в ядро Linux. Проект файловой системы Btrfs компании Oracle (“В-tree file system”, официальное название “butter FS,” хотя это и вызывает ассоциации с выражением “butter face”20) пы- тается воспроизвести многие из достижений системы ZFS на платформе Linux. Эта фай- ловая система уже включена в текущие ядра систем семейства Linux для предваритель- ных испытаний. Пользователи систем Ubuntu и SUSE могут экспериментировать с ней, инсталлировав пакеты btrfs-tools или btrfsprogs соответственно. Однако файловая система Btrfs еще не готова к промышленному выпуску, и поскольку компания Oracle стала частью компании Sun, будущее систем Btrfs и ZFS остается неопределенным. Архитектура ZFS На рис. 8.4 схематично изображены основные объекты системы ZFS и их взаимос- вязи. Пул системы ZFS аналогичен группе томов в других системах с механизмами управ- ления логическими томами. Каждый пул состоит из виртуальных устройств, представ- 20 “Butter face” на сленге означает “девушка с красивой фигурой, но некрасивым лицом”. — Примеч. ред.
312 Часть I. Основы администрирования ляющих собой накопители (диски, разделы, устройства SAN и так далее), группы зеркал или массивов RAID. Рис. 8.4. Архитектура ZFS Массив ZFS RAID по существу похож на массив RAID 5 тем, что он использует одно или несколько устройств четности для обеспечения избыточности массива. Однако в системе ZFS эта схема называется RAID-Z и использует последовательности дисков переменных объемов, чтобы исключить появление “дыры записи RAID 5”. Все опера- ции записи в пул хранения распределяются по виртуальным устройствам пула, поэтому пул, содержащий только отдельные накопители, по существу, представляет собой схему RAID 0, хотя накопители в этой конфигурации не обязаны иметь одинаковые объемы. К сожалению, текущая версия массива ZFS RAID имеет недостатки. Например, в ней невозможно ни добавить новые устройства в массив после того, как он был опреде- лен, ни удалить устройство ZFS. Как и в большинстве реализаций массива RAID, на- копители в нем должны иметь одинаковые объемы; вы можете заставить систему ZFS принять накопители переменных объемов, но общий размер массива будет определяться по наименьшему объему накопителя. Для того чтобы эффективно использовать диски переменных объемов в сочетании со схемой ZFS RAID, необходимо заренее разбить ди- ски на разделы и определить оставшиеся области в качестве отдельных устройств. Несмотря на то что существует возможность передать неразделенные диски под управ- ление файловой системы ZFS, она скрытно записывает на них таблицу разделов, похожую на GPT, и выделяет все дисковое пространство на каждом диске их первым разделам. Большая часть работы по настройке системы ZFS и управлению ею выполняется по- средством двух команд: zpool и zf s. Команда zpool используется для создания пулов хранения и управления ими, а команда zf s предназначена для создания сущностей, возникших из пула, в основном файловых систем и томов, используемых в качестве об- ласти подкачки и баз данных, и управления ими. Пример: добавление диска в системе Solaris Прежде чем погрузиться в детали системы ZFS, рассмотрим небольшой пример. Допустим, что мы добавили новый диск в систему Solaris и он получил имя /dev/ dsk/c8dl. (Для того чтобы определить требуемое устройство, следует выполнить коман-
Глава 8. Дисковая память 313 ду sudo format. Команда format выведет меню системных дисков, из которого можно выбрать нужный диск, а затем нужно нажать комбинацию клавиш <Ctrl+C>.) На первом этапе необходимо пометить диск и добавить его в новый пул хранения. Solaris? sudo zpool create Homo c8dl На втором этапе ..., ну, на самом деле второго этапа нет. Система ZFS помечает диск, создает пул “demo”, корневую файловую систему внутри этого пула и монтирует эту файловую систему как /demo за один этап. Файловая система будет демонтирована ав- томатически при загрузке системы. solaris$ Is -a /demo Пример был бы еще более впечатляющим, если бы мы могли просто добавить новый диск в существующий пул хранения корневого диска, который по умолчанию называет- ся “грооГ. (Эта команда могла бы выглядеть так: sudo zpool add rpool c8dl.) К со- жалению, корневой пул может содержать только одно виртуальное устройство. Тем не менее остальные пулы допускают безболезненное расширение. Файловые системы и свойства С помощью системы ZFS очень удобно автоматически создавать файловую систему в новом пуле хранения, потому что такие файловые системы не занимают какой-то кон- кретный объем памяти. Все файловые системы, существующие в пуле, могут занимать доступное пулу пространство. В отличие от традиционных файловых систем, которые не зависят друг от друга, фай- ловые системы ZFS являются иерархическими. Существует несколько способов взаимо- действия файловых систем со своими родительскими и дочерними файловыми система- ми. Новая файловая система создается с помощью команды zfs create. solaris$ sudo zfs create demo/new__fs Solaris? zfs list -r demo NAME USED AVAIL REFER MOUNTPOINT demo 100K 488G 21K /demo demo/new_fs 19K 488G 19K /demo/new_fs Файл -г в команде zfs list означает, что она рекурсивно применяется ко всем до- черним файловым системам. Большинство остальных подкоманд zfs также понимает флаг -г. Еще более полезно то, что система ZFS автоматически монтирует новую фай- ловую систему сразу после ее создания. Для того чтобы имитировать традиционные файловые системы, имеющие фиксиро- ванный размер, к свойствам файловой системы можно добавить параметры reservation (объем дисковой памяти, зарезервированный для пула хранения и предназначенный для использования файловой системой) и quota. Эта настройка является ключевой в управ- лении системой ZFS и представляет собой определенную смену парадигмы для админи- страторов, работающих с другими системами. Для примера зададим оба значения рав- ными 1 Гбайт. solaris$ sudo zfs set reservation=lg demo/new_fs Solaris? sudo zfs set quota=lg demo/new_fs Solaris? zfs list -r demo NAME USED avail refer mountpoint demo 1.00G 487G 21K /demo demo/new_fs 19K 1024M 19K /demo/new_fs
314 Часть I. Основы администрирования Новое значение параметра quota отражается в столбце AVAIL для файловой системы /demo/new f s. Значение параметра reservation показано в столбце USED для фай- ловой системы /demo. Это объясняется тем, что резерв для файловых систем, дочерних по отношению к системе /demo, уже учтен в ее размере.21 Изменения этих значений отражаются только на учетных записях. Единственное из- менение, которое действительно касается пула хранения, — это изменение одного или двух блоков для записи новых параметров. Ни один процесс не запускается, чтобы от- форматировать один гигабайт дискового пространства, зарезервированного для фай- ловой системы /demo/new_fs. Большинство операций ZFS, включая создание нового пула хранения и новых файловых систем, выполняется так же легко. Используя иерархическую систему управления дисковым пространством, можно лег- ко группировать несколько файловых систем, чтобы гарантировать, что их общий объем не превысит заданного порога; нет необходимости задавать этот порог для каждой фай- ловой системы отдельно. Параметры quota и reservation следует задавать так, чтобы они правильно ими- тировали традиционную файловую систему фиксированного размера.22 Сам по себе па- раметр reservation просто гарантирует, что файловая система будет иметь достаточно дисковой памяти, чтобы достичь по крайней мере указанного размера. Параметр quota ограничивает размер файловой системы без гарантии, что она будет иметь этот объем памяти для своего увеличения; другой объем может занять все свободное пространство пула, не оставив места для расширения файловой системы /demo/new_f s. С другой стороны, в реальной жизни существует очень мало причин для такой на- стройки файловой системы. Эти свойства следует использовать только для демонстра- ции возможностей системы учета памяти в ZFS и чтобы подчеркнуть, что система ZFS при необходимости может быть совместимой с традиционной моделью. Наследование свойств Многие свойства естественным образом наследуются дочерними файловыми систе- мами. Например, если мы хотим смонтировать корень пула файловой системы demo в каталоге /opt/demo, а не /demo, можно просто задать соответствующий параметр mountpoint. solaris$ sudo zfs set mountpoint=/opt/demo demo solaris$ zfs list -r demo NAME USED AVAIL REFER MOUNTPOINT demo 1.00G 487G 21K /optf demo/new_fs 19K 1024M 19K /opt/demo/new_fs solaris$ Is /opt/demo new fs 21 Столбец REFER содержит объем данных в активной копии каждой файловой системы. Файловые системы /demo и /demo/new_fs имеют близкие значения значений REFER, посколь- ку обе они пустые, а не потому что между ними существует какая-то связь. 22 Параметры reservation и quota учитывают весь объем дисковой памяти, занимаемый файловой системой, включая пространство, занятое мгновенными копиями. Если вы хотите огра- ничить размер только активной копии файловой системы, следует использовать параметры ге- freservation и ref quota. Префикс ref означает “объем данных, на которые ссылается фай- ловая система”. Именно это значение показано в столбце REFER в результатах работы команды zfs list.
Глава 8. Дисковая память 315 Параметр mountpoint автоматически демонтирует файловые системы, а изменение точки монтирования влияет на дочерние файловые системы предсказуемым и очевид- ным образом. Обычные правила, касающиеся файловой системы, тем не менее, остают- ся в силе (см. раздел 6.2). Для того чтобы увидеть действительное значение конкретного свойства, использу- ется команда zfs get, а команда zf s get all выводит список значений всех параме- тров. Столбец SOURCE содержит информацию, объясняющую, почему каждое свойство имеет конкретное значение: слово local означает, что свойство было задано явно, а косая черта — что свойство предназначено только для чтения. Если значение свойства унаследовано от родительской файловой системы, то в столбце SOURCE будут указаны детали того наследования. solaris$ zfs get all demo/new fs solaris$ zfs get all demo/new fs NAME PROPERTY VALUE SOURCE demo/new_fs type filesystem - demo/new_fs creation Wed Mar 17 17:57 2010 - demo/new_fs used 19K - demo/new_fs available 1024M - demo/new_fs referenced 19K - demo/new_fs compressratio l.OOx - demo/new_fs mounted yes - demo/new_fs quota IG local demo/new_fs reservation IG local demo/new_fs mountpoint / op t / demo / ne w_f s inherited from demo ... <остальные строки, всего около 40> Внимательные читатели могут заметить, что свойства available и referenced по- дозрительно похожи на столбцы AVAIL и REFER, которые выводятся на печать коман- дой zfs list. Фактически команда zfs list — это просто другой способ вывести на печать свойства файловой системы. Если бы выше мы привели полный список результа- тов, полученных с помощью команды zfs get, то среди них были бы и использованные свойства. Для того чтобы указать, какие именно свойства нас интересуют, их можно ука- зать с помощью опции -о команды zfs list. Поскольку нет никакого смысла задавать явно значения свойств used и других свойств, связанных с объемом, эти свойства предназначаются только для чтения. Если конкретные правила вычисления значения свойства used вас по каким-то причинам не устраивают, возможно, следует использовать другие свойства, такие как usedbychildren и usedbysnapshots, чтобы увидеть, как расходуется дисковая память. Полный список свойств можно найти в справочном руководстве администратора системы ZFS. Для собственного использования и создания локальных сценариев можно задавать дополнительные, нестандартные свойства файловых систем. Процесс их задания ничем не отличается от задания стандартных свойств. Имена пользовательских свойств долж- ны содержать двоеточие, чтобы отличать их от стандартных свойств. Одна файловая система на пользователя Поскольку файловые системы не расходуют дисковую память и не требуют время на свое создание, их оптимальное количество скорее ближе к “много”, чем к “мало”. Если рабочие каталоги пользователей находятся в пуле хранения системы ZFS, рекомендуется создать отдельный рабочий каталог для отдельной файловой системы. Существует не- сколько причин для такого соглашения.
316 Часть I. Основы администрирования • Если необходимо задать квоты использования диска, то естественно в качестве единицы измерения применять рабочие каталоги. Квоты можно установить как для файловых систем для индивидуальных пользователей, так и для файловых си- стем, содержащих всех пользователей. • Мгновенные копии соответствуют отдельным файловым системам. Если каждый рабочий каталог пользователя представляет собой отдельную файловую систему, то пользователь может получить доступ к старым мгновенным копиям с помощью каталога ~ /. zf s.23 Одно это сэкономит администратору много времени, посколь- ку это значит, что пользователи могут самостоятельно обслуживать свои потреб- ности в восстановлении файлов. • Система ZFS позволяет делегировать разрешение выполнять разные операции, та- кие как поиск мгновенных копий и откат системы в предыдущее состояние. При желании можно передать пользователям контроль над этими операциями, кото- рые выполняются в их собственных каталогах. В этой книге мы не будем описы- вать детали механизма управления разрешениями в системе ZFS; их можно найти в справочнике ZFS Administration Guide. Мгновенные копии и клоны Система ZFS организована по принципу копирования при записи. Вместо переза- писывания блоков на месте, система ZFS выделяет новые блоки и обновляет указате- ли. Этот подход делает систему ZFS устойчивой к повреждениям, поскольку при сбоях или отказе электропитания и операции никогда не останутся выполненными наполо- вину. Корневой блок либо будет обновлен, либо нет; в любом случае файловая система останется согласованной (хотя некоторые недавно внесенные изменения могут быть отменены). Как и менеджер логических томов, система ZFS обеспечивает копирование при за- писи на пользовательском уровне, разрешая создавать мгновенные копии. Однако есть важное отличие: мгновенные копии системы ZFS реализуются для файловых систем, а не для логических томов, поэтому они имеют произвольную глубину детализации. Система Solaris с огромным успехом использует эту функциональную возможность в приложении Time Slider для интерфейса GNOME. Аналогично приложению Time Machine в системе Mac OS, приложение Time Slider — это комбинация назначенных заданий, создающих мгновенные копии и управляющих ими через регулярные интервалы времени, и пользо- вательского интерфейса, который позволяет найти старые версии файлов. Мгновенную копию можно создать с помощью командной строки zfs snapshot. Например, следующая последовательность команд иллюстрирует создание мгновенной копии, ее использование с помощью каталога zfs/snapshot и возвращение файловой системы в предыдущее состояние. solaris$ sudo touch /opt/demo/new_fs/now_you__seejtne Solaris? Is /opt/demo/new_fs now_you_see_me Solaris? sudo zfs snapshot demo/new_fs@snapl Solaris? sudo rm /opt/demo/new_fs/now_you__see_me solans? Is /opt/demo/new_fs 23 Этот каталог по умолчанию является скрытым; он не появляется среди результатов работы команды 1s -а. Его можно сделать видимым с помощью команды zfs set snapdir=visible фаЦло^я_система.
Глава 8. Дисковая память 317 solaris$ Is /opt/demo/new__fs/. zfs/snapshot/snapl now_you_see_me solaris$ sudo zfs rollback demo/new__fs@snapl solaris$ Is /opt/demo/new_fs now_you_see_me Каждой мгновенной копии в момент ее создания можно присвоить имя. Полная спецификация мгновенной копии обычно записывается в виде файловая_система@ мгновеннаякопия. Для рекурсивного создания мгновенных копий используется команда zfs snapshot -г. Ее эффект эквивалентен выполнению команды zfs snapshot над каждым объектом по отдельности: каждый подкомпонент получает собственную мгно- венную копию. Все мгновенные копии имеют одинаковые имена, но с логической точки зрения они отличаются друг от друга. Мгновенные копии в системе ZFS предназначены только для чтения, и хотя они имеют определенные свойства, все же не являются файловыми системами в подлинном смысле. Однако вы можете инициировать мгновенную копию как полноценную и до- пускающую запись файловую систему, “клонировав” ее. Solaris$ sudo zfs clone demo/new_fs@snapl demo/subclone solaris$ Is /opt/demo/subclone now_you_see_me Solaris $ sudo touch /opt/demo/subclone/and_me_too solaris$ Is /opt/demo/subclone and_me_too now_you_see_me Мгновенная копия, которая стала оригиналом для клона, остается нетронутой и предназначается только для чтения. Однако новая файловая система (в нашем примере, demo/subclone) сохраняет связь как с мгновенной копией, так и с файловой системой, на которой она основана, и ни одну из них нельзя удалить, пока существует клон. Операция клонирования применяется относительно редко, но это единственный спо- соб создать новую ветвь на дереве эволюции файловой системы. Операция zfs rollback, продемонстрированная выше, может только восстановить файловую систему в состоя- нии, соответствующем самой последней по времени мгновенной копии, поэтому при ее использовании вы будете вынуждены постоянно удалять (zfs destroy) все мгновенные копии, сделанные за время, прошедшее после создания мгновенной копии, к которой хотите вернуться. Клонирование позволяет вам вернуться в прошлое без потери измене- ний, внесенных недавно. Предположим, вы обнаружили дыру в системе безопасности, возникшую в течение прошедшей недели. Для обеспечения безопасности вы захотите вернуть файловую систе- му в состояние, в котором она находилась неделю назад, чтобы быть уверенным, что она не содержит лазеек, оставленных хакерами. В то же время вы не хотите потерять резуль- таты работы за последнюю неделю или данные для аналитического отчета. Решением этой проблемы является клонирование мгновенной копии, сделанной неделю назад, в виде новой файловой системы, применение команды zfs rename к старой файловой системе и команды zfs rename — к клону, заменяющему исходную файловую систему. Полезно также применить к клону команду zfs promote; эта операция инвертирует отношения между клоном и оригиналом файловой системы. После активации основная файловая система имеет доступ ко всем старым мгновенным копиям файловой системы, а старая файловая система становится “клонированным” ответвлением.
318 Часть I. Основы администрирования Неразмеченные логические тома Области подкачки и неразмеченные области для хранения создаются с помощью ко- манды zfs create, точно так же как создаются файловые системы. Аргумент -V раз- мер заставляет команду zfs обрабатывать новый объект как неразмеченный логический том, а не файловую систему. Параметр размер может использовать общую единицу из- мерения, например 128m. Поскольку том не содержит файловую систему, он не монтируется; вместо этого он демонстрируется в каталогах /dev/zvol/dsk и /dev/zvol/rdsk, и ссылаться на него можно так, будто он представляет собой жесткий диск или раздел. Система ZFS отражает иерархическую структуру пула хранения в этих каталогах, поэтому команда sudo zfc create -V 128m demo/swap создает том подкачки размером 128 Мбайт, раз- мещенный в каталоге /dev/zvol/dsk/demo/swap. Мгновенные копии неразмеченных томов можно создавать точно так же, как мгно- венные копии файловых систем, но поскольку в данном случае нет иерархии файловой системы, в которой размещается каталог . zf s/snapshot, мгновенные копии оказыва- ются в том же самом каталоге, что их исходные тома. Клоны функционируют точно так, как ожидается. По умолчанию неразмеченные тома получают резерв дисковой памяти, равный его указанному объему. Можно уменьшить резерв или отказаться от него вообще, но в этом случае попытки записи на том могут вызвать ошибку “out of space”. Клиенты неразме- ченных томов могут не справиться с такими ошибками. Распределение файловой системы между NFS, CIFS и SCSI Система ZFS не только переопределяет много аспектов управления традиционны- ми файловыми системами, но и изменяет способ распределения файловой системы по сети. В частности, можно задать свойство sharenfs или sharesmb файловой системы равным on и сделать ее доступной с помощью протокола NFS или встроенного сервера CIFS операционной системы Solaris. Более подробно протокол NFS описан в главе 18, а сервер CIFS — в разделе 30.6. Если оставить эти свойства равными off, то это не значит, что файловая система не станет общедоступной; просто пользователю придется использовать специальные ин- струменты для экспорта, например утилиты sharemgr, share и unshare, а не функцио- нальные возможности системы ZFS. Свойства sharenf s и sharesmb могут принимать не только значения on и off. Если задать другое значение, то это будет означать, что вы хотите обеспечить совместное использование файловой системы, и это значение будет передаваться с помощью команды zfs share в виде аргументов командной строки. Аналогично свойство shareiscsi=on, примененное, к неразмеченному тому, делает его доступным в рамках протокола iSCSI. Более подробно о протоколе рассказывается в разделе 8.10. По умолчанию все свойства share* являются наследуемыми. Если вы делаете фай- ловую систему /home совместно используемой в рамках протокола NFS, например, то автоматически становятся доступными все рабочие каталоги, расположенные в ней, даже если они были определены как самостоятельные файловые системы. Разумеется, это поведение можно отменить, задав явно параметр sharenf s=no для каждой вложен- ной файловой системы. Для доступа к спискам управления доступом система ZFS использует стандарт NFSv4. Нюансы этого стандарта обсуждаются в главе 6. Подводя итог, скажем лишь, что
Глава 8. Дисковая память 319 система ZFS обеспечивает прекрасную поддержку списков управления доступом для клиентов как системы Windows, так и протокола NFS. Управление пулом хранения Рассмотрев свойства системы ZFS, относящиеся к файловой системе и уровню “блок-клиент”, исследуем ее пулы хранения. До сих пор мы использовали пул с именем “demo”, который создали на отдельном диске. Команда zpool list выводит на печать следующие результаты. solaris$ zpool list NAME SIZE USED AVAIL CAP HEALTH ALTROOT demo 496G 240K 496G 0% ONLINE rpool 748G 23.78G 724G 3% ONLINE Пул с именем rpool содержит загружаемую корневую файловую систему. На загру- жаемые пулы в настоящее время наложено несколько ограничений: они могут содержать только одно виртуальное устройство, и это устройство должно быть либо зеркальным массивом, либо отдельным диском; оно не может быть массивом RAID. Если устрой- ство является диском, то оно не может иметь таблицы разделов GPT. Команда zpool status добавляет несколько деталей о виртуальных устройствах, из которых состоит пул хранения, и сообщает об их текущем состоянии. solaris$ zpool status demo pool: demo state: ONLINE scrub: none requested config: NAME STATE READ WRITE CKSUM demo ONLINE 0 0 0 c8dl ONLINE 00 0 Оставим пул dw «создадим нечто более сложное. Мы присоединили к нашей системе пять накопителей SCSI емкостью 500 Гбайт. Сначала создадим пул с именем “топзСе^^оопержащий три из этих накопителя, в кон- фигурации RAID-Z с одним разрядом контроля четности (single-parity configuration). solaris$ sudo zpool destroy demo solaris$ sudo zpool create monster raidzl c9t0d0 c9tld0 c9t2d0 solaris$ zfs list monster NAME USED AVAIL REFER MOUNTPOINT monster 91.2K 981G 25.3K /monster Система ZFS также распознает схемы raidz2 и raidz3 для конфигурации с двумя и тремя разрядами контроля четности. Минимальное количество дисков всегда на едини- цу больше, чем количество устройств контроля четности. В данном случае один из трех накопителей предназначен для контроля четности, поэтому для файловой системы до- ступен примерно один терабайт памяти. Для иллюстрации добавим оставшиеся два накопителя, сконфигурированных как зеркало. Solaris$ sudo zpool add monster mirror c9t3d0 c9t4d0 invalid vdev specification use ’-f’ to override the following errors: mismatched replication level: pool uses raidz and new vdev is mirror solaris$ sudo zpool add -f monster mirror c9t3d0 c9t4d0
320 Часть I. Основы администрирования Команда zpool сначала “спотыкается” на этой конфигурации, потому что эти два виртуальных устройства имеют разные схемы избыточности. Данная конфигурация ра- ботает хорошо, поскольку оба виртуальных устройства обладают определенной избыточ- ностью. В реальных условиях не следует смешивать виртуальные устройства, обладаю- щие и не обладающие избыточностью, поскольку невозможно предсказать, какие блоки на каких устройствах будут находиться; частичная избыточность здесь бесполезна. solaris$ zpool status monster pool: monster state: ONLINE scrub: none requested config: NAME STATE READ WRITE CKSUM monster ONLINE 0 0 0 raidzl ONLINE 0 0 0 c9t0d0 ONLINE 0 0 0 c9tld0 ONLINE 0 0 0 c9t2d0 ONLINE 0 0 0 mirror ONLINE 000 c9t3d0 ONLINE 000 c9t4d0 ONLINE 000 Система ZFS распределяет записи между всеми виртуальными устройствами пула. Как показано в этом примере, если виртуальные устройства имеют одинаковые объемы, это не обязательно.24 Однако компоненты внутри избыточной группы должны иметь одинаковые размеры. Если это условие не выполняется, то каждый компонент будет иметь минимальный размер. При использовании нескольких простых дисков в пуле хра- нения важную роль играет конфигурация RAID 0. Дополнительные виртуальные устройства можно добавить в пул в любое время. Однако существующие данные не будут перераспределены, чтобы не потерять преиму- щества параллелизма. К сожалению, в настоящее время невозможно добавлять допол- нительные устройства в существующий массив RAID или зеркало. Система ZFS имеет особенно хорошую реализацию кеширования чтения, которое обеспечивает эффективное использование накопителей SSD. Для того чтобы установить эту конфигурацию, достаточно просто добавить накопители SSDs в пул хранения как виртуальные устройства типа cache. Система кеширования использует алгоритм адап- тивной замены, разработанный компанией IBM, который эффективнее обычного алго- ритма кеширования LRU (least recently used — наиболее давно использовавшийся). Ей известна частота обращения к блокам и момент времени, когда они использовались в последний раз, поэтому чтение больших файлов не предполагает разрушения кеша. Горячее резервирование реализуется с помощью виртуальных устройств типа spare. Один и тот же диск можно добавлять в несколько пулов хранения; диск из пула, кото- рый первый даст сбой, объявляется резервным. 8.11. Сеть хранения данных Существует несколько способов присоединить ресурсы хранения к сети. В главе 18 описывается традиционный протокол NFS для системы UNIX, применяемый для со- 24 В данном примере диски имеют одинаковые объемы, а виртуальные устройства нет (1 Тбайт против 500 Гбайт).
Глава 8. Дисковая память 321 вместного использования файлов. Система Windows имеет аналогичный протокол, из- вестный как CIFS или SMB. Основной реализацией протокола CIFS для систем UNIX и Linux является протокол Samba; подробно описан в разделе 30.6. Протоколы NFS и CIFS — примеры систем для “сетевого хранилища” (NAS). Они относятся к высокоуровневым протоколам, а их основные операции сводятся к таким действиям, как “открыть файл X и послать мне первые 4 двоичных килобайта данных” или “настроить список управления доступом для файла Y, как указано в запросе”. Эти протоколы хорошо работают в файловых системах, где многие клиенты хотят читать или записывать одновременно. Сеть хранения данных (SAN) — это низкоуровневая система для абстрагированйя операций хранения, при котором сетевое хранилище напоминает локальный жесткий диск. Операции SAN состоят, в основном, из инструкций чтения или записи конкретных дисковых “блоков” (хотя, разумеется, адресация этих блоков сервером определенным образом делается виртуальной). Если клиент хочет использовать сеть SAN для хранения файловой системы, он должен обеспечить собственную реализацию файловой системы* С другой стороны, тома SAN также можно использовать для хранения областей подюН* ки или других данных, не обязательно имеющих структуру файловой системы. За исключением файловой системы VxFS в операционной системе HP, основные файловые системы не предназначены для работы с многочисленными клиентами, не знающими о существовании друг друга (по крайней мере, не на уровне неразмеченных блоков диска).25 Следовательно, хранилище SAN обычно не рассматривают как способ совместного использования файлов. На самом деле оно представляет собой средство для замены локальных жестких дисков централизованными ресурсами хранения. Зачем это нужно? Перечислим несколько причин. • Каждый клиент имеет возможность получить преимущество благодаря использо- ванию сложного хранилища, оптимизированного по производительности, устой- чивого к сбоям и допускающего восстановление данных. • Повышается эффективность использования, поскольку каждый клиент имеет именно столько места для хранения, сколько ему требуется. Несмотря на то что объем памяти на виртуальных дисках фиксирован, он не ограничен стандартными размерами физических жестких дисков. Кроме того, блоки виртуальных дисков, которые клиент никогда не записывал, на самом деле на сервере не хранятся. • В то же время система SAN обеспечивает большую гибкость и простоту перекон- фигурации. “Модернизацию жесткого диска” теперь можно выполнить с помо- щью одной-двух команд, посланных из терминального окна администратора. • Методы обнаружения дублированных блоков могут снизить стоимость хранения одинаковых файлов на нескольких компьютерах. • Стратегия резервного копирования для предприятия может быть унифицирована посредством точного копирования резервных блоков на сервере SAN. В некото- рых ситуациях каждый клиент получает доступ к расширенным возможностям 25 Хотелось бы высказать свою точку зрения. На самом деле существует много таких файловых систем, которые называются кластерными (или кластеризованными). Для обеспечения кластери- зации необходимо применять специальные алгоритмы блокировки и синхронизации, поэтому кла- стеризованные системы, как правило, работают медленнее, чем стандартные файловые системы на локальных дисках. Файловая система VxFS может работать в кластеризованном и некластеризо- ванном режимах, поэтому она подходит для любых ситуаций.
322 Часть I. Основы администрирования мгновенного копирования, характерным для менеджеров логических томов, неза- висимо от операционной системы или используемой файловой системы. Производительность всегда интересует системных администраторов, но, не зная кон- кретной реализации, трудно делать общие выводы о влиянии сетей SAN на произво- дительность ввода-вывода на сервере. Сети порождают скрытые затраты и ограничения пропускной способности, которых нет у локальных дисков. Даже при наличии сложного коммутирующего оборудования, сети представляют собой лишь наполовину совместно используемые ресурсы, которые зависят от пропускной способности линий связи между клиентами. К преимуществам сетей SAN следует отнести тот факт, что крупные серве- ры SAN могут быть объединены в группы с памятью и кешами SSD. Они используют первоклассные компоненты и разделяют физический ввод-вывод между многими дис- ками. В общем, правильно реализованная сеть SAN работает значительно быстрее, чем локальное хранилище. Однако все это обходится недешево. Такое аппаратное обеспечение относится к ка- тегории специализированного промышленного оборудования, поэтому вы сразу можете забыть о цене 80 долл, за диск из магазина электроники. Основными игроками на рынке SAN являются компании EMC, NetApp, HP, IBM и, как ни странно, Dell. Сети SAN Поскольку основным фактором, влияющим на производительность сетевого хране- ния, является сеть, серьезные компании обычно закладывают в основу своей инфра- структуры оптоволоконные кабели. Типичная скорость передачи данных по таким кабелям колеблется от 4 до 8 Гбайт/с, в противоположность скорости передачи данных в проводных сетях Ethernet, в которых она составляет 1 Гбайт/с. Однако сети Ethernet представляют собой быстро растущий сегмент ранка. Этому есть несколько причин. Две главные причины заключаются в том, что появились недорогие варианты технологии Ethernet со скоростью 10 Гбайт/с и по- стоянно усиливается роль виртуальных серверов; системы виртуализации обычно лучше поддерживают технологию Ethernet, чем оптоволоконные кабели. Разумеется, свою роль играет то, что системы, основанные на технологии Ethernet, не требуют инсталляции до- рогой вспомогательной физической сетевой инфраструктуры. Функциональные возможности SAN на основе технологии Ethernet можно реализо- вать с помощью нескольких протоколов обмена данными. Общим свойством этих про- токолов является возможность эмуляции конкретного аппаратного интерфейса, кото- рый многие системы уже понимают. Основным протоколом является iSCSI, представляющий системе виртуальный нако- питель так, будто он присоединен к локальной шине SCSI. Кроме него, используются протоколы ATA-over-Ethernet (АоЕ) и Fibre-Channel-over-Ethemet (FCoE). Эти протоко- лы ориентированы на технологию Ethernet (а значит, ограничены географическими фак- торами), в то время как протокол iSCSI работает на основе протокола IP. В настоящее время протокол iSCSI занимает около 20% рынка SAN, настоящие технологии оптово- локонной связи — около 60%, а остальные решения — оставшиеся 20%. Детали реализации оптоволоконной инфраструктуры выходят за пределы нашей книги, поэтому мы рассмотрим подробно только протокол iSCSI. С точки зрения опера- ционной системы компьютера, оптоволоконные накопители SAN обычно выглядят как ряд дисков SCSI, которыми можно соответственно управлять.
Глава 8. Дисковая память 323 Протокол iSCSI: интерфейс SCSI на основе протокола IP Протокол iSCSI позволяет реализовать сетевое хранение на основе существующего недорогого сетевого аппаратного обеспечения, не используя специальную оптоволокон- ную сеть и дорогие адаптеры оптоволоконных шин. Серверы SAN в этом случае станут узкоспециализированными системами, но при этом появится возможность воспользо- ваться преимуществами общедоступного аппаратного обеспечения. Используя традиционную терминологию накопителей SCSI, можно сказать, что про- токол iSCSI ссылается на сервер, который создает виртуальные диски, доступные через сеть в качестве “цели” iSCSI. Клиент, монтирующий эти диски, называется “инициа- тором”. Это важно, если вспомнить, что именно клиент инициирует команды SCSI, а сервер отвечает на них. Компоненты программного обеспечения, реализующего цель, и инициатор, рас- положенные на обоих концах связи iSCSI, отделены друг от друга. Все современные операционные системы содержат в себе инициатор, хотя часто он представляет собой необязательный компонент. Кроме того, большинство систем имеет также стандартную реализацию цели. Протокол iSCSI формально определен в документе RFC3720. В отличие от боль- шинства документов RFC, эта спецификация состоит из нескольких сотен страниц, в основном из-за сложности базового протокола SCSI. В большинстве случаев управление протоколом iSCSI является простым, если только для структурного управления и рас- познавания ресурсов хранения не используется необязательная служба Internet Storage Name Service (iSNS). Протокол iSNS, определенный в документе RFC4171, представляет собой адаптацию протоколов управления и раскрытия оптоволоконной связи для про- токола IP, поэтому он представляет интерес для организаций, желающих использовать и оптоволоконную инфрастуктуру, и протокол iSCSI. В отсутствие службы iSNS достаточно просто указать инициатору на соответствую- щий сервер, задать имя устройства iSCSI, к которому необходимо получить доступ, а также имя пользователя и пароль для аутентификации. По умолчанию аутентификация, iSCSI использует протокол Challenge Handshake Authentication Protocol (CHAP), который изначально предназначался для протокола Point-to-Point Protocol (PPP) (см. документ RFC 1994), так что пароли через сеть не передаются открытым текстом. При желании инициатор может аутентифицировать цель, используя второй распределенный ключ. Протокол iSCSI можно выполнять поверх протокола IPsec, хотя это и не требуется. Если вы не используете туннель IPsec, то блоки данных не шифруются. В соответствии с документом RFC3720, соединения, не использующие протокол IPsec, должны использо- вать ключи CHAP длиной не менее 12 символов. Цели и ициниаторы имеют имена iSCSI, причем для них определено несколько схем именования. Наиболее широко используются имена iSCSI Qualified Names (IQNs), име- ющие несколько странный формат. iqn.yyyy-mm.reversed_DNS_domain:arbitrary_name В большинстве ситуаций все, что предшествует двоеточию, является фиксированным (т.е. нерелевантным) префиксом, характеризующим сайт. Вы можете реализовать соб- ственную схему именования для фрагмента абстрактное_имя имени IQN. Месяц и год (шт и уууу), уточняющие домен DNS, указываются для того, чтобы обеспечить защиту от возможного изменения домена. Для этого следует использовать оригинальную дату регистрации DNS. Реальное имя выглядит следующим образом. iqn.1995-08.com.example:disk54.db.engr
324 Часть I. Основы администрирования Несмотря на специфичный формат имени IQN, префикс, отражающий реальный до- мен DNS или дату его возникновения, никакой роли не играет. В большинстве реализа- ций протокола iSCSI по умолчанию в качестве имени IQN используется имя поставщи- ка, и все работает прекрасно. Не требуется даже, чтобы имена IQN, взаимодействующие друг с другом, имели совпадающие префиксы. Загрузка с тома iSCSI Если вы собираетесь размещать в сетевом хранилище SAN важные данные, то не было бы разумным вообще отказаться от использования локальных жестких дисков? Вы можете не только отказаться от специальных процедур, необходимых для управления локальными дисками, но и позволить администраторам “заменять” загрузочные нако- пители простыми незагрузочными накопителями, осуществлять постоянную модерни- зацию и обеспечивать альтернативные конфигурации загрузки, включая даже системы Windows. К сожалению, использование тома iSCSI в качестве загрузочного накопителя не по- лучило широкой поддержки. По крайней мере, эта функциональная возможность не реализуется непосредственно и не стала одной из основных. Разные проекты Linux пы- тались ее реализовать, но все эти реализации были жестко привязаны к конкретному аппаратному обеспечению и конкретному программному обеспечению для инициато- ра протокола iSCSI, так что ни один из проектов загрузки протокола iSCSI не взаимо- действует с доминирующим в настоящее время программным обеспечением OpeniSCSI для инициатора. Аналогично поддержка загрузки протокола iSCSI в системах Solaris и OpenSolaris пока находится на стадии разработки, но окончательного промышленного решения пока нет. Единственным исключением является система AIX, которая уже давно и хорошо поддерживает протокол iSCSI. Версии AIX 5.3 и более поздние, работающие на аппарат- ном обеспечении POWER, обеспечивают полную поддержку загрузки протокола iSCSI поверх протокола IPv4. Специфика инициаторов iSCSI от разных производителей ДБыло, по крайней мере, четыре реализации инициатора протокола iSCSI для системы Linux. Некоторые из них сошли с арены, а остальные объединились. Единственным выжившим в конкурентной борьбе стал протокол Open-iSCSI, который является стандартным инициатором, включенным во все дистрибу- тивы рассмотренных нами операционных систем семейства Linux distributions. Для того чтобы его установить и запустить, инсталлируйте пакет open-scsi в системах Ubuntu и SUSE или пакет iscsi-initiator-utils в системе Red Hat. Домашняя страница проекта расположена по адресу open-iscsi. org, но документа- цию там искать не следует. Похоже, что, кроме справочных страниц для команд iscsid и iscsiadm, представляющих собой описание реализации и интерфейса системы, ни- какой документации больше нет. К сожалению, административная модель для системы Open-iSCSI лучше всего описывается словом “креативная”. В системе Open-iSCSI “узел” — это цель протокола iSCSI, т.е. сущность с именем IQN. Система Open-iSCSI ведет базу данных, содержащую информацию об известных ей узлах, которые расположены в иерархии ниже каталога /etc/iscsi/nodes. В этом дереве хранятся параметры конфигурации для отдельных узлов. Значения по умолча-
Глава 8. Дисковая память 325 нию задаются в файле etc/iscsi/iscsid.conf, но иногда они копируются во вновь определенные узлы, так что их функционирование нельзя назвать полностью предска- зуемым. Процесс установки параметров целей очень неприятен; команда iscsiadm по- стоянно вынуждает вас изменять по одному параметру за один раз и задавать имя IQN и сервер в каждой командной строке. Ситуацию спасает лишь то, что файл iscsid. conf и все файлы базы данных явля- ются обычными редактируемыми текстовыми файлами. Следовательно, целесообразно использовать команду iscsiadm для модификации немногочисленных параметров и из- бегать ее при внесении многочисленных изменений. Для того чтобы настроить систему на выполнение простой статической операции с одним именем пользователя и паролем для всех целей iSCSI, сначала необходимо от- редактировать файл iscsid. conf и убедиться, что следующие строки набраны так, как показано ниже. node.startup = automatic node.session.auth.authmethod = CHAP node.session.auth.username = chap_name node.session.auth.password = chap_password Мы привели эти строки вместе, но на самом деле в файле они расположены в раз- ных местах. Этот файл содержит много комментариев и много опций конфигурации. Убедитесь, что они не дублируют друг друга. Затем сориентируйте команду iscsiadm на целевой сервер и предоставьте ей воз- можность создать записи для каждой цели, распознанной при чтении каталога сервера. В данном примере мы сконфигурировали цель с именем test на основе сервера с име- нем iserver. ubuntu $ sudo iscsiadm -m discovery -t st -p iserver 192.168.0.75:3260,1 iqn.1994-11.com.admin:test Для каждой цели команда iscsiadm создает подкаталог в каталоге /etc/iscsi/ nodes. Если существуют цели, с которыми вы не хотите работать, то просто примените к их каталогам конфигурации команду rm -rf. Если сервер предлагает много целей, а вас итересует только одна, то воспользуйтесь следующими командами. ubuntu $ sudo iscsiadm -m node -о new -p iserver -T iqn.1994-11.com.admin:test New iSCSI node [tcp:[hw=default,ip=,net_if=default,iscsi_if=default] iserver,3260,-1 iqn.1994-11.com.admin:test] added Как ни странно, эти два метода дают одинаковые результаты, создавая при этом раз- ные иерархии каталогов внутри каталога /etc/iscsi/nodes. Какую бы версию вы ни применили, проверьте текстовые файлы, существующие в иерархии, чтобы убедиться в правильности их параметров конфигурации. Если вы зашли в цель самостоятельно, возможно, вам придется самому задать свой- ство node. startup равным automatic. Затем вы можете соединиться с удаленными целями с помощью команды iscsiadm *m node -1. ubuntu$ sudo iscsiadm -m node -1 Logging in to [iface: default, target: iqn.1994-11.com.admin:test, portal: 192.168.0.75,3260] Login to [iface: default, target: iqn.1994-11.com.admin:test, portal: 192.168.0.75,3260]: successful
326 Часть I. Основы администрирования Для того чтобы проверить, видит ли система дополнительный диск, можно выпол- нить команду fdisk -1. (Файлы устройств для дисков iSCSI disks называются точно так же, как и любые другие диски named SCSI.) Если вы настроили файлы конфигурации так, как указано выше, то соединения будут автоматически восстановлены во время за- грузки. Для целевой службы iSCSI в системах семейства Linux предпочтительной реали- зацией является пакет iSCSI Enterprise Target, размещенный по адресу iscsitarget. sourceforge. net. Обычно он доступен для загрузки под именем iscsitarget. Система Solaris содержит пакеты цели и инициатора; оба они являются необя- soians зательными. Все пакеты, связанные с протоколом iSCSI, в своих именах со- держат слово “iscsi”. Находясь на стороне инициатора, инсталлируйте пакет SUNWiscsi, а затем выполните перезагрузку системы. Конфигурационного файла для этого пакета не существует; вся конфигурация соз- дается командой iscsiadm, имеющей довольно странный синтаксис. Четыре главные операции (add, modify, list и remove) можно применить к разнообразным аспектам конфигурации инициатора. Основная конфигурация инициатора и соединение с целе- вым сервером iserver осуществляются с помощью следующих строк. solaris$ sudo iscsiadm modify initiator-node -a CHAP -H testclient solaris$ sudo iscsiadm modify initiator-node -C Enter secret: <password for testclient> Re-enter secret: <password for testclient> solaris$ sudo iscsiadm modify discovery -s enable solaris$ sudo iscsiadm add static-config iqn. 1994-11.com.admin: test,iserver Solaris$ sudo iscsiadm list target -S Target: iqn.1994-11.com.admin:test Alias: - TPGT: 1 ISID: 4000002a0000 Connections: 1 LUN: 0 Vendor: IET Product: VIRTUAL-DISK OS Device Name: /dev/rdsk/cl0t3d0s2 Теперь можно задать конфигурацию диска обычным способом (например, выполнив команду zpool create iscsi cl0t3d0). Первая команда задает для инициатора режим аутентификации CHAP, а имя пользо- вателя задает равным testclient. Опция -С задает пароль; эту опцию нельзя комбини- ровать с другими. Кроме того, при желании можно задавать имя и пароль индивидуаль- но для каждой цели. Команда modify discovery позволяет использовать статически сконфигурирован- ные цели, а команда add задает сервер и имя конкретной цели. Все эти конфигурации сохраняются во время перезагрузок. Для обслуживания целей iSCSI в других системах необходимо инсталлировать пакет SUNWiscsitgt. Его механизм управления на стороне инициатора структурирован так же, но команда имеет имя iscsitadm, а не iscsiadm. ТКЯ Для использования протокола iSCSI в системах семейства HP-UX, необхо- димо загрузить программное обеспечение для инициатора протокола iSCSI с сайта software. hp. com и инсталлировать с помощью инструмента Software
Глава 8. Дисковая память 327 Distributor. При этом требуется перестройка и перезагрузка ядра. К счастью, система является хорошо документированной и сопровождается справочным руководством HP-UX iSCSI Software Initiator Support Guide, которое можно за- грузить с сайта docs. hp. com. В большинстве случаев конфигурацию инициатора можно задать с помощью коман- ды iscsiutil, инсталлированной в каталоге /opt/iscsi/bin. Для задания имени IQN инициатора применяется команда iscsiutil -1 UMxiqn, для задания глобального пользовательского имени для алгоритма аутентификации CHAP используется комаэда iscsiutil -u -N пользователь (ее также можно применять к отдельным серверам или отдельным целям), а для задания глобального пароля для алгоритма аутентификации CHAP — команда iscsiutil -u -И пароль. Затем можно добавить цели на конкретном сервере с помощью команды iscsiutil -а -I сервер. Для того чтобы активировать серверное соединение и создать виртуаль- ный дисковый накопитель, следует выполнить команду ioscan -NH 64000. Состояние системы проверяется с помощью команды iscsiutil -р -о. е Инициатор протокола iSCSI в системе AIX уже инсталлирован и готов к ис- пользованию. В типичном для системы AIX стиле большинство конфигура- ций реализуется с помощью системных баз данных ODM. Устройство iscsiO представляет конфигурацию инициатора в целом, а индивидуальные целевые устройства можно определить с помощью записей ODM или в текстовых фай- лах конфигурации в каталоге /etc/iscsi. Текстовые файлы конфигурации, на первый взгляд, более надежны. Система AIX не различает имя IQN инициатора и его пользовательское имя CHAP. Имя IQN задается на устройстве iscsiO, следовательно, на каждом сервере необходимо использовать одно и то же пользовательское имя CHAP. Для того чтобы получить воз- можность быстро изменять конфигурацию, сначала необходимо присвоить имени IQN соответствующее значение. aix$ sudo chdev -1 iscsiO -a initiat©r_name='iqn. 1994-11 .com. admin: client’ В данном примере мы использовали пользовательское имя CHAP, которое отлича- лось от своих аналогов в других системах, поскольку “testclient”, с формальной точки зрения, не является корректным именем IQN для инициатора (хотя на самом деле оно также прекрасно подходит). В файл /etc/iscsi/targets добавим следующую запись. iserver 3260 iqn.1994-11.com.admin:test "пароль-chap" Параметр 3260 — это Стандартный порт сервера для протокола iSCSI; мы вклю- чили его только потому, что этот порт предусмотрен форматом файла. Для того что- бы активировать новый диск iSCSI, необходимо всего лишь выполнить команду cfgmgr -1 iscsiO. Команда cfgmgr не выводит никаких подтверждений, но убедиться в том, что новое устройство появилось, можно, просмотрев каталог /dev (в нашем при- мере новый диск имеет имя /dev/hdisk2) или выполнив команду smitty devices, перейдя в категорию Fixed Disk и просмотрев элементы списка. Вероятно, второй вари- ант более безопасный, поскольку команда smitty явно демонстрирует, что диск hdisk2 является томом iSCSI. Для того чтобы отсоединить устройство iSCSI, необходимо не только отредактиро- вать файл конфигурации и перезагрузить его с помощью команды cfgmgr, но и удалить диск из списка Fixed Disk команды smitty.
328 Часть I. Основы администрирования 8.12. Упражнения 8.1. Укажите, на что должен обратить особое внимание системный администратор при разработке архитектуры хранилища для каждого приложения. а) сервер, на котором будут храниться рабочие каталоги около 200 пользователей б) область подкачки для основного DNS сервера организации в) хранилище для большого потока спама г) крупная база данных InnoDB (MySQL) 8.2. Менеджеры логических томов — мощные механизмы, но их иногда трудно по- нять. Поэкспериментируйте с добавлением, удалением дисков, входящих в груп- пу томов, и изменением их размеров. Покажите, как удалить устройство из одной группы томов и доьбавить его в другой. Что делать, если необходимо переместить логический том из одной группы томов в другую? 8.3. ★Используя информацию, опубликованную в Интернете, укажите накопители SCSI и SATA с наивысшей производительностью. Учитывают ли тестовые про- граммы, используемые для оценки этих накопителей, что они могут применяться в качестве загрузочного диска на занятом сервере? Какие дополнительные расходы вы готовы нести, чтобы приобрести накопители SCSI, и какой прирост произво- дительности вы хотите получить за эти деньги? 8.4. ★ Добавьте в вашу систему диск и настройте раздел или логический том на но- вом диске как резервный корневой раздел. Убедитесь, что вы можете запустить- ся с резервного корневого раздела и что система после этого работает нормально. Проследите по журналу все действия, которые необходимо выполнить, чтобы ре- шить поставленную задачу. Возможно, вам поможет команда script. (Она требует прав суперпользователя.) 8.5. ★ Что такое суперблок и для чего он нужен? Посмотрите на определение струк- туры суперблока в системе ext4 в заголовочных файлах ядра и обсудите, что пред- ставляют собой поля в этой структуре. 8.6. ★★ Используя команду mdadm и ее опцию -f, смоделируйте сбойный диск в мас- сиве RAID в системе Linux. Удалите этот диск из массива и добавьте обратно. Как выглядит диск /ргос/mdstat на каждом из этих этапов? 8.7. ★★ Какие поля хранятся в индексном дескрипторе на файловой системе ext4? Перечислите содержимое индексного дескриптора, которое хранится в файле / etc/motd. Где хранится имя этого файла? (Вам могут, помочь команды hexdump и Is -i.) 8.8. ★★ Проверьте содержимое каждого файла каталога с помощью программ od или hexdump. Каждая запись переменной длины представляет собой файл в заданном каталоге. Просмотрите дисковую структуру каталога и объясните каждое поле, ис- пользуя в качестве примера реальный файл каталога. Затем загляните в каталог lost+found используемой вами файловой системы. Почему там так много имен, если каталог lost+found пуст? 8.9. ★★★★★ Напишите программу, которая отображает содержимое файлов /etc/ motd и /etc/magic. Но не обращайтесь к файлам напрямую: откройте файл устройства, соответствующий корневому разделу, и воспользуйтесь системны- ми вызовами seek и read для поиска нужных блоков данных. Файл /etc/motd
ша 8. Дисковая память 329 обычно невелик и содержит только “информационные” блоки. При работе с фай- лом /etc/magic, скорее всего, потребуется анализировать “ссылочные” блоки. (Если нет, выберите текстовый файл побольше.) Подсказка: Найдя в системных файлах заголовков описание структуры индексного дескриптора, убедитесь, что это дескриптор, хранящийся на диске, а не в ядре. (Необходим доступ с правами суперпользователя.)
Глава Периодические процессы Ключ к устойчивости и надежности систем лежит в автоматизации выполняемых в ней задач и успешном написании сценариев. Например, программа adduser может подключать новых пользователей быстрее, чем это сделает администратор вручную, причем с гораздо меньшей вероятностью ошибки. Практически любую задачу можно за- программировать в сценариях интерпретатора команд либо на языках Perl или Python. В некоторых случаях желательно, чтобы сценарий или команда выполнялись без вмешательства оператора. Можно, в частности, сделать так, чтобы сценарий проверял (скажем, каждые полчаса), как работают сетевые маршрутизаторы и мосты, и при обна- ружении проблем посылал администратору сообщение по электронной почте1. 9.1. Демон cron: системный планировщик Демон cron — это стандартный инструмент для периодического выполнения ко- манд. Он запускается на этапе начальной загрузки системы и выполняется до тех пор, пока система не будет выключена. Демон cron читает файлы конфигурации, содержащие списки командных строк и расписание их вызова. Командные строки обрабатываются интерпретатором sh, поэто- му почти все, что можно делать в данном интерпретаторе вручную, разрешается перепо- ручать демону cron2. Файл конфигурации демона cron называется crontab (сокращение от “cron table” — таблица демона cron). Пользовательские cron tab-файлы хранятся в каталоге /var /spool/cron. Для каждого пользователя создается не более одного такого файла: один 1 Многие организации идут еще дальше: в них сценарий отправляет текстовое сообщение на телефон администратора, уведомляя его о возникновении проблем. Подробнее читайте в главе 21. 2 Можно настроить демон cron на использование других интерпретаторов.
Глава 9. Периодические процессы 331 для суперпользователя (root), один для пользователя jsmith и т.д. В качестве имени файла выбирается регистрационное имя пользователя, которому он принадлежит, и на основании этого имени демон cron выясняет, какое значение UID нужно использовать при выполнении команд, содержащихся в файле. Команда crontab передает crontab- файлы в каталог /var/spool/cron и из него. Несмотря на различия в конкретных реализациях, все версии демона cron стремятся минимизировать время, затрачиваемое на синтаксический анализ файлов конфигурации и выполнение вычислений. Команда crontab помогает поддерживать эффективность работы демона cron, уведомляя его об изменениях crontab-файлов. Следовательно, вы не должны редактировать crontab-файлы сами, поскольку это может привести к тому, что демон cron не заметит ваших изменений. Если возникнет ситуация, когда cron, ка- залось бы, “не замечает” модификацию своих crontab-файлов, воспользуйтесь сигна- лом отбоя (HUP), который в большинстве систем заставляет его повторно прочитать их. Ш Подробнее о системе syslog написано в главе 11. Демон cron обычно выполняет свою работу “молча”, но в большинстве версий может вестись файл регистрации (как правило, это файл /var/cron/log или /var/ adm/cron/log), в котором отражаются все выполняемые команды и время их запуска (см. табл. 9.2). В одних системах при создании файла регистрации автоматически включается режим регистрации, а при удалении этого файла регистрация выключается. В других системах режим регистрации задается в файле конфигурации. Кроме того, демон cron может пользоваться услугами системы syslog. Файл регистрации быстро увеличивается в раз- мерах и редко приносит пользу; лучше не включать регистрацию вообще, если только вы не занимаетесь устранением какой-то конкретной проблемы. 9.2. Формат crontab-файлов Все crontab-файлы в системе имеют одинаковый формат. Комментарии начинают- ся со знака решетки в первой позиции строки. Каждая строка, не являющаяся коммен- тарием, содержит шесть полей и представляет одну команду. минута час день месяц день_недели команда Первые пять полей (минута, час, день, месяц и день_недели) содержат информа- цию о времени запуска команды. Они отделяются друг от друга пробелами, но в поле команда пробел выполняет свою обычную функцию разделителя аргументов. Описание этих полей приведено в табл. 9.1. Таблица 9.1. Спецификации времени в crontab-файле Поле Описание минута Минута часа от Одо 59 час Час дня от0до23 День День месяца от 1 до 31 месяц Месяц года от 1 до 12 Д^нь^недели День недели от 0 до 6 (0 = воскресенье) каждое поле времени может содержать следующее: • звездочку, которая обозначает любую цифру;
332 Часть I. Основы администрирования^ • целое число, трактуемое буквально; • два разделенных дефисом целых числа, задающих диапазон значений; • диапазон, за которым стоит косая черта и значение шага, например 1-10/2 (толь- ко для Linux); • целые числа или диапазоны, разделенные запятыми (искомое время соответствует любому из указанных значений). Например, строка 45 10 * * 1-5 означает “10 часов 45 минут, с понедельника по пятницу”. Совет: никогда не ставьте звездочку в первое поле, иначе команда будет выполняться каждую минуту. С полями денъ_недели и день сопряжена потенциальная двусмысленность, кото- рую необходимо учитывать. День можно рассматривать как день недели и число месяца. Если указаны оба поля, то искомому дню достаточно удовлетворять одному из этих тре- бований, чтобы пройти отбор. Например, спецификация 0,30 * 13 * 5 означает “каждые полчаса по пятницам и каждые полчаса тринадцатого числа месяца”, но не “каждые полчаса в пятницу, 13-го”. Поле команда содержит командную строку, выполняемую интерпретатором sh. Это может быть любая допустимая команда интерпретатора (брать ее в кавычки не нужно)» Считается, что поле команда продолжается до конца строки и может содержать пробе- лы и символы табуляции. Несмотря на то что интерпретатор sh включен в выполнение команды, он не дей- ствует как экземпляр интерпретатора, запускаемый при входе пользователя в систему (login shell), и поэтому не считывает содержимое файлов ~/ .profile или ~/ .bash_ profile. В результате переменные среды указанной команды могут быть установлены несколько не так, как вы ожидали. Если вам кажется, что команда, выполняемая из оболочки, работает прекрасно, но “глючит” при вводе в файл crontab, значит, по всей вероятности, виновата среда. При необходимости можно всегда “обернуть” команду в сценарий, который устанавливает соответствующие переменные среды. Знак процента (%) используется вместо символа новой строки в поле команда. В ре- альную команду включается только текст до первого знака процента, а остальные стро- ки передаются команде в качестве стандартного входного потока. Приведем несколько примеров допустимых команд crontab-файла. echo The time is now 'date' > /dev/console mail -s Reminder evi@anchor % Don't forget to write your chapters. cd /etc; /bin/mail -s "Password file" evi < passwd А теперь рассмотрим полные примеры записей. 30 2 * * 1 (cd /home/joe/project; make) Эта строка будет активизироваться в 2:30 по понедельникам. Она инициирует выпол- нение утилиты make в каталоге /home/joe/project. Такую запись можно использовать для запуска длительного процесса компиляции в то время, когда в системе не работа- ют другие пользователи. Вся выходная информация, выдаваемая командами crontab- файла, обычно посылается по электронной почте “владельцу” файла3. 3 Пользователю, от имени которого создан файл. Фактическим владельцем cron tab-файлов в общем случае является пользователь root.
глава 9. Периодические процессы 353 2Q 1 * * * find /tmp -atime +3 -type f -exec rm -f { } Эта строка будет активизироваться каждый день в 1:20. Соответствующая команда удаляет из каталога /tmp все файлы, к которым за последние 3 дня никто не обращался. 55 23 * * 0-3,6 /staff/trent/bin/checkservers Эта строка запускает сценарий checkservers в 23:55 каждый день, кроме четверга и пятницы. Демон cron не пытается компенсировать пропуск команд, время выполнения кото- рых прошло, пока система не работала. Однако демоны cron в системах Linux и HP-UX вполне адекватно реагируют на небольшие смещения времени, связанные с переходами на летнее время и обратно. Другие версии демона cron могут пропустить команды или выполнить их дважды, если эти команды были назначены как раз на переходный период (например, обычно между 1:00 и 3:00 в США)4. .л 9.3. Управление crontab-файлами Команда cron tab имя_ файла инсталлирует указанный cron tab-файл, заменяя его предыдущую версию, если таковая имеется. Команда crontab -е проверяет копию crontab-файла текущего пользователя, загружает ее в текстовый редактор (указанный в переменной среды EDITOR) для последующего изменения, а затем повторно записыва- ет файл в системный каталог. Команда cron tab -1 отображает содержимое crontab- файла, а команда crontab -г удаляет этот файл. Пользователю root разрешается задавать аргумент имя_пользователя, чтобы мож- но было просматривать или редактировать crontab-файлы других пользователей. На- пример, команда crontab -г j smith удаляет cron tab-файл, принадлежащий пользо- вателю jsmith, а команда crontab -е j smith редактирует этот файл. В системе Linux разрешается использование обоих аргументов имя_пользователя и имя_файла в одной команде, поэтому для устранения неоднозначности аргументу имя_пользователя дол- жен предшествовать флаг -и (например, cron tab -u j smith crontab. new). Будучи вызванными без аргументов, большинство версий команды crontab будут пытаться прочитать crontab-файл из своего стандартного входного потока. Если этот режим был активизирован случайно, не пытайтесь выйти из него, нажимая комбина- цию клавиш <Ctrl+D>, так как весь crontab-файл будет удален. Необходимо нажать <Ctrl+C>. В Linux для того, чтобы команда crontab обратилась к своему стандартно- му входному потоку, в качестве аргумента имя_ файла ей необходимо передать дефис. Коротко и ясно! Два файла конфигурации cron. deny и cron. allow содержат информацию о том, кому из пользователей разрешено предоставлять crontab-файлы. В разных системах эти файлы расположены в разных каталогах (см. табл. 9.2). Если файл cron. allow существует, то он содержит список пользователей, имеющих доступ к демону cron (по одному имени в строке). Пользователи, которые в списке от- сутствуют, не имеют права выполнять команду cron tab. Если файла cron. allow нет, ли из наших помощников зафиксировал случай, когда демон cron потреблял 100% време- час^еН^)аЛЬН0Г0 пРоцессоРа’ поскольку системная дата была установлена неправильно. Локальный местн°И Пояс имел отрицательное смещение относительно всемирного времени (GMT), поэтому “сбит°е BpeNJ? после вычисления давало отрицательную величину, и, как следствие, cron был ЧовкаС Т0лку”* В большинстве систем “бортовые” часы оснащены батарейками, поэтому переуста- зедя часов ~ не такое уж необычное явление, как могло бы показаться. Нестабильность показа- времени — распространенный симптом “севшей” или “садящейся” батарейки.
334 Часть I. Основы администрирования проверяется файл cron. deny. Он также содержит список пользователей, но с противо- положным назначением: доступ разрешен всем, кроме лиц, указанных в списке. Таблица 9.2. Файлы и каталоги демона cron в различных системах Система Каталог файлов allow и deny Журнальный файл Linux /etc Все пользователи Используется система syslog Solaris /etc/cron.d Все пользователи /var/cron/log HP-UX /usr/lib/cron Только root /var/adxn/cron/log AIX /var/adm/cron Все пользователи /var/adm/cron/log Если нет ни одного из этих файлов, то, значит, нет единого правила для всех: в од- них системах всем пользователям по умолчанию разрешается создавать crontab-файлы, а в других на это имеет право только пользователь root. На практике стартовый файл cron. allow или cron. deny часто включается в стандартную инсталляцию операцион- ной системы, поэтому вопрос о crontab-поведении без файлов конфигурации остается спорным. Среди наших примеров систем только в HP-UX по умолчанию блокирует- ся доступ к crontab-файлам для непривилегированных пользователей. Необходимо подчеркнуть, что права доступа регулируются командой crontab, а не демоном cron. Если пользователь найдет способ обходным путем поместить в системный каталог свой cron tab-файл, демон cron будет благополучно выполнять указанные в нем команды. Система Solaris в этом смысле ведет себя несколько по-другому. Ее демон sotans cron удостоверяется в том, что учетная запись пользователя не заблокирова- на значением *LK* в файле /etc/shadow. Если окажется, что проверяемая учетная запись все же заблокирована, демон cron не выполнит задания этого пользователя. Важно предотвратить выполнение заданий, подготовленных за- блокированными пользователями (причем не имеет значения, как они были заблокированы: случайно или намеренно). Если вы хотите, чтобы пользова- тель имел действующую учетную запись с точки зрения демона cron, но не действующий пароль, выполните команду passwd -N пользователь. 9.4. Использование версии демона Vixie-cron Версия демона cron, включенная в дистрибутивы Linux (в том числе и наши три при- мера), обычно именуется как ISC Cron или vixie-cron; последнее название обязано имени автора Пола Викси (Paul Vixie). Эта версия представляет собой осовремененный вариант, который предоставляет дополнительные функции при меньшей неразберихе. Основное отличие нового варианта состоит в том, что, в дополнение к поиску поль- зовательских cron tab-файлов, версия vixie-cron также подчиняется системным cron tab-записям, хранящимся в файле /etc/crontab и каталоге /etc/cron.d. Эти файлы имеют формат, который несколько отличается от формата пользовательских crontab-файлов тем, что они позволяют выполнение команд, выданных произвольным пользователем. Дополнительное поле имя_пользова теля стоит перед названием коман- ды. Поле имя_пользователя не представлено в обычных crontab-файлах, поскольку имя crontab-файла предоставляет ту же информацию (даже в системах Linux). Демон cron точно так же интерпретирует записи из файла /etc/crontab и каталога /etc/cron. d. В общем файл /etc/crontab предназначен для системных администра- торов, которые поддерживают его вручную, в то время как каталог /etc/cron.d играет
Глава 9. Периодические процессы 335 роль хранилища, куда пакеты программ могут инсталлировать любые crontab-файлы, которые им могут понадобиться. Файлы, хранимые в каталоге /etc/cron.d, называют- ся (согласно действующему соглашению) по именам пакетов, которые их инсталлируют, но демона cron не заботит исполнение этого соглашения. Временные диапазоны в crontab-файлах версии vixie-cron могут включать любое значение шага. Например, ряд 0, 3, 6, 9, 12, 15, 18 кратко можно записать в виде 0—18/3. Вы можете также использовать трехбуквенное мнемоническое обозначение для назва- ний месяцев и дней, но не в сочетании с диапазонами. Насколько нам известно, эта функция работает только с английскими названиями. В crontab-файле версии Vixie- cron можно задавать переменные среды и их значения. Подробнее см. тап-страницу для cron tab (5). Посредством системы syslog демон vixie-cron регистрирует свои действия, ис- пользуя уровень “cron”, при том, что большинство сообщений представлено на уровне “info”. Стандартные конфигурации системы syslog отправляют cron-данные регистра- ционного характера в его собственный файл. По непонятным причинам демон cron в системе Red Hat был переименован в crond. Но это все тот же демон vixie-cron, который все мы знаем и любим. 9.5. Стандартные применения демона cron Существует ряд стандартных задач, решать которые удобнее всего с помощью де- мона cron. Соответственно, большинство записей crontab-файла пользователя root служит именно этим целям. В данном разделе рассмотрим подобные задачи и элементы crontab-файла, обеспечивающие их реализацию. Системы часто поставляются с готовыми crontab-файлами. Если необходимо от- ключить стандартные записи, превратите их в комментарии, вставив в начало каждой строки знак решетки (#). Не удаляйте сами записи, возможно, они еще пригодятся. Помимо файлов каталога /etc/cron.d, в дистрибутивах Linux есть также crontab- файлы, организующие запуск сценариев в ряде заранее известных каталогов. Это по- зволяет программам добавлять собственные периодические задания, не редактируя crontab-файлы. Например, сценарии, помещаемые в каталог /etc/cron. daily, запу- скаются раз в день, а сценарии каталога /etc/cron.weekly — раз в неделю. Вы можете также помещать файлы в эти каталоги вручную. Многие организации сталкиваются с незначительными, но повторяющимися сете- выми проблемами из-за того, что администраторы сконфигурировали демон cron для выполнения одной и той же команды на сотнях компьютеров в одно и то же время. Синхронизация часов всех компьютеров посредством протокола NTP еще больше усугу- бляет проблему. Эту проблему легко устранить с помощью сценария выполнения команд со случайной задержкой или путем настройки файла конфигурации, однако она может с трудом поддаваться диагностированию, поскольку ее признаки быстро полностью ис- чезают. Простые напоминания Не желая оставить Google Calendar без дела, демон cron тем не менее может вполне °казаться полезным для организации простых напоминаний: о днях рождения, ожидае- Мом времени (например, времени платежа), периодически повторяющихся задачах и пр.
336 Часть I. Основы администрирования Это особенно полезно в случае, когда процесс напоминания необходимо интегрировать с другими доморощенными программами. Следующая crontab-запись реализует простое почтовое напоминание. (Приведенные строки в действительности представляют собой одну длинную строку.) 30 4 25 * * /usr/bin/mail -s "Time to do the TPS reports" owen@atrust.com%TPS reports are due at the end of the month! Get busy!%%Sincerely,%cron Обратите внимание на то, что символ “%” используется как для отделения команды от входного текста, так и для обозначения конца строки в этом тексте. Эта запись одно- кратно отправляет электронную почту 25-го числа каждого месяца. Чистка файловой системы В любой системе есть ненужные файлы (естественно, речь идет не о системных файлах). Например, при аварийном завершении программы ядро создает файл (обыч- но он называется core, core.pid или prograт. core), содержащий образ адресного пространства программы. Такие файлы используются разработчиками программного обеспечения, но для администраторов это бесполезная трата дискового пространства. Пользователи часто вообще не знают о назначении core-файлов, поэтому предпочита- ют не брать на себя ответственность за их удаление5. Ш NFS рассматривается в главе 18. Еще один источник лишних файлов — это NFSv3 (Network File System — сетевая файловая система). Серверы NFSv3 сохраняют файлы, которые уничтожены в локаль- ной системе, но продолжают использоваться удаленным компьютером. В большинстве реализаций таким файлам присваиваются имена вида . nf sxxx, где ххх — числовой код. Иногда об этих файлах забывают и оставляют их на диске, думая, что они удалены. Многие программы создают в каталоге /tmp или /var/tmp временные файлы, кото- рые по той или иной причине не удаляются. Некоторые программы, особенно текстовые редакторы, делают резервные копии каждого файла, с которым они работают. Частичное решение проблемы файлового “мусора” состоит в регулярном (каждую ночь) восстановлении свободного дискового пространства. В современных системах обычно имеются встроенные средства подобной очистки, поэтому необходимо убедить^ ся в том, что они соответствуют потребностям организации. Во всех показанных ниже примерах для удаления ненужных файлов применяется ко- манда find. find I -xdev -type f ' (’ -name core -o name 'core. [0-9]*' -o name '*.core' ') ' -atime +7 -exec rm -f { } ';' Эта команда удаляет файлы с именем core, которые не использовались в течение не- дели. Аргумент -xdev гарантирует, что команда find будет выполнена только в преде- лах корневой файловой системы, что очень важно в сетях, где возможно монтирование множества файловых систем6. Если необходимо очистить несколько файловых систем, 5 Многие ядра систем можно сконфигурировать так, чтобы дампы памяти помещались в от- дельный каталог или вообще не генерировались. Загляните в руководство, используя в Linux ко- манду man core или в Solaris команду man coreadnt 6 Не все версии команды find поддерживают аргумент -xdev. В некоторых системах он на- зывается —х.
Глава 9. Периодические процессы 337 задайте для каждой из них свою команду (помните, что каталог /var часто является от- дельной файловой системой). Аргумент -type f имеет большое значение, поскольку исходный код ядра Linux со- держит каталог с именем core, удаление которого весьма нежелательно, не так ли? find / -xdev -atime +3 ’ (’ -name '#*’ -о -name ’ -о -name '*.СКР’ -о -name ' ’ -о -name ' .nfs* ’ ') ’ -exec rm -f { } '; ’ Эта команда удаляет неиспользуемые в течение трех дней файлы, имена которых на- чинаются с префикса #, .# или .nfs ^ибо заканчиваются расширением * или .СКР. Это типичные признаки временных и резервных файлов различных текстовых редакторов. CQ Подробнее об опциях команды mount написано в разделе 6.2. В целях повышения производительности некоторые администраторы используют опцию noatime команды mount, чтобы предотвратить хранение файловой системой временных меток момента обращения к файлам. Подобная конфигурация помешает ра- боте обеих приведенных выше команд find, поскольку файлы будут казаться такими, к каким не было обращений, даже если они недавно были активными. К сожалению, в случае ошибки команда удаляет файлы. Поэтому, прежде чем использовать приведенные команды, убедитесь, что система поддерживает временные метки доступа к файлам. cd /tmp; find . ! -name . ! -name lost+found -type d -mtime +3 -exec /bin/rm -rf { } ’; ’ Эта команда рекурсивно удаляет все подкаталоги каталога /tmp, не модифицируе- мые в течение трех дней. В большинстве систем обычные файлы в каталоге /tmp удаля- ются сценариями запуска системы, но в некоторых системах подкаталоги не удаляют- ся. Если существует каталог lost+found, то он не включается в число удаляемых. Это важно, если каталог /tmp является отдельной файловой системой. Подробнее о каталоге lost+found рассказывалось в разделе 8.9. Если в системе применяется одна из перечисленных выше команд, следует заранее уведомить пользователей о том, какими принципами руководствуется администратор при чистке файловой системы. Распространение конфигурационных файлов по сети Ш Подробнее о распространении конфигурационных файлов по сети рассказывается в гла- ве 19. При сетевом администрировании во многих случаях удобно пользоваться единой версией конфигурационных файлов, например базой почтовых псевдонимов. Обычно базовый механизм совместного использования ресурсов представляет собой некоторую форму опроса или периодического распространения ресурсов, что делает эту задачу иде- альной для демона cron. Основные версии этих файлов можно распространять по сети каждую ночь с помощью утилиты rsync, rdist. Иногда необходима последующая обработка файлов. Например, если в файле sendmail.cf не задана опция AutoRebuildAliases, может потребоваться, чтобы пользователь выполнял команду newaliases для преобразования текстового файла почтовых псевдонимов в хешированный формат, используемый программой sendmail. Может понадобиться и загрузка файлов в административную базу данных, например
338 Часть I. Основы администрирования Ротация журнальных файлов Системы по-разному относятся к управлению своими журнальными файлами по умолчанию, поэтому вам, возможно, стоит изменить стандартные установки в этой об- ласти, чтобы согласовать их с вашими локальными стратегиями. Под “ротацией” жур- нального файла понимают разделение его на сегменты по размеру и дате с сохранением при этом нескольких старых версий каждого журнального файла постоянно доступны- ми. Поскольку ротация представляет собой периодически повторяющееся событие, ко- торое можно выполнять по расписанию, такую процедуру лучше всего планировать с помощью демона cron. Подробнее о ротации рассказывается в главе 11. 9.6. Упражнения 9.1. Локальный пользователь системы стал злоупотреблять своим правом создания crontab-файлов, периодически запуская ресурсоемкие задания. Вы несколько раз безуспешно просили его прекратить это делать и теперь вынуждены лишить его соответствующих привилегий. Перечислите действия, которые необходимо пред- принять для того, чтобы удалить текущий crontab-файл пользователя и запретить ему впредь создавать такие файлы. 9.2. Придумайте три задания, которые требуется запускать регулярно (те, что были приведены в главе, не использовать). Составьте cron tab-записи для каждого за- дания и укажите, в какие файлы их необходимо поместить. 9.3. Найдите crontab-файлы в своей системе и выберите из них три записи. Опишите, когда активизируется каждая из них, что она делает и зачем, по вашему мнению, она нужна. (Необходим доступ с правами суперпользователя.) 9.4. ★ Напишите сценарий, который синхронизирует ваши конфигурационные фай- лы (*/. [a-z]*) между всеми компьютерами, на которых у вас есть учетная запись. Сделайте так, чтобы этот сценарий регулярно запускался демоном cron. (Можно ли просто копировать все файлы, имена которых начинаются с точки? Как вы по- ступите с каталогами? Нужно ли создавать резервные копии файлов, заменяемых на целевом компьютере, перед их перезаписью?)
Глава Резервное копирование В большинстве коммерческих организаций информация, хранящаяся в КОМПЬ^Р'_ ном виде, стоит дороже самих компьютеров. Кроме того, ее гораздо труднее вос^ вить. Защита этой информации является одной из наиболее важных (и, к сожалению, самых трудоемких) задач системного администратора. Потерять важную информацию можно как угодно. К порче файлов данных приводят ошибки в программном обеспечении. Пользователи случайно удаляют то, ^ем ботали всю жизнь. Хакеры и обозленные служащие стирают жесткие диски. Сбои в ап- паратных средствах и стихийные бедствия выводят из строя целые машинные зал, • Резервные копии позволяют администратору восстанавливать фа овую (или любую ее часть) в том состоянии, в каком она находилась на момент после копирования. Резервное копирование должно осуществляться тщательно и ст^ графику. Кроме того, устройства резервного копирования и сами носители должн лярно проверяться на предмет корректной работы. а1птиу не- регулярность выполнения процедур резервирования данных, о еспечив лостность резервных копий, является важным элементом корпоративной страз • Ответственные руководители должны четко понимать, какой цели служат а ных и как они должны эксплуатироваться. Для университетской компьютерно тории потерять результаты работы за один день не так страшно, как для торг пании, регулярно принимающей заказы от десятков или сотен клиентов. Начнем эту главу с описания общих принципов резервного копирования, п ознакомимся с наиболее распространенными устройствами создания резервных к° их носителями (их преимуществами, недостатками, ценами на них). Затем речь о планировании процедуры резервного копирования и об особенностях ра оты лярных утилит diMnp и restore.
340 Часть I. Основы администрирования Далее будут рассмотрены некоторые дополнительные команды резервного копиро- вания и архивирования и даны пояснения, в каких ситуациях предпочтительнее та или иная команда. В завершение главы читатели познакомятся с бесплатным пакетом сете- вого резервного копирования Bacula и некоторыми другими свободно предоставляемы- ми и коммерческими вариантами. 10.1. Принципы резервного копирования Прежде чем приступить к подробному рассмотрению резервного копирования, мы хотели бы поделиться с читателями опытом, который приобрели за долгие годы прак- тической работы (иногда эти знания давались очень тяжело). Ни один из предлагае- мых советов не является абсолютной истиной, но чем чаще вы будете им следовать, тем спокойнее будут протекать процессы резервного копирования данных и их вос- становления. Создавайте резервные копии на центральном компьютере Многие специализированные утилиты позволяют создавать резервные копии по сети. Производительность процесса несколько ухудшается, но это компенсируется легкостью администрирования. Если вы управляете только несколькими серверами, то проще все- го выполнять сценарий на центральном компьютере, который запускает утилиту dump (посредством интерпретатора ssh) на всех компьютерах, где необходимо провести ре- зервное копирование. Если у вас много серверов, мы рекомендуем использовать пакет программ (коммерческий или бесплатный), автоматизирующий этот процесс. Все ар- хивы должны помещаться на одно устройство резервного копирования (в режиме без перемотки, естественно). Если размер системы слишком велик и одного сервера недостаточно, все равно сле- дует пытаться сделать систему резервного копирования как можно более централизован- ной. Это упростит администрирование и позволит восстанавливать данные на альтерна- тивных серверах. Часто на сервере можно установить несколько устройств резервного копирования, и это не повлияет на его производительность. Архивы, созданные с помощью утилиты dump, можно восстановить только на ком- пьютерах с таким же порядком следования байтов, как у ведущего узла (и в большинстве случаев только на компьютерах с такой же операционной системой). Для решения зада- чи, связанной с простой перестановкой байтов, можно использовать программу dd, но она не устранит проблемы несовместимости различных версий утилиты dump. Если вы резервируете большие объемы данных по сети, пропускная способность ко- торой вызывает сомнения, рассмотрите как вариант создание выделенной локальной сети (LAN), предназначенной для передачи резервируемых данных. Многие организа- ции уже оценили эффективность такого подхода, позволяющего преодолевать узкие ме- ста в сетях. Маркируйте носители Маркируйте носители с резервными копиями системы максимально разборчиво и полно — неподписанная лента, по существу, бесполезна. Маркируйте каждый носитель уникальным образом в соответствии с его содержимым. На коробку следует нанести подробную информацию, включающую, например, список файловых систем, дату соз- дания архивов, формат резервирования, точный синтаксис команд, с помощью которых
Глава 10. Резервное копирование 341 они были созданы, и другие сведения, необходимые для восстановления архива без об- ращения к документации. Существуют бесплатные и коммерческие программы создания наклеек для различ- ных носителей. Советуем приобрести одну из них, дабы избавиться от ненужной голов- ной боли. Например, изготовители наклеек, предназначенных для печати на лазерных принтерах, обычно поставляют с ними и шаблоны для генерирования наклеек. Еще лучше приобрести специализированный принтер наклеек. Такие принтеры недорогие и прекрасно работают. Ваша автоматизированная система архивирования должна регистрировать имя каж- дой файловой системы, которую она заархивировала. Если вы захотите восстановить не- который файл, то хорошо организованная регистрация позволит вам быстро перейти к нужной файловой системе. При этом очень важно зафиксировать порядок размещения файловых систем на магнитной ленте или кассете. По возможности приобретите механизм автоматической смены носителя или на- копитель на магнитной ленте (НМЛ), который считывает штрих-коды. Тогда вы будете уверены, что ваши электронные метки магнитной ленты всегда будут совпадать с физи- ческими. Правильно выбирайте периодичность резервного копирования Чем чаще выполняется резервное копирование, тем меньше данных будет потеряно в случае сбоя системы. Процесс резервного копирования, однако, достаточно трудо- емкий и ресурсоемкий. Системный администратор должен обеспечить приемлемую целостность данных при разумном уровне затрат времени и средств. В общем можно сказать, что расходы увеличиваются по мере использования средств восстановления с более мелкой модульностью. В интенсивно эксплуатируемых системах наиболее удобный вариант — создавать ре- зервные копии домашних каталогов пользователей каждый рабочий день. В системах, которые используются менее интенсивно или в которых данные изменяются не столь часто, можно делать копии несколько раз в неделю. В маленькой системе с одним поль- зователем достаточно делать резервную копию раз в неделю. В целом, периодичность определяется объемом данных, которые могут быть утеряны с момента последнего соз- дания резервной копии. Будьте осмотрительны при выборе архивируемых файловых систем Файловые системы, которые изменяются редко, не нужно архивировать столь же ча- сто, как домашние каталоги пользователей. Еслйв файловой системе изменяется лишь несколько файлов (например, файл /etc/passwd в корневой системе), их можно каж- дый день копировать в другой раздел, резервные копии которого создаются регулярно. Если каталог /tmp является отдельной файловой системой, то архивировать его не нужно. Он не содержит ничего существенного, поэтому нет оснований сохранять его. Если это вам кажется очевидным, то вас можно только поздравить (чего не скажешь о многих других организациях и их сотрудниках). '
342 Часть I. Основы администрирования Старайтесь умещать каждодневные архивы на одном носителе Ш Демон cron подробно описан в главе 9. Было бы прекрасно иметь возможность создавать ежедневные резервные копии всех пользовательских файловых систем на одной ленте. Впрочем, при наличии устройств большой емкости, таких как накопители DLT, AIT и ЕГО, это вполне реально, но не каждая организация решится приобрести столь дорогие устройства. По мере того как привычки пользователей изменяются, а удаленный обмен данными становится все бо- лее популярным, “подходящий” временной интервал резервного копирования сокраща- ется. Все больше и больше сетевых служб должно быть задействовано в течение суток, а на резервирование больших объемов данных тратится много времени. Еще одна существенная проблема — быстрое увеличение дискового пространства, связанное со снижением цен на жесткие диски. Теперь вряд ли удастся найти настоль- ный компьютер фабричной сборки, имеющий меньше 250 Гбайт дискового простран- ства. Зачем очищать диски и устанавливать квоты, когда с помощью небольшого капи- таловложения можно безболезненно решить проблему? К сожалению, слишком часто объем сетевых хранилищ данных делает полное резервирование невозможным. Утилиты резервирования прекрасно справляются с архивированием файловых систем на нескольких носителях. Но если архив занимает много резервных носителей (напри- мер, кассет), об их смене должен заботиться оператор или специальный робот, причем все носители должны быть снабжены наклейками, что впоследствии обеспечит нор- мальный процесс восстановления. Если у вас нет веской причины создавать большую файловую систему, то лучше не делайте этого. Если ежедневные архивы невозможно разместить на одной ленте, есть несколько ре- шений: • купите ленточное устройство более высокой емкости; • купите автозагрузчик или ленточную библиотеку, чтобы можно было вставлять не- сколько носителей в одно устройство; • измените периодичность создания резервных копий; • используйте несколько устройств резервного копирования. Храните носители вне рабочего помещения Прежде всего, вы должны всегда иметь автономную копию своих данных, т.е. защи- щенную копию, которая не будет храниться вместе с оригиналом на жестком диске того же компьютера. Настоящее резервирование не заменят никакие моментальные снимки и дисковые массивы (RAID arrays)! В большинстве организаций резервные копии хранят вне рабочего помещения во из- бежание их порчи вместе с основными данными в случае пожара или стихийного бед- ствия. Фраза “вне рабочего помещения” означает как сейф в банке, так и полку в доме у президента компании. Фирмы, специализирующиеся на безопасном хранении резерв- ных носителей, обеспечивают для них надлежащий температурный режим и гарантиру- ют их сохранность. Всегда следует выбирать фирму, пользующуюся хорошей репутацией. Существует множество фирм, специализирующихся на хранении данных, которые обе- спечивают передачу данных по сети, но хранят их в надежном месте.
Глава 10. Резервное копирование 343 Выбор внешнего хранилища определяется тем, как часто нужно восстанавливать файлы и какие потери времени при этом допустимы. В некоторых организациях создают по две резервные копии в день на разных носителях: одна остается в рабочем помеще- нии, а вторую сразу же выносят1. Защищайте резервные копии Дэн Гир (Dan Geer), специалист по вопросам безопасности, однажды сказал: “Что делает резервная копия? Гарантированно нарушает права доступа к файлам на расстоя- нии”. Ни больше, ни меньше! Защищайте свои резервные носители. Один из способов защиты — шифрование ре- зервного носителя. Это сравнительно простой процесс, который тем не менее требует соблюдения таких стандартов обеспечения защиты, как PCI DSS (Payment Card Industry Data Security Standard — стандарт защиты информации в индустрии платежных карт, раз- работанный международными платежными системами Visa и MasterCard). Существует множество утилит резервного копирования, которые облегчают жизнь системному ад- министратору. Вместе с тем, вам следует обеспечить сохранность и целостность ключей шифрования, а также их доступность при возникновении аварийных ситуаций. Резервные носители необходимо защищать и на физическом уровне. Носители нуж- но хранить не просто вне помещения, а под замком, ключ от которого надежно спрятан. Если соответствующие услуги предоставляет коммерческая компания, она должна га- рантировать конфиденциальность лент. Некоторые компании настолько заботятся о сохранности резервных копий, что даже создают их дубликаты. Активность файловой системы во время создания архива должна быть низкой Снятие резервных копий лучше проводить в периоды низкой активности систе- мы, потому что изменения файлов могут привести к ошибкам в работе команды dump. Архивы следует создавать, когда в системе работает мало пользователей (ночью или в выходные дни). Чтобы автоматизировать этот процесс, устанавливайте свои резервные носители каждый день перед уходом домой и позвольте демону cron выполнять эту ра- боту за вас. В этом случае архивирование будет происходить при минимальной вероят- ности изменения файлов, а сам процесс архивирования будет оказывать на пользовате- лей минимальное влияние. В наши дни практически невозможно выполнить резервное копирование при полном отсутствии каких-либо дисковых операций. Пользователям зачастую нужен постоянный и круглосуточный доступ к системе, службы работают сутки напролет, а для резервирова- ния баз данных необходимо использовать специальные процедуры. В большинстве случа- ев работу баз данных нужно временно приостанавливать или переводить в специальный “ослабленный” режим (с ухудшенными характеристиками), чтобы утилиты резервно- го копирования могли аккуратно собирать данные в определенное время суток. Узлы с большими объемами данных могут и не “выдержать” время простоя, необходимое для выполнения традиционных операций резервирования их базы данных. В такие дни оста- 1 Крупная финансовая компания, размещавшаяся во Всемирном торговом центре, хранила свои “внешние” резервные копии одним или двумя этажами ниже своих офисных помещений. Когда здание подверглось первой же террористической атаке, резервные ленты (как и сами компьютеры) были уничтожены. Поэтому “внешнее” хранилище должно быть действительно внешним.
344 Часть I. Основы администрирования ется только один способ обеспечить архивирование данных в отсутствие дисковой актив- ности — сначала создавать “снимок”, т.е. копию состояния каждого объекта (snapshot). СЭ О сетях хранения данных (storage area network — SAN) рассказывается в разделе 8.11. В большинстве контроллеров SAN (и во всех наших примерах операционных систем) предусмотрен тот или иной способ создания “снимка” файловой системы. Это средство позволяет относительно безопасно создавать резервные копии любой активной фай- ловой системы (даже при открытых файлах). В Linux “снимки” создаются с помощью менеджера логических томов (см. раздел 8.8), а в остальных примерах операционных си- стем — посредством файловой системы. “Снимки” можно создавать практически мгновенно благодаря “интеллектуальной” схеме копирования при записи. В процессе создания “снимка” на самом деле никакие данные не копируются и не перемещаются. Если “снимок” существует, то изменения, вносимые в файловую систему, записываются в новые области диска. В этом случае можно поддерживать два (или больше) образа при минимальном использовании допол- нительной памяти. Концептуально создание “снимков” можно сравнить с инкремент- ным резервным копированием, различие только в уровне процесса: не на уровне бло- ков, а на уровне файловой системы. В этом контексте “снимки” представляют собой основное средство создания “реаль- ных” резервных копий файловой системы. Но они никогда не заменяют автономные ре- зервные копии. “Снимки” позволяют упростить резервирование баз данных, поскольку для создания “снимка” работу базы данных необходимо приостановить лишь на секунду. Позже, используя “снимок”, можно выполнить более медленный процесс резервирова- ния на магнитную ленту, никоим образом не мешая базе данных обслуживать запросы. Проверяйте состояние своих носителей Известно немало ужасных историй о системных администраторах, которые не заме- чали проблем, связанных с созданием архивов, до тех пор, пока в системе не происходил серьезный сбой. Важными задачами администратора являются непрерывный контроль над соблюдением установленного порядка резервного копирования и проверка качества его выполнения. Ошибка со стороны оператора приводит к повреждению большего чис- ла архивов, чем любая другая ошибка. На первом этапе проверки следует заставить программу резервного копирования по окончании работы повторно прочесть все ленты2. Неплохо также просмотреть ленты на предмет наличия ожидаемого количества файлов. В идеале должна быть проконтроли- рована каждая лента, но это едва ли практически возможно в крупной организации, где каждый день задействуются сотни лент. Благоразумнее в подобной ситуации осущест- влять выборочную проверку. Ш Более подробно команда restore рассматривается в разделе 10.4. Часто имеет смысл создать таблицу содержимого каждой файловой системы (для этого можно использовать команду restore -t утилиты dump) и сохранить результат (в виде списков) на диске. Полученные списки нужно называть так, чтобы их имена от- ражали связь с соответствующими лентами, например okra:usr. Jan. 13. База данных с такими записями помогает быстро определить, на каком носителе находится пропав- ший файл. Для этого достаточно выполнить команду grep с именем файла в качестве аргумента и выбрать самый последний его экземпляр. 2 Чтобы сравнить содержимое ленты с исходным деревом каталогов, в GNU-версиях можно использовать команду restore -С.
Глава 10. Резервное копирование 345 Успешное чтение таблицы содержимого свидетельствует о том, что архив создан нор- мально и что в случае необходимости наверняка можно будет восстановить файлы с но- сителя. Пробное восстановление файла, выбранного случайным образом, послужит еще более надежным доказательством возможности восстановления данных с этого носителя3. Периодически следует выполнять восстановление с произвольно выбранного резерв- ного носителя, чтобы убедиться в том, что оно по-прежнему возможно. Иногда стоит читать файлы со старых резервных лент (месячной и даже годичной давности)4, ведь у накопителей временами нарушается центровка, и они утрачивают способность читать ими же записанные ленты. Некоторые компании выполняют восстановление старых но- сителей, но их услуги стоят достаточно дорого. Еще один вид проверки — попробовать восстановить данные с носителя в другой ап- паратной среде. Если машинный зал сгорит, пользы от осознания того, что резервную копию можно было бы прочитать на расплавившемся накопителе, будет мало. В про- шлом цифровые аудиокассеты особенно часто страдали от этой проблемы, но теперь технология усовершенствована и носители стали значительно более надежными. Определите жизненный цикл носителя Срок службы всех носителей ограничен. Их можно и нужно использовать повтор- но, но не забывайте о предельном сроке эксплуатации, определяемом изготовителем носителя. Как правило, этот срок задается в виде количества проходов, которые спо- собна выдержать лента. Каждая такая операция, как архивирование, восстановление и команда mt f sf (перемотка на один файл вперед), представляет собой один проход. Неленточные носители обладают значительно более длительным сроком службы, кото- рый иногда выражают средним временем до отказа (mean-time-to-failure — MTTF), но в любом случае все аппаратные средства и носители имеют ограниченный срок службы. Поэтому имеет смысл оценивать его не в реальных годах, а с точки зрения продолжи- тельности жизни, например, собаки. Но прежде чем выбрасывать старые ленты, не забудьте стереть с них всю информа- цию или же сделать ее недоступной для считывания. В этом может помочь устройство для размагничивания магнитной ленты (большой электромагнит), но его следует дер- жать вдали от компьютеров и активных носителей. Разрезание или вытягивание лен- ты из кассеты — не слишком надежная защита данных, поскольку ленту сравнительно легко склеить или намотать заново. Компании, специализирующиеся на уничтожении документов, за сравнительно невысокую плату предоставляют услуги по уничтожению магнитных лент. Если в качестве резервных носителей вы используете жесткие диски, помните, что службы восстановления дисков стоят меньше тысячи долларов. И прежде чем с вашими дисками случится нечто непоправимое, подумайте заранее о средствах, обеспечивающих безопасное удаление (см. раздел 8.5), или о команде SCSI-форматирования. 3 Команда restore -t читает только таблицу содержимого архива, хранящуюся в начале лен- ты. При реальном восстановлении конкретного файла проверяется более крупная область носителя. 4 К пользователям, которые просят восстановить случайно удаленные файлы, полезно отно- ситься как к коллегам, которые просто помогают вам выполнить выборочный контроль вашей си- стемы архивации, а не как к источнику раздражения, не способному даже позаботиться о сохран- ности своих файлов. Позитивное отношение к пользователям делает вашу работу более приятной как для вас самих, так и для системы в целом (поскольку такие ситуации увеличивают количество выборочных проверок).
346 Часть I. Основы администрирования Компонуйте данные с учетом резервного копирования Когда есть столь дешевые и надежные дисковые устройства, возникает соблазн от- казаться от архивирования всех имеющихся данных, сосредоточив усилия лишь на критически важных файлах, тем более что многие системы заполняются практически бесконтрольно. Но если разумно распланировать схему дискового хранения, то можно существенно упростить процесс резервного копирования. Начать необходимо с оценки потребностей. • С данными каких типов придется иметь дело? • Как часто будут изменяться данные различных типов? • Насколько часто нужно выполнять резервное копирование, чтобы возможные по- тери причинили минимальный ущерб? • Какие сетевые и административные ограничения должны быть определены для данных? Используя эту информацию, следует продумать схему хранения данных с учетом ре- зервного копирования и возможного расширения системы в будущем. Лучше размещать каталоги проектов и домашние каталоги пользователей на выделенных файловых серве- рах, что упростит управление данными и позволит гарантировать их безопасность. С появлением убедительных решений по созданию образов системы зачастую проще заново сгенерировать сломанную систему, чем диагностировать неисправности и вос- станавливать поврежденные или недостающие файлы. Одни администраторы конфигу- рируют рабочие станции пользователей в расчете на сохранение всех данных на цен- трализованном сервере. Другие управляют группами серверов, которые характеризуются почти идентичными конфигурациями и данными (такими, как содержимое веб-сайтов занятости). В такой среде не разумно резервировать объемные массивы однотипных си- стем. Однако те, кто “поведен” на безопасности систем, настаивают на интенсивном создании резервных копий, чтобы в случае аварии данные всегда были доступны для судебного исследования. Будьте готовы к худшему После разработки схемы резервного копирования изучите самый худший сценарий: система полностью уничтожена. Определите, сколько информации будет потеряно и сколько времени уйдет на восстановление системы (включая время на закупку нового оборудования). Затем посмотрите, удовлетворяют ли вас полученные результаты. Более формальные организации для информации на конкретных серверах или фай- ловых системах часто определяют такие характеристики, как допустимое время восста- новления (Recovery Time Objective — RTO) и допустимый уровень восстановления (Reco- very Point Objective — RPO). С помощью этих значений можно обеспечить полноценное управление системой. Показатель RTO представляет собой максимальное время, которое бизнес может “вытерпеть” в ожидании восстановления после возникновения аварийной ситуации. Обычно для пользовательских данных значения RTO лежат в пределах от нескольких часов до нескольких дней, а для рабочих серверов — от нескольких секунд до несколь- ких часов. Показатель RPO означает, какая по давности резервная копия требуется для вос- становления данных, поврежденных по определенной причине (т.е. за какой срок вы
Глава 10. Резервное копирование 347 готовы потерять данные). Это значение влияет на уровень, на котором должны сохра- няться резервные копии. В зависимости от того, как часто изменяется набор данных и насколько он важен, значение RPO может колебаться от недель до часов и даже секунд. Очевидно, что резервные копии на магнитной ленте не могут удовлетворять требова- ниям, выраженным близкими к нулю значениями RPO, и поэтому такие требования обычно предполагают наличие больших инвестиций и специализированных устройств хранения данных, расположенных в нескольких информационных центрах. Несмотря на то что процесс определения этих показателей может показаться не- сколько произвольным, он все же позволяет “владельцам” данных и техническому персоналу одинаково понимать задачу сохранности данных. Этот процесс требует урав- новешивания стоимости и затрат в зависимости от конкретных требований бизнеса к восстанавливаемости. Это трудная, но важная задача, которую необходимо решать. 10.2. Устройства и носители, используемые ДЛЯ РЕЗЕРВНОГО КОПИРОВАНИЯ Поскольку многие неисправности могут приводить к одновременному выходу из строя сразу нескольких аппаратных устройств, резервные копии следует помещать на съемные носители. Поэтому важно создавать автономные резервные копии, которые не мог бы повредить ни один “самый сердитый” системный администратор. Например, копирование содержимого одного жесткого диска на другой на одном и том же компьютере или в одном и том же центре обработки данных, конечно, лучше, чем ничего, но оно обеспечивает весьма незначительный уровень защиты на случай от- каза сервера. Хотя компании, организующие резервное копирование через Интернет, становятся все более популярными, все же большинство резервных копий хранится ло- кально. В следующих подразделах описываются различные виды носителей для хранения ре- зервных копий. Они перечислены в порядке возрастания емкости. Производители устройств резервного копирования любят указывать емкость, оттал- киваясь от объема сжатых данных, оптимистично предполагая коэффициент сжатия 2:1 или выше. Ниже мы будем приводить реальное число байтов, которое физически можно записать на тот или иной носитель без учета сжатия. Коэффициент сжатия влияет также на пропускную способность устройства. Если на- копитель позволяет записывать данные на ленту со скоростью 1 Мбайт/с, а производи- тель заявляет о коэффициенте 2:1, то пропускная способность волшебным образом воз- растает до 2 Мбайт/с. Как и в случае емкости, мы проигнорируем рекламную скорость записи и будем учитывать реальные показатели. Оптические носители: CD-R/RW, DVD±R/RW, DVD-RAM и Blu-ray При цене около 30 центов за штуку, диски CD и DVD хорошо подходят для резерв- ного копирования небольших, изолированных систем. Емкость компакт-дисков CD со- ставляет около 700 Мбайт, а дисков DVD — около 4,7 Гбайт. Емкость двухслойных DVD Доходит до 8,5 Гбайт. Дисководы с возможностью записи на эти носители выпускаются для всех стандарт- ных шин (SCSI, IDE, USB, SATA и другие) и во многих случаях настолько дешевы, что,
348 Часть I. Основы администрирования по существу, на их стоимость можно не обращать внимание. Теперь, когда цены CD и DVD практически сравнялись, нет никаких причин использовать CD, а не DVD (если, конечно, не учитывать, что устройства чтения CD все еще более распространены). Запись на оптические носители осуществляется фотохимическим способом посред- ством лазерного луча. Хотя достоверных данных нет, считается, что оптические носи- тели долговечнее, чем магнитные. Однако даже диски с однократной записью (CD-R, DVD-R и DVD+R) уступают по долговечности фабричным (штампованным) компакт- дискам CD и DVD. Современные записывающие приводы DVD не уступают по скорости ленточным на- копителям (а некоторые даже и превосходят их). Версии DVD-R и DVD+R предназна- чены для одноразовой записи. Носители DVD-RW, DVD+RW и DVD-RAM допускают многократную запись. Система DVD-RAM имеет встроенные средства обработки дефек- тов и поэтому более надежна, чем другие типы носителей. В то же время эти носители значительно дороже остальных. По прогнозам изготовителей потенциальный срок службы этих носителей при пра- вильном их хранении должен составлять сотни лет. Изготовители рекомендуют хранить диски в отдельных коробках при постоянной температуре в диапазоне 41—68°F (5о-20°С) и относительной влажности 30—50% в защищенном от прямых солнечных лучей месте. Для маркировки дисков следует использовать только водорастворимые маркеры. Веро- ятно, в общем случае более реальным можно считать срок службы, равный 1—5 годам. Как показывают многочисленные исследования, выполненные независимыми экс- пертами, надежность оптических носителей, в основном, определяется фирмой-изгото- вителем. Это как раз тот случай, когда приобретение первоклассных носителей полно- стью окупается. К сожалению, даже изделия одного и того же изготовителя различаются по качеству. Недавно на рынке оптических носителей появились диски типа Blu-Ray, различны^ версии которых позволяют хранить 25—100 Гбайт данных. Их высокая емкость обеспе- чивается более короткой длиной волны (405 нм) лазера, используемого для чтения и за- писи (отсюда и название этого типа носителей “blue” — голубой). Поскольку цена на эти носители падает, технология Blu-Ray обещает стать хорошим решением для резерв- ного копирования. Переносные и съемные жесткие диски Внешние накопители, подключаемые через порты USB 2.0 или eSATA, распростра- нены повсеместно. Обычно в качестве основного устройства хранения используется toi или иной жесткий диск, но флеш-память (вездесущие “портативные диски”) находи? все большее распространение. Емкости этих устройств варьируются от менее 250 Гбайп до 2 Тбайт и более. В настоящее время используются также полупроводниковые (твер- дотельные) диски (Solid state drives — SSD), в основе которых лежит флеш-память емко- стью до 160 Гбайт. В настоящее время максимальная емкость устройств флеш-памяти встречающихся на рынке, составляет около 64 Гбайт. В основном, долговечность устройств флеш-памяти определяется числом циклов за- писи. Предположительно устройства среднего класса рассчитаны на 100 000 циклов. Основным ограничением устройств, используемых в качестве резервных носителей является то, что они обычно работают в реальном масштабе времени и поэтому весьма чувствительны к скачкам напряжения, перегреву и злонамеренным манипуляциям поль- зователей. Для того чтобы жесткие диски эффективно работали резервными носителя
Глава 10. Резервное копирование 349 ми, они должны быть вручную размонтированы или отсоединены от сервера. Съемные устройства облегчают эту задачу. Специализированные “безленточные” системы резер- вирования, которые используют диски для эмулирования автономной природы ленточ- ных устройств, также присутствуют на рынке. Магнитные ленты Многие виды носителей информации сохраняют данные за счет специального ори- ентирования магнитных частиц. Такие носители подвержены разрушительной силе со стороны электрических и магнитных полей. Поэтому вы должны остерегаться таких ис- точников магнитного поля, как акустические колонки, трансформаторы, источники пи- тания, неэкранированные электродвигатели, дисковые вентиляторы и ЭЛТ-мониторы, а также длительного воздействия фонового излучения Земли. Все магнитные ленты рано или поздно (спустя годы) становятся нечитабельными. Большинство ленточных носителей прослужат верой и правдой по крайней мере три года, но если вы планируете хранить свои данные больше трех лет, должны использовать носитель, который сертифицирован для более долгого хранения информации, или пе- риодически переписывать данные на другие носители. Малые лентопротяжные устройства: 8-миллиметровые и DDS/DAT Различные варианты лентопротяжных устройств, как 8-миллиметровых, так и рабо- тающих в стандарте DDS (Digital Data Storage — цифровое хранение данных) и DAT (Digital Audio Таре — цифровая аудиолента), образуют дешевый сегмент рынка ленточ- ных накопителей. Еще не так давно наибольшей популярностью пользовались 8-мил- лиметровые лентопротяжные устройства компании Exabyte, но в них наблюдалась тен- денция к нарушению центровки каждые 6—12 месяцев, что вело к необходимости их регулировки в ремонтной мастерской. Часто лентопротяжный механизм растягивал лен- ты, и они становились нечитаемыми. Емкость этих лент, равная 2-7 Гбайт, делает их малопригодными для резервирования даже современных настольных систем, не говоря уже о серверах. Накопители DDS/DAT — это устройства, в которых запись данных осуществляется на 4-миллиметровую ленту методом спиральной развертки (наклонно-строчная запись). В действительности DAT-устройства относятся к стандарту DDS, но это непринципи- альное различие. Исходный формат обеспечивал емкость около 2 Гбайт, но в следующих версиях стандарта DDS емкость существенно возросла. Последняя версия (DAT 160) по- зволяет хранить до 80 Гбайт данных при скорости их передачи, равной 6,9 Мбайт/с. По заявлениям изготовителей ленты должны выдерживать до 100 циклов резервной записи, а их срок службы составляет до 10 лет. Устройства DLT/S-DLT Устройства DLT/S-DLT (Digital Linear Tape/Super Digital Linear Tape) представляют основную разновидность носителей резервного копирования. Они надежны и позволяют хранить большие объемы данных. Их родоначальниками являются кассетные накопите- ли ТК-50 и ТК-70 компании DEC. Впоследствии компания DEC продала технологию Фирме Quantum, которая увеличила скорость записи и емкость носителей и снизила на Них Цены. В 2002 году Quantum приобрела лицензию на телеологию Super DLT, разрабо-
350 Часть I. Основы администрирования тайную компанией Benchmark Storage Innovations. При использовании этой технологии записывающая головка наклоняется вперед и назад, что позволяет снизить перекрест- ные искажения между соседними дорожками. В настоящее время компания Quantum предлагает две серии устройств: одна ориен- тирована на достижение максимальной производительности, а вторая — на максималь- ную емкость. Пользователь имеет возможность выбрать то, что ему наиболее подходит. Емкости ленты варьируются от 800 Гбайт в устройствах серии DLT-4 до 160 Гбайт в устройствах DLT-4 серии повышенной емкости при скоростях передачи данных 60 и 10 Мбайт/с соответственно. По заявлениям производителей ленты прослужат от 20 до 30 лет. Но будут ли к тому времени существовать устройства, способные их про- честь? Много ли вам известно устройств чтения 9-дорожечных лент, которые до сих пор функционируют? Недостатком технологии S-DLT является цена носителей, которая достигает 90— 100 долларов (для 800-гигабайтовых лент). Для какой-нибудь инвестиционной компа- нии с Уолл-стрит это, может быть, нормальная цена, но для университета она несколько высоковата. Устройства AIT и SAIT Технология AIT (Advanced Intelligent Таре — усовершенствованная лента со встроен- ной логикой) — это линия усовершенствованных устройств записи на 8-миллиметровую ленту, выпускаемых компанией Sony. В 1996 году компания отказалась от поддержки устройств Exabyte и представила собственный стандарт AIT-1, в котором также исполь- зовался метод наклонно-строчной записи (спиральная развертка), но емкость накопите- лей была в два раза выше. В настоящее время Sony предлагает версию AIT-4 (с емкостью кассеты 200 Гбайт при максимальной скорости передачи 24 Мбайт/с) и свою последнюю разработку AIT-5 (с удвоенной емкостью кассеты при той же максимальной скорости передачи). Предлагаемые компанией Sony устройства SAIT половинной высоты используют бо- лее широкий носитель и обладают большей емкостью, чем AIT. Ленты SAIT позволяют хранить до 500 Гбайт данных при скорости их передачи 30 Мбайт/с. Эти устройства наи- более популярны в качестве ленточных библиотек. В AIT- и SAIT-устройствах используются ленты АМЕ (Advanced Metal Evaporated — усовершенствованная технология напыления металла) с большим сроком эксплуатации. В ленточных картриджах имеется встроенное ЭСППЗУ (электрически стираемое про- граммируемое ПЗУ), содержащее микрокод носителя, но для использования этого ми- крокода требуется программная поддержка. Цена устройств и лент сопоставима с ценой DLT-аналогов. Устройства VXA/VXA-X В 2006 году компания Tandberg Data купила технологии УХА и УХА-Х, разработан- ные компанией Exabyte. В лентопротяжных устройствах УХА использована технология, которая в компании Exabyte получила название пакетной технологии передачи дан- ных. В устройствах УХА-Х по-прежнему используются ленты АМЕ производства ком- пании Sony. Емкость устройств серии У возрастает с появлением носителей более вы- сокой емкости. Заявленная емкость устройств серий УХА и X колеблется в диапазоне 33—160 Гбайт при скорости передачи 24 Мбайт/с.
Глава 10. Резервное копирование 351 Устройства LTO Открытый стандарт ленты с линейной записью (Linear Tape-Open — LTO) был раз- работан компаниями IBM, HP и Quantum в качестве альтернативы запатентованному! формату DLT Последняя версия этого формата, LTO-4, позволяет хранить 800 Гбайт данных при скорости передачи 120 Мбайт/с. Предполагаемый срок эксплуатации лент LTO — 30 лет, но они чувствительны к влиянию магнитных полей. Устройства предыду- щего поколения (LTO-3) продаются гораздо дешевле, что вполне ожидаемо, и при этом они вполне пригодны для использования во многих средах. Цена картриджей формата LTO-3 (емкостью 400 Гбайт) составляет около $25, а формата LTO-4 — $40. Системы с автоматической загрузкой носителей (автозагрузчики, ленточные массивы и библиотеки) Стоимость современных жестких дисков столь мала, что многие организации могут позволить себе использовать диски огромной емкости. Поэтому для резервного копиро- вания всех имеющихся данных иногда требуется несколько лент, даже если емкость каж- дой из них составляет 800 Гбайт. В таких случаях можно порекомендовать приобрести автозагрузчик, ленточный массив или библиотеку. Автозагрузчик — это простое устройство для автоматической смены лент, используе- мое со стандартным накопителем. Он оснащен съемным магазином, в который помеща- ются ленты. Заполненная лента изымается из накопителя и заменяется пустой лентой, которую автозагрузчик берет из магазина. В магазинах автозагрузчиков обычно помеща- ется до десяти лент. Ленточный массив — это устройство, которое автоматически меняет съемные но- сители в нескольких накопителях. Выпускаются массивы для различных типов носите- лей. Часто они поставляются вместе со специальными программами создания резерв- ных копий, которые манипулируют устройством смены носителей. Такие программные продукты выпускаются, в частности, компаниями Storage Technology (теперь это часть Oracle) и Sony. Ленточные библиотеки (также известные как библиотекари с автоподачей картрид- жей) — это устройства для хранения огромных (терабайтовых) объемов данных. Они представляют собой аппаратные комплексы размером со шкаф, в которых имеется ма- нипулятор типа “рука”, обслуживающий многочисленные полки с ленточными носи- телями или оптическими приводами. Несложно догадаться, что эти устройства очень дороги как при покупке, так и в обслуживании, ведь им требуется специальное электро- питание, помещение и особый режим вентиляции. Как правило, вместе с библиотекой заказываются услуги оператора, который отвеча- ет за установку и наладку комплекса. С библиотекой поставляется также программный пакет, управляющий ее работой. Ведущими производителями ленточных библиотек яв- ляются компании Storage Technology (Oracle), Spectra Logic и HP. Жесткие диски Стремительное снижение стоимости жестких дисков делает их вполне достойными кандидатами на роль устройств резервного копирования. И хотя мы не рекомендуем ко- пировать один диск на другой на том же самом компьютере, можно создавать резервные копии по сети; их стоимость при этом будет очень невелика, а времени, требуемого для постановления больших наборов данных, уйдет достаточно мало.
352 Часть I. Основы администрирования Конечно, емкость жесткого диска ограничена, и со временем он будет занят полно- стью. Однако резервные копии на жестких дисках — прекрасное средство защиты от случайного удаления файлов. Когда есть вчерашний образ диска, доступный по сети че- рез NFS или CIFS, пользователи получают возможность исправлять свои ошибки без вмешательства администратора. Помните, что оперативная память, как правило, недостаточно защищена от злонаме- ренных взломщиков или отказов оборудования информационных центров. Если вы не можете сохранять свои резервные копии автономно, то, по крайней мере, подумайте об их географической диверсификации. Интернет и службы облачного резервирования данных В последнее время поставщики услуг начали предлагать решения, обеспечивающие сохранение данных в Интернете. Вместо использования хранилища в собственном ин- формационном центре, вы арендуете хранилище у так называемого облачного постав- щика услуг (cloud provider). Этот подход не только обеспечивает доступ по запросу к хранилищу практически неограниченного размера, но и предоставляет простой способ сохранения данных в нескольких географических местах. Цены на услуги интернет-служб хранения информации составляют от 10 центов за гигабайт в месяц и возрастают по мере добавления функциональных возможностей. Например, некоторые провайдеры позволяют выбрать количество сохраняемых резерв- ных копий данных. Такая оплата по факту потребления позволяет вам выбрать уровень надежности, соответствующий вашим данным и бюджету. Интернет-резервирование действует только в случае, если ваше интернет-соединение достаточно быстрое для передачи копий изменений в течение ночи (т.е. без погрязания в “реальном” трафике). Если в вашей организации обрабатываются очень большие объ- емы данных, то вряд ли вы сможете резервировать их с помощью Интернета. Но для небольших организаций “облачное” резервирование может оказаться идеальным реше- нием, поскольку оно не требует никакой предоплаты и покупки оборудования. Однако следует помнить, что любые данные, передаваемые через Интернет или сохраняемые в “облачных” копиях, должны быть зашифрованы. Типы носителей Как мы видим, существует множество возможностей. В табл. 10.1 приведены харак- теристики рассмотренных выше носителей и соответствующих им устройств. Таблица 10.1. Сравнительные характеристики носителей, применяемых для резервного копирования Носитель ©ЙИИКЯЙг f Пбайт b-МйВВеО* ? r liMWyWBCTpJf Щянк- далл. s ~ ' -— CD-R 0,7 7 15 0,15 0,21 Нет Да CD-RW 0,7 4 20 0,3 0,42 Да Да DVD±R 4,7 30 30 0,3 0,06 Нет Да DVD+R DLB 8.5 30 30 1 0,12 Нет Да DVD±RW 4,7 10 30 0,4 0,09 Да Да
Глава 10. Резервное копирование 353 Окончание табл. 10.1 Носитель Емкость®, Гбайт Скорость*, мбайт/с Цена ПИЛМЛ. доли. . нм*ь-':'В<мй!чиге -У Blu-ray 25 30 100 3 0,12 Нет Да DDS-4 (4 мм) 20 30 100 5 0,25 Да Нет DLT/S-DLT 160 16 500 10 0,06 Да Нет DLT-S4 800 60 2500 100 0,13 Да Нет А1Т-4(8мм) 200 24 1200 40 0,2 Да Нет AIT-5 400 24 2500 50 0,13 Да Нет VXA-320 160 12 800 60 0,38 Да Нет LT0-3 400 80 200 25 0,06 Да Нет LT0-4 800 120 1600 40 0,05 Да Нет а Емкость и скорость указаны без учета сжатия данных. 6 Допускает произвольный доступ к любому фрагменту данных. в Двухслойный. Что покупать В табл. 10.1 достаточно точно отражено состояние рынка оборудования для вы- полнения резервного копирования. Все устройства резервного копирования работают достаточно хорошо, и среди систем одной ценовой категории обычно трудно отдать какой-либо предпочтение. Покупайте устройство, которое отвечает требованиям вашей организации и имеет приемлемую цену. Если вы разрабатываете новое оборудование, убедитесь в том, что оно поддерживается вашей операционной системой и программны- ми средствами резервирования данных. Несмотря на то что цена и емкость носителя — важные факторы, не менее важно учесть и пропускную способность. Со скоростными носителями приятнее иметь дело, но вы должны внимательно отнестись к покупке накопителя на магнитной ленте, чтобы он не перегружал сервер. Если сервер не в состоянии передавать данные на накопитель с приемлемой скоростью, нужно останавливать процесс записи на накопитель на время, пока сервер его не “догонит”. Конечно, низкие скорости никого не могут устроить, но и слишком высокие тоже вам ни к чему. Выбирайте резервный носитель в соответствии с объемами ваших данных. Нет смыс- ла тратить деньги на устройства DLT-S4, если вам необходимо защищать лишь несколь- ко сотен гигабайт данных. Ваш накопитель в этом случае будет оставаться полупустым. Оптические носители, устройства DDS и LTO лучше всего подходят для небольших рабочих групп и отдельных компьютеров, в которых установлены диски высокой емко- сти. Начальная цена этих систем относительно умеренна, а их носители широко рас- пространены, к тому же за каждым стандартом стоит целый ряд производителей. Все системы обладают достаточным быстродействием, что позволяет архивировать большие объемы данных за разумное время. Устройства DLT, AIT и ЕГО имеют сопоставимые характеристики. Трудно сделать вы- бор в пользу одной из этих технологий, тем более что ситуация может измениться с по- явлением новых спецификаций и моделей устройств. Все эти форматы тщательно про-
354 Часть I. Основы администрирования думаны и могут быть успешно интегрированы в любую систему — будь то среда учебно- го заведения или среда крупной коммерческой организации. В следующих разделах базовый термин “лента” используется в качестве универсаль- ного обозначения носителей, выбранных для резервного копирования. Примеры команд, выполняющих резервное копирование, даются в контексте ленточных накопителей. 10.3. Экономия ПРОСТРАНСТВА И ВРЕМЕНИ С ПОМОЩЬЮ ИНКРЕМЕНТНОГО АРХИВИРОВАНИЯ Почти все инструменты резервирования поддерживают, по крайней мере, два раз- ных вида архивирования: полное резервное (страховое) копирование и инкрементное. Полное копирование включает все содержимое файловой системы, а инкрементное — только файлы, которые были изменены с момента предыдущего резервирования. Инкре- ментное резервное копирование способствует минимизации объема ленточного накопи- теля и пропускной способности сети, требуемых для ежедневного создания резервных копий. Поскольку большинство файлов никогда не меняется, даже в простейшей схеме инкрементного архивирования многие файлы не включаются в ежедневный архив. Многие инструменты резервирования поддерживают дополнительные виды архиви- рования (помимо основных процедур выполнения полного и инкрементного резервного копирования). Стоит отметить, что все эти дополнения являются более сложными ва- риациями на тему инкрементного копирования. Единственный способ уменьшить объ- ем резервируемых данных — воспользоваться тем, что многие данные уже сохранены на какой-нибудь архивной ленте. Существуют программы резервирования, которые распознают идентичные копии данных, даже если они находятся в различных файлах на различных компьютерах. При этом гарантируется, что на ленту записывается только одна копия данных. Эта функция называется дедупликацией (разделение на несколько частей), и она может быть очень полезной для ограничения размера резервных копий. Выбор схемы зависит от следующих факторов: • активность файловых систем; • емкость устройства резервного копирования; • необходимая степень избыточности; • число лент, которые нужно приобрести. При создании архива ему присваивается номер уровня (целое число от 0 до 9). В ар- хив уровня N копируются все файлы, которые изменились с момента создания послед- него архива уровня ниже N. В архив нулевого уровня включается вся файловая система. В режиме инкрементного архивирования файловую систему можно вернуть в то состоя- ние, в котором она находилась в момент последнего резервного копирования, хотя для этого может потребоваться восстановление файлов из нескольких лент5. Ранее команда dump поддерживала уровни 0—9, но более новые ее версии поддер- живают тысячи уровней архивирования. При введении дополнительных уровней не- большое число регулярно изменяющихся файлов разбивается на более мелкие сегменты. Сложная схема резервного копирования обеспечивает следующие преимущества: 5 Большинство версий команды dmzg> не отслеживает, какие файлы были удалены с момента создания архива. При восстановлении информации из инкрементных резервных копий удаленные файлы снова появятся в системе.
Глава 10. Резервное копирование 355 • данные будут архивироваться чаще, что позволит снизить возможные потери; • ежедневно будет использоваться меньшее число лент (или же все поместится на одну ленту); • в целях защиты от ошибок будет создаваться несколько копий каждого файла; • пропускная способность сети и время, необходимое для резервирования, суще- ственно сокращаются. Эти преимущества необходимо соизмерить со сложностью, связанной с поддержкой системы и восстановлением файлов. Мы опишем несколько возможных схем и приве- дем аргументы в пользу каждой из них. Иногда можно использовать эти схемы без из- менений, а иногда приходится разрабатывать совершенно другие схемы. Простая схема Если общий размер дискового пространства меньше емкости ленты, можно пред- ложить простой график архивирования. Архивы нулевого уровня каждой файловой си- стемы должны создаваться ежедневно. Используйте многократно один набор лент, но через каждые Адней (где А определяется потребностями организации) откладывайте ленты навсегда. Стоимость такой схемы составит (365/7V) * (цена ленты) в год. При соз- дании очередного архива нельзя использовать предыдущую ленту. Лучше осуществлять ротацию лент, чтобы в случае уничтожения одного из архивов можно было восстановить архив предыдущего дня. Подобная схема обеспечивает высокую избыточность и значительно упрощает вос- становление данных. Она хорошо подходит для организации, имеющей много денег, но очень занятого (или неопытного) администратора. С точки зрения надежности и удоб- ства это идеальная схема. От нее не следует отступать без особой на то причины (напри- мер, в целях экономии лент или снижения трудоемкости). Умеренная схема В большинстве организаций придерживаются более разумного подхода: выделяется по одной ленте на каждый день недели, каждую неделю месяца (понадобится пять таких лент) и каждый месяц года. Ежедневно создается дневной архив девятого уровня, еже- недельно — недельный архив пятого уровня, ежемесячно — месячный архив третьего уровня. Архив нулевого уровня нужно создавать всякий раз, когда инкрементные копии становятся слишком большими для одной ленты. Чаще всего это происходит с лентами месячного архива. В любом случае архивирование нулевого уровня необходимо прово- дить хотя бы раз в год. Выбор уровней 3, 5 и 9 сделан произвольно. С таким же успехом можно использо- вать уровни 1, 2 и 3, но интервалы между ними дают определенную свободу для маневра на случай, если впоследствии потребуется добавить еще один уровень. (В других про- граммах резервирования вместо уровней, выраженных числами, используются подходы, определяемые такими терминами, как полное, дифференциальное и инкрементное ар- хивирование.) Такой график требует наличия двадцати четырех основных лент, а также какого-то количества лент для архивов нулевого уровня. Общее число необходимых лент невели- ко, но и избыточность невысока.
356 Часть I. Основы администрирования 10.4. Команда dump: настройка РЕЖИМА РЕЗЕРВИРОВАНИЯ Самые распространенные программные средства создания резервных копий и вос- становления данных — команды dump и restore. Они существуют уже длительное вре- мя и хорошо изучены. В большинстве организаций команды dump и restore использу- ются автоматизированными системами резервного копирования. Д Наличие команд dump и restore в системе зависит от того, какие опции были заданы при установке Linux, поэтому не исключено, что их придется инстал- лировать явно. Для каждой системы существует специальный программный пакет, упрощающий процедуру установки. Текущая версия ядра системы Red Hat во время установки предлагает установить административный пакет, кото- рый включает в себя команду dump. В системах Solaris команды dump и restore называются uf sdump и uf srestore SOiariS соответственно. Команда dump существует, но она не связана с резервирова- нием данных. Как можно понять из названий этих команд, uf s-команды рабо- тают только со старыми файловыми системами UFS; они не работают в файло- вых системах ZFS. О вариантах ZFS-резервирования написано в разделе 10.6. Команда uf sdump принимает те же флаги и аргументы, что и традиционная коман- да dump в других системах, но обрабатывает аргументы по-другому. Команда uf sdump ожидает приема всех флагов, содержащихся в первом аргументе, и требует, чтобы аргу- менты флагов следовали в определенном порядке. Например, в случае, когда большин- ство команд принимает последовательность аргументов-а 5 -Ь -с 10, Solaris-команда uf sdump примет такую последовательность: abc 5 10. Предполагается, что команда uf sdump используется только в немонтируемых файло- вых системах. Если вам нужно выполнить резервирование активной файловой системы, запустите сначала Solaris-команду f ssnap, а затем для получения “снимка” системы вы- полните команду uf sdump. • В системе AIX команда dump называется backup, хотя команда restore со- хранила прежнее имя restore. Команда dump существует, но она не связана с резервированием данных. Для простоты мы будем называть команды резервирования “общими” именами dump и restore, отображая их традиционные флаги командной строки. Несмотря на другие названия в некоторых системах, эти команды функционируют аналогичным образом. Учитывая важность надежного архивирования, имеет смысл проверить назначение фла- гов в man-страницах на компьютере, данные которого вы резервируете; поскольку мно- гие изготовители имеют обыкновение изменять значение хотя бы одного флага. Архивирование файловых систем Команда dump формирует перечень файлов, которые модифицировались с момента предыдущего архивирования, а затем упаковывает эти файлы в один большой архив, подлежащий записи на внешнее устройство. Команда dump обладает рядом преиму- ществ, по сравнению с другими утилитами, описанными в этой главе. • Резервные копии могут быть записаны на несколько лент.
Глава 10. Резервное копирование 357 • Можно выполнять резервное копирование и восстановление файлов любого типа (даже файлов устройств). • Права доступа, информация о владельцах и даты модификации файлов сохраняются. • Обеспечивается правильная обработка файлов с “дырами”6. • Резервное копирование может выполняться в инкрементном режиме (на ленту за- писываются только модифицированные версии файлов). GNU-версия команды tar, используемая в Linux, также реализует все эти возмож- ности, но средства инкрементного архивирования у команды dump лучше. К сожалению, так сложилось, что версия команды tar, входящая в состав большин- ства основных UNIX-систем, не обладает перечисленными выше особенностями GNU- версии. Если с резервными копиями нужно работать не только в Linux, но и в других UNIX-системах, то у команды dump нет конкурентов. Она одинаково ведет себя на раз- ных платформах, поэтому нет смысла осваивать две команды, когда достаточно одной. Команда dump предоставляет меньше возможностей, но команда tar разборчива! ДВ системах Linux команда dump поддерживает файловые системы в расширен- ном составе. Возможно, для поддержки других файловых систем вам придется загрузить и инсталлировать другие версии команды dump. Команда dump понимает структуру исходных файловых систем и непосредственно читает таблицы индексных дескрипторов, чтобы определить, какие файлы подлежат ар- хивированию. Такое знание файловой системы делает команду dump весьма эффектив- ной, но вместе с тем налагает на нее определенные ограничения7. 03 Подробная информация об NFS приведена в главе 18. Одно из ограничений заключается в том, что каждая файловая система должна ар- хивироваться в индивидуальном порядке. Другое ограничение: разрешается копировать только файловые системы локального компьютера, а файловую систему NFS, смонти- рованную по сети, архивировать нельзя. Тем не менее можно создать резервную копию локальной файловой системы на удаленном ленточном накопителе8. Еще одна приятная особенность команды dump связана с тем, что она не обращает внимания на длину имен файлов. Иерархии каталогов могут быть произвольно глубоки- ми, и длинные составные имена обрабатываются корректно. Первым аргументом команды dump должен быть уровень архива. Для того чтобы оп- ределить, насколько давно создавался последний архив, команда dump проверяет файл /etc/dumpdates. Флаг -и заставляет команду по завершении копирования автомати- чески обновить файл /etc/dumpdates. При этом регистрируются дата, уровень архива и имя файловой системы. Если флаг -и ни разу не использовался, всем архивам будет присваиваться уровень 0, поскольку факт предыдущего резервного копирования файло- 6 “Дыры” — это блоки, которые никогда не содержали данных. Если открыть файл и записать в него один байт, а затем переместить указатель текущей позиции на 1 Мбайт вперед и записать еще один байт, то полученный “разреженный” файл будет занимать всего два дисковых блока, хотя его логический размер гораздо больше. Много “дыр” обычно содержат файлы, созданные в СУБД Berkeley DB или ndbm. Команда dusp требует доступа к неструктурированным разделам диска. Каждый, кому раз- решено выполнять резервное копирование, может, приложив определенные усилия, прочесть все файлы в системе. Унаследованные системы для создания резервной копии системы на удаленном ленточном накопителе могут использовать отдельную команду rdump. Современные версии команды dump принимают аргумент -f имя_узла:ленточное_устройство.
358 Часть I. Основы администрирования вой системы нигде не отражался. Если имя файловой системы изменилось, можно от- редактировать файл /etc/dumpdates вручную. Щ О номерах устройств рассказывается в разделе 13.2. Свою выходную информацию команда dump посылает на устройство, заданное по умолчанию. Как правило, это основной ленточный накопитель. Для указания друго- го устройства необходимо использовать флаг -f. Когда на одну ленту помещается не- сколько архивов, задайте имя ленточного устройства, не поддерживающего режим об- ратной перемотки (т.е. укажите файл устройства, который не вызывает перемотку ленты по окончании записи, — для большинства ленточных устройств такой файл создается наряду со стандартным)9. Прочитайте man-страницу, посвященную вашему ленточному устройству, чтобы определить точное имя соответствующего файла. В табл. 10.2 приведе- но несколько советов для наших четырех примеров систем. Таблица 10.2. Файлы устройств для стандартного ленточного накопителя SCSI Система ,Ч- 1 1 ',1 «.‘."‘"к" С перемоткой .111141 1. N И1 |Щ1и Без перемотки Linux /dev/stO /dev/nstO Solaris /dev/nut/0 /dev/rmt/0n HP-UX /dev/rmt/0m /dev/rmt/Omn AIX /dev/rmtO /dev/rmtO. 1 Если случайно выбран файл устройства с обратной перемоткой, все закончится со- хранением только последней заархивированной файловой системы. Поскольку команда dump не проверяет, перемотана лента в начало или нет, эта ошибка не повлечет за собой других ошибок и станет очевидной лишь при попытке восстановить файлы. Чтобы заархивировать удаленную систему, удаленное устройство нужно задать в фор- мате имя_компьютера устройство. $ sudo dump -Ou -f anchor:/dev/nstO /spare Права доступа к удаленному ленточному устройству определяются посредством ка- нала SSH. Подробнее о SSH рассказывается в разделе 22.10. Раньше команде dump нужно было указывать точную длину ленты, чтобы запись пре- кращалась при достижении конца ленты. Современные накопители самостоятельно об- наруживают конец ленты и сообщают об этом команде dump, которая перематывает лен- ту в начало, выталкивает носитель из устройства и запрашивает новую ленту. Поскольку применение различных аппаратных алгоритмов сжатия не позволяет определить длину ленты на основании емкости носителя, лучше ориентироваться на сигнал конца ленты (EOT-End Of Таре). Все версии команды dump воспринимают опции -d и -s, которые задают плотность записи информации на магнитную ленту (tape density) в байтах на дюйм и длину ленты в футах соответственно. Чуть более чувствительные версии позволяют указывать размеры в килобайтах (с помощью опции -В). Для версий, которые “не понимают” эти опции, для выражения желаемых размеров вам придется предварительно произвести некоторые арифметические вычисления. Например, предположим, что вы хотите создать архив уровня 5 файловой системы /work на ленточном накопителе DDS-4 (DAT), собственная емкость которого состав- 9 Для всех файлов ленточного устройства задан один и тот же старший номер устройства. Младший номер устройства сообщает драйверу о наличии особых свойств (режим обратной пере- мотки, режим перестановки байтов и т.д.).
Глава 10. Резервное копирование 359 ляет 20 Гбайт (при обычной емкости сжатых данных около 40 Гбайт). DAT-устройства могут сообщать о конце ленты (EOT), поэтому нам нужно “обмануть” команду dump и установить размер ленты равным значению, намного превышающему 40 Гбайт, ска- жем, 50 Гбайт. Тем самым мы “выжмем” около 60 000 футов при плотности 6 250 байт на дюйм. # dump -5u -s 60000 -d 6250 DUMP: Date of this level DUMP: Date of last level DUMP: Dumping /dev/hda2 DUMP: mapping (Pass I) DUMP: mapping (Pass II) DUMP: estimated 18750003 -f /dev/nstO /work 5 dump: Wed Nov 18 14:28:05 2009 0 dump: Sun Nov 15 21:11:05 2009 (/work) to /dev/nstO [regular files] [directories] tape blocks on .23 tape(s) За флагами -5u следуют параметры -s (размер: 60 000 футов), -d (плотность. 6 250 байт на дюйм) и -f (файл устройства: /dev/nstO). В конце указывается обязатель- ный аргумент: имя файловой системы (/work). Одни версии (таких большинство) ко- манды dump позволяют задавать файловую систему с помощью ее точки монтирования, как в приведенном выше примере. Другие требуют указывать исходный файл устройства. Последняя строка результатов выполнения приведенной выше команды подтвержда- ет, что команда dump не будет пытаться менять ленты по собственной инициативе, по- скольку она “считает”, что для данного архива понадобится только около четверти лен- ты. Хорошо, если количество ожидаемых лент больше 1, так как заданный размер ленты больше реального. Команда dump достигнет реального конца ленты (EOT) раньше, чем она достигнет собственного вычисленного предела. Команда restore: восстановление файлов из резервных копий Команда, восстанавливающая данные с резервных лент, называется restore. Вначале рассмотрим восстановление отдельных файлов (или небольших групп файлов), а затем — файловых систем целиком. Обычно используется динамически связанная команда restore, поэтому для успеш- ной работы вам нужен доступ к библиотекам системы. Построение статически связанной версии команды restore потребует дополнительных усилий, но упростит восстановле- ние системы после аварии, поскольку в этом случае команда совершенно автономна. Первое, что нужно сделать, узнав о пропаже файла, — выяснить, на каких лентах есть его версии. Чаще всего пользователи просят найти самую последнюю версию файла, но так бывает не всегда. Например, пользователь, потерявший файл из-за случайного ко- пирования поверх него другого файла, будет искать ту версию, которая существовала до этой неприятности. Желательно, чтобы пользователи сообщали не только о том, какие файлы пропали, но и когда они пропали и когда модифицировались последний раз. Если не ведутся оперативные таблицы архивов, придется монтировать ленты одну за другой и пытаться восстанавливать пропавшие файлы, пока не будет найдена нужная лента. Если пользователь помнит примерную дату последнего изменения файла, можно с достаточной степенью вероятности предположить, на какой ленте он находится. Определив ленты, с которых будет производиться восстановление, создайте времен- ный каталог, к примеру, /var/restore, где будет сформирована большая иерархия под- каталогов, и перейдите в него с помощью команды cd. Команда restore обычно созда- ет каталоги, ведущие к файлу, прежде чем восстанавливать его. Не используйте для этих
360 Часть I. Основы администрирования целей каталог /tmp: в случае системного сбоя и последующей перезагрузки содержимое каталога может быть стерто. У команды restore много опций. Самые важные из них-------i, которая позволяет восстанавливать отдельные файлы и каталоги в интерактивном режиме, и -г, задающая полное восстановление всей файловой системы. Опция -х запрашивает автоматическое восстановление указанных файлов — будьте осторожны, чтобы не затереть существую- щие файлы. Команда restore -i читает с ленты таблицу содержимого, а затем позволяет пере- мещаться по архиву, как по обычному дереву каталогов, с помощью команд Is, cd и pwd. Найдя файл, который нужно восстановить, выполните команду add имя_файла. Когда все необходимые файлы выбраны, скопируйте их с ленты командой extract. Ш Команда mt описана в разделе 10.7. Если на одной ленте находится много архивов, то перед выполнением команды restore необходимо перемотать ленту на соответствующий архив с помощью команды mt. Не забудьте выбрать файл устройства без режима обратной перемотки! Например, для восстановления файла /users/janet/iamlost с удаленного лен- точного накопителя необходимо задать показанную ниже последовательность команд. Предполагается, что нужная лента найдена и смонтирована в точке tapehost:/dev/ ns to, а файловая система, содержащая начальный каталог пользователя janet, — чет- вертая на ленте. # mkdir /var/restore # cd /var/restore $ sudo mkdir /var/restore $ cd /var/restore $ sudo ssh tapehost mt -f /dev/nstO fsf 3 $ sudo restore -i -f tapehost:/dev/nstO restore> Is janet/ garth/ lost+found/ lynda/ restore> cd janet restore> Is afile bfile cfile iamlost restore> add iamlost restore> Is10 afile bfile cfile iamlost* restore> extract You have not read any volumes yet. Unless you know which volume your files are on you should start with the last volume and work towards the first. Specify next volume #: 1 set owner/mode for ’.'? [yn] n Ленточные тома нумеруются с единицы, а не с нуля, поэтому для архива, который умещается на одной ленте, нужно указать значение 1. Спрашивая, следует ли задать имя владельца и режим доступа, команда restore “интересуется”, должен ли текущий ката- лог соответствовать корневому каталогу ленты. Обычно в этом нет необходимости, если только не восстанавливается вся файловая система целиком. После того как команда restore завершит работу, передайте извлеченный файл пользователю janet. 10 Звездочка рядом с именем iamlost означает, что этот файл помечен для восстановления.
Глава 10. Резервное копирование 361 $ cd /var/restore $ Is janet iamlost $ Is *janet afile bfile cfile $ sudo cp -p janet/iamlost -janet/iamlost. restored $ sudo chown janet -janet/iamlost.restored $ sudo chgrp staff -janet/iamlost.restored $ cd /; sudo rm -rf /var/restore $ mail janet Your file iamlost has been restored as requested and has been placed in /users/janet/iamlost.restored. Your name, Humble System Administrator Некоторые администраторы восстанавливают файлы в специальный каталог и дают пользователям возможность самостоятельно копировать их в свои каталоги. В этом слу- чае необходимо обеспечить защиту файлов, назначив им соответствующих владельцев и нужные права доступа. Не забывайте очищать этот каталог, чтобы файлы не “засоряли” систему. Если вы сначала сохранили резервную копию на удаленном ленточном накопителе и не можете из нее восстановить файлы локально, попробуйте читать ленту на том же удаленном компьютере, где она записывалась. Команда restore -i — самый простой способ восстановления нескольких файлов или каталогов из архива. Но она не будет работать, если ленту нельзя перематывать по одной записи назад (такая проблема существует у некоторых накопителей на 8-милли- метровых лентах). В таком случае попробуйте использовать команду restore -х. Она требует указания полного имени восстанавливаемого файла (относительно корневого каталога архива) в командной строке. Следующая группа команд повторяет показанный выше пример. $ sudo mkdir /var/restore $ cd /var/restore $ sudo ssh tapehost mt -f /dev/nstO fsf 3 $ sudo restore -x -f tapehost:/dev/nstO ./janet/iamlost Восстановление файловых систем Есть счастливчики, которым никогда не приходилось после серьезного сбоя восста- навливать всю файловую систему. Другим везет меньше. Прежде чем пытаться восста- навливать файловую систему, убедитесь, что проблема, которая привела к ее разруше- нию, устранена. Глупо часами перематывать ленты лишь для того, чтобы тут же потерять файловую систему еще раз. Перед началом процедуры восстановления нужно создать и смонтировать целевую файловую систему. О том, как это делается, подробно рассказывалось в главе 8. Далее перейдите в каталог монтирования новой файловой системы, вставьте в накопитель пер- вую ленту самого последнего архива нулевого уровня и введите restore -г. Команда restore будет сама подсказывать, когда нужно вставить следующую ленту. Восстановив архив нулевого уровня, повторяйте процедуру для инкрементных архивов в том порядке, в каком они создавались. Поскольку всегда существует определенная из- быточность, то, как правило, нет необходимости восстанавливать все инкрементные ар- хивы. Вот примерная последовательность действий.
362 Часть I. Основы администрирования • Шаг 1: восстановите самый последний архив нулевого уровня. • Шаг 2: восстановите тот из оставшихся архивов, у которого наименьший уровень; если на данном уровне было создано несколько архивов, восстановите новейший из них. • Шаг 3: если это оказался самый последний архив, процедуру можно считать за- вершенной. • Шаг 4: в противном случае вернитесь к шагу 2. Приведем несколько примеров архивных последовательностей. Восстанавливать нужно только те архивы, номера которых выделены полужирным шрифтом. 0 0 0 0 0 0 0 5 5 5 5 0 3 2 5 4 5 099599399599 0 3 5 9 3 5 9 Давайте проанализируем все используемые команды. Например, если последним был создан ежемесячный архив, а перед ним создавался ежегодный архив нулевого уровня (см. раздел “Умеренная схема” выше), то для восстановления файловой системы /home, находящейся в логическом томе /dev/vg01/lvol5, понадобятся следующие команды. $ sudo mkfs /dev/vg01/lvo!5 $ sudo mount /dev/vg01/lvol5 /home $ cd /home /* Монтируем первую ленту архива уровня 0 для каталога /home. * / $ sudo restore -г /* Монтируем ленты, запрашиваемые командой restore. */ /* Монтируем первую ленту ежемесячного архива уровня 3. */ $ sudo restore -г Если на одной резервной ленте находится несколько файловых систем, то перед об- ращением к команде restore необходимо с помощью команды mt перемотать ленту на нужную файловую систему. Команда mt описана в разделе 10.7. Приведенная последовательность команд позволит восстановить файловую систему в том состоянии, в котором она находилась, когда был создан архив третьего уровня, с одной особенностью: заодно будут “воскрешены” все удаленные с тех пор файлы. Эта проблема особенно неприятна, когда восстанавливается активная файловая система или диск практически заполнен. Не исключено, что во втором случае команда restore за- вершится неудачно11. Восстановление системы на новом оборудовании При отказе всей системы вы должны выполнить то, что называется “восстановлени- ем системы с нуля”. Прежде чем выполнить описанные выше пошаговые действия по восстановлению файловой системы, вам, как минимум, необходимо сделать следующее: • обеспечить оборудование замены; • инсталлировать свежую копию операционной системы; • инсталлировать утилиты резервирования (такие, как dump и restore); 11 Говорят, что некоторые версии команд dung? и restore отслеживают “судьбу” удаляемых файлов. Будем надеяться, что это справедливо и для систем Solaris и Linux.
Глава 10. Резервное копирование 363 • сконфигурировать локальное ленточное устройство или доступ к ленточному сер- веру. После этого можно переходить к процессу восстановления. 10.5. Архивирование и восстановление при МОДИФИКАЦИИ ОПЕРАЦИОННОЙ СИСТЕМЫ В процессе обновления операционной системы необходимо путем создания архива нулевого уровня получить резервные копии всех файловых систем, причем иногда их приходится сразу восстанавливать. Последнее требуется лишь в том случае, если в но- вой ОС используется другой формат файловой системы или изменяется структура раз- делов диска. В то же время резервное копирование нужно обязательно предусматривать как меру предосторожности на случай проблем, которые могут возникнуть в процессе модификации. Кроме того, наличие полного комплекта резервных копий даст возмож- ность переинсталлировать старую операционную систему, если новая версия не подой- дет. К счастью, благодаря применению систем последовательного обновления, исполь- зуемых в большинстве современных дистрибутивов, эти ленты вряд ли потребуются. Не забудьте сделать резервную копию всей системы и разделов пользователей. В за- висимости от вашего пути обновления, вы можете выбрать восстановление только поль- зовательских данных и системно-зависимых файлов, которые расположены в корневой файловой системе или в таких /usr-каталогах, как /etc/passwd, /etc/shadow или I usr/local. Это довольно трудная задача, ибо организация каталогов, принятая в UNIX, приводит к перемешиванию файлов, созданных на компьютере, с файлами, входящими в системный дистрибутив. Сразу после завершения модификации нужно еще раз создать полный набор архивов нулевого уровня. Процедуры модернизации, принятые в большинстве операционных систем, предполагают установку даты модификации системных файлов по времени их создания производителем системы, а не по текущему времени. Это означает, что в слу- чае сбоя инкрементные архивы, которые были созданы относительно архива нулевого уровня, записанного до модернизации, окажутся недостаточными для восстановления системы в модернизированном состоянии. 10.6. Другие архиваторы Команда dump является наиболее эффективным средством архивирования файловых систем, хотя это не единственная команда, которую можно использовать для записи файлов на ленты. Команды tar и dd тоже умеют перемещать файлы с одного носителя на другой. Команда tar: упаковка файлов Команда tar объединяет несколько файлов или каталогов в один файл, часто запи- сываемый прямо на ленту. Это удобный инструмент создания резервных копий файлов, которые предполагается восстанавливать в ближайшем будущем. Например, если у вас есть несколько старых файлов, а в системе мало места на диске, вы можете воспользо- ваться командой tar и перенести эти файлы на ленту, после чего удалить их с диска. Команда tar хорошо подходит для перемещения дерева каталогов, особенно если файлы копируются от имени пользователя root. Команда tar сохраняет информацию о
364 Часть I. Основы администрирования принадлежности объектов и времени их создания, но только если это указано в ее пара- метрах. Например, команда sudo tar -cf - исходный_каталог | ( cd целевой_каталог ; sudo tar -xpf - ) создает копию дерева исходного каталога в целевом каталоге. В аргументе целевой_ каталог следует избегать использования символов “.. ”, поскольку символьные ссылки и команды автоматического монтирования могут трактовать эту последовательность не- сколько иначе. Нам доводилось сталкиваться с подобной ситуацией. По умолчанию большинство версий команды tar не выполняет интерпретацию символьных ссылок, но может делать это по указанию. Имеет смысл обратиться к man- странице этой команды, чтобы уточнить использование флага, который изменяется при переходе от системы к системе. Самый большой недостаток команды tar состоит в том, что ее версии, не соответствующие лицензии GNU, не позволяют использовать несколь- ко ленточных томов. Если данные, которые вы хотите архивировать, не помещаются на одной ленте, вам, возможно, нужно обновить свою версию команды tar. Для некоторых версий команды tar (не GNU) характерна еще одна проблема: длина имени файла по умолчанию ограничена 100 символами. Это не позволяет использовать команду для архивирования глубоких иерархий каталогов. Если в Linux создаются tar- архивы, которыми предполагается делиться с пользователями других систем, помните о том, что обладатели стандартной команды tar могут не суметь прочитать их12. Опция -Ь команды tar позволяет задать коэффициент объединения блоков, кото- рый должен учитываться при записи информации на ленту. Этот коэффициент указыва- ется в виде числа 512-байтовых фрагментов и определяет, какой объем данных команда помещает во внутренний буфер перед выполнением записи. Некоторые DAT-устройства начинают работать некорректно, если используется нестандартный коэффициент объе- динения, тогда как другие накопители его игнорируют. В ряде систем при определенных значениях коэффициента объединения блоков про- изводительность работы с лентой повышается. Оптимальный коэффициент зависит от конкретного компьютера и ленточного накопителя, хотя во многих случаях разница в быстродействии незаметна. Если есть сомнения, задайте коэффициент 20. Команда tar заполняет “дыры” в файлах и плохо справляется с наличием ошибок на лентах13. Команда dd: манипулирование битами Команда dd предназначена для копирования и преобразования файлов. При отсут- ствии иных указаний команда просто копирует информацию из входного файла в вы- ходной. Если пользователь принес ленту, которая была записана не в UNIX, использова- ние команды dd может оказаться единственным способом ее прочитать. Одним из первоначальных применений команды dd было создание копии всей фай- ловой системы. Сегодня есть более эффективный вариант: создать с помощью команды mkf s целевую файловую систему, а затем выполнить команду dump, соединив ее кана- лом с командой restore. При неправильном использовании команда dd может иска- жать информацию о структуре разделов. Она копирует файловые системы только между разделами одинакового размера. 12 GNU-реализация в качестве одного из файлов архива включает таблицу привязки файлов по их именам. Пользователи стандартной команды tar могут извлечь содержимое архива и восстано- вить его вручную, но, конечно, этот процесс довольно утомительный. 13 GNU-версия команды tar обрабатывает “дыры” только в том случае, если при создании ис- ходного архива была указана опция -S.
Главою. Резервное копирование 365 Команду dd можно также применять для создания копий магнитных лент. При нали- чии двух ленточных накопителей (к примеру, /dev/stO и /dev/stl) используйте сле- дующую команду. $ dd if=/dev/stO of=/dev/stl cbs=16b Если есть только один накопитель (/dev/stO), введите такую последовательность. $ dd if=/dev/stO of=tfile cbs=16b /* Меняем ленты */ $ dd if=tfile of=/dev/stO cbs=16b $ rm tfile Конечно, когда имеется всего один накопитель, на диске должно быть достаточно места для сохранения образа ленты. Команда dd также является популярным инструментом у судебных специалистов. По- скольку команда dd создает побитовую (подлинную) копию тома, ее можно использо- вать для дублирования свидетельских показаний с последующим применением в суде. Резервирование файловых систем ZFS Ш Общее представление о файловых системах ZFS можно получить в разделе 8.10. Файловая система ZFS, первоначально разработанная для Solaris, включает инте- грированные средства управления логическими томами и может функционировать как RAID-контроллер. Во многих отношениях это мечта системного администратора, но ре- зервирование представляет собой некоторую смесь. ZFS упрощает создание снимков файловой системы. Старые версии файловой си- стемы доступны через каталог . zfs, расположенный в корневом каталоге, поэтому пользователи могут легко восстанавливать собственные файлы из прошлых снимков без участия администратора. С точки зрения оперативного управления версиями ZFS заслу- живает “золотой звезды”. Однако снимки, сохраняемые на том же носителе в качестве активной файловой си- стемы, не должны быть вашей единственной стратегией резервирования. Это мнение “разделяет” и ZFS: она включает прекрасное средство zfs send, которое переводит снимок файловой системы в линейный поток. Вы можете сохранить этот поток в файле или перенаправить его в удаленную систему. Этот поток можно записать на магнитную ленту. Вы можете даже переслать этот поток в удаленный процесс zfs receive, чтобы реплицировать файловую систему на другом компьютере (даже со всеми ее снимками и предысторией состояний системы). При желании процесс zfs send может выделить между двумя снимками лишь инкрементные изменения. За эту функцию мы даем еще одну золотую звезду”, а еще одну — за то, что полная документация ZFS занимает только одну-две страницы (см. man-страницу для zfs). Нельзя не сказать и о ложке дегтя в бочке меда: процесс zfs receive работает толь- ко с полными файловыми системами. Чтобы восстановить несколько файлов из набора Упорядоченных образов zfs send, придется восстановить все систему целиком, а за- тем выбрать из нее желаемые файлы. Будем надеяться, что у вас есть море времени и свободного места на диске и что данный ленточный накопитель не требуется для других Целей. Однако у нас есть аргументы, которые могут компенсировать этот недостаток. айловые системы ZFS характеризуются “легким весом”, поэтому вы можете создавать их в большом количестве. Восстановление всего содержимого из каталога /home может показаться вам тяжелым случаем, но восстановление из каталога /home/ned — вполне
366 Часть I. Основы администрирования приемлемо14. Важнее то, что оперативная ZFS-система снимков устраняет 95% случаев, в которых вам обычно приходилось обращаться к архивной ленте. Оперативные снимки системы не заменяют архивных лент или не сокращают часто- ту, с которой эти ленты должны записываться. Однако снимки действительно уменьша- ют частоту считывания этих лент. 10.7. Запись нескольких архивов на одну ленту Магнитная лента фактически содержит одну длинную строку данных. Но очень часто возникает необходимость поместить на ленту несколько архивов, поэтому ленточные накопители и их драйверы на логическом уровне реализуют более сложную структуру хранения. Когда команда dump (или ее аналог) записывает поток байтов на ленту, а за- тем закрывает файл устройства, на ленту автоматически помещается маркер конца фай- ла (EOF — end of file). Этот маркер отделяет один поток от другого. При извлечении по- тока данных чтение автоматически прекращается в случае обнаружения маркера EOF. Чтобы перемотать ленту для записи определенного потока, используется команда mt. Она очень удобна при размещении на одной ленте нескольких архивов. Кроме того, ее сообщения об ошибках — одни из самых интересных среди утилит UNIX. Базовый фор- мат команды таков. mt [-f имя_ленты] инструкция [счетчик] Аргумент инструкция может иметь множество значений. От платформы к платфор- ме они меняются, поэтому мы рассмотрим лишь те варианты, которые важны для созда- ния резервных копий и их восстановления. rew offl Перемотать ленту к началу. Перевести ленту в автономный режим. В большинстве накопителей это приводит к перемотке ленты в начало и выталкиванию ее из приемни- ка. Сценарии архивирования применяют эту инструкцию для извлече- ния ленты по окончании операции, что должно свидетельствовать об успешном ее завершении. status Вывести информацию о текущем состоянии ленточного накопителя (вставлена ли лента и т.д.). fsf [счетчик] Перемотать ленту вперед. Если аргумент счетчик отсутствует, лента перематывается на один файл. Если указан числовой аргумент, лента перематывается на соответствующее количество файлов. Эту инструк- цию можно использовать для перехода к нужной файловой системе на ленте, содержащей несколько архивов. bsf [счетчик] Перемотать ленту назад на указанное число файлов. Точная интерпре- тация инструкции зависит от типа накопителя и его драйвера. Иногда текущий файл учитывается, иногда — нет. В некоторых случаях эта ин- струкция не делает ничего (и не сообщает об этом). Если лента пере- мотана слишком далеко, лучше всего ввести инструкцию mt tew и на- чать сначала. 14 Применяя вариант zfs send -R для файловой системы /home и ее потомков, помните, что пока нет способа восстановливать только содержимое каталога /home/ned; вам придется восста- навливать все содержимое каталога /home. Как администратору, вам, вероятно, не захочется пла- нировать резервное копирование для каждого домашнего каталога.
ГлаваЮ. Резервное копирование 367 Для рзнакомления с перечнем всех поддерживаемых команд обратитесь к man-стра- нице команды mt. Те, кому повезло иметь в своем распоряжении роботизированную ленточную би- блиотеку, могут воспользоваться пакетом mtx, который представляет собой улучшенную версию команды mt и позволяет манипулировать устройством смены лент. Мы приме- няли его для автоматизированного управления лентами в библиотеке картриджей Dell PowerVault LTO-3. Устройства смены лент со считывателями штрихового кода отобража- ют даже метки магнитных лент, сканируемые с помощью mtx-интерфейса. 10.8. Программа Bacula Bacula — это программа резервного копирования систем “клиент/сервер” на уров- не организации, которая управляет резервным копированием, восстановлением и про- веркой целостности файлов по сети. Компоненты сервера Bacula работают в системах Linux, Solaris и FreeBSD. Клиентская часть программы Bacula может выполнять резерв- ное копирование других операционных систем, включая Microsoft Windows. В предыдущем издании этой книги в качестве некоммерческого средства резервного копирования мы рекомендовали использовать программу Amanda. Информацию о ней можно найти в предыдущем издании этой книги или по адресу amanda. org. Ниже приведены аргументы в пользу выбора программы Bacula. • Имеет модульную структуру. • Позволяет выполнять резервное копирование файловых систем UNDC, Linux, Windows и Mac OS. • В качестве вспомогательной системы управления базой данных поддерживает MySQL, PostgreSQL и SQLite. • Поддерживает простую в использовании, управляемую с помощью меню консоль командной строки. • Ее исходный код соответствует лицензии программного обеспечения с открытым исходным кодом. • Ее резервные копии могут быть записаны на несколько ленточных томов. • Серверы этой программы могут работать на нескольких платформах. • Для каждого копируемого файла программа может создавать сигнатуры SHA1 или MD5. • Программа позволяет шифрование как сетевого трафика, так и данных, хранимых на ленте. • Программа может копировать файлы, размер которых превышает 2 Гбайт. • Поддерживает ленточные библиотеки и устройства автоматической замены лент. • До и после выполнения задач резервного копирования может выполнять сценарии и команды. • Осуществляет централизованное управление резервным копированием для всей сети. Модель, используемая программой Bacula Для того чтобы использовать программу Bacula, необходимо понимать работу ее ос- новных компонентов. Общая архитектура системы Bacula показана на рис. 10.1.
368 Часть I. Основы администрирования Рис. 10.1. Компоненты системы Bacula и их взаимосвязь Демон управления Bacula — это демон, который координирует операции резервного копирования, восстановления и проверки. Передача заданий резервного копирования или восстановления демону управления осуществляется посредством консоли Bacula. Демон управления может также запрашивать демон хранения или демоны файловой службы, размещенные на компьютерах клиентов. Обмен данными с демоном управления выполняется посредством консоли Bacula, которая может функционировать в качестве графического интерфейса пользователя GNOME, MS Windows либо в качестве средства командной строки. Консоль может быть запущена на любом компьютере, а не только на том, где действует демон управления. Демон хранения — компонент системы Bacula, который выполняет чтение и запись лент и других носителей резервного копирования. Эта служба должна быть запущена на компьютере, к которому подключено ленточное устройство или устройство хранения, используемое для хранения резервных копий. Но ее установка на том же сервере, на ко- тором установлен демон управления, не обязательна (хотя и допускается). Демон управления файлами действует в каждой системе, файлы которой требуется копировать. Во время выполнения заданий резервного копирования реализации этого демона каждой из поддерживаемых операционных систем отправляют демону хранения данные и атрибуты соответствующих файлов. Последний компонент системы Bacula — каталог, представляющий собой реляцион- ную базу данных, в которой Bacula хранит информацию о каждом копируемом файле и томе. Он позволяет программе Bacula быстро и эффективно выполнять восстановление, поскольку ретроспективная информация о всех операциях резервного копирования до- ступна в оперативном режиме; программе известно, какие тома с резервными копиями требуются для восстановления конкретного набора файлов, еще до того, как она вы- полнит чтение хотя бы одной ленты. В настоящее время Bacula поддерживает три базы данных: MySQL, PostgreSQL и SQLite. Базе данных каталога не обязательно размещаться на том же сервере, на котором установлен демон управления. Дополнительный, необязательный, компонент — Bacula Rescue CD-ROM (аварий- ный компакт-диск Bacula). Он представляет собой отдельно загружаемый пакет, кото- рый создает индивидуальные загрузочные компакт-диски восстановления систем Linux с нуля. Эти компакт-диски содержат статически скомпонованную копию демона фай- лов системы и специальный сценарий интерпретатора с информацией о конфигурации
Глава 10. Резервное копирование 36! дисков системы, ядра и сетевых интерфейсов. При возникновении фатального сбоя си стемы Linux ее компакт-диски аварийного восстановления позволят выполнить загруз ку системы, разбиение диска на логические разделы и подключение демона управление Bacula для полного восстановления системы по сети. Настройка программы Bacula Из-за сложности программы Bacula, связанной с поддержкой расширенного набор; функций и модульной структурой, существует множество способов настройки схемы ре зервного копирования в рамках той или иной организации. В этом разделе рассмотри* основные особенности конфигурации Bacula. В общем случае для запуска системы Bacula требуется выполнение пяти шагов: • установка поддерживаемой внешней базы данных и демонов Bacula; • конфигурирование демонов Bacula; • установка и конфигурирование демонов управления файлами клиентов; • запуск демонов Bacula; • добавление носителей в пул носителей с помощью консоли Bacula; • выполнение тестового резервирования и восстановления. Мы рассмотрим минимальный вариант настройки системы, состоящей из сервера г одного или нескольких клиентов. На компьютерах-клиентах установлен только демог управления файлами. Остальные четыре компонента системы Bacula (демон управления демон хранения, каталог и консоль) действуют на сервере. В более обширных среда? рекомендуется распределять серверные Bacula-компоненты среди нескольких компью- теров, но система с минимальной конфигурацией прекрасно работает с точки зренш резервного копирования на нескольких десятках систем. Установка базы данных и демонов Bacula Важно использовать одну и ту же версию версию программы Bacula в каждой систе- ме. Раньше некоторые версии были несовместимы друг с другом. Прежде чем установить систему Bacula, необходимо установить базу данных для хра- нения ее каталога. Для узлов, выполняющих резервное копирование всего несколькю систем, база данных SQLite предоставляет самый простой вариант инсталляции. Если вы резервируете больше систем, рекомендуется использовать более масштабируемую базу данных. Наш опыт использования MySQL в этой роли был положительным, и мь предполагаем использование MySQL в следующих примерах. Стабильность и надежность — обязательные требования к платформе резервногс копирования, поэтому сразу после установки базы данных рекомендуем загрузить с веб-сайта Bacula и установить самую последнюю стабильную версию исходного кода Подробные пошаговые инструкции по установке программы приведены в каталоге docs пакета с исходным кодом. Документацию в форматах HTML и PDF можно также найти по адресу bacula. org. Там же приведены полезные учебники и руководства для раз- работчиков. После распаковки исходного кода необходимо выполнить команду • /configure —with-mysql, затем команды make для компиляции двоичных файлов и make install, чтобы за- кончить инсталляцию.
370 Часть I. Основы администрирования По завершении установки программы Bacula необходимо создать базу данных MySQL и таблицы данных внутри нее. Bacula включает три сценария интерпретатора, которые подготавливают MySQL к сохранению каталога. Сценарий grant_mysql__privileges устанавливает соответствующие MySQL-разрешения для пользователя Bacula. Сценарий create_mysql_database создает базу данных Bacula, и, наконец, сценарий make_ mysql—tables заполняет эту базу данных требуемыми таблицами. Аналогичные сцена- рии включены для баз данных PostgreSQL и SQLite. Сценарии предварительного созда- ния баз данных можно найти в каталоге src/cats дистрибутива, содержащего исходный код программы Bacula. Bacula сохраняет элемент таблицы для каждого файла, резервируемого из каждого клиента, поэтому ваш сервер базы данных должен иметь значительный объем памяти и дискового пространства. Таблицы базы данных для сети среднего размера могут лег- ко вырасти до миллионов записей. Используя MySQL, вам следует сосредоточиться, по крайней мере, на ресурсах, определенных в файле my-large.cnf, включенном в дис- трибутив. Если вы обнаружите, что ваша база данных каталога выросла так, что вот-вот может стать неуправляемой, вы всегда можете настроить второй экземпляр MySQL и ис- пользовать отдельные каталоги для различных групп клиентов. Конфигурирование демонов Bacula После настройки базы данных, предназначенной для хранения каталога, вы должны сконфигурировать еще четыре компонента Bacula. По умолчанию все файлы конфигу- рации расположены в каталоге /etc/bacula. Bacula имеет отдельный файл конфигура* ции для каждого компонента. В табл. 10.3 перечислены имена файлов и компьютеры, на которых должен находиться каждый файл конфигурации. Таблица 10.3. Имена файлов конфигурации Bacula (в каталоге /etc/bacula) Компонент Демон управления bacula-dir.conf Сервер, который запускает демон управления Демон хранения bacula-sd.conf Каждый сервер, который содержит демон хранения Демон файлов bacula-fd.conf Каждый клиент, который будет создавать архивы Консоль (пульт) управления bconsole.conf Каждый компьютер, используемый в качестве пуль- та управления Может показаться неразумной необходимость независимо конфигурировать каждый компонент программы Bacula при наличии единственного сервера, но такое модульное проектирование позволяет программе Bacula очень хорошо масштабироваться. Сервер ленточного накопителя работает на полную мощность? Добавьте второй сервер с соб- ственным демоном хранения. Хотите сбрасывать резервные копии в сторонний ком- пьютер? Инсталлируйте демон хранения на том сервере. Нужно заархивировать данные новых клиентов? Установите и сконфигурируйте демоны файлов этих клиентов. У вас появился новый администратор по вопросам резервирования? Инталлируйте консоль (пульт) управления на его (или ее) компьютере. Файлы конфигурации — это текстовые файлы, предназначенные для чтения чело- веком. Образцы файлов конфигурации, включенные в дистрибутив Bacula, хорошо до- кументированы и могут послужить прекрасной стартовой площадкой для типичной кон- фигурации.
Глава *10. Резервное копирование 371 Прежде чем приступить к подробному описанию процесса установки, необходимо дать определение ряду основных терминов, используемых в системе Bacula. • “Задания” — это фундаментальные составляющие активности программы Bacula. Существует две их разновидности: архивирование и восстановление. Здание вклю- чает такие элементы: клиент, набор файлов, пул памяти и схему. • “Пулы” — это группы физических носителей, на которых хранятся задания. Напри- мер, мы будем использовать два пула — для полных архивов и для инкрементных. • “Наборы файлов” — это списки файловых систем и отдельных файлов. Наборы файлов могут быть явно включены в задания архивирования или восстановления либо исключены из них. • “Сообщения” — это информация о состоянии демонов и заданий (фактически журнальные записи), которой обмениваются демоны. Они могут также переда- ваться по электронной почте или записываться в файлы журналов. Мы не будем рассматривать все возможные параметры конфигурирования. Вместо этого в начале каждого раздела приведем общий обзор файла конфигурации, а затем подробнее остановимся на некоторых параметрах, которые, по нашему мнению, наи- более полезны или трудны для понимания. Разделы конфигурации Файлы конфигурации Bacula состоят из разделов, обычно именуемых “ресурсами”. Раздел каждого ресурса заключен в фигурные скобки. Некоторые ресурсы входят в не- сколько файлов конфигурации. Во всех файлах конфигурирования программы Bacula комментарии начинаются с символа #. Все четыре файла конфигурации содержат ресурс Director. # Пример файла конфигурации демона управления Bacula, /etc/bacula-dir.conf Director { Name = bull-dir # a canonical name for our Bacula director DIRport = 9101 Query File = ’’/etc/bacula/query.sql” Working Directory = "/var/Bacula/working" Pid Directory = ”/var/run” Maximum Concurrent Jobs = 1 Password = "zHpScUnHN9" Messages = Standard } Ресурс Director фактически служит истоком всех компонентов Bacula. Его параме- тры определяют имя и основы поведения демона управления. Они определяют комму- никационный порт, через который остальные демоны осуществляют обмен данными с демоном управления, каталог, в котором он хранит свои временные файлы, и количе- ство заданий, которые демон управления может выполнять. Пароли разбросаны по всем файлам конфигурации Bacula, и все они имеют разные Цели. На рис. 10.2 показано, как должны соотноситься пароли на разных компьютерах в Разных файлах конфигурации. Несмотря на то что пароли записываются в файлах конфигурации открытым (неза- ифрованным) текстом, они никогда не передаются по сети в такой форме. данном примере и демон управления, и консоль расположены на одном компьюте- ем не менее пароль должен присутствовать в обоих файлах конфигурации.
372 Часть I. Основы администрирования Рис. 10.2. Пароли в файлах конфигурации Bacula Все демоны управления, Хранения и файлов имеют ресурс Messages, который со- общает программе Bacula, как обрабатывать специальные типы сообщений, сгенериро- ванные каждым Bacula-демоном. В типичной конфигурации демоны хранения и файлов отправляют свои сообщения демону управления. Messages { Name = Standard director = bull-dir = all } В файле конфигурации демона управления ресурс Messages более сложный. Сле- дующий код предписывает программе Bacula сохранять сообщения в журнале регистра- ции и отправлять их по электронной почте. Messages { Name = Standard mailcommand = "/sbin/bsmtp -h localhost -f \"\(Bacula\) bacula@admin.com\" -s V’Bacula: %t %e of %c %1\" %r” operatorcommand = "/sbin/bsmtp -h localhost -f \"\(Bacula\) bacula@admin.com\" -s V'Bacula: Intervention needed for %j\” %r" mail - backups-admins@admin.com - all, ! skipped operator = backups-tapeadmins@admin.com = mount console = all, ! skipped, !saved append = "/var/log/bacula.log" ~ all, !skipped } Вы можете определить несколько ресурсов Messages для демона управления, а затем назначить их на специальные задания в ресурсах Job. Этот тип ресурса характеризуется перестраиваемой конфигурацией; полный список переменных и команд можно найти во встроенной оперативно доступной документации. Конфигурирование демона управления: файл bacula-dir.conf Файл bacula-dir.conf — самый сложный файл конфигурации Bacula. Помимо описанных выше ресурсов Director и Messages, он требует минимум семь типов опре-
Глава 10. Резервное копирование 373 делений ресурсов: Catalog, Storage, Pool, Schedule, Client, FileSet и Job. Здесь мы проиллюстрируем определение каждого ресурса небольшим примером, но вы начи- найте создание собственных файлов конфигурации с редактирования файлов-образцов, включенных в состав Bacula. Ресурсы каталогов Ресурс Catalog указывает программе Bacula на базу данных конкретного каталога. Он включает имя каталога (чтобы вы могли определить несколько каталогов), имя базы данных и мандат базы данных. Catalog { Name = MYSQL dbname = "bacula"; dbuser = "bacula"; cibpassword = "9p6NLm6CnQ" } Ресурсы хранения Ресурс Storage описывает, как общаться с конкретным демоном хранения, который в свою очередь несет ответственность за согласование с его локальными устройствами резервирования. Ресурсы хранения являются аппаратно-независимыми; демон хране- ния имеет собственный файл конфигурации, который описывает оборудование более детально. Storage { Name = TL4000 Address = bull SDPort = 9103 Password = "jiKkrZuEOO" Device = TL4000 Autochanger = yes Maximum Concurrent Jobs = 2 Media Type - LTO-3 > Ресурсы накопителей Ресурс Pool группирует устройства резервирования (обычно это ленты) в наборы, которые используются специальными заданиями резервирования. Эта операция может быть полезной для отделения лент, которые служат для стороннего хранения архивов, от лент, которые используются для еженощных инкрементных архивов. Каждый нако- питель назначается одному ресурсу Pool, поэтому нетрудно обеспечить автоматическую рециркуляцию лент разных наборов. Pool { Name = Full_Pool Pool Type = Backup Recycle - yes AutoPrune = yes Storage = TL4000 Volume Retention =365 days } Ресурсы схем резервирования -3 * Ресурсы Shedule определяют временные таблицы (расписания) заданий архивирова- ния. Обязательными являются только параметры, задающие имя, дату и время, но, как
374 Часть I. Основы администрирования видно из следующего примера, вы можете вставлять дополнительные значения. Эти зна- чения переопределяют стандартные параметры, указанные в спецификации ресурса Job. В данном случае полные архивирования выполняются в 20:10 по первым вторникам каждого месяца, а инкрементные архивирования (использующие другой ленточный на- копитель) — еженедельно в 20:10 во все дни с четверга по понедельник. Schedule { Name = "Nightly” Run = Level=Full Pool=FullPool 1st tue at 20:10 Run = Level=Incremental Pool=IncrementalPool wed-mon at 20:10 } Ресурсы клиентов Ресурсы Client определяют компьютеры, файлы которых должны быть архивиро- ваны. Каждый ресурс имеет уникальное имя, IP-адрес и пароль. Для каждого клиента требуется отдельный ресурс. Также необходимо указать каталог для сохранения мета- данных резервирования. Параметры File Retention и Job Retention определяют длительность хранения в каталоге записей файлов и заданий для данного клиента. Если параметр AutoPrune установлен, дата истечения срока хранения удаляется из каталога. Эта опция влияет только на записи в каталоге, но не реальные файлы, хранящиеся на архивных лентах. Рециркуляция лент конфигурируется в ресурсе Pool. Client { Name = harp Address = 192.168.1.28 FDPort = 9102 Catalog = MYSQL Password = "TbEpJqrcqy” } Ресурсы файловых наборов Ресурс FilSet определяет файлы и каталоги, которые должны быть либо включены в задания архивирования, либо исключены из них. Если у вас нет систем с идентичны- ми схемами разбиения, вам, скорее всего, для каждого клиента необходимо использо- вать свой файловый набор. Ресурсы могут определять несколько параметров Include и Exclude и индивидуальные параметры Options, задаваемые в виде регулярных выраже- ний. По умолчанию программа Bacula рекурсивно архивирует каталоги, но не включает в задание архивирования несколько логических разделов. Все логические разделы, кото- рые нужно архивировать, должны быть указаны в отдельном параметре File. В приведенном ниже примере используем такие дополнительные параметры, как compression (для сжатия данных перед их записью на ленту) и signature (для вычис- ления хеш-значения для каждого архивируемой файла). Эти параметры увеличивают загрузку процессора во время архивирования, но могут сэкономить емкость накопите- лей или при возникновении подозрения о нарушении безопасности позволяют иденти- фицировать файлы, которые были модифицированы. FileSet { Name = ’’harp" Include { Options { signature^SHAl compression=GZIP
Гвава Ю. Резервное копирование 375 } File = ”/” File = ’’/boot" File = "/var" } Exclude = { /proc /tmp /.journal /.fsck } } Ресурсы заданий Ресурс Job определяет предельные характеристики конкретного задания архивиро- вания посредством связывания воедино ресурсов Client, FileSet, Storage, Pool и Schedule. В общем случае для каждого клиента создается одно определение Job, хотя вы можете легко установить несколько заданий, если хотите архивировать различные файловые наборы (ресурсы FileSets) с различной частотой. При желании для установки стандартных значений параметров для всех заданий ар- хивирования можно предоставить ресурс JobDef s. Использование этого ресурса позво- лит упростить данные конфигурации, относящиеся к каждому заданию. Job { Name = "Harp" JobDefs = Defaultjob Level = Full Write Bootstrap = "/bacula/bootstraps/harp.bsr" Client = harp FileSet' ® harp Pool =* FuM^pol Increiaental*Sackup Pool = Incremental_Pool Schedule = "Nightly" Prefer Mounted Volumes = no Max Run Time = 36QQQ } Файл “самозагрузки” — это специальный текстовый файл (создаваемый програм- мой Bacula), который содержит информацию о файлах, подлежащих восстановлению. Список файлов начальной загрузки содержит перечень файлов и томов, которые требу- ются для выполнения задания восстановления и чрезвычайно полезны для восстановле- ния системы с нуля. Наличие этих файлов начальной загрузки не обязательно, но весьма желательно. Файлы “самозагрузки” создаются во время операций восстановления или резервиро- вания, если вы определили параметр Write Bootstrap для данного задания. Параметр Write Bootstrap указывает программе Bacula, куда записывать информацию о началь- ной загрузке, которая будет использована во время восстановления. Файлы “самоза- грузки” перезаписываются в процессе полного архивирования и дописываются во время инкрементного архивирования. Конфигурирование демона хранения: файл bacula-sd.conf Демоны хранения принимают данные от демонов управления файлами и переда- ют их на реальный носитель хранения (и в обратном направлении при восстановле- нии). В файле bacula-sd.conf необходимо определить ресурсы Storage, Device и Autochanger, не говоря уже о ресурсах Messages и Director. Ниже приведен полный пример файла конфигурации.
376 Часть I. Основы администрирования Ресурс Director Ресурс Director управляет тем, какие управляющие устройства разрешены для кон- такта с демоном хранения. Пароль в ресурсе Storage файла bacula-dir. conf должен соответствовать паролю в ресурсе Director файла bacula-sd. conf. Director { Name = bull-dir Password = "jiKkrZuEOO" } Ресурсы Storage Ресурс Storage сравнительно прост. Он определяет ряд основных рабочих параме- тров, таких как сетевой порт демона и рабочий каталог. Storage { Name = bull-sd SDPort = 9103 WorkingDirectory = "/var/bacula/working” Pid Directory = "/var/run” Maximum Concurrent Jobs = 2 } Ресурсы Device Каждое устройство архивирования получает собственное определение ресурса Device. Этот ресурс характеризует физическое устройство архивирования, будь то магнитная лен- та, оптический накопитель или оперативная память. В состав характеристик входит тип устройства, производительность и данные о механизме автоматической смены носителя для устройств, которые управляются таким механизмом смены или роботом. В приведенном ниже примере определяется накопитель LTO-3 (Linear Tape-Open) с автоматической сменой лент. Обратите внимание на то, что файл устройства /dev/nstO соответствует устройству без перемотки, которое требуется практически во всех ситуа- циях. Параметр Name определяет символическое имя, которое используется для связы- вания накопителя с соответствующим ресурсом Autochanger. Параметр Name также по- зволяет запомнить, какую единицу оборудования описывает данный ресурс. Параметр AlwaysOpen указывает о необходимости сохранения устройства в открытом состоянии, если только администратор специально не потребует его размонтирования. Этот параметр экономит время и уберегает ленту от дополнительных нагрузок, посколь- ку исключает выполнение команд перемотки и позиционирования между заданиями. Device { Name = TL4000-Drive0 Media Type = LTO-3 Archive Device = /dev/nstO AutomaticMount = yes AlwaysOpen = yes RemovableMedia = yes RandomAccess = no Autochanger = yes }
Глава 10. Резервное копирование ресурсы Autochanger Необязательное определение ресурса Autochanger требуется только в случае, если вы — счастливый обладатель механизма смены носителя. Он связывает устройства хра- нения данных с механизмом автоматической смены носителя и определяет команду, ко- торая обеспечивает смену лент. Autochanger { Name = TL4000 Device = TL4000-Drive0,TL4000-Drivel Changer Command = "/etc/bacula/mtx-changer %c %o %S %a %d" Changer Device = /dev/changer } Конфигурирование консоли: файл bconsole.conf Программа консоли служит для обмена данными с демоном управления при плани- ровании заданий, проверки их состояния или восстановления данных. Файл bconsole. conf указывает консоли, как следует осуществлять обмен данными с демоном управле- ния Bacula. Параметры в этом файле должны соответствовать параметрам, определен- ным в ресурсе Director файла конфигурации демона управления (bacula-dir.conf), за исключением параметра Address. # Файл конфигурации консоли, bconsole.conf Director { Name = bull-dir DIRport = 9101 Address = bull Password = "zHpScUnHN9" } Установка и конфигурирование демона управления файлами клиента Демон управления файлами клиентов архивирования обменивается данными с де- моном хранения во время выполнения заданий архивирования и восстановления. Он должен быть установлен и сконфигурирован на каждом компьютере, файлы которого нужно архивировать с помощью программы Bacula. Программа Bacula распространяется в двоичной форме и подходит для многих плат- форм, включая Windows и различные версии Linux. В системах UNIX установку демона можно выполнить, копируя исходное дерево Bacula на каждый компьютер клиента и вы- полняя команду . /configure —enable-client-only. Затем необходимо выполнить команды make и make install. Вы можете жестко закодировать стандартные значения Для многих параметров демона файлов во время конфигурации, но поддержка будет легче, если вы просто перечислите их в своем файле bacula-fd. conf. По умолчанию Двоичные файлы инсталлируются в каталог /sbin, а файлы конфигурации — в каталог / etc /bacula. После установки демона файлов сконфигурируйте его, отредактировав файл bacula- fd. conf, который разделен на три части. Первая часть включает ресурс Director, ко- торый сообщает демону файлов, какое устройство управления разрешается использо- вать для планирования операций архивирования для данного клиента. Ресурс Director также включает параметр Password, который должен совпадать с паролем, указанным
378 Часть I. Основы администрирования в ресурсе Client собственного файла конфигурации демона управления. Вторая часть файла bacula-fd. conf представляет собой ресурс FileDaemon, который определяет имена клиентов и задает порт, прослушиваемый демоном управления файлами на пред- мет команд от демона управления. Последний компонент программы — ресурс Messages (см. раздел “Разделы конфи- гурации” выше в этой главе), который определяет, как должны быть обработаны локаль- ные сообщения. Запуск демонов Bacula После того как демоны сервера установлены, а клиент сконфигурирован, необходи- мо запустить демоны с помощью сценария запуска, размещенного в каталоге установки сервера (. /bacula start). Эта же команда используется на каждом клиентском ком- пьютере для запуска демона управления файлами. Сценарий запуска программы bacula должен быть сконфигурирован для выполне- ния во время начальной загрузки. Может ли это быть сделано за вас или нет — зависит от вашей системы и метода инсталляции. О том, как запускать службы во время загруз- ки системы, показано на примерах систем в главе 3. После того как демоны Bacula запущены, программу консоли (bconsole в каталоге установки) можно использовать для проверки их состояния, добавления носителей в пулы и для выполнения заданий архивирования и восстановления. Программу bconsole мож- но запускать с любого компьютера, если она корректно установлена и сконфигурирована. $ sudo ./bconsole Connecting to Director bull:9101 1000 OK: bull-dir Version: 2.4.4 (23 December 2009) Enter a period to cancel a command. Для ознакомления с полным списком поддерживаемых ею команд используйте ко- манду help консоли. Добавление носителей в пулы Прежде чем выполнять задания архивирования, необходимо пометить ленту и вклю- чить ее в пулы носителей, определенные в файле конфигурации демона управления. Чтобы записать программную “метку” на пустую ленту и назначить ее пулу Bacula, не- обходимо использовать команду label консоли. Всегда сопоставляйте свою метку Bacula с физической меткой на вашей ленте. Если у вас есть механизм автоматической смены носителя, который поддерживает штрихко- ды, вы можете использовать команду label barcode, чтобы автоматически помечать любые пустые ленты читабельными значениями с их этикеток со штриховым кодом. Для проверки того, что лента была добавлена в нужный пул и помечена как допу- скающая добавление данных, следует использовать команду list media. Выполнение архивирования вручную Чтобы выполнить архивирование вручную, необходимо использовать команду run консоли. Эта команда не требует никаких аргументов. При ее выполнении консоль ото- бражает все задания, определенные в файле конфигурации демона управления. Любые па- раметры команды run можно изменять, следуя подсказкам, подобным меню, на консоли.
Глава 10. Резервное копирование 379 Приведенный ниже пример демонстрирует выполнение вручную полной архивации файлов сервера harp с использованием стандартных параметров, указанных в файлах конфигурации. * run harp Run Backup job JobName: harp Level: Full Client: harp FileSet: harp Pool: FullPool Storage: SureStore When: 2009-10-08 10:56:41 Priority: 10 OK to run? (yes/mod/no): yes Run command submitted. После успешной передачи задания архивирования демону управления его состояние можно отслеживать с помощью команды status консоли. Для систематичного получе- ния информации обо всех обновлениях при ее поступлении можно использовать также команду messages консоли. В зависимости от настройки ресурсов Messages системы, подробный итоговый отчет может отправляться также администратору системы Bacula. Выполнение задания восстановления Для того чтобы восстановить файлы, необходимо запустить консоль и выполнить ко- манду restore. Как и команда run, команда restore выбирается из меню. Ее выпол- нение начинается с вывода информации о том, какие задания должны быть прочитаны для восстановления целевых файлов. Команда restore предоставляет несколько ме- тодов указания необжщимых идентификаторов заданий. После того как набор заданий выбран, из них можно файяы, которые нужно восстановить. * restore То select the Joblds, you have the following choices: 1: List last 20 Jobs run 2: List Jobs where a given File is saved 3: Enter list of coima separated Joblds to select 4: Enter SQL list command 5: Select the most recent backup for a client 6: Select backup for a client before a specified time 7: Enter a list of files to restore 8: Enter a list of files to restore before a specified time 9: Find the Joblds of the most recent backup for a client 10: Find the Joblds for a backup for a client before a specified time 11: Enter a list of directories to restore for found Joblds 12: Cancel Select item: (1-12): Вероятно, три наиболее полезных запроса — “Select the most recent backup for a client” (Выберите самую последнюю резервную копию клиента) (№5), “Select backup for a client before a specified time” (Выберите резервную копию клиента до заданного времени) (#6) и “List Jobs where a given File is saved” (Перечислите задания, содержащие данный файл) (№2). Первые две опции предоставляют оболочку для выбранных файлов, по аналогии с командой restore -х. Последняя опция пригодится тем рассеянным пользователям, которые не в состоянии запомнить точное местонахождение случайно удаленного фай-
380 Часть I. Основы администрирования ла. Еще одна полезная команда — опция №4, “Enter SQL list command” (Введите SQL- команду), которая позволяет вводить любой надлежащим образом сформатированный SQL-запрос. С помощью этой опции можно находить идентификаторы заданий. (Безу- словно, вам должна быть известна логическая структура используемой базы данных.) Предположим, что пользователю необходимо скопировать свой восстановленный сценарий pw_expire.pl. Однако он не помнит, в каком именно каталоге хранился этот файл. Кроме того, пользователю желательно восстановить файлы в каталог /tmp на ис- ходном компьютере. Многих системных администраторов подобный запрос может по- вергнуть в шоковое состояние, но для администратора Bacula выполнение этой задачи не представляет никакой сложности. (К сожалению, формат вывода результатов поис- ка, используемый программой Bacula, столь подробен, что нам пришлось максимально уменьшить масштаб выводимой информации.) * restore То select the Joblds, you have the following choices: 1: List last 20 Jobs run 2: List Jobs where a given File is saved Select item: (1-12) : 2 Defined Clients: 1: bull 2: harp Select the Client (1-12): 2 Enter Filename (no path): pw_expire.pl I Jobld | Name I StartTime | JobType... +-------+-------------------------------------+----------------------+-------- I 4484 | /home/jim/development/pw_expire.pl | 2009-11-03 20:11:35 | B... I 4251 | /home/jim/development/pw_expire.pl | 2009-10-21 18:03:01 | B... I 4006 | /home/jim/development/pw_expire.pl | 2009-10-06 20:10:02 | B... +-------+-------------------------------------------------+------------------- Из списка экземпляров файла pw_expire.pl, созданного программой Bacula, мы видим несколько недавних резервных копий и соответствующие им идентификаторы за- даний. Затем программа Bacula возвращает нас к меню восстановления, где можно ис- пользовать опцию №3 (“Enter job IDs” (Введите идентификаторы заданий)), чтобы вы- брать нужное задание. Select item: (1-12) : 3 Enter Jobld(s) , comma separated, to restore: 4484 You have selected the following Jobld: 4484 Building directory tree for Jobld 4484 ... 1 Job, 779, 470 files You are now entering file selection mode where you add (mark) and remove (unmark) files to be restored. No files are initially added, unless you used the "all" keyword on the command line. Enter "done" to leave this mode. cwd is: / $ cd /home/jim/development cwd is: /home/jim/development $ dir -rwxr-xr-x 1 jim atrust 923 2009-10-25 12:05:43 /home/jim/development/pw_exp...
Глава 10. Резервное копирование 381 $ mark pw_expire.pl 1 files marked. $ done Хотя в этом примере и не показано, но иногда программа Bacula отображает иденти- фикационные номера заданий с запятой (4,484). Вы должны опускать запятую при по- вторном вводе. В противном случае программа интерпретировала бы это значение как список идентификаторов заданий, разделенных запятыми. Bootstrap records written to /var/bacula/working/restore.bsr The restore job will require the following Volumes: 000879L3 1 file selected to be restored. Defined Clients: 1: bull 2: harp Select the Client (1-2) : 2 Затем программа записывает файл начальной загрузки, который она будет использо- вать для выполнения восстановления, отображает имена необходимых ей ленточных то- мов и предлагает выбрать клиентский компьютер, на котором нужно восстановить фай- лы. В данном примере восстановление было выполнено на исходном компьютере harp. Run Restore Job JobName: RestoreFiles Bootstrap: /bacula/bacula/working/jf-dir.restore.4.bsr Where: /var/restore Replace: always FileSet: Full Set Backup Client: harp Restore Client: harp Storage2 ЬТОЗгТыиМЮ When: 2009-11-23 15:13:05 Catalog: MYSQL Priority: 10 OK to run? (yes/mod/no) : Перед выполнением данного конкретного задания мы хотим изменить параметры, заданные по умолчанию. В частности, в соответствии с пожеланием пользователя нам нужно изменить место назначения этого восстановления на /Ьпр. OK to run? (yes/mod/no) : mod Parameters to modify: 1: Level 2: Storage 3: Job 4: FileSet 5: Restore Client 6: When 7: Priority 8: Bootstrap 9: Where 10: File Relocation 11: Replace 12: Jobld Select parameter to modify (1-12): 9
382 Часть I. Основы администрирования Please enter path prefix for restore (/ for none): /trap Run Restore job JobName: RestoreFiles Bootstrap: /var/Bacula/working/restore.bsr Where: /tmp , g OK to run? (yes/mod/no) : yes Run command submitted. Restore command done. После внесения изменений мы передаем задание демону управления, который его выполняет. Затем можно воспользоваться командой messages для просмотра журнала выполнения задания. Архивирование клиентов Windows Вы можете загрузить предварительно созданные двоичные файлы для клиентов Win- dows из файла bacula. org. Программа Bacula прекрасно справляется с резервировани- ем Windows-файлов данных, но ей приходится выполнить дополнительное действие для создания надежной копии системы Windows уровня 0. К сожалению, программа Bacula не имеет никакого понятия о системном реестре Windows или состоянии системы; она также не понимает блокирования открытых файлов в Windows. Как минимум, вам сле- дует сконфигурировать сценарий предварительного выполнения, который бы запускал встроенную в Windows функцию восстановления системы (System Restore). Эта функция создает локальную копию состояния системы, а программа Bacula затем получит теку- щее состояние системы в заархивированной форме. Чтобы корректно собрать забло- кированные файлы, вам, возможно, стоит использовать Windows-службу фонового ко- пирования тома (Volume Shadow Copy Service — VSS). Просмотрите каталог examples в исходном дереве программы Bacula на предмет дру- гих Windows-ориентированных предложений. Например, вы найдете интеллектуальный сценарий, который может “осчастливить” клиента обновлениями Windows-демона уп- равления файлами посредством встроенной Bacula-системы восстановления. Wndows- клиент в последней версии программы Bacula поддерживает не только клиенты Windows 7 и 64-битовые клиенты, но и (пока в качестве эксперимента) архивы Microsoft Exchange. Мониторинг конфигураций программы Bacula Системное администрирование требует бдительности, и создание резервных копий — не исключение. Если в процессе создания резервных копий возникнет сбой, который не будет быстро устранен, важные данные будут стопроцентно утеряны. Задания Bacula создают отчет, который направляется, согласно ресурсу Message, в файл конфигурации демона управления. Отчет содержит основную информацию об использованных томах, размере и количестве заархивированных файлов и о любых воз- никших ошибках. Как правило, он предоставляет достаточный объем информации для решения любых не очень серьезных проблем. Рекомендуем задать такую конфигурацию, чтобы важные сообщения приходили на ваш ящик входящих сообщений электронной почты или на ваш пейджер. Команду status консоли можно использовать для запроса различной информации о демонах Bacula. Следующий вывод содержит информацию о запланированных, выпол- няющихся и прерванных заданиях. Команда messages — простой способ обзора недав- них записей журнала.
Глава 10. Резервное копирование 383 Программа Bacula включает плагин Nagios, который упрощает интеграцию архивов в существующую инфраструктуру мониторинга. Общую информацию о плагине Nagios можно получить из раздела 21.12. Советы по использованию программы Bacula Две наиболее часто встречающиеся проблемы — невозможность запуска демонов управления файлами клиентов и неспособность демонов хранения обнаружить какие- либо ленточные тома, доступные для добавления данных. В приведенном ниже приме- ре демон управления сообщает, что задание архивирования было прервано с фатальной ошибкой вследствие невозможности осуществления обмена данными с демоном управ- ления файлами компьютера harp. Сообщение об этой ошибке может многократно по- вторяться в конце итогового отчета. SD termination status: Waiting on FD Termination: *** Backup Error *** 11-Nov 21:06 bull-dir Jobld 259: Warning: bsock.c:123 Could not connect to Client: harp on 192.168.1.3:9102. ERR=Connection refused Retrying ... 11-Nov 21:31 bull-dir Jobld 259: Warning: bsock.c:123 Could not connect to Client: harp on 192.168.1.3:9102. ERR=Connection refused В следующем примере демон хранения сообщает, что для запрошенного задания ар- хивирования отсутствуют доступные ленточные тома соответствующего пула. Проблему можно устранить, либо добавив в пул новый том, либо очистив и повторно используя существующий том. Задание не нужно запускать снова — программа Bacula должна про- должить его выполнение, если только оно не будет прервано явно. 06-Мау 23:01 bull-sd Jobld 1545: Job Southernfur.2009-05-06_19.03.00.07 waiting. Cannot find any appendable volumes. Please use the "label" command to create a new Volume for: Storage: "TL4000-Drive0" (/dev/nstO) Pool: Full_Pool Media type: LTO-3 Для того чтобы ознакомиться с более подробной информацией о действиях, выпол- няемых демонами, их можно вынудить отсылать отладочную информацию на консоль, добавив опцию -dnnn к команде запуска. Например, можно использовать такую команду. $ sudo ./bacula start -dlOO Значение nnn представляет уровень отладки. Типичные значения лежат в диапазоне от 50 до 200. Чем выше это значение, тем больший объем информации отображает коман- да. Отладку можно также активизировать из консоли с помощью команды setdebug. Альтернатива программе Bacula В Интернете доступно несколько других бесплатных или условно бесплатных паке- тов резервного копирования. Следующие пакеты заслуживают особого внимания, хотя они все еще находятся в состоянии активной разработки. • Amanda: очень популярная и проверенная система, которая выполняет архивиро- вание файлов систем UNIX и Linux на одном ленточном устройстве. См. ananda. org.
384 Часть I. Основы администрирования • rsync: бесплатная утилита, входящая в состав многих пакетов Linux (работает на всех наших примерах систем). Она может выполнять синхронизацию файлов с одного компьютера на другой и ее можно использовать совместно с SSH для безопасной передачи данных по Интернету. Утилита rsync настолько интеллек- туальна, что передает по сети только различия в файлах, что говорит о ее высокой эффективности. Дополнительная информация о программе rsync приведена в разделе 19.2. Обратите внимание на то, что одной утилиты rsync обычно не до- статочно для архивов, поскольку она не сохраняет несколько копий. И не создает автономных архивов. • star: более производительная реализация программы tar. Эта программа входит в состав Linux и всех типов систем UNIX. • Mondo Rescue: утилита, которая выполняет архивирование файлов систем Linux на CD-R, DVD-R, ленту или жесткий диск. Этот пакет особенно удобен, если необхо- димо выполнить восстановление в системе, в которой нет какого-либо программ- ного обеспечения. Подробнее о нем можно узнать по адресу: mondorescue. org. 10.9. Коммерческие системы резервного копирования Нам бы хотелось, чтобы UNIX была единственной операционной системой в мире, но, к сожалению, это не так. Анализируя различные коммерческие системы резервного копирования, необходимо учитывать их способность взаимодействовать с другими опе- рационными системами, которые используются в организации. Большинство современ- ных продуктов позволяет включать рабочие станции UNIX, Windows и Mac OS в схему резервного копирования. Следует также учитывать наличие массивов хранилищ и фай- ловых серверов, работающих не под управлением UNIX. Защищать от сбоев нужно также портативные компьютеры пользователей и другие компьютеры, которые не имеют постоянного подключения к сети. Коммерческая про- грамма должна правильно обрабатывать ситуации, когда архивируются идентичные файлы с каждого портативного компьютера. В конце концов, сколько резервных копий файла command. com вам нужно? Поскольку система Bacula идеально подходит для наших потребностей, мы не при- обрели богатого опыта работы с другими коммерческими пакетами. Мы опросили не- скольких знакомых администраторов из коммерческих организаций на предмет их впе- чатлений от систем, которыми они пользуются. Ниже приведены их комментарии. ADSM/TSM Пакет ADSM, разработанный компанией IBM, впоследствии был приобретен компа- нией Tivoli. Сегодня он носит название TSM (Tivoli Storage Manager — диспетчер систем хранения компании Tivoli), хотя права собственности снова отошли к IBM, и представ- ляет собой систему управления данными, поддерживающую также резервное копирова- ние. Дополнительную информацию можно найти на веб-сайте ibm.com/tivoli. Преимущества • принадлежность компании IBM; • удачная ценовая политика; • низкий процент сбоев; ,
Глава 10. Резервное копирование 385 • использование дисковых кеш-буферов, что удобно при работе с низкоскоростны- ми клиентами; • поддержка клиентов Windows; • великолепная документация (за отдельную плату). Недостатки • плохой графический интерфейс; • каждые два файла занимают 1 Кбайт в базе данных; • сложность системы постоянно возрастает. Veritas NetBackup В 2005 году произошло слияние компаний \feritas и Symantec. Объединенная компания продает системы резервного копирования для различных платформ. Информацию о них можно получить на веб-сайте Symantec. com. NetBackup — продукт, предназначенный для обеспечения резервного копирования и восстановления данных в средних и крупных гетерогенных сетях, но небольшие фирмы могут обойтись системой BackupExec. Преимущества • неплохой графический интерфейс; • взаимодействие с высокоскоростными выделенными каналами связи с системой хранения данных (архитектура “сервер-хранилище данных”) и файловыми серве- рами NetApp; • инсталляция по методу принудительной рассылки в UNIX и Windows; • возможность записи лент в формате GNU-версии команды tar; • централизованная база данных, но поддерживается и распределенное резервное копирование. Недостатки • ряд программных ошибок; • неудачная ценовая политика; • пресловутые слабые места системы безопасности. EMC Networker Американская компания-монстр ЕМС — мировой лидер на рынке продуктов, услуг и решений для хранения информации и управления ею — приобрела Legato NetWbrker в 2003 году. В то время \feritas и Legato были ведущими компаниями в области резервного копирования в вычислительных сетях масштаба предприятия. Преимущества • удачная ценовая политика; • сервисное программное обеспечение может работать на всех наших примерах платформ; • поддержка различных клиент-платформ; • комплексное восстановление системы с нуля. Недостаток ? существенное перекрытие по продуктам ЕМС.
386 Часть I. Основы администрирования Прочие программы Уже упоминавшийся Кертис Престон, автор книги по резервному копированию, вы- шедшей в издательстве O’Reilly, ведет очень полезную веб-страницу backupcentral. com, посвященную данной тематике (программы зеркального дублирования дисков, ра- боты с файловыми системами, удаленного резервного копирования, внешнего хранения данных и др.). 10.10. Рекомендуемая литература Preston W. Curtis. Backup & Recovery: Inexpensive Backup Solutions for Open Systems. Sebastopol, CA: O’Reilly Media, 2007. 10.11. Упражнения 10.1. Проанализируйте процедуру резервного копирования, применяемую в вашей компании или организации. На каком компьютере (или компьютерах, если их не- сколько) выполняется резервное копирование? Какие типы накопителей исполь- зуются? Где хранятся ленты? Можно ли улучшить существующую схему? 10.2. Какие действия необходимо предпринять для восстановления файлов в системе Bacula? Как найти нужную ленту? 10.3. ★ Укажите действия, которые необходимо осуществить для выполнения трех за- прошенных операций восстановления при наличии следующего вывода команд df и /etc/dumpdates. Аргументируйте свое решение. Примите, что запрос на вос- становления датируется 18 января. 10.4. Вот результаты выполнения команды df на сайте khaya. cs. Colorado. edu. /dev/hda8 256194 81103 161863 33% / /dev/hdal 21929 4918 15879 24% /boot /dev/hda6 3571696 24336 3365924 1% /local /dev/hdalO 131734 5797 119135 5% /tmp /dev/hda5 1815580 1113348 610004 65% /usr /dev/hda7 256194 17013 225953 7% /var 10.5. А вот содержимое файла /etc/dumpdates на khaya. cs. Colorado. edu. /dev/hda8 2 Sun Jan 17 22:59:23 2010 /dev/hda6 3 Sun Jan 17 22:51:51 2010 /dev/hda7 3 Sun Jan 17 22:50:24 2010 /dev/hda5 9 Sun Jan 17 22:46:25 2010 /dev/hda5 1 Tue Jan 12 22:45:42 2010 /dev/hda7 0 Tue Jan 12 23:14:47 2010 /dev/hda6 1 Tue Jan 12 23:14:32 2010 /dev/hda8 1 Tue Jan 12 23:14:17 2010 /dev/hda6 0 Sun Jan 10 22:47:31 2010 /dev/hdal 1 Fri Jan 8 22:16:05 2010 /dev/hda7 1 Thu Jan 7 22:08:09 2010 /dev/hdal 4 Sun Jan 3 22:51:53 2010 /dev/hda7 2 Thu Dec 24 22:53:52 2009 /dev/hda5 0 Tue Nov 3 , 22:46:21 2009 /dev/hdal 0 Mon Sep 21 22:46:29 2009
Глава 10. Резервное копирование 387 /dev/hda8 0 Mon Aug 24 23:01:24 2009 /dev/hdal 3 Wed Jul 29 22:52:20 2009 /dev/hda6 2 Wed Jul 29 23:01:32 2009 а) “Пожалуйста, восстановите весь мой домашний каталог (/usr/home /elements) в том состоянии, в котором он был несколько дней назад. Похоже, что я потерял всю кодовую базу своего проекта.” б) “Я случайно выполнил команду sudo rm -rf /* на своем компьютере khaya. Не могли бы Вы восстановить все файловые системы из последних резервных копий?” в) “Все мои МРЗ-файлы, которые я скачивал из BitTorrent в течение более меся- ца, пропали. Они хранились в каталоге /tmp/яарЗ/. Не могли бы Вы восстано- вить их?” 10.6. ★ Разработайте схему резервного копирования для описанных ниже сценари- ев. Предполагается, что каждый компьютер оснащен жестким диском емкостью 400 Гбайт и домашние каталоги пользователей хранятся локально. Выберите устройство резервного копирования, оптимальное по соотношению стоимости и трудоемкости эксплуатации. Аргументируйте свой выбор. а) научно-исследовательский центр с 50 компьютерами. На каждом компьютере хранится множество важных и часто изменяемых данных б) небольшая компания, занимающаяся выпуском программного обеспечения и располагающая десятью компьютерами. Исходные коды хранятся на сервере, емкость жесткого диска которого составляет 4 Тбайт. Разрабатываемые исхо- дные коды постоянно меняются в течение дня, а домашние каталоги пользова- телей меняются редко. Стоимость системы резервного копирования не играет особой роли, зато крайне важна безопасность данных в) домашняя сеть с двумя компьютерами. Здесь основной фактор — это цена, а пользователи — не системные администраторы 10.7. ★ Разработайте стратегию восстановления архивов для каждого из трех сценариев, перечисленных в упражнении 10.4. 10.8. ★ Напишите операторы конфигурирования Bacula, которые реализуют план архи- вирования, разработанный для упражнения 10.4. 10.9. ★ Опишите действия, которые нужно было бы предпринять для выполнения ко- манды dump для удаленного накопителя на магнитной ленте по безопасному тун- нелю SSH.
Глава 11 Система Syslog и журнальные файлы Системные демоны, ядро, утилиты и службы — все они генерируют журнальные дан- ные, которые регистрируются и попадают на далеко не безразмерные диски. “Срок по- лезной службы” большинства данных ограничен, поэтому их приходится группировать, сжимать, архивировать и, наконец, удалять. Доступом и данными аудита необходимо управлять точно в соответствии с регулятивными правилами хранения информации или политикой безопасности, принятой для вашего узла. Опытные администраторы стараются без промедления просматривать журналы реги- страции. Системные журналы зачастую содержат важную информацию, которая может помочь в решении досадных проблем с конфигурацией. Если отказывается запускаться какой-нибудь демон или застарелая ошибка продолжает “ставить палки в колеса” загру- жающейся системе, первым делом проверьте журналы регистрации. Ранее в UNIX были предприняты попытки использовать интегрированную систему регистрации событий syslog, но можно сказать, что результаты в лучшем случае имели переменчивый успех. Несмотря на то что демон syslogd все еще считается “главным героем” в области регистрации, множество приложений, сетевых демонов, сценариев запуска и другие члены “комитета бдительности” используют собственные журналы ре- гистрации “специального вида”. Следствием такого беззакония стало появление журна- лов, которые существенно отличались от “подобных себе” среди разновидностей UNIX и даже дистрибутивов Linux. В большинстве случаев регистрируемое событие перехватывается в виде одной стро- ки текста, которая включает время и дату, тип и степень серьезности события, а также любые другие релевантные детали. Различные компоненты сообщения могут разделяться
Глава 11. Система Syslog и журнальные файлы 389 пробелами, символами табуляции или знаками пунктуации (в зависимости от специфи- ки файла). Поскольку большинство журналов регистрации представляет собой текстовые фай- лы их можно просматривать или анализировать такими стандартными инструментами, как cat, grep, tail и Perl. Многие современные системы также включают средства управления журналами регистрации, которые выполняют ротацию, сжатие и управле- ние журналами регистрации (ежедневно или еженедельно). Системные журналы, управляемые системой syslog, обычно содержат события от не- скольких источников. Например, “жалобы” от ядра и сетевого демона могут соседство- вать друг с другом. На узлах, которые содержат централизованный сервер регистрации, события от нескольких узлов можно группировать и обрабатывать вместе. Следующий фрагмент отображает типичные события от централизованного сервера регистрации. Dec 18 15:12:42 avl8.cs.colorado.edu sbatchd[495]: sbatchd/main: ls_info() failed: LIM is down; try later; trying ... Dec 18 15:14:28 proxy-l.cs.colorado.edu pop-proxy[27283]: Connection from 128.138.198.84 Dec 18 15:14:30 mroe.cs.colorado.edu pingem[271] : maltese- office.cs.colorado.edu has not answered 42 times Dec 18 15:15:05 schwarz.cs.colorado.edu vmunix: Multiple softerrors: Seen 100 Corrected Softerrors from SIMM J0201 Dec 18 15:15:16 coyote.cs.colorado.edu PAM_unix[17405]: (sshd) session closed !fdr user trent Dec 18 15:15:48 proxy-l.cs.colorado.edu pop-proxy[27285]: Connection from 12.^2.209.183 Dec IB 15x15:50 avl8.cs.col6rado.edu last message repeated 100 times Ш Доролниши?ная информация о РАМ приведена в разделе 22.5. Этот пример содержит записи от нескольких различных узлов (av!8, proxy-1, mroe, schwarz и coyote), а также от таких программ, как sbatchd, pop-proxy, pingea, и библи- отеки подключаемых модулей аугентификации (Pluggable Authentication Modules — РАМ). Важность использододод хорошо определенной межузловой стратегии регистрации событий значител№е1ОДОДОДЮ]ед»щу с принятием таких формальных ИТ-стандартов, как COBIT (свод правая по управлению и контролю ИТ) и ISO 27002, а также с вы- работкой отраслевых норм. В наши дни для действий, связанных с регистрацией собы- тий, эти внешние стандарты могут потребовать от вас поддержки централизованного корпоративного хранилища с использованием отметок времени, предоставляемых по- средством протокола NTP, и строгого соблюдения расписания. Некоторые стратегии мы обсудим ниже в этой главе. 11.1. Обнаружение файлов регистрации UNIX-системы часто критикуют за несогласованный подход к управлению журналь- ной регистрацией, и эта критика вполне справедлива. Посмотрите на содержимое катало- га файлов регистрации — вы обязательно найдете файлы с такими именами, как maillog, ftp.log и, возможно, IpNet, Ipd-errs или console_log. Помимо произвольных ®<ен, файлы регистрации часто разбросаны по разным каталогам и файловым системам, о умолчанию большинство этих файлов хранится в каталоге /var/adm или /var/log.
390 Часть I. Основы администрирования Системы Linux в этом плане — гораздо более интеллектуальные, хотя в каждом дис- трибутиве журнальные файлы и названы, и распределяются по каталогам по-разному. В основном, Linux-приложения записывают журнальную информацию в файлы, нахо- дящиеся в каталоге /var/log. В табл. 11.1 представлена информация о наиболее часто используемых журнальных файлах демонстрационных дистрибутивов. Указаны, в частности, следующие сведения: • журнальные файлы, подлежащие архивированию или другой обработке; • программа, создающая каждый из этих файлов; • информация о том, где задается имя файла; • периодичность удаления устаревшей информации, которая считается приемлемой; • системы (из числа демонстрационных), в которых используется каждый из этих файлов; • описание содержимого файлов. Имена файлов в табл. 11.1 даны относительно каталогов /var/adm, /var/log или / var/log/syslog, если не указано иное. Журнальные файлы обычно принадлежат пользователю root, хотя соглашения о вла- дельцах и режимах доступа к этим файлам неодинаковы в разных системах. В некоторых случаях менее привилегированный демон (такой, как httpd или mysqld) может потре- бовать доступ для записи, а затем задать ее владельца и режим работы соответственно. Вам, возможно, для просмотра важных журнальных файлов, которые имеют строгие разрешения доступа, придется использовать команду sudo. В качестве альтернативы для журнальных файлов, которые не содержат важные системные данные, можно изменить разрешения доступа и позволить “всеобщее” чтение. Мы обычно рекомендуем послед- ний вариант применять для файлов регистрации, которые вам нужно просматривать ре- гулярно (например, журналы регистрации Apache в каталоге /var/log/httpd). Следует отметить, что многие журнальные файлы из числа перечисленных в табл. 11.1 контролируются системой Syslog, но стандартная ее конфигурация сильно зависит о» системы. Если бы файл /etc/syslog. conf был более согласованным, управление жур- нальными файлами велось бы примерно одинаково во всех операционных системах. Журнальные файлы могут очень быстро увеличиваться в размере, особенно это каса- ется файлов для службы электронной почты, веб- и DNS-серверов. Неконтролируемый файл регистрации может заполнить весь диск и тем самым “положить систему”. Поэтому мы предпочитаем использовать отдельный раздел для самых “зашумленных” и занятых журнальных файлов. В системах Linux отдают предпочтение каталогам /var или /var/ log. Соглашения в других системах отличаются друг от друга. Специальные журнальные файлы Большинство журнальных файлов — это обычные текстовые файлы, в которые запи- сываются сообщения о “важных” событиях. Но некоторые файлы из числа перечислен- ных в табл. 11.1 имеют совершенно другое назначение. Файл wtmp (иногда wtnpx) содержит записи о том, когда пользователи входили в си- стему и выходили из нее, а также когда система выключалась или перезагружалась. Это довольно простой файл (новые записи просто добавляются в конец), тем не менее, он хранится в бинарном виде. Расшифровать содержимое файла можно с помощью коман- ды last.
Глава 11. Система Syslog и журнальные файлы 391 £3 Подробнее о разреженных файлах см. сноску в разделе 10.4. В файле lastlog регистрируется время последнего входа в систему каждого поль- зователя. Это разреженный бинарный файл, записи которого индексируются по иден- тификатору пользователя (UID). Размер файла будет меньше, если назначать иденти- фикаторы по порядку, хотя вряд ли об этом стоит сильно беспокоиться. Файл lastlog не должен участвовать в цикле ротации, поскольку его размер в большинстве случаев остается неизменным. Таблица 11.1. Журнальные файлы Файл Программа Место* Частота* Системы* -- - - Л~ acpid acpid Ф 64k RZ События, связанные с питанием auth.log sudo и др.6 S м и Авторизационные сообщения apache2/* httpd (версия 2) ф д ZU Журналы HTTP-сервера Apache (вер- сия 2) apt* APT ф м и Программы для установки про- граммных пакетов boot.log Сценарии запуска системы ф* м R Выходная информация сценариев запуска boot.msg Ядро в - Z Образ буфера сообщений ядра cron, cron/log cron S н RAH Сведения о выполнении и об ошиб- ках демона cron cups/* CUPS ф н ZRU Сообщения, связанные с печатью (CUPS) daemon.log Различные S н и Все сообщения средств демона debug Различные S д и Отладочные сообщения dmesg Ядро в — RU Образ буфера сообщений ядра dpkg.log dpkg ф м и Журнал управления пакетом faillogr login н н RZU Сообщения о неудачных попытках регистрации в системе httpd/* httpd ф д R Журналы HTTP-сервера Apache (в каталоге /etc) kern.log Ядро S н и Все сообщения средств ядра lastlog login в - RZ Время последней регистрации в си- стеме каждого пользователя (бинар- ный файл) mail* Связанные с эле- ктронной почтой S н Все Все сообщения средств электронной почты messages Различные S н RZUS Это основной системный журналь- ный файл rpmpkgs cron.daily в д R Список установленных RPM-пакетов samba/* smbd и др. ф н - Samba (совместное использование файлов в системах Windows/CIFS) secure Sill sshd и др. S м R Конфиденциальные авторизацион- ные сообщения SU ф - SAH Учет удачных и неудачных попыток использования команды su
392 Часть I. Основы администрирования Окончание табл. 11.1 Файл Программа Место* Частота» Системы* Содержимое/назначение syslog* Различные S н SUH Это основной системный журналь- ный файл warn Различные s н Z Все сообщения уровня предупре- ждений/ошибок wpars/* wpar Ф - А События загрузочных разделов wtmp login в м Все Сообщения о регистрации в системе (бинарный файл) хеп/* Хеп Ф 1m RZU Информация от монитора виртуаль- ных машин Хеп Xorg.n.log Xorg Ф Н RS Сообщения об ошибках сервера X Windows yum. log yum Ф М R Журнал управления пакетом а В столбцах “Место”, “Частота” и “Системы” используются следующие обозначения: S — Syslog, В — встро- енное имя, Ф — конфигурационный файл, Д — ежедневно, Н — еженедельно, М — ежемесячно, MV[km] = размер в килобайтах или мегабайтах, Z — SUSE, R — Red Hat и CentOS, S — Solaris, H — HP-UX, A — AIX. 6 Команды passwd, login и shutdown тоже записывают информацию в журнал авторизации, который хра- нится в каталоге /var/adm. в В действительности сообщения направляются в систему Syslog, но название средства и уровень важности задаются в файле /etc/initlog. conf. г Двоичный файл, который должен быть прочитан с помощью утилиты faillog. Назначение файла utmp — попытаться сохранить запись каждого пользователя, кото- рый регистрируется в данный момент. Иногда это выполняется неправильно: например, если оболочка была разрушена несоответствующим сигналом, а родительская оболочка не восстановлена надлежащим образом. Файл utmp, как правило, доступен для “всеоб- щей” записи. Особенности систем Поставщики, казалось бы, прячут журнальные файлы где-то на диске. Многие из них можно найти посредством розыскных мероприятий, проводимых на базе файлов конфигурации демонов и файла конфигурации syslog. В этом разделе мы “прольем свет” на некоторые скрытые журнальные файлы, оставленные поставщиками в “темных углах и закоулках”. Дистрибутивы Linux заслуживают приз за самый простой вариант управления регистрацией событий. Журналы регистрации получают понятные имена и последовательно сохраняются в каталоге /var/log. Все наши примеры дис- трибутивов также включают превосходную утилиту logrotate, предназна- ченную для выполнения ротации и усечения этих журналов, а также управле- ния ими. Новые программные пакеты могут вставлять файл конфигурации в каталог /etc/logrotate.d в соответствии со стратегией управления этими журналами регистрации. Утилита logrotate подробно описана ниже в этой главе (см. раздел 11.4).
Глава 11. Система Syslog и журнальные файлы 593 И наоборот, система Solaris отличается самой неорганизованной коллекцией SOiariS журналов регистрации. Но использование каталога /var/log облегчит вашу работу. Вот несколько полезных ссылок. • /var/log/* • /var/cron/log • /var/lp/logs/* • /var/saf/—log • /var/saf/z smon/log • /var/svc/log • /var/adm/* Из демона cron вы можете запускать поддерживаемый поставщиками сценарий /usr/ lib/newsyslog для выполнения ротации основных журналов регистрации /var/adm/ messages и /var/log/syslog. В системе HP-UX журналы регистрации хранятся в каталоге /var/adm. Здесь также находится множество странных и даже загадочных файлов, которые не являются журналами регистрации, поэтому будьте бдительны. Файл nettl. LOGO 0 0 предназначен для управления сетью и ведения статистики (см. man- страницу nettl). По умолчанию регистрационные записи, формируемые си- стемой Syslog, попадают в каталог /var/adm/syslog. 11.2. Syslog: система регистрации событий Syslog — это полнофункциональная система регистрации событий, написанная Эри- ком Оллманом (Eric Allman). Она выполняет две важные функции: освобождает програм- мистов от утомительной механической работы по ведению журнальных файлов и пере- дает управление журнальной регистрацией в руки администраторов. До появления си- стемы Syslog каждая программа сама выбирала схему регистрации событий, а у систем- ных администраторов не было возможности контролировать, какая информация и где именно сохраняется. Система Syslog отличается высокой гибкостью. Она позволяет сортировать сообще- ния по источникам и уровню важности и направлять их в различные пункты назначе- ния: в журнальные файлы, на терминалы пользователей и даже на другие компьютеры. Одной из самых ценных особенностей этой системы является ее способность централи- зовать процедуру регистрации событий в сети. Ф Система Syslog была давно принята “на вооружение” основными версиями UNIX и Linux (за исключение системы AIX). Система AIX включает демон syslog и библиотечные программы, но не обеспечивает никакой стандартной конфигурации системы Syslog и использует собственный демон для форми- рования отчетов об ошибках (подробнее см. раздел 11.3 ниже в этой главе). Поскольку система Syslog столь широко применяется программными расши- рениями, мы считаем, что глубокое понимание системы Syslog важно и для администраторов AIX.
394 Часть I. Основы администрирования Архитектура системы Syslog Система Syslog состоит из трех компонентов: • syslogd — демон журнальной регистрации (его конфигурационный файл называ- ется /etc/syslog.conf); • openlog (), syslog (), closelog () — библиотечные функции, которые передают сообщения демону syslogd; • logger — команда пользовательского уровня, которая принимает регистрацион- ные сообщения от интерпретатора команд. Ш Сигналы описаны в разделе 5.3. Демон syslogd запускается на этапе начальной загрузки системы и работает непре- рывно. Его работой нельзя управлять посредством демона inetd. Программы, взаимо- действующие с системой Syslog, записывают журнальные сообщения (путем вызова би- блиотечной функции syslog ()) в специальный файл /dev/log, который представляет собой UNIX-сокет. Демон syslogd читает сообщения из этого файла, сверяется со сво- им конфигурационным файлом и пересылает сообщения адресатам. По сигналу “отбой” (HUP, сигнал 1) демон syslogd закрывает свои журнальные фай- лы, перечитывает конфигурационный файл и вновь переходит в режим непрерывной регистрации сообщений. Если файл syslog. conf изменился, нужно послать демону syslogd сигнал HUP, иначе изменения не вступят в силу. Сигнал ТЕРМ приводит к за- вершению работы демона. Демон syslogd записывает свой идентификатор процесса (PID) в каталог /var/run (в системе AIX для этого используется каталог /etc). Это облегчает передачу демону сиг- налов из сценариев. Например, следующая команда посылает демону сигнал отбоя. solaris$ sudo kill -HUP '/bin/cat /var/run/syslogd.pid' Попытки выполнить сжатие или ротацию журнального файла, который был открыт демоном syslogd для записи, приводят к непредсказуемым последствиям. О выполне- нии ротации журнальных файлов с помощью утилиты logrotate можно прочитать в раз- деле 11.4. Предпочтительный метод перезапуска утилиты syslogd в системе АЕХ — использо- вание команды refresh. aix$ sudo refresh -s syslogd Команда refresh контактирует с контроллером системных ресурсов (System Resour- ce Controller), который управляет различными подсистемами, в том числе и подсистема- ми регистрации. Подробнее см. man-страницу refresh. Конфигурирование демона syslogd Поведение демона syslogdзависит от содержимого файла /etc/syslog.conf. Это текстовый файл относительно простого формата. Пустые строки, а также строки, начина- ющиеся с символа решетки (#), игнорируются. Базовый синтаксис записей файла таков. селектор <ТаЬ> действие Например, строка mail.info /var/log/maillog обеспечивает сохранение сообщений, поступающих от почтовой системы, в файле /var/ log/maillog. Поля селектор и действие должны разделяться одним или двумя сим-
Глава 11. Система Syslog и журнальные файлы 395 волами табуляции. Пробелы в большинстве версий не работают и скрывают ошибки, которые потом довольно трудно отследить. Такие ошибки легко появляются в результате операций вырезки и вставки, выполняемых с помощью мыши. Селектор указывает программу (“средство”), которая посылает журнальное сооб- щение, и уровень важности этого сообщения. Формат селектора выглядит следующим образом. средство.уровень Названия средств и уровней важности следует выбирать из стандартного списка зна- чений; программы не могут самостоятельно составлять такие списки. Есть средства, определенные для ядра, для основных групп утилит и для локальных программ. Все ос- тальное проходит под общим названием user (т.е. пользователь). Селекторы могут содержать ключевые слова * и попе, которые обозначают “все” и “ничего” соответственно. В селекторе разрешается через запятые перечислять группу средств. Допускается также разделение самих селекторов с помощью точки с запятой. В общем случае селекторы объединяются методом логического сложения, т.е. указан- ное действие будет выполняться для сообщения, соответствующего любому селектору. Селектор уровня попе означает исключение перечисленных в нем средств, независимо от того, что указано в остальных селекторах этой же строки. Приведем несколько примеров селекторов. средство.уровень средство!, средство2.уровень средство!.уровень!;средство2.уровень2 ★.уровень ★. уровень ; шюхое_средство .попе действие действие действие действие действие В табл. 11.2 перечислены допустимые названия средств. В настоящее время опреде- лено 21 средство. Таблица 11.2. Названия средств Syslog i * A1 1 . АГ" -J'AW ',11/ * Все средства, кроме mark auth authpriv cron daemon ftp kem localO-7 ipr mail mark news 8yslog user Uucp Команды, связанные с безопасностью и авторизацией Конфиденциальные авторизационные сообщения Демон cron Системные демоны Демон f tpd Ядро Восемь разновидностей локальных сообщений Система спулинга построчной печати Система sendmail и другие почтовые программы Метки времени, генерируемые через одинаковые промежутки Система телеконференций Usenet (устаревшее средство) Внутренние сообщения демона syslogd Пользовательские процессы (это установка по умолчанию, если не указано иное) Устаревшее средство, которое в последних версиях системы игнорируется
396 Часть I. Основы администрирования Не воспринимайте слишком серьезно различие между syslog-сообщениями типа auth и authpriv. В действительности все авторизационные сообщения являются кон- фиденциальными, и ни одно из них не должно быть открытым для всеобщего доступа. Демон syslogd сам генерирует сообщения с метками времени, которые регистри- руются, если в файле syslog.conf для них указан селектор со средством mark. Метки времени помогают точно определить, когда произошел сбой, к примеру “между 3:00 и 3:20 утра”, а не просто “сегодня ночью”. Это необходимо при устранении проблем, воз- никающих регулярно. В табл. 11.3 перечислены уровни важности, существующие в системе Syslog (в поряд- ке убывания важности). Таблица 11.3. Уровни важности сообщений Syslog Уровень Приблизительное значение emerg alert Экстренные сообщения Срочные сообщения crit Критические состояния err Другие ошибочные состояния warning notice info debug Предупреждения Необычные события, которые заслуживают внимания Информационные сообщения Отладочные сообщения Уровень сообщения определяет его важность. Границы между различными уровнями несколько размыты. Существует четкое различие между событиями, заслуживающими внимания, и предупреждениями (а также между предупреждениями и сообщениями об ошибках), но трудно однозначно разграничить значения уровней alert и crit. В файле syslog.conf уровни обозначают минимальную важность, которую со- общение должно иметь для того, чтобы быть зарегистрированным. Например, сообще- ние почтовой системы, имеющее уровень важности warning, будет соответствовать селектору mail. warning, а также селекторам mail. info, mail. notice, mail. debug, *. warning, *. notice, *. info и *. debug. Если в файле syslog. conf указано, что со- общения mail. info должны регистрироваться в файле, то сообщения mail .warning тоже будут направляться в этот файл. В Linux-версиях системы Syslog перед названиями уровней могут ставиться симво- лы = и !, означающие “только этот уровень” и “за исключением этого и более высоких уровней” соответственно (табл. 11.4). Таблица 11.4. Примеры использования квалификаторов уровня в файле syslog.conf CeaeKtop ________________ Назначение __________________________- ;___________jSl mail. info Выбор почтовых сообщений уровня info и выше mail. =infо Выбор почтовых сообщений только уровня info mail. info ;mail.»err Выбор почтовых сообщений уровней info, notice и warning mail. debug ;mail.! ^warning Выбор почтовых сообщений любого уровня, кроме warning Поле действие определяет способ обработки сообщения. Возможные варианты пе- речислены в табл. 11.5. *
11. система Syslog и журнальные файлы 597 Таблица 11.5. Действия системы Syslog '• — - - ‘ ПЯМИЧИЯВ , - . имя_ файла Дописать сообщение в указанный файл на локальном компьютере @имя_узла Переслать сообщение демону syslogd, выполняющемуся на компьютере с ука- занным именем @тр_адрес Переслать сообщение демону syslogd на компьютере с указанным IP-адресом | файЛ—FIFO Записать сообщение в указанный именованный канал® поль зова тель 1, пользова тель2,... Вывести сообщение на экраны терминалов указанных пользователей, если они за- регистрированы в системе Вывести сообщение на экраны всех зарегистрированных пользователей а Для получения дополнительной информации введите команду info mkfifo (только для Linux-версий syslogd). Если в качестве действия задано имя файла (или имя файла FIFO), то это должно быть полное имя. При отсутствии указанного файла в системе Linux демон syslogd создает его в процессе записи первого сообщения. В других системах заданный файл должен уже существовать — демон syslogd не будет его создавать. В дистрибутивах Linux перед именем файла можно ставить дефис, чтобы по- сле записи каждого сообщения не осуществлялся системный вызов sync. Синхронизация помогает сохранить как можно больше журнальной информа- ции в случае сбоя системы, но она достаточно накладна с точки зрения произ- водительности системы. Естественно, мы рекомендуем включать дефисы (тем самым запрещая синхронизацию). Удаляйте дефисы только временно, пока занимаетесь изучением проблемы, которая является причиной аварийного со- стояния ядра. Если указывается не IP-адрес, а имя узла, оно должно быть известно одной из служб преобразования имен, например DNS или NIS. В системе Solaris реализация syslog выполняет файл syslog.conf через ма- soiaris кропроцессор предварительной обработки ш4. Обратитесь к тап-страницам и, не жалея, используйте кавычки, чтобы записи конфигурации выражали ва- ши намерения. Например, вы должны заключать в кавычки все ключевые сло- ва ш4 и все выражения, которые содержат запятую. Вот как выглядит типич- ная запись в стиле гп4. auth.notice ifdef('LOGHOST', '/var/log/authlog', @loghost') Обратите внимание на то, что используемые кавычки представляют собой одиноч- ные “обратные апострофы”. Приведенная выше строка направляет сообщения в файл / var/l°9/authlog, если значение LOGHOST не определено. В противном случае сообще- ния направляются в компьютер loghost. В т4 операторы if def очень мощные; они позволяют системным администраторам создавать один файл syslog. conf, который может быть использован на всех компьютерах. Хотя в селекторе можно указывать сразу несколько средств и уровней, выполнение нескольких действий не предусмотрено. Для того чтобы послать сообщение в два разных места (например, в локальный файл и на центральный регистрационный узел), нужно включить в конфигурационный файл две строки с одинаковыми селекторами.
398 Часть I. Основы администрирования Поскольку сообщения системы Syslog могут использоваться для организации атак типа “отказ от обслуживания”, демон syslogd в большинстве дистрибутивов Linux от- кажется принимать сообщения от других компьютеров, если только он не был запущен с флагом -г. По умолчанию демон также отказывается выступать в роли внешнего дис- петчера сообщений: сообщения, поступающие от сетевого узла, не могут быть пересла- ны на другой узел. Флаг -h отменяет такое поведение. Если нужно, чтобы эти опции были всегда включены, модифицируйте соответствующим образом сценарий запуска syslog. В RHEL конфигурацию syslog необходимо отредактировать в /etc/sysconfig /syslog. Примеры конфигурационных файлов Поскольку понять содержимое файла syslog.conf несложно, мы не станем подроб- но анализировать конфигурационные файлы наших демонстрационных дистрибутивов. Гораздо полезнее будет рассмотреть некоторые распространенные схемы журнальной регистрации. Ниже приведены примеры трех файлов syslog.conf, которые соответствуют ав- тономному компьютеру, используемому в небольшой сети, клиентскому компьютеру в крупной сети и центральному регистрационному узлу этой же сети. Последний на- зывается netloghost1. Автономный компьютер Ниже показана базовая конфигурация для автономного компьютера. # Файл syslog.conf для небольшой сети или автономной системы. # Экстренные сообщения направляются всем зарегистрированным пользователям. *.emerg2 * # важные сообщения * .warning;daemon,auth.info;user.none /var/log/messages # ошибки принтера Ipr.debug /var/log/lpd-errs В первой не являющейся комментарием строке организуется вывод экстренных со- общений на экраны терминалов всех пользователей, зарегистрированных в данный мо- мент в системе. В качестве примера можно привести сообщения, выдаваемые командой shutdown перед выключением системы. Вторая значащая строка обеспечивает запись важных сообщений в файл /var/log/ messages. Уровень info ниже уровня warning, поэтому выражение daemon, auth. info включает дополнительную регистрацию сообщений, поступающих от команд passwd и su, а также от всех демонов. Третья строка предназначена для записи сообщений об ошибках принтера в файл /var/log/lpd-errs. Сетевой регистрационный клиент Как показано в следующем примере, клиентский компьютер обычно пересылает важные сообщения на центральный регистрационный узел. 1 Точнее, netlogbost — один из псевдонимов узла. Наличие псевдонима позволяет заменять регистрационный узел с минимальными затратами на переконфигурирование системы. Псевдоним можно добавить в файл /etc/hosts или задать с помощью записи СИАМЕ в базе данных DNS. Подробнее о записях СИАМЕ рассказывается в разделе 17.8. 2 Если пользователи оконной системы X не выполняют программу xconsole, они не получат эти сообщения.
Глав? 11. система Syslog и журнальные файлы 599 # Файл syslog.conf для клиентских компьютеров # Экстренные сообщения направляются всем зарегистрированным пользователям. * .emerg;user.none * # важные сообщения пересылаются на центральный компьютер. * ,warning;lpr,locall.none Qnetloghost daemon,auth.info @netloghost # Сообщения от локальных программ отправляются на центральный компьютер. 1оса12.info;1оса17.debug Qnetloghost # Сообщения об ошибках принтера хранятся локально. Ipr.debug /var/log/lpd-errs # Сообщения утилиты sudo регистрируются от имени средства 1оса12. # Сохраняем их копии. 1оса12.info /var/log/sudo.log # Сообщения ядра также хранятся локально. kern.info /var/log/kern.log В такой конфигурации локально хранится не очень много информации. Если компью- тер netloghost выключен или недоступен, регистрационные сообщения будут безвоз- вратно утеряны. На этот случай можно создавать локальные копии важных сообщений. В системе, где инсталлирован большой объем локального программного обеспече- ния, неоправданно много сообщений будет регистрироваться от имени средства user на уровне emerg. В показанном примере такая ситуация заведомо исключается благодаря выражению user .попе в первой значащей строке. 03 Подробнее об утилите sudo рассказывалось в разделе 4.3. Вторая и третья значащие строки служат для пересылки всех важных сообщений на центральный регистрационный сервер; исключение составляют сообщения подсисте- мы печати и университетской (локальной) системы доступа по магнитным карточкам. В четвертой строке организуется отправка локальной журнальной информации также на центральный компьютер. Последние три строки обеспечивают сохранение локальных копий сообщений об ошибках принтера, журнальных сообщений утилиты sudo и со- общений ядра. Центральный регистрационный узел Ниже показана конфигурация компьютера netloghost — центрального защищенно- го регистрационного узла сети среднего размера, включающей около 7000 компьютеров. # Файл syslog.conf для главного регистрационного узла. # Экстренные сообщения направляются на консоль и в журнальный файл, # дополняемые метками времени. *.emerg /dev/console * .err;kern,mark.debug;auth.notice /dev/console * .err;kern,mark.debug;user.none /var/log/console.log auth.notice /var/log/console.log # Сообщения, не являющиеся экстренными, # записываются в обычные журнальные файлы. *.err;user.none;kern.debug /var/log/messages daemon,auth.notice;mail.crit /var/log/messages lpr.debug /var/log/lpd-errs mail.debug /var/log/mail.log # В следующих строках обрабатываются сообщения локальных программ # авторизации, таких как sudo и npasswd. Iocal2.debug /var/log/sudo.log
400 Часть I. Основы администрирования 1оса12.alert auth.info # другие локальные программы localO.info local4.notice local6.debug local7.debug /var/log/sudo-errs.log /var/log/auth.log /var/adm/nbl.log /var/admlog/da.log /var/adm/annex-isn.log /var/admlog/tcp.log # локальные сообщения (стандартное правило обработки сообщений, # для которых не задано средство) user.info /var/admlog/user.log Сообщения, поступающие от локальных программ и демонов syslogd по сети, за- писываются в журнальные файлы. В некоторых случаях выходная информация каждого средства помещается в отдельный файл. Центральный регистрационный компьютер генерирует метки времени для каждого получаемого сообщения. Это время не всегда совпадает со временем отправки сообще- ния. Если в систему входят компьютеры, расположенные в разных часовых поясах, или системные часы не синхронизированы, информация о времени окажется недостоверной. Отладка системы Syslog Команда logger позволяет выдавать журнальные сообщения в сценариях интерпре- татора команд. Кроме того, эту команду можно использовать для проверки изменений в конфигурационном файле демона syslogd. Например, если в файл была добавлена строка 1оса15.warning /tmp/evi.log и нужно убедиться в том, что она действительна, введите такую команду. hp-ux$ logger -р locals.warning "test message” Строка, содержащая фразу “test message” (тестовое сообщение), должна быть записана в файл /tmp/evi. log. Если этого не произошло, то, возможно, вы забыли создать файл evi. log, предоставить соответствующие права доступа к этому файлу или послать демо- ну syslogd сигнал отбоя. А, может быть, вы использовали пробелы вместо табуляции? Альтернатива системе Syslog Хотя система Syslog — проверенное средство регистрации событий в системах UNIX и Linux, в попытках устранения ряда ее недостатков были разработаны несколько аль- тернативных систем. Одна из них — Syslog-ng (“Syslog, next generation” — Syslog сле- дующего поколения) — теперь по умолчанию используется в системах SUSE. С точки зрения конфигурирования, она достаточно сильно отличается от Syslog, и мы не станем подробно ее описывать в этой книге. Если захотите ее использовать в системе, отличной от SUSE, она доступна по адресу: balabit. com. Система Syslog-ng предоставляет дополнительные возможности конфигурирования, фильтрования, в зависимости от содержимого сообщений, обеспечения целостности со- общений и улучшенную поддержку ограничений брандмауэра при пересылке сообще- ний по сети. Система SDSC Secure Syslog (разработанная в центре суперкомпьютеров в Сан-Диего) известна также как высокопроизводительная система Syslog. Реализуя спецификации RFC3195 (Reliable Delivery for syslog), она предоставляет “признаваемую судебными ор- ганами” систему аудита событий. Ее разработка выполнялась специально для организаций
Глава 11. система Syslog и журнальные файлы 401 с высоким сетевым трафиком, и система содержит множество компонентов оптимиза- ции производительности. Ее исходный код можно загрузить из сайта SourceForge: sourceforge.net/projects/sdscsyslog. Система Rsyslog — еще одна мощная альтернатива следующего поколения — вклю- чается в стандартные поставки ряда популярных дистрибутивов Linux (в том числе Fedora 8). Rsyslog позиционирует себя как расширенный модуль syslogd для систем Linux и Unix, обладающий продвинутой многопоточностью и акцентированный на без- опасности и надежности. Rsyslog поддерживает удаленную передачу логов на другой сер- вер посредством TCP (в отличие от протокола UDP, используемого оригинальным демо- ном syslog) и может взаимодействовать с протоколом защищенных сокетов SSL (Secure Sockets Layer), использование которого в некоторых системах может быть выдвинуто в качестве обязательного условия по регулятивным причинам. Через подключаемые рас- ширения Rsyslog даже может записывать системные логи сразу в базу данных (MySQL, Posrgres SQL, Oracle и множество других), а не только в файл. Rsyslog — оптимальное решение, функционально превосходящее свои аналоги и легко осваиваемое новичками. Больше о возможностях Rsyslog можно узнать на сайте rsyslog.com. Журнальная регистрация на уровне ядра и на этапе начальной загрузки Д Ядро и сценарии запуска системы представляют собой немалую проблему с точ- ки зрения журнальной регистрации. В первом случае проблема заключается в том, чтобы средства регистрации событий, происходящих на этапе началь- ной загрузки и в ядре, не зависели от типа файловой системы и ее органи- зации. Во втором случае трудность состоит в последовательной регистрации событий, происходящих в сценариях, а не в системных демонах или других программах, — их сообщения должны регистрироваться на другом уровне. Необходимо также избежать ненужного дублирования записей в сценариях и переадресации их вывода. Первая из описанных проблем решается путем создания внутреннего буфера огра- ниченного размера, куда ядро заносит свои журнальные сообщения. Этот буфер доста- точно велик для того, чтобы вместить сообщения обо всех действиях, предпринимаемых ядром на этапе начальной загрузки. Когда система полностью загрузится, пользователь- ский процесс сможет получить доступ к журнальному буферу ядра и скопировать его содержимое в нужное место. Обычно для этого запускается команда dmesg, результаты работы которой даже содержат сообщения, которые были сгенерированы до запуска де- мона init. Сообщения, генерируемые ядром в процессе работы, обрабатываются демоном klogd. С функциональной точки зрения он расширяет возможности команды dmesg. Демон может или просто создать образ журнального буфера ядра и завершить работу, или дина- мически извлекать сообщения из буфера по мере их появления, записывая их в файл или передавая системе Syslog. По умолчанию демон работает во втором режиме. Его сообще- ния обрабатываются системой Syslog в соответствии с установками для средства “kern” (обычно они записываются в каталог /var/log/messages или /var/log/syslog). В наших демонстрационных дистрибутивах сценарии запуска не используют флаг -с команды dmesg при создании начального образа журнального буфера, вследствие чего содержимое буфера читается, но не сбрасывается. Когда демон klogd запускается, он
402 Часть I. Основы администрирования находит в буфере те же сообщения, которые прочла команда dmesg, и передает их систе- ме Sysiog. По этой причине некоторые сообщения появляются не только в файле dmesg или boot .msg, но и в основном syslog-файле системы. Другой важный момент, связанный с журнальной регистрацией на уровне ядра, ка- сается правильного управления системной консолью. Важно, чтобы по ходу загрузки системы вся выводимая информация попадала на консоль. С другой стороны, когда си- стема загрузилась и начала выполняться, консольные сообщения больше раздражают, нежели помогают, особенно если консоль используется для регистрации в системе. Команда dmesg и демон klogd позволяют указывать в командной строке уровень важности консольных сообщений ядра. ubuntu$ sudo dmesg -n 2 Сообщения уровня 7 наиболее информативны и включают отладочную информа- цию. К первому уровню относятся только сообщения о фатальных ошибках системы (чем ниже уровень, тем выше важность сообщений). Все сообщения, выдаваемые ядром, продолжают поступать в журнальный буфер (а также в систему Syslog) независимо от того, направляются они на консоль или нет. В каталог /ргос/sys ядро помещает также ряд управляющих файлов, которые по- зволяют отсекать повторяющиеся журнальные сообщения. Механизм настройки пара- метров ядра подробнее описан в подразделе 13.3. Специальными управляющими файла- ми являются /proc/sys/kernel/printk_ratelimit, в котором указан минимальный интервал времени в секундах между записываемыми сообщениями ядра после активи- зирования “заглушки” (по умолчанию это значение равно 5), и /proc/sys/kernel/ printk_ratelimit_burst, в котором указано количество групповых сообщений, вы- зывающее активизирование заглушки (значение по умолчанию — 10). Эти параметры носят лишь рекомендательный характер и поэтому не обеспечивают абсолютной гаран- тии полного перекрытия потока излишних сообщений. Кроме того, они применяются только к сообщениям, созданным в ядре с помощью функции printk_ratelimit (). К сожалению, журнальная регистрация на уровне сценариев запуска системы контро- лируется не так хорошо, как на уровне ядра. В Red Hat Enterprise Linux имеется команда initlog, которая перехватыва- ет сообщения, выдаваемые командами сценариев, и направляет их в систему Syslog. К сожалению, эту команду приходится явно указывать в сценариях, что повышает их сложность. В конечном итоге журнальные сообщения попадают в файл /var/log/boot. log. В других наших дистрибутивах вообще не делаются попытки перехватывать сообще- ния сценариев запуска. Часть информации регистрируется отдельными командами и де- монами, но основная ее часть остается “незамеченной”. 11.3. Регистрация сообщений и обработка ОШИБОК В СИСТЕМЕ AIX ®В системе AIX управление журналами регистрации отличается от других систем UNIX. Несмотря на наличие системы Syslog в стандартной поставке, она не сконфигурирована. При формировании отчета о системных ошибках AIX опи- рается на демон errdemon, который предназначен для обработки системных диагностических сообщений (таких, как уведомления о сбоях оборудования
Глава 11. Система Syslog и журнальные файлы 403 или всей файловой системы), но не для обработки регистрирующих сообще- ний для отдельных демонов. Таким образом, предусмотрительный системный администратор воспользуется мудростью демона errdemon для ADC-диагно- стики и возможностями правильно сконфигурированной системы Syslog для управления журналами регистрации централизированных приложений. Демон errdemon запускается при начальной загрузке системы в каталоге /etc/rc. bootc и читает события, связанные с ошибками, из специального файла /dev/error. Как ядро, так и некоторые пользовательские AIX-приложения записывают данные об ошибках в этот файл в соответствии с предопределенными шаблонами из каталога /dev /adm/ras/errtmplt. Демон errdemon сравнивает новые записи с шаблонами и за- писывает результат в двоичном формате в файл /var/adm/ras/errlog. Система AIX любит двоичные форматы! Файл errlog — циркулярный, поэтому, когда файл достигает своего максимального размера (1 Мбайт по умолчанию), на место первого события записывается новое. Кроме того, демон errdemon буферизирует события, которые еще не были записаны в журнал регистрации. Можно просмотреть или изменить настройки, запустив непосредственно демон /usr/lib/errdemon. Детали инициирования работы демона можно узнать на со- ответствующей man-странице. Поскольку файл errlog — не текстовый, для чтения его содержимого вы можете ис- пользовать другой инструмент errpt. Без аргументов утилита errpt напечатает в сокра- щенной форме список всех событий, записанных в журнале регистрации. Для получе- ния более подробного варианта того же списка добавьте аргумент -а. Вот как выглядит пример записи из нашей системы AIX. aix$ errpt -а LABEL: DMPCHK_NOSPACE IDENTIFIER: F89FB899 Date/Time: Sat Mar 21 15:00:01 MST 2009 Sequence Number: 224 Machine Id: 0001A4C4D700 Node Id: ibm Class: Type: WPAR: 0 PEND Global Resource Name: dumpcheck Description The copy directory is too small. Probable Causes There is not enough free space in the file system containing the copy irectory to accommodate the dump. Recommended Actions Increase the size of that file system. detail Data File system name /var/adm/ras
404 Часть I. Основы администрирования Current free space in kb 108476 Current estimated dump size in kb 197836 Это конкретное событие означает, что системный дамп не поместится в заданной файловой системе приемника. Большинство меток разделов не требует дополнительных разъяснений, но за дополнительной информацией по errpt вам стоит все же обратить- ся к соответствующей шап-странице. Несмотря на то что демон errdemon представляет собой полезный источник данных о регистрации событий в автономной системе AIX, его использование может противо- речить получившей более широкое определение стратегии регистрирования событий на уровне предприятия. Вам, возможно, придется написать сценарий для перехвата собы- тий демона errdemon в формате системы Syslog или перенаправлять их для централи- зованного архивирования. Кроме того, из оперативной IBM-документации вы можете узнать, как отправлять отчеты об ошибках в систему Syslog через менеджер ODM (Object Data Manager). Возможно, вам придется удалять записи из журналов регистрации ошибок, и для этой цели специалисты из IBM предусмотрели команду errclear. Эта команда удаляет все сообщения по истечении количества дней, заданного в качестве аргумента. Например, при выполнении команды errclear 7 будут удалены сообщения об ошибках, с момен- та регистрации которых прошло более одной недели. Чтобы стереть все сообщения об ошибках, выполните команду errclear 0, а чтобы стереть заданное сообщение — команду errclear - j идентификатор 0. Конфигурация системы Syslog в среде AIX По умолчанию AIX-файл syslog. conf содержит длинный список комментариев и не имеет никаких анализируемых конфигурационных данных. Системный админи- стратор вправе сам принять решение о конфигурировании системы Syslog в соответ- ствии с настройками в других системах. Всегда не такая, как все, система AIX предоставляет свое средство циркуляции реги- страционной информации в рамках демона syslogd. Журналы регистрации могут под- вергаться циркуляции через регулярные интервалы времени или по достижении ими за- данного размера. Их можно сжимать и архивировать в определенных каталогах. И хотя мы ценим эти функциональные возможности, они не могут управлять файлами, которые находятся вне контроля системы Syslog (например, журналы регистрации, генерируемые приложениями, которые “ничего не знают” о системе Syslog). Чтобы реализовать всесто- роннее управление журналами регистрации, вам, возможно, придется сочетать средства ротации демона syslogd с одним из инструментов, описываемых ниже в этой главе. Для воспроизведения конфигурации системы Syslog в стиле Linux присоедините сле- дующие строки к концу файла /etc/syslog.conf и выполните команду refresh -s syslogd. Не забудьте использовать символы табуляции вместо пробелов и создать каж- дый файл заранее. mail.debug user.debug kern.debug syslog.debug daemon.debug /var/log/mail /var/log/user /var/log/kern /var/log/messages /var/log/daemon
Ошва 11. Система Syslog и журнальные файлы 405 auth.debug /var/log/secure 1оса12.debug /var/log/sudo Вы задаете ротацию журналов регистрации в файле syslog.conf путем присоеди- нения опции rotate к концу строки конфигурации. Журналы регистрации могут под- вергаться ротации по достижении заданного размера файла или по истечении заданного интервала времени (временного инкремента). Если вы установите ограничение как по размеру, так и по времени, демон syslogd выполнит ротацию файла при реализации любого критерия. Более того, файлы могут быть сжаты или заархивированы с переносом в новый каталог. Возможные опции перечислены в табл. 11.6. Таблица 11.6. Опции ротации AIX-журналов регистрации, задаваемые в файле syslog. conf -...........'............ ‘Л 1 rotate Означает, что заданный файл должен быть подвергнут ротации size W[km]a files N Выполняет ротацию, когда файл достигает заданного размера6 Сохраняет заданное количество версий в ротации time W[hdwmy]B compress archive позиция Выполняет ротацию после истечения заданного интервала времени6 Сжимает файл после ротации с помощью команды compress Перемещает файл после ротации в заданную позицию а к — килобайты, m — мегабайты. 6 Между элементом N и единицами измерения не должно быть пробелов. Например, 3m — правильная за- пись, а 3 ш—нет. 8 h — чеод d—дни, w — недели, m — месяцы, у — годы. Найример, вот несколько строк файла конфигурации syslog. conf из предыдущего примера, который был расширен опциями ротации. # Rotate at 500MB, keep 4 files mail.debug /var/log/mail rotate size 500m files 4 # Rotate after 1 week, keep 10 files, compress the file user.debug /var/log/user rotate files 10 time lw compress # Rotate after 100KB or 2 months, whichever occurs first, keeping 4 files kern.debug /var/log/kern rotate size 100k files 4 time 2m # Keep 1 year of weekly logs, compress the file, move the file to /logs syslog.debug /var/log/messages rotate files 52 time lw compress archive /logs 11.4. Утилита locrotate: управление ЖУРНАЛЬНЫМИ ФАЙЛАМИ Прекрасная утилита logrotate реализует различные схемы управления журнальны- ми файлами и является частью всех рассматриваемых нами дистрибутивов Linux. Она также выполняется в системах Solaris, HP-UX и AIX, но для этого вам придется ее ин- сталлировать. Мы отдаем предпочтение утилите logrotate, а не пакету logadm, кото- рый входит в поставку системы Solaris. ^^Конфигурационный файл утилиты logrotate состоит из набора спецификаций для фУПй журнальных файлов, которыми следует управлять. Параметры, определенные вне
406 Часть I. Основы администрирования какой-либо спецификации (например, errors, rotate и weekly в показанном ниже примере), являются глобальными. Их можно переопределять для конкретного журналь- ного файла, а также указывать несколько раз в различных частях файла, меняя стандарт- ные установки. Ниже представлен несколько искусственный пример такого файла. # Глобальные параметры errors errors@book.admin.com rotate 5 weekly # Определения и параметры ротации журнальных файлов /var/log/messages { postrotate /bin/kill -HUP 'cat /var/run/syslogd.pid' endscript } /var/log/samba/*.log { notifempty copytruncate sharedscripts postrotate /bin/kill -HUP 'cat /var/lock/samba/*.pid' endscript } В этой конфигурации раз в неделю осуществляется ротация файла /var/log /messages. Сохраняются пять последовательных версий файла, а демон syslogd уве- домляется о каждом шаге ротации. Журнальные файлы системы Samba (их может быть несколько) также подвергаются ротации каждую неделю, но вместо того чтобы последо- вательно перемещать файлы, а затем создавать новый начальный файл, сценарий после- довательно копирует журнальные файлы, усекая первый. Сигнал HUP посылается демо- нам Samba только после того, как произойдет ротация всех журнальных файлов. В табл. 11.7 перечислены наиболее полезные параметры файла logrotate. conf. Таблица 11.7. Параметры файла logrotate. conf Опция Нмнммй ’. ".' ‘ ' Й compress daily, weekly, monthly Сжимать все версии журнального файла, кроме текущей Осуществлять ротацию журнальных файлов ежедневно, еженедельно или ежемесячно delaycompress endscript errors почтовый_адрес missingok notifempty olddir каталог postrotate Сжимать все версии журнального файла, кроме текущей и предыдущей Этот параметр помечает конец блоков prerotate и postrotate Направлять сообщения об ошибках по указанному адресу Не выдавать предупреждений об отсутствии журнального файла Не осуществлять ротацию журнального файла, если он пуст Помещать старые версии журнального файла в указанный каталог Этот параметр помечает начало блока команд, выполняемых после рота- ции журнального файла prerotate Этот параметр помечает нгщало блока команд, выполняемых перед рота- цией журнального файла
Глава 11. Система Syslog и журнальные файлы 407 Окончание табл. 11.7 Опция . rotate п Включать в цикл ротации указанное число версий журнального файла sharedscripts Запускать сценарии один раз для всей группы журнальных файлов size=nopor Выполнять ротацию, если размер журнального файла превышает порого- вую величину (например, 100 Кбайт, 4 Мбайт) Утилита logrotate обычно запускается демоном cron раз в день. Ее стандартный конфигурационный файл называется /etc/logrotate.conf, но в командной строке можно указывать сразу несколько файлов (или каталогов, содержащих конфигурацион- ные файлы). Эта особенность широко используется в дистрибутивах Linux, в которых каталог /etc/logrotate.d определен как стандартное место хранения конфигураци- онных файлов утилиты logrotate. Программные пакеты, поддерживающие эту утили- ту (а таковых немало), при инсталляции выбирают схему журнальной регистрации, что существенно упрощает их администрирование. Кроме утилиты logrotate, дистрибутив Ubuntu включает также более простую про- грамму savelog, которая управляет ротацией отдельных файлов. Она проще утилиты logrotate и не использует конфигурационный файл (да и не нуждается в нем). В не- которых пакетах предпочтение отдается собственным конфигурациям, создаваемым с по- мощью утилиты savelog, а не определенным утилитой logrotate. 11.5. Поиск ПОЛЕЗНОЙ ИНФОРМАЦИИ В ЖУРНАЛЬНЫХ ФАЙЛАХ Система Syslog прекрасно подходит для сортировки и маршрутизации журнальных сообщений, но в результате все равно получается большой набор журнальных файлов. Они могут содержать много важной информации, но иногда ее не так просто найти. Не- обходимо дополнительное программное обеспечение для анализа журнальных файлов и поиска в них нужных сообщений. В этом сегменте рынка предлагается много бесплатных продуктов, и большинство из них работает примерно одинаково: программа сканирует недавние записи журналь- ного файла, сравнивает их с регулярными выражениями из базы данных и обрабатывает важные сообщения. Различия между программами проявляются в степени гибкости и размере готовых баз данных с шаблонами. Двумя наиболее распространенными программами обработки журнальных файлов являются утилиты swatch и logcheck. Их можно загрузить из сайта sourceforge. net (программа logcheck распространяется в составе пакета sentrytools: source forge. net/projects/sentrytools). Утилита swatch представляет собой Perl-сценарий, работающий в соответствии с Директивами конфигурационного файла. Синтаксис этого файла достаточно гибок, так как позволяет выполнять все поддерживаемые в языке Perl операции сравнения с ша- блонами. Утилита swatch может обработать конфигурационный файл за один вызов, но обычно она выполняется в фоновом режиме, отслеживая новые сообщения по мере их поступления, подобно команде tail -f. Недостатком является то, что конфигурацион- ный файл, по сути, нужно создавать с нуля. Утилита не “знает” об особенностях работы системы и о том, какие журнальные сообщения в ней генерируются.
408 Часть I. Основы администрирования Утилита logcheck — более простой сценарий интерпретатора sh. В дистрибутив входит также программа на языке С, которая помогает утилите запоминать текущую по- зицию в журнальном файле. Благодаря этому у сообщения меньше шансов пройти неза- меченным на этапе загрузки или останова системы. Утилита может запускаться перио- дически с помощью демона cron, а не выполняться постоянно. С утилитой logcheck поставляются базы шаблонов для нескольких версий UNIX и Linux. Даже если в самой утилите нет особой надобности, стоит просмотреть эти базы данных, так как в них могут содержаться очень интересные и полезные шаблоны. Недостаток этих утилит заключается в том, что за раз они обрабатывают только один журнальный файл. Если система Syslog направляет сообщения одновременно в несколь- ко файлов, приходится дублировать некоторые из сообщений в каком-нибудь централь- ном файле, который часто обнуляется, а затем передавать его на последующую обра- ботку одному из сценариев. Это проще, чем организовывать сложную сеть сценариев, управляющих несколькими журнальными файлами. Централизованная система ведения и анализа журналов регистрации Splunk (splunk. com) объединяет регистрационные и статусные сообщения от многих разных источни- ков в одну базу данных сообщений, доступную для поиска. Базовая версия этой системы распространяется бесплатно. Утилита SEC (Simple Event Correlator — простой коррелятор событий) представляет собой иной тип средства управления журнальными файлами. Она является сценарием Perl, который считывает строки из файлов, именованных каналов или из стандартного ввода и преобразует их в различные классы “входных событий”, сравнивая их с регуляр- ными выражениями. Затем в соответствии с правилами, определенными в конфигура- ции, программа преобразует входные события в такие выходные события, как выполне- ние конкретного сценария или передача сообщения указанному каналу или файлу. Дистрибутив SEC с подробной man-страницей и множеством примеров доступен по адресу: kodu.neti.ee/~risto/sec. Дополнительные примеры доступны на веб-сайте. Пакет SEC не является “полностью готовой к использованию” утилитой, как рассмо- тренные выше программы, но он может послужить хорошей отправной точкой для соз- дания специализированного средства анализа журнальных данных. Независимо от того, какая программа используется для сканирования журнальных файлов, есть ряд общих закономерностей. • Большинство сообщений, связанных с безопасностью, должно просматриваться немедленно. Важно отслеживать неудачные попытки входа в систему, равно как и неудачные вызовы команд su и sudo, чтобы предотвратить возможный взлом системы, пока еще не поздно. Если кто-то просто неправильно ввел свой пароль (как чаще всего бывает), то оперативное предложение помощи произведет хоро- шее впечатление и повысит репутацию системного администратора. • Сообщения о нехватке места на диске должны помечаться и немедленно обраба- тываться. Когда диск переполнен, работать с ним невозможно. • Многократно повторяемые события заслуживают внимания, хотя бы в профилак- тических целях. 11.6. Методы обработки журнальных файлов За прошедшие годы регистрационные события вышли из области системного ад- министрирования и превратились в сложнорешаемые проблемы в сфере управления
Глава 11. Система Syslog и журнальные файлы 40$ событиями на уровне предприятий. Обработка событий, связанных с безопасностью* стандарты информационных технологий и законодательные акты могут потребовать це- лостного и систематического подхода к управлению данными регистрации. Данные журналов регистрации от одной системы создают относительно небольшую нагрузку на устройства хранения, но ведение централизованного журнала регистрации событий от сотен серверов и десятков приложений — совсем другая история. В основ- ном, благодаря критически важной природе веб-служб, журналы регистрации, создаваем мые приложениями и демонами, по значимости вышли на уровень журналов регистра?* ции, генерируемых операционными системами. Разрабатывая стратегию обработки журнальных файлов, ответьте на следующие во- просы. • Сколько систем и приложений вы предполагаете использовать? • Инфраструктура хранения информации какого типа вам доступна? • Как долго вы собираетесь хранить журналы регистрации? • Какого типа события являются для вас значимыми? Ответы на эти вопросы зависят от требований, предъявляемых к бизнесу, и от при- меняемых вами стандартов или нормативных документов. Например, один стандарт от Совета по стандартам безопасности индустрии платежных карт (Payment Card Industry Security Standards Council — PCI SSC) требует, чтобы журналы регистрации хранились на носителе с простым доступом к данным (например, это может быть локально мон- тируемый жесткий диск) в течение трех месяцев и архивировались для долговременного хранения в течение, по крайней мере, одного года. Кроме того, этот же стандарт вклю- чает конкретные требования к типам используемых данных. Как бы вы ни ответили на предложенные выше вопросы, обязательно соберите вход- ную информацию из отделов по соблюдению правил и информационной безопасности, если таковые существуют в вашей организации. Системы UNIX и UNIX-приложения предусматривают использование легко конфи- гурируемых параметров регистрации и аудита. В зависимости от объемов использова- ния, возможно, вам придется сократить словесное наполнение журналов регистрации. И наоборот, какое-нибудь очень важное приложение может потребовать дополнитель- ных данных событийного характера. Для большинства приложений обычно рассматри- вают, как минимум, сбор следующей информации: • имя пользователя или его идентификатор (ID); • результат обработки события (успешная или нет); • адрес источника для сетевых событий; • дата и время (из такого официального источника, как NTP); • оповещение о добавлении, изменении или удалении важных данных; • подробные данные о событии. Большинство современных систем имеет тенденцию к использованию централизи- рованного подхода к накоплению и анализу журнальных файлов. Такая централизация имеет ряд преимуществ: упрощенные требования к хранению информации, более про- стые схемы автоматизированного анализа и предупреждений, а также усовершенство- ванная система безопасности. Кроме того, копирование событий в центральную систему способствует улучшению целостности журналов регистрации, поскольку она менее уяз- вима для взломщиков.
410 Часть I. Основы администрирования Ш Дополнительная информация о RAID приведена в разделе 8.7. Сервер регистрации должен работать в соответствии с тщательно разработанной стратегией хранения информации. Например, журналы регистрации могут храниться в локальном RAID-массиве в течение 30 дней, в локально монтируемой сети устройств хранения данных (Storage Area Network — SAN) — еще в течение года и, наконец, по- сле архивирования — на лентах для включения в ротацию резервных копий на уровне предприятия — еще в течение трех лет. Требования к хранению данных могут со време- нем меняться, и реализация может легко и успешно адаптироваться к изменению этих условий. Доступ к централизированным серверам регистрации должен быть ограничен си- стемными администраторами высокого уровня, программами и персоналом, задейство- ванным в решении вопросов безопасности и адресной совместимости. В рамках органи- заций эти системы обычно не играют главную роль при принятии ежедневных решений за рамками удовлетворения требований к возможности проведения аудита, поэтому ад- министраторы приложений, конечные пользователи и служба технической поддержки не имеют доступа к ним. Доступ к регистрационным файлам на центральных серверах должен регистрироваться отдельно. Организация централизированной регистрации требует определенных усилий, и в не- больших системах она может не продемонстрировать преимущества от использования сети. Для обеспечения централизации мы предлагаем в качестве разумной пороговой величины использовать двадцать серверов. При меньшем количестве необходимо га- рантировать, что журналы регистрации подвергаются надлежащей ротации и архивиро- ванию с частотой, достаточной для того, чтобы избежать заполнения диска. Включите регистрационные файлы в решение по мониторингу, чтобы вы были извещены в случае, если некоторый журнал регистрации перестанет увеличиваться в размере. 11.7. Упражнения 11.1. Зачем хранить старые журнальные файлы? 11.2. В чем разница между файлами lastlog и wtmp? Какой должна быть схема рота- ции для каждого из них? 11.3. Проанализируйте следующую запись файла syslog. conf: *.notice;kern.debug;Ipr.info;mail.crit;news.err /var/log/messages Есть ли в ней смысл? 11.4. Поищите в журнальных файлах записи от службы SSH. Какие события регистри- руются при успешной попытке входа в систему? А при неудачной попытке? Какие действия следовало бы предпринять для увеличения словесного наполнения про- цесса регистрации демона SSH? 11.5. Многие стандарты и нормативные документы в индустрии информационных тех- нологий налагают определенные требования, связанные с регистрацией или ау- дитом. Выберите один из таких стандартов и рассмотрите варианты настройки конфигурации системы Syslog для достижения соответствия выдвигаемым требо- ваниям. 11.6. ★ Где расположен журнал начальной загрузки на вашем Linux-компьютере? В чем трудности журнальной регистрации на этапе начальной загрузки? Как эти труд- ности решаются демоном klogd?
Глава 11. Система Syslog и журнальные файлы 411 11.7. ★ Проанализируйте схему журнальной регистрации, используемую в вашей ор- ганизации, включая схему ротации журнальных файлов. Сколько дискового про- странства отведено для журнальных файлов? Насколько долго хранятся журналь- ные файлы? Можно ли заранее предсказать ситуации, когда используемых схем окажется недостаточно? Какое решение можно порекомендовать? (Необходим до- ступ с правами суперпользователя.) 11.8. ★ Некоторые журнальные сообщения являются чрезвычайно важными и должны немедленно просматриваться системным администратором. Что можно предпри- нять для того, чтобы это произошло как можно скорее?
Глава 12 Управление программным обеспечением и конфигурацией Инсталляция программных средств, их конфигурирование и управление ими — ос- новные обязанности системных администраторов. Они отвечают на запросы пользовате- лей инсталлировать и сконфигурировать программы, усовершенствовать средства защи- ты их данных и устранить прорехи в системе безопасности, а также управляют переходом к новым версиям программ, которые, с одной стороны, предлагают новые возможности, а, с другой стороны, чреваты проблемами несовместимости. Администраторам обычно приходится выполнять перечисленные ниже задачи: • осуществлять автоматизированную инсталляцию операционной системы на груп- пу компьютеров; • выполнять настройку операционных систем в локальных средах; • следить за выходом “заплат” и своевременно обновлять с их помощью систему и приложения; • управлять добавочными программными пакетами. Процесс конфигурирования готового дистрибутива или программного пакета, на- правленный на удовлетворение всех ваших потребностей (и не допускающий наруше- ния локальных условий защиты, размещения файлов и топологии сети), часто называют “локализацией”. В этой главе рассматриваются методики, которые позволяют упростить инсталляцию программного обеспечения, в том числе в крупных системах. Мы также рассмотрим процедуру инсталляции для каждого из наших примеров операционных си- стем, включая некоторые возможности автоматизации, использующие распространен- ные инструменты (предназначенные для конкретной платформы).
Глава 12. Управление программным обеспечением и конфигурацией 415 12.1. Инсталляция систем Linux и OpenSolaris Процедура инсталляции всех современных дистрибутивов Linux довольно проста. Для OpenSolaris действует множество таких же соглашений, так что процесс инсталля- ции этой системы практически не отличается от установки Linux, особенно на персо- нальные компьютеры. Обычно для инсталляции необходимо загрузиться с DVD-диска, ответить на ряд во^ просов, по выбору сконфигурировав разделы диска, и указать программе-инсталлятору, какие программные пакеты нужно установить. Такие системы, как Ubuntu и OpenSolaris, включают опцию “live”, которая позволяет запускать операционную систему, не инстал- лируя ее в действительности на локальный диск. Это очень полезная особенность упо- мянутых систем, но в наши дни она стала практически стандартной функцией большин- ства дистрибутивов. Инсталляция базовой операционной системы с локального носителя представляет со- бой довольно тривиальную операцию благодаря GUI-приложениям, которые “проведут” вас через все этапы этого процесса. В табл. 12.1 перечислены указатели на подробные инструкции по инсталляции для каждого из наших примеров дистрибутивов. Таблица 12.1. Документация по инсталляции для систем Linux и OpenSolaris J ..""-... 11111 11 111111 . " ч1 w Диетрибугиа Red Hat Enterprise Linux redhat. com/docs/manuals/enterprise SUSE en.opensuse.org/Installation Ubuntu help. ubuntu. com/community/ Installation OpenSolaris die • sun. com/osol/docs/content/dev/getstart Загрузка по сети на персональном компьютере Любой, кому придется инсталлировать систему сразу на несколько компьютеров, столкнется с недостатками инсталляции в интерактивном режиме. Это большие затра- ты времени, “предрасположенность” к ошибкам и скучная необходимость повторения стандартного процесса инсталляции на сотнях систем. Свести к минимуму “ошибки че- ловеческого фактора” можно благодаря контрольному списку локализации, хотя даже его использование не сможет полностью защитить от всевозможных ошибок. Для того чтобы ослабить воздействие перечисленных выше факторов, большинство систем включает возможности инсталляции по сети, которые упрощают проведение крупномасштабных установочных мероприятий. В самых распространенных методах для загрузки системы без использования физического носителя используются сетевые протоколы DHCP и TFTP, после чего из сетевого сервера извлекаются файлы инсталля- ции через протоколы HTTP, NFS или FTP. Сетевые варианты инсталляции подходят для узлов с количеством систем более десяти. Предзагрузочная среда выполнения (Preboot execution Environment — РХЕ), предна- значенная для загрузки компьютеров с помощью сетевой карты без использования жест- ких дисков, стала стандартом (разработанным фирмой Intel), который позволяет загру- жать системы через сетевой интерфейс. Стандарт РХЕ действует подобно миниатюрной операционной системе, размещенной в схеме ПЗУ на вашей сетевой плате. Он пред- лагает системе BIOS использовать его сетевые особенности посредством стандартизиро- ванного API. При таком взаимодействии один загрузчик может загружать по сети one-
414 Часть I. Основы администрирования рационную систему на любом персональном компьютере, понимающем стандарт РХЕ, не устанавливая при этом какие-либо специальные драйвера для каждой сетевой платы. Ш Более подробно о DHCP можно почитать в разделе 14.7. Внешняя (сетевая) часть протокола РХЕ не содержит никаких сложностей и подоб- на процедурам загрузки по сети, используемым в других архитектурах. Компьютер осу- ществляет широковещательную рассылку специального DHCP-запроса с установленным РХЕ-флагом, а DHCP-сервер или прокси-сервер возвращает DHCP-пакет, содержащий значения РХЕ-параметров (имя загрузочного сервера плюс имя загрузочного файла). Клиент получает от сервера свой загрузочный файл по протоколу TFTP (возможно ис- пользование многоадресной версии этого протокола), после чего запускает его. Конфигурирование протокола РХЕ в Linux Существует несколько загрузочных систем на основе РХЕ, однако самой безотказной в настоящее время является система PXELINUX, разработанная Питером Анвином (Н. Peter Anvin). Она является частью комплекта загрузчиков SYSLINUX, разработанного им же, который может пригодиться на все случаи жизни. Домашняя страница этой системы расположена по адресу syslinux.zytor.com. PXELINUX содержит загрузочный файл, который инсталлируется в каталог tf tpboot сервера и загружается на загружаемый ПК во время работы РХЕ. ПК выполняет загру- зочный файл и загружает его конфигурацию с сервера; конфигурация определяет, какое ядро необходимо использовать. Эта цепочка событий может быть выполнена без вашего вмешательства; как вариант, можно создать специальное меню загрузки. PXELINUX использует для своих загрузок РХЕ API и поэтому не зависит от аппарат- ной части в течение всего процесса загрузки. Более того, она может загружать не только Linux, но и другие операционные системы, а также может загружать устаревшие обра- зы дискет, если вы используете ядро MEMDISK, которое тоже входит в состав пакета SYSLINUX. На стороне сервера лучше всего использовать DHCP-сервер организации ISC (Internet Systems Consortium’s). См. также материал на сайтах netboot.me и boot, kernel.org. Дистанционная загрузка на специализированных компьютерах РХЕ — это протокол компании Intel, и его применение ограничено платформами IA- 32 и IA-64. На других платформах применяются иные методы загрузки по сети, которые почти всегда более элегантные, чем протокол РХЕ. Интересно, что сейчас, когда Linux часто инсталлируется на компьютеры с архитектурой, отличной от Intel, многие из “спе- циализированных” UNIX-систем теперь имеют вариант, при котором по сети загружает- ся Linux, а не “родная” операционная система. Компьютеры SPARC и большинство систем PowerPC используют программу Open Firmware, которую легко загрузить по сети (достаточно ввести команду boot net). Системы IBM и HP также оснащены средствами загрузки по сети, но конкретные процедуры в большой степени зависят от программных пакетов Network Installation Manager (менеджер сетевой инсталляции) и Ignite-UX соответственно. Мы рассмотрим эти инструменты ниже, но только в контексте инсталляции операционных систем. За подробностями сетевой инсталляции обратитесь к документации компаний IBM и HP.
Глава 12. Управление программным обеспечением и конфигурацией 415 Использование Kickstart — автоматизированного инсталлятора Red Hat Enterprise Linux Kickstart — это утилита, предназначенная для автоматической инсталляции программного обеспечения Red Hat. Она представляет собой интерфейс к стан- дартному инсталлятору Red Hat — программе Anaconda — и зависит как от вер- сии дистрибутива, так и от имеющихся пакетов RPM. Утилита Kickstart до- статочно гибкая и автоматически распознает аппаратное обеспечение системы. Создание файла конфигурации для утилиты Kickstart Работа утилиты Kickstart контролируется конфигурационным файлом, который обычно называется ks. cf g. Формат этого файла довольно прост. Для тех, кто не любит работать с текстовыми файлами, существует графическая утилита system-config-kickstart, упрощающая настройку конфигурационного файла. Файл ks. cf g можно также очень легко генерировать программным путем. Предпо- ложим, что на серверах и клиентах необходимо инсталлировать разные наборы паке- тов; предположим также, что у вас есть два офиса и вам нужно, чтобы система была настроена в них по-разному. Тогда следует написать небольшой Perl-сценарий, который с помощью соответствующих параметров будет генерировать конфигурационные файлы для серверов и клиентов каждого офиса. В случае изменения набора пакетов достаточно будет отредактировать Perl-сценарий, а не многочисленные конфигурационные файлы. Бывают также ситуации, когда для каждого компьютера нужен свой конфигурационный файл. Тогда тем более необходимо автоматизировать создание таких файлов. Конфигурационный файл утилиты Kickstart состоит из трех упорядоченных частей. Первая из них — это раздел команд, где задаются такие установки, как язык, раскладка кла- виатуры и часовой пояс. Здесь же с помощью параметра url задается источник, из которого загружается дистрибутив (в показанном ниже примере это компьютер installserver). text lang en_US # Язык, используемый в процессе инсталляции... langsupport en_US # ... и на этапе выполнения. keyboard us # Американская раскладка клавиатуры. timezone —utc America/EST # Аргумент —utc означает, что часы # синхронизируются по Гринвичу mouse rootpw —iscrypted $l$NaCl$X5jRlREy9DqNTCXjHpO75/ reboot # Перезагрузка после инсталляции. # Это почти всегда необходимо. bootloader —location=mbr # Стандартный загрузчик инсталлируется # в главную загрузочную запись. install # Новая система инсталлируется, # а не обновляется. url —url http://installserver/redhat clearpart —all -initlabel # Удаляются все существующие разделы part / —fstype ext3 —size 4096 part swap —size 1024 part /var —fstype ext3 -size 1 —grow network —bootproto dhcp auth —useshadow —enablemd5 firewall —disabled xconfig —defaultdesktop=GNOME —startxonboot —resolution 1280x1024 —depth 24
416 Часть I. Основы администрирования По умолчанию утилита Kickstart работает в графическом режиме, что препятствует ее автоматическому запуску. Ключевое слово text в начале файла исправляет данную ситуацию. Параметр rootpw задает пароль суперпользователя на новом компьютере. По умол- чанию пароль указывается в текстовом виде, что создает проблему с точки зрения без- опасности. Всегда пользуйтесь опцией —iscrypted, чтобы задать зашифрованный па- роль. Для зашифрованного пароля прекрасно работают записи паролей из файла /etc /shadow либо вы можете попробовать утилиту /sbin/grub-md5-crypt в уже постро- енной системе. Директивы clearpart и part задают список разделов с указанием их размеров. С по- мощью опции —grow можно отвести всю оставшуюся область жесткого диска под один из разделов. Так можно облегчить подгонку систем с разными размерами жестких дис- ков. Такие усовершенствованные опции разбиения на разделы, как использование ме- неджера логических томов (Logical Volume Manager — LVM), поддерживаются утилитой Kickstart, но не инструментом system-config-kickstart. Обратитесь к встроенной в систему Red Hat оперативно-доступной документации за полным списком параметров форматирования дисков. Во втором разделе файла приведен список инсталлируемых пакетов, начинающий- ся с директивы %packages. В списке могут быть указаны отдельные пакеты, коллекции (например, @ GNOME) либо запись @ Everything, обозначающая весь имеющийся на- бор пакетов. В первом случае задается лишь имя пакета, без номера версии и расшире- ния . rpm. Приведем пример. %packages @ Networked Workstation @ X Window System @ GNOME mylocalpackage В третьем разделе конфигурационного файла указывается произвольный набор ко- манд интерпретатора, которые подлежат выполнению утилитой Kickstart. Существует два возможных набора команд. Один из них начинается с директивы %рге и содержит команды, выполняемые перед началом инсталляции. Команды, выполняемые по завер- шении инсталляции, помечаются директивой %post. В обоих случаях возможности си- стемы по распознаванию имен компьютеров ограничены, так что лучше пользоваться IP-адресами. Кроме того, команды второго набора выполняются в среде с измененным корневым каталогом, поэтому они не имеют доступа к инсталляционному носителю. Создание сервера Kickstart Утилита Kickstart ожидает, что ее инсталляционные файлы расположены так же, как и на инсталляционном компакт-диске. На сервере ее пакеты должны находиться в ката- логе RedHat/RPMS. В этот каталог разрешается добавлять собственные пакеты. Но есть ряд нюансов, о которых следует помнить. Главная особенность заключается в том, что, получив команду инсталлировать все па- кеты (запись @ Everything в разделе пакетов файла ks. cfg), утилита сначала устанав- ливает базовые пакеты, а затем — пользовательские, причем в алфавитном порядке. Если какой-то пользовательский пакет зависит от других пакетов, не входящих в базовый на- бор, назовите его наподобие zzmypackage. rpm, чтобы он инсталлировался последним. Если не требуется инсталлировать все пакеты, укажите нужные в разделе %packages файла ks. cfg либо добавьте их в одну или несколько коллекций. Коллекции обознача-
Глава 12. Управление программным обеспечением и конфигурацией ются записями вида @ GNOME и представляют собой предопределенные наборы пакетов, компоненты которых перечислены в файле RedHat/base/comps на сервере. К сожалев нию, формат этого файла плохо документирован. Коллекции задаются в строках, кото- рые начинаются с цифры 0 или 1; единица указывает на то, что коллекция выбрана по умолчанию. Менять стандартные коллекции нежелательно. Мы рекомендуем оставить их в том виде, в котором они определены в Red Hat, и указывать дополнительные паке- ты непосредственно в файле ks. cfg. Задание пользовательского конфигурационного файла После создания конфигурационного файла необходимо заставить утилиту Kickstart использовать его. Это можно сделать несколькими способами. Официальный способ — загрузиться с DVD-диска и запросить инсталляцию Kickstart, введя linux ks в строке приглашения prompt:. Если не указать дополнительных аргументов, система опреде- лит свой сетевой адрес по протоколу DHCP. Затем она узнает имя загрузочного DHCP- сервера и загрузочного файла, попытается смонтировать серверный каталог через NFS и установит загрузочный файл в качестве конфигурационного. При отсутствии сведений о загрузочном файле система будет искать файл /kickstart/ 1Р_адрес_узла-к1скзЬагЬ. Другой способ задания конфигурационного файла заключается в указании пути к не- му в виде аргумента опции ks. Здесь есть несколько возможных вариантов. Команда boot: linux ks=http:сервер:/path заставляет утилиту Kickstart загрузить конфигурационный файл по протоколу HTTP, а не через NFS. Аргумент ks=f loppy заставляет утилиту искать файл ks. cfg на локаль- ном гибком диске. Для того чтобы вообще не использовать загрузочный носитель, вам нужно научиться работать с протоколом РХЕ. Подробно о нем речь шла в начале этой главы. Использование AutoYaST: автоматизированный инсталлятор SUSE YaST2 — это универсальная утилита инсталляции и конфигурирования SUSE. Она имеет привлекательный графический интерфейс и очень удобна в исполь- зовании при инсталляции одной системы. Ее автоматизированный эквива- лент, AutoYaST, можно назвать самой мощной инсталляционной программой из всех дистрибутивов, описанных в этой книге. Подробную документацию можно загрузить с адреса suse. com/~ug/autoyast_doc. SUSE разбивает процесс автоматической инсталляции на три фазы: подготовка, ин- сталляция, конфигурирование. Первоначальная подготовка выполняется с помощью модуля AutoYaST (YaST2). suse$ /sbin/yast2 autoyast Этот модуль помогает указать детали требуемой установки. Результатом выполнения этого модуля является управляющий XML-файл, который сообщает инсталлятору о спо- собе конфигурирования системы SUSE; структура файла описана в интерактивном до- кументе, упомянутом выше. Процесс конфигурирования можно ускорить. Модуль AutoYaST может читать кон- фигурационные файлы Kickstart, помогая модернизировать “устаревшие” системы. Если вам понадобится продублировать конфигурацию на компьютере, на котором вы рабо- таете в настоящий момент, то на этот случай тоже есть вариант автоматизации.
418 Часть I. Основы администрирования Для того чтобы произвести инсталляцию, вам понадобится следующее: • сервер DHCP с той же маской подсети, что и компьютер, на котором вы плани- руете выполнить инсталляцию; • инсталляционный сервер SUSE или хранилище пакетов; • сервер, на котором будет размещена информация о конфигурации, необходимая для инсталляции. Последний из этих серверов может предоставить конфигурационные файлы по одно- му из протоколов, предлагаемых вам на выбор, — HTTP, NFS или TFTP. При обычной установке нужно создать управляющий файл для каждого компьютера, на котором вы планируете произвести инсталляцию. AutoYaST использует IP-адрес кли- ента, чтобы определить, какой управляющий файл следует использовать. Этот подход не будет эффективным, если нужно произвести инсталляцию на ряде компьютеров, немно- го отличающихся друг от друга. С помощью системы правил можно создавать более сложные инсталляции. На осно- вании таких характеристик системы, как размер диска, идентификатор компьютера или доступность PCMCIA, разные управляющие файлы подгоняются под искомую систему. Содержимое всех выбранных управляющих файлов объединяется, причем в случае воз- никновения конфликтов содержимое последнего управляющего файла перекрывает со- держимое предыдущего файла. (Управляющий файл не должен определять все аспекты конфигурации системы, поэтому такое объединение имеет смысл.) Управляющие файлы могут также определять “классы” компьютеров на основе их имен или диапазонов IP-адресов. Каждый класс может иметь связанный с ним вспомо- гательный управляющий файл. Компьютеры могут не относиться к классам, могут от- носиться к одному классу или к множеству классов, а их конфигурации будут включать содержимое всех управляющих файлов соответствующего класса. Благодаря объединению содержимого множества управляющих файлов, структура AutoYaST позволяет определять сложные установки с минимальной избыточностью. Человеку трудно воспринимать то, что написано в управляющем XML-файле, зато про- цесс может с легкостью не только читать эти файлы, но и редактировать их с помощью обычных доступных средств обработки XML-данных. Автоматизированная инсталляция систем Ubuntu ©Инсталлятор Debian (он называется debian-installer) рекомендуется исполь- зовать в качестве варианта “предварительной” автоматизированной инстал- ляции системы Ubuntu. Как и в случае Kickstart, файл предварительной кон- фигурации отвечает на вопросы, задаваемые инсталлятором. При выполнении “предварительной” инсталляции нельзя использовать существующие разделы диска: в этом случае либо задействуется существующее свободное простран- ство, либо выполняется перераспределение всего диска. Все интерактивные части инсталлятора Debian используют утилиту debconf, что- бы решить, какие вопросы нужно ставить и какие ответы использовать по умолчанию. Предоставив утилите debconf базу данных с заранее сформулированными вопросами, вы можете полностью автоматизировать работу инсталлятора. Вы можете или сгенери- ровать базу данных вручную (она представляет собой обычный текстовый файл), или выполнить интерактивную инсталляцию на тестовой системе, а затем передать свои от- веты утилите debconf с помощью следующих команд.
Глава 12. Управление программным обеспечением и конфигурацией 4W ubuntu$ sudo debconf-get-selections —installer > preseed.cfg ubuntu$ sudo debconf-get-selections » preseed.cfg Создайте конфигурационный файл, который будет доступен по сети, и передайте его в ядро во время инсталляции с помощью следующего аргумента ядра. preseed/url=http://host/path/to/preseed Синаксис “предынсталляционного” файла, обычно именуемого preseed.cfg, до- вольно прост и во многом сходен с Red Hat-файлом ks. cfg. Следующий пример пред- ставлен в сокращенном виде. d-i debian-installer/locale string en_US d-i console-setup/ask_detect boolean false d-i console-setup/layoutcode string us d-i netcfg/choose_interface select auto d-i netcfg/get_hostname string unassigned-hostname d-i netcfg/get_domain string unassigned-domain d-i netcfg/wireless_wep string d-i partman-auto/disk string /dev/sda d-i partman-auto/method string Ivm d-i partman-auto/choose_recipe select atomic d-i passwd/user-fullname string Daffy Duck d-i passwd/username string dduck d-i passwd/user-password-crypted password $l$/mkq9/$G//i6tN.x6670.951VSM/ d-i user-setup/encrypt-home boolean false tasksei tasksel/first multiselect ubuntu-desktop d-i grub-installer/only_debian boolean true d-i grub-installer/with_other_os boolean true d-i finish-install/reboot_in_progress note xserver-xorg xserver-xorg/autodetect_monitor boolean true Ряд опций в этом листинге просто запрещают диалоги, которые обычно требуют взаимодействия с пользователем. Например, опция ask_detect запрещает выбор рас- кладки клавиатуры. Аналогично опция wireless_wep предотвращает вопросы о ключах WEP (Wireless Encryption Protocol — протокол шифрования в беспроводной связи). Такая конфигурация старается идентифицировать сетевой интерфейс, который в дей- ствительности подключен к сети (choose_interfасе select auto) и получает се- тевую информацию через протокол динамического конфигурирования узла DHCP. Предполагается, что значения системного имени главного компьютера и домена предо- ставляются протоколом DHCP и не переопределяются. Наличие partman-строк свидетельствует о том, что для сегментирования дисковой памяти используется пакет partman-auto. Если система имеет несколько дисков, то Для инсталляции вы должны указать нужный диск. В противном случае (т.е. для един- ственного диска) используется значение /dev/sda. Предлагается несколько “рецептов” сегментирования дисковой памяти: • вариант atomic помещает все системные файлы в один раздел; • вариант home создает отдельный раздел для каталога /home; • вариант multi создает отдельные разделы для каталогов /home, /usr, /var и /tmp. Вы можете создавать пользователей посредством ряда директив passwd. Как в слу- чае Kickstart-конфигурации, мы настоятельно рекомендуем использование хеширован-
420 Часть I. Основы администрирования ных МВ5-значений паролей. Файлы предварительной инсталляции часто хранятся на HTTP-серверах и могут быть обнаружены любопытными пользователями. (Безусловно, МВ5-пароль постоянно является Объектом для грубых силовых атак.) Опция выбора задачи (tasksei) позволяет указать тип подлежащей инсталляции Ubuntu-системы из предложенных вариантов: standard, ubuntu-desktop, dns-server, lamp-server, kubuntu-desktop, edubuntu-desktop и xubuntu-desktop. Представленный выше пример файла предварительной инсталляции взят из доку- ментации по инсталляции системы Ubuntu, доступной по адресу: help.ubuntu.com. Руководство содержит полную документацию по синтаксису и применению файла пред- варительной инсталляции. Несмотря на то что происхождение системы Ubuntu не связано с “родословной” Red Hat, на ее собственный базовый инсталлятор “привита” совместимость с управляющими Kickstart-файлами. Кроме того, Ubuntu включает утилиту system-config-kickstart для создания этих файлов. В инсталляторе Kickstart для системы Ubuntu опускается ряд важных функций, которые поддерживаются Red Hat-инсталлятором Anaconda (напри- мер, LVM и конфигурация брандмауэра). Если у вас нет веской причины для выбора Kickstart, мы все же рекомендуем использовать инсталлятор Debian. 12.2. Инсталляция Solaris Подобно многим поставщикам аппаратных средств, компания Sun вводит новые серверы с предварительно инсталлированной системой Solaris. Администратору нужно лишь ответить на несколько коротких вопросов и перезагрузить сервер, и операционная система будет готова для локализации. С годами мы оценили эту функцию предвари- тельной инсталляции, поскольку инсталлятор Solaris мы считали отвратительным. Но команда OpenSolaris, можно сказать, “одумалась”, и ее новый инсталлятор (первона- чально названный “Caiman”) заслуживает уважения. В настоящее время для инсталляции Solaris предлагается “живой” компакт-диск, ко- торый предоставляет возможность “опробовать перед покупкой”, подобную реализован- ной в системе Ubuntu. Процесс инсталляции системы чрезвычайно прост и перед уста- новкой на локальный диск предусматривает ответы всего на несколько вопросов. Как и в мире Linux, администраторам Solaris нужен способ реализовать множество инсталляций систем по сети. Подобно своим Linux-ориентированным “собратьям”, си- стемы Solaris, построенные на базе процессоров Intel, для помощи в сетевой загрузке могут использовать серверы РХЕ. Системы с процессорами SPARC используют ППЗУ OpenBoot PROM, также известное под именем ОВР. К ОВР обычно можно получить доступ с помощью комбинации клавиш <STOP+A> (на клавиатуре Sun). Посредством соответствующих команд ОВР позволяет идентифицировать оборудование и выполнить его диагностику, выявить сбойные ситуации, а также передать процесс загрузки более интеллектуальному начальному загрузчику, подобно тому как действует BIOS в системах Intel. При этом ОВР отличается большим количеством функций (по сравнению с боль- шинством PC BIOS), включающих встроенную поддержку загрузки системы по сети. Средство сетевой загрузки через протокол DHCP или RARP получает IP-адрес, а затем загружает ядро через протокол TFTP. Загруженное для автоматизированной ин- сталляции, ядро подключается к серверу HTTP или монтирует общую сетевую файло- вую систему (NFS) для загрузки соответствующего образа системы и запускает процесс инсталляции. Solaris предлагает два метода автоматической сетевой инсталляции:
Глава 12. Управление программным обеспечением и конфигурацией 424 • JumpStart — традиционная служба инсталлятора, разработанная компанией Sun; • Automated Installer — служба замены, используемая системой OpenSolaris. JumpStart — старое средство инсталляции, которое сначала появилось в Solaris 2.6 и может быть использовано во всех версиях, вплоть до Solaris 10. Подобно большинству методов автоматической инсталляции, служба JumpStart использует файлы предопреде- ленных ответов и выбор клиента на основе правил, что автоматически обеспечивает вы- бор инсталляции. Самый большой недостаток JumpStart — слабая масштабируемость. Каждого клиента нужно добавлять в сервер вручную для инсталляции посредством МАС-адреса. В файлах конфигурации задаются типы инсталляции, значения конфигурации и другие параме- тры для каждого клиента в отдельности. Это усиливает возможности администраторов (в частности, увеличивает гибкость в управлении), но такие файлы конфигурации стано- вятся очень громоздкими в среде с сотнями или тысячами систем. Служба Automated Installer (Al) — это новинка. Основные цели ее разработки — улуч- шить масштабируемость и возможности конфигурации. AI уходит корнями в JumpStart, но дистанцируется частично благодаря использованию новой терминологии. Пока пи- сались эти строки, служба AI оставалась все еще в процессе разработки, но ее можно считать практически готовой для использования в коммерческих целях. Больше всего ограничений AI имеет для последних версий системы OpenSolaris и в настоящее время не работает на всех традиционных версиях Solaris. Сетевые инсталляции с помощью JumpStart Исходной целью службы JumpStart было просто разрешить инсталляцию Solaris по сети, но у нее есть все возможности и для автоматической инсталляции. Через некото- рое время в компании Sun поняли, что автоматизированные инсталляции требуют более тонкого управления, поэтому и были добавлены расширенные средства, которые сейчас продублированы в Custom JumpStart. Автоматизированная сетевая инсталляция Custom JumpStart включает несколько компонентов. • Сервер инсталляции, который принимает инсталляционный носитель. Один сер- вер инсталляции может обслуживать носители для нескольких типов инсталля- ции, например различных версий системы Solaris, или поддерживать несколько платформ. • Сервер начальной загрузки, который помогает клиентам выполнять начальную за- грузку и направляет их на серверы инсталляции. Сервер начальной загрузки не- обходим лишь в случае, если система клиента и сервер инсталляции находятся в различных подсетях. • Ряд файлов, которые идентифицируют клиентов, отвечают на вопросы по конфи- гурации и выбирают пакеты. • NFS- или HTTP-сервер, который использует пакеты, файлы инсталляции и ин- формацию о конфигурации. Компоненты на стороне сервера могут размещаться на одном и том же компьюте- ре. Серверы не зависят от версии инсталлируемой системы и используемой платформы. Например, сервер загрузки и инсталляции для SPARC-ориентированной системы Sola- ris 9 может предложить услуги по инсталляции для клиентов х86 Solaris 10. Поскольку параметры сетевой загрузки могут быть включены в DHCP-ответы, вы можете использовать DHCP-сервер в качестве альтернативы для специализированного
422 Часть I. Основы администрирования сервера начальной загрузки JumpStart. Возможно, протокол DHCP является более при- емлемым вариантом для систем х86, которые используют РХЕ-загрузку, и для клиент- ских систем, расположенных в разных подсетях по отношению к серверу инсталляции. Здесь мы рассмотрим только случай расположения клиента и сервера в одной подсети (за подробностями обращайтесь по адресу: docs. sun.com/doc/817-5504). Установка сервера инсталляции довольно проста. Инструменты установки можно найти на компакт- или DVD-диске Solaris. Вставьте Solaris-носитель в дисковод сервера инсталляции и выполните следующие команды, чтобы сконфигурировать простой сер- вер инсталляции. solaris$ sudo mkdir -р / jumps tar t/s 10 spare solaris$ cd /cdrom/cdrom0/s0/Solaris_10/Tools solaris$ sudo . /setup_install_server /jumpstart/slOsparc Здесь мы переносим SPARC-файлы инсталляции в каталог /jumpstart/siOsparc сервера инсталляции. Сценарий setup_install_server копирует эти файлы и добав- ляет соответствующие “ловушки” для сетевых инсталляций. Если в вашем распоряже- нии есть только компакт-диски, то для копирования их содержимого на сервер исполь- зуйте команду add_to_install_server. Задачи автоматизированной инсталляции конфигурируют несколько файлов: • файл rules идентифицирует клиентов и назначает профили инсталляции; • отдельные файлы профилей задают схему разделов диска, инсталлируемые пакеты и прочие системные данные; • файл sysidefg предоставляет предварительно сконфигурированные ответы на вопросы инсталляции; • сценарии оболочки могут выполняться до и после процесса инсталляции (по не- обходимости). Когда клиент запрашивает сетевую инсталляцию, JumpStart использует файл rules, чтобы идентифицировать клиента в соответствии с такими атрибутами, как имя узла клиента, подсеть или модель. Если атрибуты совпадают, JumpStart считывает содержи- мое соответствующего профиля, отвечает на вопросы инсталляции с помощью файла sysidefg и выполняет пользовательские сценарии до и после инсталляции. Первый шаг в создании JumpStart-конфйгурации состоит в создании каталога для хранения всех файлов конфигурации. solaris$ sudo mkdir -m 755 /jumpstart/config Этот каталог должен быть открыт для совместного пользования через протокол NFS или HTTP, чтобы клиенты могли получить к нему доступ. Например, для протокола NFS добавьте строку share -F nfs /jumpstart в файл /etc/dfs/dfstab и выполните команду shareall, чтобы инициализировать службу NFS. Синаксис файла rules простой, но мощный. Системы могут быть идентифициро- ваны по сети, имени узла, модели, имени домена или по многим другим атрибутам1. В следующем файле rules указывается один профиль для систем в сети 192.168.10.0, а другой — для систем SPARC, которые оснащены 2—4 Гбайт памяти. 1 Для того чтобы получить доступ к Sun-руководству, которое содержит подробные сведения о файле rules и файлах профилей, используйте Google-pecypc, задав в строке поиска текст “Custom JumpStart and Advanced Installations”.
Глава 12. Управление программным обеспечением и конфигурацией 423 network 192.168.10.0 - profile_a - arch spare && memsize 2048-4096 begin profile_b end В этом примере сети нет пользовательских сценариев, но используется профиль ин- сталляции prof ile__а. В другом примере применяются сценарии begin и end, а такхи. профильный файл prof ile_b. Файлы профилей также просты. Файловые системы и типы инсталляции задаются с помощью ключевых слов (их очень много). Вот как может выглядеть пример профиле install_type initial_install ' ‘ system_type standalone partitioning default filesys any 512 swap # Задаем размер /swap cluster SUNWCpall Процесс инсталляции типа initial—install начинается с чистого списка, в про- тивоположность выполнению модернизации. Этот профиль использует стандартную схему сегментирования дисковой памяти. Строка cluster SUNWCpall идентифицирует “группу инсталляции” пакетов; в данном случае это доступные Solaris-пакеты. Файл sysidefg, который предварительно конфигурирует другие аспекты инсталля- ции, состоит из строк следующего формата. Ключев ое_ слов о=зна чение Ключевые слова не различаются по прописным и строчным буквам и, за исключе- нием ключевого слова network-interface, могут употребляться лишь один раз. Если ключевое слово используется несколько раз, учитывается только его первый экземпляр. Некоторые ключевые слова зависят от других и могут заключаться в фигурные скоб- ки. Такие зависимые ключевые слова не могут быть использованы, если не задано соот- ветствующее родительское (независимое) ключевое слово. Независимые ключевые слова перечислены в табл. 12.2. О зависимых ключевых словах можно узнать, обратившись к man-странице, посвященной файлу sysidefg. Таблица 12.2. Независимые ключевые слова для JumpStart-файла sysidefg Ключевое слово *|гоздао1ф£йеляет -.Л-- keyboard name—service network—interface nfs 4—domain rootjaassword security-policy service-profile system-locale terminal timeserver timezone Раскладка клавиатуры и язык Конфигурация службы имен для NIS, DNS или LDAP Информация о подключении к сети: имя узла, IP-адрес и т.д. Домен, предназначенный для NFS версии 4 Зашифрованный пароль пользователя root Сетевой протокол аутентификации Kerberos Доступные сетевые службы Язык системы Тип терминала Сетевой сервер даты и времени Часовой пояс системы В качестве альтернативы для файла sysidefg можно использовать ограниченный набор параметров предварительной конфигурации, которые задаются через протокол DHCP или с помощью такой сетевой службы, как DNS. Однако мы рекомендуем ис- пользовать файл sysidefg, поскольку альтернативный вариант позволяет задать огра- ниченный набор параметров.
424 Часть I. Основы администрирования В следующем примере файла sysidcfg конфигурируется система sake, которая имеет один сетевой интерфейс. keyboard=US-English system_locale=en_US timezone=US/Mountain terminal=sun-cmd timeserver=time.nist.gov name service=DNS {domain_name=solaris.booklab.atrust.com name_server=192.168.2.10 search=atrust.com,booklab.atrust.com} nfs4_domain=dynamic root_password=m4QP0WNY network_interface=elOOOgO {hostname=sake default_route=192.168.10.254 ip_address=192.168.10.15 netmask=255.255.255.0} Если вы передаете один и тот же файл sysidcfg нескольким клиентам, 1Р-адрес, безусловно, позволит различать системы. Для того чтобы принудительно сконфигури- ровать сетевой интерфейс при первой загрузке системы, вы можете не включать эти данные в файл. Или же, чтобы получить сетевой адрес от протокола динамической кон- фигурации узла DHCP (вместо статического его назначения), используйте следующую строку. network_interface=elOOOgO {dhcp} После формирования файлов rules, sysidcfg и ваших профилей скопируйте их в каталог /jumpstart/config и выполните Sun-утилиту check, которая проверит до- стоверность конфигурации. Использование сценария check, который должен быть за- пущен из каталога config, обязательно: он создает файл rules. ok, удостоверяющий для JumpStart, что представленные файлы синтаксически приемлемы. Не опускайте этот этап — в противном случае JumpStart не будет работать. solaris$ sudo ср /jumpstart/sl0sparc/Solaris__10/Misc/jumpstart_sample/check I jumpstart/config Solaris $ sudo ./check Validating rules. . . Validating profile profile_A... The custom JumpStart configuration is ok. В конце процесса конфигурации ваш каталог / jumpstart/config должен выглядеть примерно так. solaris$ Is -1 -rwxr-xr-x 1 root root 52152 Aug 23 19:42 check -rw-r—r— 1 root root 413 Aug 23 19:29 profile_a -rw-r—r— 1 root root 48 Aug 23 19:13 rules -rw-r—r— 1 root root 62 Aug 23 19:43 rules.ok -rw-r—r— 1 root root 314 Aug 23 17:35 sysidcfg Каждого устанавливаемого клиента необходимо добавить на сервер инсталляции че- рез JumpStart; это двухступенчатый процесс. Во-первых, добавьте МАС-адрес клиента в файл сервера /etc/ethers. Во-вторых, выполните утилиту add_install_client, что- бы добавить клиента в базу данных конфигурации, как показано в следующих строках. Solaris $ cd / jumps tart/sl0sparc/Solaris_l 0/Tools solaris$ sudo . /add__install__client -c server:/jumpstart sake sun4v
Глава 12. Управление программным обеспечением и конфигурацией 425 В данном случае клиент с именем sake будет использовать для инсталляции JumpStart NFS на хост-сервере. Реальный процесс сетевой инсталляции для клиента вы начнете после ОВР-приглашения. ok boot net - install В этом непростом процессе предусмотрена возможность проведения пользователь- ских и гибких инсталляций при участии определенных интеллектуальных ресурсов. Сетевые инсталляции с помощью автоматизированного инсталлятора О О Разработчики системы OpenSolaris оценили сложность службы JumpStart и ре- шили создать новое средство установки OpenSolaris. Этот инструмент, Auto- mated Installer (AI), воспроизводит стиль JumpStart, но позволяет справиться с определенными сложностями благодаря удобной утилите installadm. В са- мой простой форме инсталляцию сервера можно выполнить с помощью одной команды. Все файлы, которые вам нужно запустить посредством утилиты AI, собраны в пакете SUNWinstalladm-tools. Любой AI-сервер предлагает одну или несколько “служб инсталляции”, каждая из которых представляет вариант инсталляции операционной системы, определяемый клиентами во время начальной загрузки посредством многоадресной службы доменных имен DNS. Различные службы могут удовлетворять разным инсталляционным потреб- ностям (например, одна служба предназначена для веб-серверов, специально адаптиро- ванных к конкретной среде, а другая — для серверов баз данных). Установив местоположение инсталлятора, клиент отыскивает конфигурацию, или манифест, который отвечает его системному описанию. Клиент выполняет инсталляцию с помощью данных из файлов манифеста. Никакой конфигурации клиента не требуется, хотя при необходимости возможны пользовательские инсталляции клиентов. AI-инсталляция сервера связывает все необходимые части воедино в удобный пакет, включающий службы DHCP и TFTP. Перед добавлением их в сеть обязательно согла- суйте свои действия с вашим администратором сети. Неявно утилита AI создает три XML-отформатированных файла $йнифеста. • AI-файл манифеста содержит данные о сегментировании дис^бвой памяти и орга- низации пакетов (подобен профильному файлу JumpStart). • SC-файл манифеста содержит информацию о конфигураций системы (часовой пояс и учетные записи) — во многом так же, как JumpStart-фаЙЛг sysidefg. • Файл критериев сопоставляет два других файла манифеста с устройствами клиен- тов, подобно тому как это делает файл rules в службе JumpStart. Если вы считаете, что использование языка XML напрягает вас интеллектуально, мо- жете вручную отредактировать манифесты и создать пользовательские конфигурации. Обычно достаточно лишь запустить утилиту installadm для добавления, удаления, раз- решения, запрещения и перечисления новых инсталляционных служб, а также для соз- дания пользовательских конфигураций клиентов. Например, следующая команда installadm создает новую инсталляционную службу, которую вы можете использовать для инсталляции клиента. В данном примере в каче- стве источника инсталляции используется ISO-образ системы OpenSolaris выпуска 0906. Опция -с 10 вынуждает сервер DHCP обеспечить до 10 динамических адресов, начи- ная с 192.168.1.200. Образ инсталляции копируется в каталог /export/ins tall.
426 Часть I. Основы администрирования solaris$ sudo installadm create-service -s ~/osol-0906-x86.iso -i 192.168.1.200 -c 10 /export/install Setting up the target image at /export/install ... Warning: Using default manifest </usr/share/auto_install/default.xml> Registering the service _install_service_46501._OSInstall._tcp.local Creating DHCP Server Created DHCP configuration file. Created dhcptab. Added ’’Locale" macro to dhcptab. Added server macro to dhcptab - opensolaris. DHCP server started. dhtadm: Unable to signal the daemon to reload the dhcptab Added network macro to dhcptab - 192.168.1.0. Created network table. adding tftp to Zetc/inetd.conf Converting /etc/inetd.conf copying boot file to Ztftpboot/pxegrub.I86PC.OpenSolaris-1 Service discovery fallback mechanism set up Для того чтобы инсталлировать клиента, выполните сетевую загрузку обычным спо- собом. Сервер использует предопределенные правила для отыскания образа, загрузки его на сторону клиента и выполнения инсталляции. Автоматизированный инсталлятор (Automated Installer) изменяется довольно быстро. После инсталляции пакета обратитесь за информацией о текущем его состоянии по адресу: /usr/share/doc/auto_install/index.html. 12.3. Инсталляция HP-UX Как сервер-ориентированная операционная система, предназначенная, в ос- новном, исключительно для крупных приложений, которые требуют большого объема ответственной работы, система HP-UX не заботится о предоставлении перспективного процесса инсталляции следующего поколения. Ее программ- ное обеспечение инсталляции с текстовым интерфейсом можно назвать прак- тическим руководством, которое просто проведет вас через основные опции конфигурации: сегментирование дисковой памяти, установка сетевых параме- тров, инсталляция программ. Для узлов системы, которые требуют сетевых и автоматизированных инсталляций, до- ступна HP-опция Ignite-UX. Инсталлятор Ignite-UX может установить по сети несколько систем HP-UX одновременно. Клиенты РА-RISC выполняют загрузку с помощью про- токола начальной самозагрузки ВООТР (Bootstrap Protocol), а системы Itanium использу- ют протокол DHCP. Вы можете сконфигурировать несколько программных репозиториев. Например, пакеты инсталляции могут быть предоставлены из одного хранилища, “запла- ты” — из другого, а пакеты приложений — из третьего. В качестве бонуса Ignite-UX также включает службу, которая восстанавливает конфигурацию компьютера из недавнего образа. Для установки Ignite-UX необходимо выполнить следующие действия. • Инсталлируйте программное обеспечение Ignite-UX и пакеты HP-UX на сервере. • Сконфигурируйте Ignite-UX с предложением соответствующих вариантов инстал- ляции. • Разрешите использовать такие зависимости служб Ignite-UX, как NFS и ВООТР. • Добавьте в сервер МАС-клиент и IP-адреса.
Глава 12. Управление программным обеспечением и конфигурацией 427 После конфигурации сервера вы можете добавить в системы клиентов опцию на- чальной загрузки (через HP-менеджер загрузки EFI Boot Manager), чтобы заставить их инсталлировать систему HP-UX из сервера Ignite-UX. В качестве альтернативного вари- анта для систем, которые уже работают под управлением HP-UX, вы можете использо- вать команду bootsys, чтобы “перенести” инсталляцию с сервера на сторону клиента. В наших примерах систем Ignite-UX устанавливается заранее, но если в вашей си- стеме его нет, попробуйте выполнить команду swinstall -s /dvdrom Ignite-UX. Здесь /dvdrom означает точку монтирования для DVD-диска, который содержит носи- тель операцонной системы, или “операционную среду” в терминологии HP. Результаты инсталляции выражаются в виде ряда инсталлированных пакетов, и некоторые из них перечислены ниже. hp-ux$ sudo swlist Ignite-UX # Ignite-UX Ignite-UX.BOOT-COMMON-IA Ignite-UX.BOOT-COMMON-PA Ignite-UX.BOOT-KRN-11-11 Ignite-UX.BOOT-KRN-11-23 Ignite-UX.BOOT-KRN-11-31 Ignite-UX.BOOT-SERVICES C.7.5.142 C.7.5.142 C.7.5.142 C.7.5.142 C.7.5.142 C.7.5.142 C.7.5.142 HP-UX System Installation Services Boot Components for IPF clients Boot Components for РА-RISC clients Boot Kernel for B.ll.ll clients Boot Kernel for B.11.23 clients Boot Kernel for B.11.31 clients Boot Services for Installations Файлы конфигурации и двоичные файлы Ignite-UX разбросаны случайным образом по всей файловой системе. Самые важные компоненты перечислены в табл. 12.3. Таблица 12.3. Важные двоичные файлы, каталоги и файлы конфигурации, используемые Ignite-UX Имя файла j /etc/bootptab /etc/opt/ignite/instl_boottab / opt/ignite/bin/bootsys Действует как незашифрованная “база данных” для bootpd Регистрирует IP-адреса для загрузки клиентов PA-RISC Обновляет клиентов, которые уже работают под управлением HP-UX / opt/ignite/bin/make_conf ig Создает файл с данными о конфигурации с помощью инсталля- / opt/ignite/bin/make_depots ционного хранилища Создает инсталляционные хранилища на основе некоторых ис- ходных носителей source media / opt/ignite/bin/manage_index /opt/ignite/lbin/setup_server Добавляет хранилище в индекс Ignite-UX Совместно использует каталог /var/opt/ignite/client^ через протокол NFS /var/opt/ignite/clients /var/opt/ignite/data /var/opt/ignite/INDEX Сохраняет файлы конфигурации клиентов (dir) Традиционно использовался для хранилищ инсталляции (dir) Индексирует все хранилища инсталляции, известные Ignite-UX Команда make__depots извлекает пакеты инсталляции и устанавливает их в качестве хранилища операционной среды для инсталляции на стороне клиентов. После создания хранилища выполните команду make__config, чтобы прочитать содержимое хранилища и создать файл конфигурации, который его описывает. Конфигурация становится из- вестной для Ignite-UX посредством выполнения команды manage_index, которая до- бавляет конфигурации в файл INDEX. Ниже приведен пример последовательности ко- манд для версии 1 li v3.
428 Часть I. Основы администрирования hp-ux$ cd /opt/ignite/bin hp-ux$ sudo ./make_depots -s /dev/dsk/c2t2d0 - d /var/opt/ignite/depots/Rel_B. 11.31/oe_media hp-ux$ sudo ./make__config -s /var/opt/ignite/depots/Rel__B. 11.31/core__media - c /var/opt/ignite/data/Rel_B. 11.31/oe_media__cfg hp-ux$ sudo ./manage__index -n "HP-UX B.11.31 Default” -c "Hi v3" hp-ux$ sudo . /manage_index -a - f /var/opt/ignite/data/Rel_B.11.31/oe__xnedia__cfg -c "Hi v3" Прежде чем сервер смогут использовать клиенты, вы должны разрешить протокол ВООТР и совместно используемый каталог clients. Отдельные клиенты должны до- бавляться в файл instl_boottab или bootptab, в зависимости от типа компьютеров, РА-RISC или Itanium. Для совместного использования каталога config посредством файловой системы NFS достаточно выполнить сценарий /opt/ignite/lbin/setup_ server. Эта команда неявно создает совместно используемый NFS-ресурс в каталоге /etc/dfs/sharetab. Вы можете включить протокол ВООТР, “раскомментировав” строку bootps в файле /etc/inetd. conf. А затем предложите сценарию inetd перечитать конфигурацию, за- пустив его на выполнение с ключом -с: /usr/sbin/inetd -с. Прежде чем служба Ignite-UX будет предлагать клиенту службы инсталляции, обыч- но распознают клиента по МАС-адресу. Но чтобы облегчить вашу ношу как админи- стратора, мы рекомендуем использовать HP-понятие “анонимных клиентов”, которые не связаны ни с какими конкретными МАС-адресами. Системы РА-RISC и Itanium опираются на различные механизмы начальной загрузки, и эти две службы конфигурируются несколько по-разному. Для того чтобы сконфигури- ровать службы начальной загрузки Ignite-UX для систем РА-RISC, отредактируйте файл /etc/opt/ignite/instl_boottab. Строки в этом файле имеют следующий формат. 1Р_адрес:МАС_адрес:дата_и_время__последнего_использования [ : reserve ] Поле 1Р_адрес назначает IP-адрес для нового клиента для использования во вре- мя доступа к службам инсталляции. Необязательное поле МАС_адрес идентифицирует компьютер клиента; если вы его опустите, указанный IP-адрес может использовать лю- бой клиент (однако обратите внимание на взаимосвязь с ключевым словом reserve). Третье поле используется и поддерживается службой Ignite-UX; поэтому оставьте его пу- стым в случае добавления новвых элементов. Если в последнем столбце представлено ключевое слово reserve, IP-адрес резерви- руется для использования клиентом, чей МАС-адрес указан во втором поле. Если слово reserve не задано, второе поле просто отображает последний МАС-адрес, который ис- пользовал заданный 1Р-адрес. Файлы /etc/bootptab и /etc/dhcptab, используемые для начальной загрузки си- стем Itanium, имеют совсем другой формат. Эти файлы хорошо прокомментированы и проиллюстрированы многочисленными примерами, которые мы не считаем нужным здесь повторять. (Обратите внимание на то, что в системах HP-UX единственный де- мон, bootpd, обслуживает запросы, поступаемые как от ВООТР, так и от DHCP.) Метод загрузки через протокол DHCP предпочтительнее для систем Itanium, поскольку он мо- жет предоставлять услуги анонимным клиентам. Просмотрите комментарии в файлах /etc/bootptab и /etc/dhcpv6tab. Если вы уже сконфигурировали сервер Ignite-UX так, как описано выше, клиенты смогут выпол- нять загрузку с него по сети. На стороне клиента прервите обычный процесс загрузки, войдите в менеджер загрузки EFI Boot Manager и добавьте сетевое устройство. Клиент запросит IP-адрес, а сервер Ignite-UX ответит и начнет инсталляцию.
Глава 12. Управление программным обеспечением и конфигурацией 429 Этот метод работает лучше всего для систем, которые совместно используют подсеть с сервером Ignite-UX. Для конфигураций, в которых клиент не включен в подсеть этого сервера, система HP перечисляет ряд опций в руководстве Ignite-UX Administration Guide. Автоматизация инсталляций Ignite-UX Конфигурация сетевой загрузки Ignite-UX — это необходимое условие для автомати- зированной инсталляции, однако конфигурирование Ignite-UX без задания подробных данных автоматической загрузки приводит к интерактивной инсталляции. Кроме того, Ignite-UX может следующее: • использовать конфигурацию, сохраненную от предыдущей инсталляции, для авто- матизации будущих инсталляций; • опираться на файлы конфигурации, которые могут быть установлены для каждого клиента, для нужных версий или просто по желанию администратора; • задавать стандартные значения для некоторых параметров конфигурации (напри- мер, DNS-серверы) и использовать другие значения для выбора во время интерак- тивной инсталляции. Файлы автоматизированной инсталляции размещаются в каталоге /opt/ignite /data, а несколько примеров и образцы конфигураций включены в пакет инсталляции Ignite-UX. Поэтому вам лучше всего начать с просмотра подкаталогов release и example. 12.4. Инсталляция системы AIX с помощью СЕТЕВОГО МЕНЕДЖЕРА ИНСТАЛЛЯЦИИ ©Сетевой менеджер инсталляции (Network Installation Manager — NIM) — это AIX-ответ инсталляторам Kickstart, JumpStart и Ignite-UX. Версии NIM, начиная c AIX 5.3, могут также инсталлировать системы Linux. “Главный” NIM-сервер инсталлирует клиентов от одного или нескольких образов ин- сталляции, где под клиентом может подразумеваться автономный компьютер, “пустая” (т.е. без диска и данных) рабочая станция или рабочий раздел диска.2 Инсталляции опираются на использование протоколов TFTP, NFS и DHCP или ВООТР, почти как в других системах.3 Сетевой менеджер инсталляции NIM включен в стандартный носитель инсталляции AIX. Все NIM-среды имеют, по крайней мере, один “сервер ресурсов”, который предла- гает клиентам некоторый набор программ. Этот сервер и “главный” NIM-сервер могут использовать одну систему или разные. Для улучшения качества процесса инсталляции среды, которые имеют сложные сетевые топологии или географически разделены, долж- ны использовать локализованные серверы ресурсов. Существует три способа конфигурации NIM: • путем использования веб-ориентированного системного менеджера; 2 Бездисковый клиент не имеет жесткого диска для локальных файловых систем и для хране- ния данных использует сетевые службы. Клиент без данных имеет только локальное пространство Для свопинга и, возможно, файловые системы /tmp и /home. 3 Поскольку все поставщики используют приблизительно одни и те же протоколы и архитек- туры, то было бы хорошо, если бы они скооперировались и создали одну стандартную систему инсталляции, не правда ли? :-)
430 Часть I. Основы администрирование • с помощью “быстрых” путей (с минимальным временем распространения) emit nim или smit eznim; • из командной строки с помощью утилиты nim. Мы считаем, что SMIT (System Manager Interface Tool — интерфейсные средства администратора системы) — самый быстрый и самый удобный интерфейс для конфи- гурирования NIM-среды. Версия “EZ” охватывает большинство часто выполняемых таких NIM-задач, как быстрая настройка главного сервера, обновление, резервирова- ние или реинсталляция существующих клиентов и конфигурирование новых клиентов. Полнофункциональная версия smit nim несколько усложнена из-за использования EZ NIM, но зато содержит некоторые дополнительные возможности конфигурации, напри- мер, позволяя включать пользовательские программные пакеты и более гибкие средства управления инсталлированными клиентами. Если вы настаиваете на выполнении операций из командной строки, тогда лучше всего начать с утилиты nim_master_setup. (В действительности SMIT-варианты EZ- NIM для конфигурирования главного сервера просто вызывают утилиту nim_master_ setup с заданными параметрами.) Эта утилита инициализирует файловые системы для программных NIM-ресурсов, создает необходимые файлы конфигурации и копирует образец файла конфигурации клиента, который вы можете отредактировать для своих локальных клиентов. Самый распространенный вариант использования утилиты — nim_master_setup -а device=/dev/cdO, где /dev/cdO — устройство, которое содержит носитель инсталля- ции для соответствующей версии системы AIX. В отличие от большинства других систем инсталляции, описанных в этой главе, главный NIM-сервер может инсталлировать вы- пуски AIX только того же (или более раннего) уровня модификации: например, сервер версии AIX 5.2 не может инсталлировать системы версии AIX 6.1. Самые полезные NIM-ориентированные утилиты командной строки перечислены в табл. 12.4. Таблица 12.4. NIM-ориентированные утилиты командной строки nimjnas ter__se tup nim_update_all nim__clients_setup Инсталлирует и конфигурирует главный NIM-сервер Обновляет ресурсы инсталляции и клиентов Определяет новых клиентов и инициализирует инсталляцию операционной системы nim__master__re cover nim nimclient Восстанавливает главную NIM-базу данных на новом сервере Множество функций: конфигурирует ресурсы, определяет клиентов и т.д. Извлекает ресурсы (например, обновления) из сервера (запускает на стороне клиентов) 12.5. Управление пакетами Все варианты UNIX и Linux включают какую-нибудь систему управления пакета- ми, которая помогает управлять конфигурацией. Традиционно пакеты использовались для распространения программного обеспечения, однако их можно применять также для распространения конфигурационных файлов и административных данных. Пакеты имеют ряд преимуществ по сравнению с неструктурированными архивами . tar.gz.
Глава 12. Управление программным обеспечением и конфигурацией 431 Наверное, важнее всего то, что процесс инсталляции пакета протекает как одна транзак- ция: при возникновении ошибки инсталляцию можно прервать или повторить. Пакетные инсталляторы обычно знают о конфигурационных файлах и, как правило, не перезаписывают локальные настройки, выполненные системным администратором. Они или создают резервные копии изменяемых файлов, или предлагают образцы кон- фигурационных файлов под другими именами (например, pkg. conf. rpmnew). Если по- сле инсталляции пакета в системе обнаруживаются нарушения, то, теоретически, можно все восстановить в прежнее состояние. Естественно, то, что написано в теории, не всег- да проходит на практике, поэтому делать это в производственной системе нужно лишь после проверки установки на тестовой системе. Системы управления пакетами “понимают” внутрипакетные зависимости, что по- зволяет разработчикам пакетов быть уверенными в правильной инсталляции не только самих приложений, но и всех библиотек и вспомогательных файлов, от которых они за- висят. Следует иметь в виду, что не все системы управления пакетами в полной мере справляются с внутрипакетными зависимостями: одни — лучше, другие — хуже. В ходе инсталляции пакета могут также выполняться различные сценарии, поэтому иногда они могут сделать гораздо больше, чем просто выгрузить новые файлы. С помощью пакетов удобно распространять изменения локальных настроек. Можно создать пакет, который в процессе инсталляции соберет сведения о компьютере (или получит их из локальной базы данных) и на их основе модифицирует конфигурацион- ные файлы. В виде пакетов можно рассылать локальное ПО вместе со вспомогатель- ными файлами и даже сторонние приложения, первоначально имевшие другой формат. Пакетам можно присваивать версии, с тем чтобы при инсталляции новой версии пакета автоматически обновлялись зависящие от него компоненты. Можно также использовать механизм зависимостей для создания групп пакетов. На- пример, можно создать такой пакет, который сам по себе ничего не инсталлирует, но от него зависит много других “заплат”. Появление новой версии пакета приводит к авто- матической установке всех этих “заплат” за один раз. 12.6. Управление Linux-пакетами В системах Linux широко распространены два формата пакетов. В Red Hat, SUSE и большинстве других дистрибутивов применяется диспетчер пакетов RPM (Red Hat Package Manager). В Ubuntu используются пакеты отдельного формата . deb (названно- го “в честь” дистрибутива Debian, на основе которого был создан дистрибутив Ubuntu). Оба формата функционально идентичны. Преобразование из формата в формат можно произвести без каких-либо трудностей с помощью утилиты alien (kitenet.net/programs/alien). Ей ничего не известно о программах данного пакета, поэтому если содержимое еще не совместимо с вашим дис- трибутивом, alien не поможет. Вообще, лучше всего использовать “родной” механизм Упаковки, используемый в вашем дистрибутиве. Системы упаковки RPM и . deb теперь работают в виде двухуровневых средств уп- равления конфигурацией. На нижнем уровне находятся средства, которые инсталлиру- ют, деинсталлируют и запрашивают пакеты: rpm для RPM и dpkg для . deb. Над этими командами находятся системы, которые знают, как нужно производить поиск пакетов в Интернете, анализировать зависимости между пакетами и модернизи- ровать все пакеты в системе. Система yum (Yellowdog Updater, Modified) работает с систе- мой RPM. Система Red Hat Network работает для Red Hat Enterprise Linux и использует
432 Часть I. Основы администрирования RPM. Система Advanced Package Tool (APT) первоначально была создана для работы с пакетами . deb, а сейчас она может работать также с пакетами RPM. Ниже будет дан обзор низкоуровневых команд rpm и dpkg. В разделе 12.7 поговорим о комплексных системах обновления. Команда rpm: управление пакетами RPM Команда rpm инсталлирует, проверяет и запрашивает состояние пакетов. Когда-то она еще и создавала пакеты, однако сейчас эта функция отведена команде rpmbuild. Тем не менее опции rpm по-прежнему имеют сложные взаимодействия и вместе могут использоваться только в некоторых комбинациях. Воспринимать утилиту rpm нужно так, будто это несколько разных команд с одним и тем же именем. Режим, который вы выбираете для работы rpm (например, -i или -д), определяет, к каким функциям этой утилиты вы хотите обратиться. Команда rpm —help перечислит все опции, разбивая их по режимам. Если вам часто приходится иметь дело с пакетами RPM, нужно будет внимательно прочесть главную страницу. Обычно используются опции -i (install), -U (upgrade), -e (erase) и -q (query). По- следняя опция является довольно сложной в том плане, что она служит для включения остальных опций; чтобы изложить определенный вопрос, вам нужно предоставить до- полнительный флаг командной строки. Например, команда rpm -да отображает список всех пакетов, инсталлированных в системе. Давайте рассмотрим небольшой пример. Предположим, требуется инсталлировать новую версию пакета OpenSSH, поскольку опубликован бюллетень, в котором сообща- ется о том, что в предыдущей версии выявлена брешь. После того как пакет загружен на локальный компьютер, для его инсталляции достаточно ввести команду rpm -U. redhat$ sudo rpm -U openssh-2.9p2-12.i386. rpm error: failed dependencies: openssh = 2.9p2-7 is needed by openssh-askpass-2.9p2-7 openssh = 2.9p2-7 is needed by openssh-askpass-gnome-2.9p2-7 openssh = 2.9p2-7 is needed by openssh-clients-2.9p2-7 openssh = 2.9p2-7 is needed by openssh-server-2.9p2-7 Гм... Похоже, не все так просто! Как видите, инсталлированная в настоящий момент версия 2.9р2-7 связана с рядом других пакетов. Команда rpm не позволяет обновить па- кет OpenSSH, так как это изменение затрагивает другие пакеты. Этот тип конфликта встречается постоянно, поэтому лучше разрабатывать такие системы, как АТР и yum. В реальном мире мы вряд ли пытались бы распутывать зависимости вручную, однако в качестве примера сделаем это для утилиты rpm. Можно прибегнуть к принудительному обновлению с помощью опции —force, но это вряд ли оправдано. Информация о зависимостях присутствует здесь для того, чтобы сэкономить ваше время и избавить вас от лишних проблем, а не для того, чтобы запу- тать вас. Для любого системного администратора нет ничего хуже, чем нарушение рабо- ты SSH в дистанционной системе. Вместо этого мы будем использовать обновленные версии пакетов зависимостей. Ес- ли бы мы были находчивыми, то перед модернизацией могли бы определить, что ос- тальные пакеты зависят от OpenSSH. redhat$ rpm -q —whatrequires openssh openssh-askpass-2.9p2-7 openssh-askpass-gnome-2.9p2-7 openssh-clients-2.9p2-7 openssh-server-2.9p2-7
глава 12. Управление программным обеспечением и конфигурацией 433 Теперь предположим, что обновленные копии необходимых пакетов получены. Можно инсталлировать их последовательно, но команда rpm все берет на себя. Доста- точно указать список пакетов в командной строке, и команда rpm отсортирует их в соот- ветствии с имеющимися зависимостями. redhat$ sudo rpm -U openssh-* Проверим результат. redhat$ rpm -q openssh openssh-2.9p2-12 Все получилось! Обратите внимание на тот факт, что rpm понимает, о каком пакете идет речь, даже если не указывать полное имя или версию пакета. Команда dpkg: управление пакетами .deb в системе Ubuntu ®В Debian аналогом команды rpm является команда dpkg. К полезным ее оп- циям относятся —install, —remove, а -1 перечисляет пакеты, инсталлиро- ванные в системе. Обратите внимание на то, что команда dpkg —install, выполненная в отношении пакета, уже находящегося в системе, перед инстал- ляцией удаляет предыдущую версию пакета. С помощью команды dpkg -1 | grep пакет легко определить, инсталлирован ли уже указанный пакет. Например, чтобы отыскать HTTP-сервер, выполните следующую команду. ubuntu$ dpkg -1 | grep -i http ii lighttpd 1.4.13-9ubuntu4 A fast webserver with minimal memory footpri В результате будет найдена программа lighttpd — облегченный веб-сервер (пре- красный открытый исходник). Начальные буквы ii означают, что заданная программа уже инсталлирована. Предположим, группа, занимающаяся вопросами безопасности системы Ubuntu, вы- пустила “заплату” к редактору nvi. После загрузки “заплаты” нужно выполнить команду dpkg для ее установки. Из показанного ниже примера видно, что эта команда гораздо более многословна, чем rpm, и сообщает о том, что именно она делает. ubuntu$ sudo dpkg —install ./nvi_l.79-16a.l_i386.deb (Reading database ... 24368 files and directories currently installed.) Preparing to replace nvi 1.79-14 (using ./nvi_l.79-16a.I_i386.deb) ... Unpacking replacement nvi ... Setting up nvi (1.79-16a.l) ... Checking available versions of ex, updating links in /etc/alternatives ... (You may modify the symlinks there yourself if desired - see 'man In' .) Leaving ex (/usr/bin/ex) pointing to /usr/bin/nex. Leaving ex.l.gz (/usr/share/man/manl/ex.1.gz) pointing to /usr/share/man/manl/nex.1.gz. Теперь можно ввести команду dpkg -1, чтобы узнать, все ли прошло нормально. Флаг -1 допускает наличие шаблона поиска, благодаря чему можно получить информа- цию только по редактору nvi.
434 / Часть I. Основы администрирований ubuntu$ dpkg -1 nvi Desired=Unknown/Install/Remove/Purge |Status=Not/Installed/Config-files/Unpacked/Failed-config/Half-instailed |/Err?=(none)/Hold/Reinst-required/X=both-problems (Status,Err:uppercase=bad) ||/Name Version Description i i nvi 1.79-16a.l 4.4BSD re-implementation of vi. Инсталляция завершилась успешно. 12.7. Использование высокоуровневых систем УПРАВЛЕНИЯ ПАКЕТАМИ В LlNUX Системы управления пакетами, такие как APT и yum, а также Red Hat Network, ста- вят перед собой следующие задачи: • упростить определение местонахождения и загрузку пакетов; • автоматизировать процесс обновления или модернизации систем; • способствовать управлению зависимостей между пакетами. Понятно, что, помимо команд, на стороне клиентов эти системы должны выполнять множество других функций. Все они требуют, чтобы компании, обеспечивающие под- держку дистрибутивов, организовывали свои предложения в согласованном порядке, чтобы клиенты могли иметь доступ к их ПО осознанно. Так как ни один поставщик не в состоянии предложить программы для Linux “на лю- бой вкус”, любая система допускает существование множества хранилищ программного обеспечения. Хранилища могут быть локальными по отношению к вашей сети, поэтому эти системы предлагают первоклассную базу, чтобы вы могли создать собственную си- стему внутреннего распределения. Служба Red Hat Network неразрывно связана с дистрибутивом Red Hat Enterprise Linux. Это коммерческая служба, пользование которой стоит денег, зато она обладает привлекательным интерфейсом и более мощными возмож- ностями в плане автоматизации, чем APT и yum. Служба Red Hat Network — это “отполированная” открытая версия дорогостоящего Red Hat-сервера Satellite Server. Клиент может ссылаться на хранилища yum и APT, и эта воз- можность позволяет таким дистрибутивам, как CentOS, адаптировать клиент- ский графический интерфейс под нестандартное использование. APT документирована гораздо лучше, чем Red Hat Network, и к тому же бесплатна. Она также является более гибкой в плане настройки. APT разрабатывалась для Debian и dpkg, но была расширена и теперь может работать с RPM. Доступными являются все версии, работающие со всеми нашими примерами дистрибутивов. На данный момент система APT более других подходит на роль универсального стандарта для распростра- нения программного обеспечения. Программа yum — это аналог APT, предназначенный для RPM. yum является также стандартным администратором пакетов для Red Hat Enterprise Linux версии 5, хотя мо- жет работать в любой системе, основанной на RPM, при условии что вы сможете указать ей хранилища, имеющие соответствующий формат. Нам нравится APT, и мы считаем, что это разумный выбор, если нужно настроить собственную автоматизированную сеть распределения пакетов. Более подробно об этом
Глава 12. Управление программным обеспечением и конфигурацией 435 можно прочитать в разделе “Создание локального зеркала хранилища” далее в этой гла- ве. Но в большинстве случаев безопаснее всего использовать систему управления паке- тами, которая входит в состав выбранного вами дистрибутива. В SUSE реализована собственная система управления пакетами на основе пакетов RPM (известная как ZYpp) с интерфейсом командной строки (именуемым Zypper). В до- полнение к обычным функциям (конфигурация репозитория, инсталляция пакета и за- просы статуса), Zypper прекрасно зарекомендовал себя в реализации анализа зависимо- стей. Версия Zypper 1.0 вышла в составе openSUSE 11.1. Подробнее о Zypper см. ниже в этой главе. Хранилища пакетов Дистрибуторы Linux поддерживают хранилища программного обеспечения, которые работают совместно с выбранными ими системами управления пакетами. Конфигура- ция, выбираемая по умолчанию для системы управления пакетами, обычно указывает на один или несколько хорошо известных веб- или FTP-серверов, находящихся под управлением дистрибьюторов. Однако из этого факта нельзя сразу понять, что может содержаться в таких храни- лищах. Должны ли они включать только наборы пакетов, принятых в качестве офици- альных, основных, версий? Официальные версии плюс текущие обновления системы защиты? Современные версии всех пакетов, которые существовали в официальных вы- пусках? Полезные программы сторонних производителей, которые официально не под- держиваются дистрибьютором? Исходный код? Бинарные файлы для многочисленных архитектур аппаратных средств? Если вы запускаете apt-get upgrade, yum upgrade или zypper dup, чтобы обновить систему, что именно под этим подразумевается? Вообще, системы управления пакетами должны отвечать на все эти вопросы и об- легчать организациям выбор специфических профилей, которые они хотят включить в их “мир программного обеспечения”. Следующие концепции помогут структурировать этот процесс. “Выпуск” (release) — это самосогласованное отображение “вселенной” пакета. Прежде чем наступила эпоха Интернета, именованные выпуски операционных систем были более или менее постоянными и были связаны с одним определенным моментом времени; “заплаты” системы защиты создавались отдельно. В наши дни выпуск пред- ставляет собой более расплывчатое понятие. Выпуски выходят во время обновления па- кетов. Некоторые выпуски, такие как Red Hat Enterprise Linux, предназначены специ- ально для того, чтобы задержать выходы новых версий; по умолчанию в них включаются только обновления защиты. Остальные выпуски, такие как бета-версии, меняются часто и существенно. Однако во всех случаях выпуск является базовой линией, трендом, или той мерой, “до которой я хочу обновить свою систему”. “Компонент” (component) — подборка программ в рамках выпуска. Дистрибутивы имеют различные отличия, однако общим является отличие между основным программ- ным обеспечением, предлагаемым дистрибьютором, и дополнительным программным обеспечением, предлагаемым энтузиастами. Другое отличие, присущее миру Linux, кро- ется между свободными частями открытого исходного кода выпуска и частями, связан- ными с некоторым соглашением о коммерческом использовании. Отдельного внимания со стороны администратора заслуживают минимально актив- ные компоненты, которые включают только исправления в системе защиты. Некоторые
436 Часть I. Основы администрирования/ выпуски позволяют комбинировать компонент защиты с постоянным базовым компо- нентом для создания относительно стабильной версии дистрибутива. “Архитектура” (architecture) — это специфический класс аппаратных средств (обо- рудования). Предполагается, что компьютеры, относящиеся к некоторому классу архи- тектуры, будут иметь одинаковые характеристики, позволяющие запускать на них оди- наковые исполняемые файлы. Архитектуры являются специфическими экземплярами выпусков (например, “Ubuntu Karmic Koala for x86_64”). Так как компоненты являются подразделениями выпусков, для каждого из них существует соответствующий экзем- пляр, характерный для данной архитектуры. Индивидуальные пакеты являются элементами, составляющими компоненты, а сле- довательно, и выпуски. Пакеты обычно являются специфическими для архитектуры и выходят в виде версии, не зависящей от главного выпуска и остальных пакетов. Соот- ветствие между пакетами и выпусками является неявным в том плане, как производится настройка сетевого хранилища. Существование компонентов, которые не поддерживаются дистрибьютором (напри- мер, “universe” и “multiverse” для Ubuntu), поднимает вопрос о том, как эти компоненты относятся к основному выпуску ОС. Можно ли о них говорить как о настоящих “компо- нентах” специфического выпуска иди же они представляют собой нечто другое? С точки зрения управления пакетами ответ прост: “universe” — это настоящий компонент. Они связаны со специфическим выпуском и выходят вместе с ним. Разделение управления интересно с точки зрения администрирования, но не влияет на системы управления па- кетами. Служба Red Hat Network После того как система Red Hat перестала входить в группу “потребитель- ских товаров” Linux, Red Hat Network стала платформой для управления си- стемой для Red Hat Enterprise Linux. Подписываясь на нее, вы приобретаете право доступа к Red Hat Network. В простейшем виде служба Red Hat Network представляет собой популярный веб-портал и список рассылки. В этом смыс- ле она мало чем отличается от тех служб уведомления о “заплатах”, которые уже много лет эксплуатируются различными поставщиками UNIX-систем. Дополнительные возможности открываются лишь при условии, что вы готовы за них заплатить. Информацию и текущие расценки можно узнать на сайте rhn.redhat.com. Служба Red Hat Network предлагает веб-ориентированный интерфейс для загрузки новых пакетов (можно также работать в режиме командной строки). Начиная с версии Red Hat Enterprise 5, в качестве интерфейса командной строки (Command Line Inter- face — CLI) используется yum (до этого времени использовался громоздкий и проблем- ный инструмент, именуемый up2date), который даже позволяет загружать и инстал- лировать пакеты без вмешательства человека. После того как вы зарегистрируетесь, система будет получать все необходимые “заплаты” в автоматическом режиме. Недостатком такого подхода является то, что решения об обновлении системы при- нимаются за вас. Определите для себя, в какой степени следует доверять разработчикам Red Hat (а также тех программ, которые они предлагают в виде пакетов). Разумным компромиссом будет выделение одного из компьютеров в качестве сервера автоматических обновлений. Периодически можно создавать образы серверной системы и проверять, в какой степени они подходят для внутреннего распространения.
Глава 12. Управление программным обеспечением и конфигурацией 437 APT: усовершенствованное средство управления пакетами APT (Advanced Packaging Tool) — это одна из зрелых систем управления пакетами. С помощью всего лишь одной команды apt-get можно модернизировать всю систему и программное обеспечение; также с ее помощью (как и с помощью Red Hat Network) можно постоянно сохранять ваши “коробочные” версии современными без вмешатель- ства со стороны человека. Первое правило, которого следует придерживаться при использовании утилиты apt- get в Ubuntu (это касается всех средств управления пакетами этой системы), требует игнорировать утилиту dselect, являющуюся клиентской надстройкой системы. Речь не идет о том, что утилита dselect плохая, просто ее интерфейс неудачен и может напу- гать новичка. В документации вы можете найти рекомендации в пользу использования dselect, тем не менее не принимайте их во внимание и используйте APT. В случае типичной инсталляции Ubuntu, которая загружается с одного из стандарт- ных “зеркал”, узнать список доступных пакетов можно на веб-сайте packages. ubuntu. com. Этот веб-сайт имеет удобную поисковую систему. Если же создается внутренний сервер APT (см. раздел “Создание локального зеркала хранилища” ниже в этой главе), то, конечно, администратор сам знает, какие пакеты доступны, и может сформировать их список. Дистрибутивы обычно имеют пустые пакеты, которые существуют для того, чтобы формировать списки зависимых пакетов. Утилита apt-get автоматически загружает и инсталлирует зависимые пакеты, благодаря чему можно легко устанавливать или об- новлять блоки пакетов. Например, инсталлируя пакет gnome-desktop-environment, можно быть уверенным в том, что установлено все необходимое для пользовательского интерфейса GNOME. Если файл /etc/apt/sources. list (см. его подробное описание ниже в этой главе) настроен, а имя необходимого пакета известно, то осталось лишь выполнить команду apt-get update, чтобы обновить информацию о пакетах. После этого от имени при- вилегированного пользователя нужно ввести команду apt-get install имя__пакета, которая, собственно, и осуществит инсталляцию пакета. Эта же команда обновит пакет, если он уже инсталлирован. Предположим, требуется установить новую версию пакета sudo, в котором устранена очередная брешь. Сначала не помешает выполнить команду apt-get update. ubuntu $ sudo apt-get update Get: 1 http://http.us.debian.org stable/main Packages [824kB] Get:2 http://non-us.debian.org stable/non-US/main Release [102B] Теперь можно приступить к получению пакета. Обратите внимание на то, что мы ис- пользуем команду sudo в процессе инсталляции нового пакета sudo — утилита apt-get способна обновлять даже те пакеты, которые в настоящий момент используются. ubuntu$ sudo apt-get install sudo Reading Package Lists... Done Building Dependency Tree... Done 1 packages upgraded, 0 newly installed, 0 to remove and 191 not upgraded. Need to get 0B/122kB of archives. After unpacking 131kB will be used. (Reading database ... 24359 files and directories currently installed.) Preparing to replace sudo 1.6.1-1 (using .../sudo_l.6.9pl0-lubuntu3.4_i386.deb)
438 Часть I. Основы администрирования Unpacking replacement sudo .. . Setting up sudo (1.6.2p2-2) ... Installing new version of config file /etc/pam.d/sudo ... Конфигурирование apt-get Сконфигурировать утилиту apt-get несложно. Хорошие инструкции можно найти в документации по управлению пакетами в* системе Ubuntu по адресу: help. ubuntu. сот/community/AptGet/Howto Самый важный конфигурационный файл утилиты называется /etc/apt/sources, list. В нем сообщается, где искать пакеты. В каждой строке файла указывается следую- щее. • Тип пакета. В настоящее время это deb или deb-src для пакетов в стиле Debian либо rpm или rpm-src — для RPM. • URL-адрес файла, компакт-диска, сервера HTTP или FTP, где находятся пакеты. • “Дистрибутив” (на самом деле — название выпуска), если нужно работать с не- сколькими версиями пакета. Дистрибьюторы используют его для главных выпу- сков, однако вы можете использовать его для других целей, если вам нужны вну- тренние системы распространения. • Необязательный список компонентов, т.е. категорий пакетов в рамках дистрибу- тива. • Стандартная конфигурация вполне приемлема, если только не нужно создавать собственное хранилище пакетов. Исходные пакеты загружаются при использова- нии строк, начинающихся с deb-src. Работая в системе Ubuntu, вы почти наверняка захотите включить в нее компонент “universe”, который предоставляет доступ к открытым программным средствам большо- го (по объему) мира Linux. Пакеты “multiverse” включают такие неоткрытые исходные тексты, как некоторые утилиты и компоненты VMware. В процессе редактирования файла sources.list вам следует перенастроить от- дельные записи для указания адреса “зеркала”, задав более близко расположен- ный сервер. Полный список “зеркал” Ubuntu находится по адресу: launchpad.net/ ubuntu/+archivemirrors. Это динамический (и длинный) список зеркал, который регулярно изменяется, поэтому обязательно отслеживайте изменения между выпусками. Убедитесь, что в качестве источника указан элемент security.ubuntu.com, и тогда вы точно получите доступ к самым последним “заплатам”, связанным с мерами по укре- плению безопасности. Пример файла /etc/apt/sources. list В показанном ниже примере в качестве источника пакетов для загрузки “основных” компонентов Ubuntu используется адрес us. archive. ubuntu. com (эти компоненты полностью поддерживаются командой разработчиков Ubuntu). Кроме того, этот список (sources. list) включает неподдерживаемые (но с открытым исходным кодом) пакеты “universe” и небесплатные неподдерживаемые пакеты в компоненте “multiverse”. В каж- дом компоненте также предусмотрено хранилище для обновлений, т.е. пакетов с исправ- ленными ошибками. Наконец, последние шесть строк предназначены для обновлений, связанных с безопасностью. # Общий формат: тип URL-адрес дистрибутив [компоненты] deb http://us.archive.ubuntu.com/ubuntu/ karmic main restricted
Глава 12. Управление программным обеспечением и конфигурацией 439 deb-src http://us.archive.ubuntu.com/ubuntu/ karmic main restricted deb http://us.archive.ubuntu.com/ubuntu/ karmic-updates main restricted deb-src http://us.archive.ubuntu.com/ubuntu/ karmic-updates main restricted deb http://us.archive.ubuntu.com/ubuntu/ karmic universe deb-src http://us.archive.ubuntu.com/ubuntu/ karmic universe deb http://us.archive.ubuntu.com/ubuntu/ karmic-updates universe deb-src http://us.archive.ubuntu.com/ubuntu/ karmic-updates universe deb http://us.archive.ubuntu.com/ubuntu/ karmic multiverse deb-src http://us.archive.ubuntu.com/ubuntu/ karmic multiverse deb http://us.archive.ubuntu.com/ubuntu/ karmic-updates multiverse deb-src http://us.archive.ubuntu.com/ubuntu/ karmic-updates multiverse deb http://security.ubuntu.com/ubuntu karmic-security main restricted deb-src http://security.ubuntu.com/ubuntu karmic-security main restricted deb http://security.ubuntu.com/ubuntu karmic-security universe deb-src http://security.ubuntu.com/ubuntu karmic-security universe deb http://security.ubuntu.com/ubuntu karmic-security multiverse deb-src http://security.ubuntu.com/ubuntu karmic-security multiverse Поля дистрибутив и компоненты помогают утилите apt-get ориентироваться в ие- рархии файловой системы хранилища Ubuntu, которая характеризуется стандартизиро- ванным размещением. Корневой дистрибутив для каждого выпуска может быть помечен как intrepid (смелый), jaunty (стильный) или karmic (кармический). Доступными компонентами обычно являются main, universe, multiverse и restricted. Если вас устраивает наличие неподдерживаемых (и с ограниченной лицензией в случае multiverse) программ в вашей среде, добавьте хранилища universe и multiverse. Создание локального зеркала хранилища Если планируется применять утилиту apt-get для большого числа компьютеров, то потребуется локальное кеширование пакетов — загружать копии всех пакетов для каж- дого компьютера было бы неразумно. Совсем не трудно сконфигурировать зеркало хра- нилища, которое было бы удобным для локального администрирования. От вас требует- ся лишь отслеживать обновления с помощью “заплат”, связанных с безопасностью^^. Лучше всего и удобно для такой работы использовать пакет apt-mirror, кото^^ доступен на сайте apt-mirror. sourceforge. net. Вы можете также инсталлировать пакет из компонента universe с помощью команды sudo apt-get install apt- mirror. После инсталляции пакета apt-mirror в каталоге /etc/apt вы найдете файл mirror. list. Это “теневая” версия sources. list, но она используется только как ис- точник для зеркального отображения операций. По умолчанию mirror. list содержит все хранилища для запуска версии Ubuntu. Для того чтобы в действительности воспроизвести хранилища в mirror. list, до- статочно запустить на выполнение apt-mirror. ubuntu $ sudo apt-mirror Downloading 57 index files using 20 threads... Begin time: Sat Aug 29 18:53:44 2009 [20]... [19]... [18]... [17]... [16]... [15]... [14]... По умолчанию пакет apt-mirror помещает свои копии хранилища в каталог /var/ spool/apt-mirror. Можно закомментировать set base_path в mirror. list, но не забудьте создать в новом корневом каталоге зеркала подкаталоги mirror, skel и var.
I Часть I. Основы администрирования Пакету apt-mirror требуется много времени для первого прохода, поскольку ему приходится отображать множество гигабайтов данных (на данный момент приблизи- тельно 40 Гбайт для выпуска Ubuntu). Последующие проходы протекают быстрее и должны быть реализованы автоматически (из демона cron). Для того чтобы избавиться от уже устаревших файлов, можете запустить сценарий clean. sh из подкаталога var своего зеркала. Для того чтобы приступить к использованию своего зеркала, воспользуйтесь (с по- мощью своего любимого веб-сервера) базовым каталогом через протокол HTTP. Мы лю- бим использовать символические ссылки на веб-корень. Вот пример. In -s /var/spool/apt-mirror/us.archive.ubuntu.com/ubuntu /var/www/ubuntu Для того чтобы заставить клиентов использовать свое локальное зеркало, отредакти- руйте файлы sources. list так, как если бы выбрали нелокальное зеркало. Автоматизация работы утилиты apt-get Утилиту apt-get можно запускать по графику с помощью демона cron. Даже если пакеты не инсталлируются автоматически, полезно регулярно выполнять команду apt- get update, чтобы следить за обновлениями сводных файлов. Команда apt-get dist-upgrade загрузит и инсталлирует новые версии любых па- кетов, имеющихся на локальном компьютере. Флаг dist-upgrade эквивалентен флагу upgrade, но включает более точную обработку зависимостей. Флаг dist-upgrade мо- жет удалить пакеты, которые утилита посчитает несовместимыми с модернизированной системой, так что к этому нужно быть готовым. Можно даже позволить компьютерам выполнять обновления в автоматическом ре- жиме. Для этого предназначена опция -yes, при наличии которой на любой вопрос, задаваемый утилитой apt-get, будет выдано оптимистичное “Да!”. Имейте в виду, что некоторые обновления (например, пакеты ядра) могут не вступать в силу до тех пор, пока система не будет перезагружена. Обычно не рекомендуется автоматически загружать обновления непосредственно с “зеркал” дистрибутивов. Другое дело, когда имеются внутренние серверы APT и система управления версиями. Следующий маленький сценарий позволит клиенту поддерживать синхронизацию с сервером APT. #!Zbin/sh apt-get update apt-get -yes dist-upgrade Этот сценарий может запускаться демоном cron (см. главу 9) каждую ночь. Можно также создать ссылки на него в сценариях запуска системы (см. главу 3), чтобы обновле- ния выполнялись на этапе начальной загрузки. Если процедуры обновления запускаются на большом числе компьютеров, необхо- димо распределить их по времени, чтобы не перегрузить сеть. Это можно сделать с по- мощью небольшого Perl-сценария, приведенного в разделе 19.2. Если вы не вполне доверяете источнику пакетов, можно автоматически загружать их, но не инсталлировать. Это позволяет делать опция —download-only утилиты apt- get. Просмотрите полученные пакеты и определите сами, какие из них инсталлиро- вать. Загруженные пакеты находятся в каталоге /var/cache/apt, который со време- нем может серьезно разрастись. Удаляйте неиспользуемые файлы командой apt-get autoclean.
Глава 12. Управление программным обеспечением и конфигурацией 441 Система yum: управление выпусками для RPM Система yum (Yellowdog Updater, Modified) представляет собой администратор мета- пакетов, основанный на RPM4. Называть yum клоном apt-get, пожалуй, неправильно, однако в плане тематики и реализации она очень похожа на apt-get, но на практике проще и медленнее. Yum — это официальная система управления пакетами для Red Hat Enterprise Linux; она предварительно устанавливается и на многих других дистрибутивах. При необходимости самую последнюю версию yum можно получить из хранилища па- кетов вашего дистрибутива. Как и в случае с apt-get, команда на стороне сервера (yum-arch) компилирует базу данных заголовочной информации из большого набора пакетов (нередко из цело- го выпуска). После этого база данных заголовков совместно используется пакетами по- средством протоколов HTTP или FTP. Клиенты используют команду yum для выбора и инсталляции пакетов; yum выявляет ограничения зависимостей и выполняет дополни- тельные действия, необходимые для завершения процесса инсталляции требуемых паке- тов. Если запрошенный пакет зависит от других пакетов, yum загружает и инсталлирует и эти пакеты. Подобие между apt-get и yum расширяется на опции командной строки, которые понятны им обоим. Например, yum install foo загружает и инсталлирует самую све- жую версию пакета foo (и его зависимости, если это необходимо). Однако существует, как минимум, одно “предательское” отличие: apt-get update обновляет кеш инфор- мации о пакетах apt-get, a yum update — каждый пакет в системе (аналогично коман- де apt-get update). Более того, есть еще команда yum upgrade, которая делает то же, что и yum update, но устаревшими приемами. Команда yum не рассматривает частичные имена пакетов, если не включить символы универсализации оболочки (такие, как ♦ и ?). Например, yum update 'perl*' обнов- ляет все пакеты, имена которых начинаются с “perl”. Не забывайте заключать символы универсализации в кавычки, чтобы избежать возникновения ошибок. В отличие от apt-^get, yum во время запуска по умолчанию сверяет информацию о пакетах, хранящуюся в кеше, с содержимым сетевого хранилища. Для того чтобы от- менить этот процесс, используйте опцию -С, в результате чего yum makecache будет обновлять локальный кеш (на это уйдет некоторое время). К сожалению, опции -С не- достаточно, чтобы повысить производительность медлительной yum. Конфигурационным файлом yum является /etc/yum. conf. Он включает общие оп- ции и указатели на хранилища пакетов. Можно активизировать одновременно множе- ство хранилищ; каждое хранилище может быть связано с множеством URL-адресов. Система управления пакетами Zypper для SIISE: теперь еще более мощная! После многих лет довольно вялого управления пакетами системы SUSE стали пред- лагать оптимальный инструмент в форме Zypper, полнофункционального диспетчера пакетов следующего поколения, созданного на базе RPM. Из всех описанных здесь ин- струментов Zypper предоставляет наиболее гибкие и мощные возможности для инстал- ляции, удаления и запроса пакетов. Это также единственная утилита, которая включает Управление хранилищами из командной строки. 4 Yum Fish Bait не следует путать с Live Prey Technology (LPT), yum3x.com.
442 Часть I. Основы администрирования Освоить этот инструмент будет нетрудно для тех, кто знаком с утилитой apt-get или yum. Основные команды Zypper представлены в табл. 12.5. Таблица 12.5. Команды2уррег Команда__________МШвчемкг * < г j--____ zypper addrepo uri Добавляет хранилище в рабочий комплект zypper di st-upgrade Обновляет систему, обеспечивая соответствие текущему выпуску дистри- бутива zypper info пакеты Отображает информацию о пакетах zypper install пакеты Загружает и инсталлирует пакеты zypper list-updates Перечисляет все обновленные пакеты в хранилище zypper modifyrepo uri Модифицирует свойства хранилища zypper refresh Обновляет метаданные хранилища в локальном кеше zypper remove пакеты Демонтирует пакеты zypper repos Перечисляет хранилища в текущем рабочем комплекте zypper search строка Выполняет поиск пакетов с совпадающими именами zypper shell (или sh) Запускает интерактивный сеанс zypper zypper update Инсталлирует обновленные версии текущих пакетов В приведенном ниже примере мы использовали команду zypper sh, чтобы открыть оболочку Zypper для непосредственного ввода команд. suse$ zypper sh zypper> repos I Enabled I Refresh # 1 Alias I Name 1 I openSUSE 11.1-0 I openSUSE 11.1-0 I Yes I No 2 1 repo-debug I openSUSE-11.1-Debug I No I Yes 3 I repo-non-oss I openSUSE-11.1-Non-Oss I Yes | Yes 4 1 repo-oss I openSUSE-11.1-Oss I Yes I Yes 5 1 repo-source I openSUSE-11.1-Source I No I Yes 6 1 repo-update I openSUSE-11.1-Update | Yes 1 Yes Вместо выполнения команды zypper refresh вручную для поддержания данных пакетов на современном уровне, вы могли бы разрешить автоматическое обновление с помощью команды zypper -f. Файлы конфигурации Zypper, включая конфигурацию программных хранилищ, на- ходятся в каталоге /etc/zypp. Большинству администраторов нет необходимости ис- пользовать эти файлы, но при возникновении такой необходимости вы должны знать, что эти файлы снабжены подробными комментариями и могут оказаться весьма полез- ными. 12.8. Управление пакетами для систем UNIX Инсталляция программного обеспечения и управление пакетами — это та область, в которой Linux имеет явное преимущество перед традиционными операционными систе- мами UNIX. Инсталлирование, модернизация и поиск программ в системе Linux стали практически тривиальными задачами для конечного пользователя или администратора.
Глава 12. Управление программным обеспечением и конфигурацией 443 Поисковые средства стали очень мощными, сообщества пользователей очень большими, а количество активных разработчиков исчисляется в тысячах. В отличие от Linux, системы UNIX оставляют администраторам гораздо меньше па- кетов для выбора и имеют хуже организованный контроль над существующими пакета- ми. В этом разделе мы рассмотрим программы управления пакетами, которые больше всего используются в каждом из наших примеров систем UNIX. Управление пакетами в Solaris С момента выхода SunOS 2.0 в системах Solaris пакетированием традиционно soiaris занималась версия SVR4 (System V Release 4) с некоторыми инкрементными усовершенствованиями, которые сохранили “хромоту” системного уровня на протяжении почти двадцати лет. К сожалению, версия SVR4 остается дефект- ной в таких областях, как управление зависимостями, практичность, поддерж- ка новых технологий (например, ZFS) и сетевых хранилищ. Для OpenSolaris разработчики решили “списать” старую систему и создать совершенно новую. В настоящее время система OpenSolaris использует кроссплатформенную систему управления пакетами (Image Packaging System — IPS), которую можно определить как огромный шаг вперед по сравнению SVR4. В качестве ключевой архитектурной детали она включает сетевые хранилища. В дополнение к стандартным функциям управления пакетами, система предлагает инструменты, предназначенные для разработчиков паке- тов и упрощающие создание и централизацию пакетов. Система IPS также обеспечивает обратную совместимость с унаследованными 8УК4-пакетами. На данный момент можно утверждать, что IPS-пакеты заметно неоднородны в таких форматах, как . deb или RPM. IPS-пакет — это не один файл, который вы могли бы легко скопировать в системах. Пакет, скорее, представляет собой коллекцию файлов, зависи- мостей и других данных, которые необходимо обслуживать из хранилища посредством IPS-демона pkg.depotd. Система IPS все еще остается в состоянии разработки, и более готовый к употреблению формат обещают представить буквально “на днях”. Команда pkg используется для выполнения большинства операций IPS: инсталля- ции, удаления, поиска, запроса статуса и т.д. Кроме того, она позволяет управлять хра- нилищами, хотя в pkg-документации и синтаксисе команд их называют “издателями” (publishers)5. Все эти команды — pkg install, pkg uninstall, pkg search и pkg info — выполняют ожидаемые функции. Команда pkg image-update подобна APT- команде dist-upgrade: она обновляет все инсталлированные пакеты до уровня самых последних доступных версий. По умолчанию хранилище выпусков OpenSolaris является стандартным издателем. В настоящее время он содержит приблизительно 1 700 пакетов6. solaris$ pkg publisher PUBLISHER TYPE STATUS URI opensolaris.org (preferred) origin online http://pkg.opensolaris.org/rele... Подробнее о системе IPS можно узнать, заглянув в man-страницы для -s5 pkg, а для получения информации о команде pkg см. man-страницы для pkg. 5 Команда разработчиков различает понятия “хранилище” (repository) и “издатель” (publisher), Но здесь мы будем считать их эквивалентными. 6 Сравните с более чем 30 000 в Ubuntu Karmic Koala.
444 Часть I. Основы администрирования Управление пакетами в HP-UX КЯ Система управления пакетами в HP, формально именуемая как Software Distri- ЛЗЕЛ butor (SD), предложила пользователям HP-UX надежную систему управле- ния пакетами уже начиная с версии 10. Это серьезный инструмент с набором функций, которые наверняка приведут любого системного администратора в состояние эйфории от эмоционального возбуждения. • Большинство средств предлагает режимы (графический и “из командной строки”), зависящие от способа вызова. • Программами можно управлять в удаленных системах посредством демона swagentd, который запускается во время загрузки и общается с системой через пользовательский протокол данных UDP либо через протокол TCP7. • Хранилища программ могут быть расположены на локальном носителе или в се- тевых каталогах. • Браузер заданий (job browser) позволяет администраторам отслеживать состояния инсталляций удаленных систем в режиме реального времени. Ряд исполняемых файлов, имена которых начинаются с sw (это, в основном, well), составляет комплект инструментальных средств SD (Software Distributor). Отдельные его утилиты и их функции перечислены в табл. 12.6. Таблица 12.6. Список команд, реализованных в Software Distributor Команда install-sd - Реинсталлирует систему Software Distributor system sd Даа Управляет удаленными заданиями: создание, диспетчеризация, мониторинг swacl - Конфигурирует опции безопасности SD swask - Выполняет интерактивные сценарии инсталляции swconfig - Конфигурирует (или реконфигурирует) инсталлированные программы swcopy Да Копирует пакеты в хранилище для будущей инсталляции swinstall Да Инсталлирует пакеты программ из хранилища swjob - Альтернатива команде sd в виде командной строки swlist Да Перечисляет инсталлированные программы или программы, расположенные в хранилище swmodify - Модифицирует каталог программ, инсталлированных в системе6 swpackage - Создает новые пакеты программ swreg - Регистрирует хранилище программ swremove Да Удаляет пакеты из системы или хранилища swverify - Подтверждает целостность инсталлированного программного обеспечения swagentd - Действует как командный агент SD (запускается во время загрузки) a Эта утилита оснащена только графическим интерфейсом (GUI) и не имеет командной строки. Эквивалентом командной строки является swjob. 6 Назывется также базой данных инсталлированных продуктов или IPD. 7 В действительности демон swagentd вызывает процесс swagent, но он прозрачен, т.е. не за- метен для пользователя.
Глава 12. Управление программным обеспечением и конфигурацией 445 Большинство команд SD поддерживает специальный флаг -х, который модифициру- ет стандартные опции применительно к данному инструменту. Например, среди опций команды swinstall есть такие: allow__incompatible (разрешает инсталляцию пакета, предназначенного для другой архитектуры) и autoreboot (при необходимости пере- загружает систему после инсталляции). Полный список опций каждой утилиты пред- ставлен на соответствующей man-странице или в файле /usr/lib/sw/sys.defaults. Более удивительно то, что в файле ~/. swdefaults могут быть сконфигурированы стан- дартные настройки для каждого пользователя. Чаще всего используется команда swinstall, особенно теми администраторами, которые усердно инсталлируют “заплаты безопасности” сразу после их выхода в свет. Команда swinstall -i запускает интерактивную инсталляцию. Графический интер- фейс (GUI) активизируется в случае, если используется система X; в противном случае вы будете использовать текстовый интерфейс. К сожалению, система HP-UX не имеет удобного оперативного хранилища программ, из которого вы могли бы легко инсталлировать “заплаты”. Однако утилита Й^-UX Soft- ware Assistant позволяет анализировать систему с использованием ссылки на Предостав- ляемый системой HP каталог “заплат”, загружает соответствующие “заплаты* и создает программное хранилище, из которого вы можете брать “заплаты” и ими “латать дыры” в системе с помощью команды swinstall. Рассмотрим несколько примеров. Для того чтобы инсталлировать “заплату безопас- ности” PHKL—40197 из NFS-хранилища программ на узле hpux.booklab, мы должны выполнить такую команду. hp-ux$ sudo swinstall -s hpux.booklab:/hpux/patches PHKL__40197 Команда swinstall выполняет конфигурационные Сценарии автоматически во вре- мя инсталляции. Если вам позже понадобится реконфигурировать какой-нибудь пакет, используйте команду swconf ig. Команда swconf ig настраивает программный пакет для локальной системы (например, создавая модификации для файла в каталоге /etd или изменяя разрешения (права доступа) на использование каталога). Для того чтобы реконфигурировать пакет sudo, мы предлагаем выполнить следующую команду. hp-ux$ sudo swconfig -х reconfigure=true sudo Для того чтобы удалить этот пакет, мы бы выполнили команду swremove sudo. Команда swverify исследует пакет и выполняет проверку целостности его основных компонентов. Используйте команду swverify, чтобы устранить такие проблемы, как наличие испорченных файлов настроек или недостающие каталоги. Команда swlist покажет вам программы, инсталлированные в системе или доступ- ные в хранилище. Интерактивный интерфейс, как правило, удобнее для операций по- иска, но посмотрите, насколько просто можно с помощью командной строки получить список Java-пакетов в нашем примере системы HP-UX. hp-ux$ sudo swlist 'Java*’ # Инициализация... # Контактирование с целевым объектом "hpuxll"... # Целевой объект: hpuxll:/ # Javal5JDK 1.5.0.11.00 Java 1.5 JDK for HP-UX Javal5JDK.Jdkl5 1.5.0.11.00 Java 1.5 JDK Javal5JDK.Jrel5 1.5.0.11.00 Java 1.5 JRE # Javal5JRE 1.5.0.11.00 Java 1.5 JRE for HP-UX Javal5JRE.Jrel5 1.5.0.11.00 Java 1.5 JRE Операция удаления — мощная функция системы Software Distributor. Инструменты удаления позволяют системным администраторам записывать программы на удаленные
446 Часть I. Основы администрирования системы (по желанию это может быть сделано по заранее определенному расписанию). Большинство команд поддерживает удаленные операции, а некоторые из них (напри- мер, swinstall) поддерживают их в виде графического интерфейса пользователя (GUI). Операции удаления выполняются с помощью вызовов удаленных процедур (Remote Procedure Call — RPC), а безопасность контролируется с помощью списков управления доступом. Подробнее о конфигурировании удаленных операций см. man 5 sd. Управление программами в AIX ® Большинство поставщиков систем UNIX, по крайней мере, попытались со- хранить связь с Linux в области управления программными продуктами, но корпорация IBM решила выбрать для системы AIX стиль “каменного века” (т.е. периода господства ламповых ЭВМ). В большинстве случаев реко- мендуется использовать “быструю” SMIT-команду (или fastpath-команду8) install_software (System Manager Interface Tool — интерфейсные сред- ства администратора системы), которая неявно вызывает команду installp. Fastpath-команда smit easy_install — еще один вариант, который требует меньшего количества нажатий клавиш, чем команда install_sof tware. Команда installp обрабатывает пакетный IBM-формат (Backup File Format, или .bff), а также более старую версию формата RPM, используемую во многих системах Linux. К сожалению, в команде installp отсутствует множество функций, которые “испорченные” администраторы привыкли воспринимать как само собой разумеющее- ся. Речь идет об инсталляции пакетов из сетевого хранилища и даже запросе пакета. При добавлении пакетов в системы AIX мы всегда используем один из вариантов: smit ins tai l_s of tware или smit easy_install. AIX-команда Islpp выводит список инсталлированных программных пакетов, ко- торые IBM называет “наборами файлов” (filesets). Команда Islpp -I» перечислит все программные продукты в системе — с таким же успехом вы можете использовать и fastpath-команду smit list_installed_sw. Инсталлированные программные продук- ты имеют коды состояния и типа, которые означают условия и происхождение каждого пакета соответственно. Состояние может быть выражено одним из следующих кодовых вариантов: applied (принятый), broken (испорченный), committed (зафиксирован- ный), locked (заблокированный), obsolete (устарелый) или inconsistent (несо- вместимый). Тип определяется таким набором кодовых вариантов: fileset, product, component, feature, RPM или fix. 12.9. Управление изменениями Ошибки — неизменный аспект нашей жизни. Следовательно, очень важно отсле- живать производимые вами изменения в конфигурации, чтобы в случае возникновения ошибок, вызванных этими изменениями, можно было без труда вернуться к надежной конфигурации. В этом разделе мы рассмотрим некоторые распространенные способы управления изменениями на уровне отдельных файлов. Вам остается лишь выбрать средства, которые будут совпадать с вашими потребностями и степенью сложности ва- шей организации. 8 Под fastpath-командой подразумевается команда smit с параметром fast path, который по- зволяет сэкономить время выполнения за счет непосредственного перехода к нужному (для вашей задачи) меню или диалоговому окну с обходом меню верхнего уровня. — Примеч. перев.
Глава 12. Управление программным обеспечением и конфигурацией 447 Создание резервных файлов Эта команда, возможно, покажется вам знакомой. $ ср bigfile.conf bigfile.bak Вы увидели в этой команде что-то позорное? Ну да, ведь настоящие системные ад- министраторы делают гораздо более сложное? В действительности можно многое сказать в пользу этого вида импровизированно- го резервирования. Резервные файлы просто создавать, легко сравнивать (с помощью команды dif f), и потом они создают контрольный след, по крайней мере, резервные файлы могут быть упорядочены по времени модификации. Они не требуют никакого дополнительного программного обеспечения и не допускают, чтобы кто-либо оставил систему резервного копирования в неоднозначном состоянии. Но мы предлагаем свои варианты подхода к этой теме. Лучше всего переместить (с помощью команды mv) исходный файл куда-нибудь под другим именем, а затем ско- пировать его обратно, присвоив ему прежнее имя. С помощью опции -р команды ср можно сохранить настройки атрибутов файла. Эта процедура сохраняет время модифи- кации исходного файла и обрабатывает случаи, когда активныйпроцесс имеет открытую ссылку на исходный файл. Будет еще лучше, если вы добавите короткий аплет-сценарий (scriptlet), подобный представленному ниже, в свой файл ~/ .bash__profile Или */ .profile. Он определя- ет “команду” backup (в действительности функцию bash), которая “собирает” имя ре- зервного файла, причем без вашего участия. function backup () { newname=$l.'date +%Y%m%d.%H%M.bak'; mv $1 $newname; echo "Backed up $1 to $newname."; cp -p $newname $1; } Вот пример. $ backup hello.py Backed up hello.py to hello.py.20091030.1612.bak. В имени файла кодируется дата и время резервирования и время последней модифи- кации файла. Обе эти составляющие информации потенциально полезны. Данный сце- нарий кодирует время в таком виде, чтобы скомпонованные имена файлов позволяли корректно сортировать резервные файлы по дате. Системы, которые регулярно резервируются на магнитную ленту, могут только выи- грать от создания резервных файлов вручную. Восстановление из резервного файла всег- да происходит быстрее и легче, чем с ленты; более того, вручную созданные резервные копии сохраняют дополнительный уровень предыстории, т.е. записей действий пользо- вателя или системы. Формальные системы управления изменениями Следующий уровень сложности и устойчивости занимают формальные системы Управления изменениями, которые представляют собой пакеты программ, отслеживаю- щих, архивирующих и обеспечивающих доступ к множеству версий файлов. Эти пакеты первоначально использовались при разработке программного обеспечения, однако они будут полезными и для системных администраторов.
448 Часть I. Основы администрирования Системы управления изменениями позволяют решить несколько проблем. Самое главное, они обеспечивают организованный доступ к отслеживанию истории изменений в файле, благодаря чему любые изменения можно понять исходя из контекста, а также можно восстанавливать ранние версии файлов. Связанные группы файлов могут вме- сте входить в одну версию, при этом будут учтены все зависимости. Наконец, системы управления изменениями координируют работу множества редакторов, поэтому вряд ли возникнет ситуация, когда чьи-то изменения будут навсегда утеряны9 и несовместимые изменения, производимые в нескольких редакторах, окажутся одновременно активными. В течение нескольких последних лет наблюдался бум в области систем управления версиями с открытым исходным кодом, причем доступные варианты имели между со- бой серьезные отличия. Среди новых систем лидирующими являются Arch, Mercurial и Bazaar-NG. Распределенная система управления версиями файлов Git, разработанная создателем Linux Линусом Торвальдсом (Linus Torvalds), сразу получила поддержку в со- обществе продуктов с открытым исходным кодом и сейчас используется для управле- ния разработкой исходного кода ядра Linux. Проверенная временем система Subversion (представитель предыдущего поколения) по-прежнему находит широкое применение и предлагает пользователям знаменитый графический интерфейс Windows. Можно воспользоваться также и некоторыми коммерческими системами управле- ния изменениями. С какой-нибудь одной из них вы, наверное, уже имели дело, если вам приходилось работать в отделе разработки, и вы пытались адаптировать ее к вашим административным данным. Однако с ними нужно быть очень осторожным; наш опыт подсказывает, что коммерческие системы обычно крайне сложны для использования в системном администрировании. Самыми популярными системами в настоящее время являются Subversion и Git. Каждая из них хорошо зарекомендовала себя в области системного администрирования, но у системы Git есть преимущество, которое заключается в том, что она создает новые хранилища с помощью быстрой и простой операции. О других преимуществах системы Git см. веб-сайт Скотта Чакона (Scott Chacon) whygitisbetterthanx.com. Система Subversion В модели Subversion центральный сервер или каталог действует как официальное хранилище проекта. По умолчанию сервер Subversion является модулем в веб-сервере Apache, что удобно для распределенной разработки программ, но не удобно для адми- нистрирования. К счастью, почитатели Subversion предлагают другой тип сервера в виде демона svnserve. Этот демон можно запускать из домашнего каталога, эксперимен- тируя с системой Subversion, однако в производственных целях он должен иметь свою учетную запись пользователя и запускаться из inetd. Настроить хранилище несложно. Например, ниже показан пример создания нового хранилища Subversion, называемого admin # cd /home/svn # mkdir repositories # cd repositories # svnadmin create admin # chmod 700 admin 9 Предположим, например, что системные администраторы Алиса и Боб оба редактируют один и тот же файл, и каждый из них вносит в файл некоторые изменения. Алиса первая сохранила файл. Когда Боб сохранил свою копию файла, он перезаписал версию Алисы. Если Алиса закроет редактор, ее изменения будут полностью утрачены и не смогут быть восстановлены.
Глава 12. Управление программным обеспечением и конфигурацией 449 Если заглянуть в каталог admin, то в нем вы сможете найти хорошо организованную структуру хранилища, включая файл README. Конфигурационный файл svnserve. conf можно найти в подкаталоге conf. Этот файл сообщает демону сервера о том, как йужно предоставлять доступ к новому каталогу. Ниже показан пример конфигурации, подходя- щей для административных файлов. [general] anon-access = none auth-access = write password-db = passwd realm = The Sysadmin Repository Так как одной из целей, стоящих перед разработчиками Subversion, было создание условий для совместной работы пользователей из разных организаций, в этой системе есть модель управления доступом, которая отделена от модели в операционной системе. Файл passwd (в том же каталоге) содержит список пользователей и их пароли (в откры- том тексте!). Использование открытого текста нельзя отнести к достоинствам; с другой стороны, смягчающим обстоятельством является то, что пароли никогда не передаются по сети. Кроме того, пароли никогда не вводятся пользователями по памяти, поэтому можно присваивать многосимвольные пароли, длина которых выбирается случайным образом. Как следствие, такие пароли должны быть безопасными. Взгляните на следую- щий пример. [users] tobi = Ikadslfkjasdljkhe8938uhau7623rhkdfndf evi = 09uqalkhlkasdgfprghkjhsdfjj83yyouhfuhe fritz - kd939hjahkjaj3hkuyasdfaadfk3ijdkjhf Естественно, разрешения на файл passwd нужно устанавливать отдельно. Все что осталось — это запустить сервер в отдельном хранилище. # svnserve —daemon —root /home/svn/repositories Будучи непривилегированным пользователем, вы можете сейчас выписать архив admin из любого места в сети. $ svn checkout —username tobi svn://server.atrust.com/admin checkout Authentication realm: <svn://server.atrust.com:3690> The Sysadmin Repository Password for 'tobi': <password> Когда вы введете пароль первый раз, система Subversion создает его копию в каталоге . subversion, который она создает в вашем домашнем каталоге. Для того чтобы доба- вить или удалить файлы из локальной копии проекта, используйте команду svn. $ cd checkout $ vi foo.c $ svn add foo.c Когда все будет готово, нужно зафиксировать изменения в хранилище. $ svn commit -m "Initial checkin; added foo.c" Перечислять измененные файлы, которые вы хотите зафиксировать, не нужно, хотя при желании это можно сделать; команда svn разберется с этим сама. Если опустить опцию -т, команда svn запустит редактор, в котором вы сможете отредактировать со- общение о фиксации. Для того чтобы получить самые последние обновления из хранилища, запустите svn update внутри проекта. Subversion выполняет операцию по объединению любых фай-
450 Часть I. Основы администрирования лов, которые были изменены как в вашей локальной копии проекта, так и в главном хранилище. Файлы с неразрешимыми конфликтами маркируются как “conflicted”, и Subversion не разрешит регистрировать их до тех пор, пока вы не устраните проблемы и не сообщите системе, что конфликты были разрешены. $ svn resolved foo.с Если вы хотите узнать, кто производил изменения и какие строки в файле были из- менены, спросите об этом систему Subversion. $ svn blame bar.с Эта команда печатает снабженную ссылками версию файла, которая показывает, когда и кем была изменена строка последний раз. (Оптимисты, а также те, кто терпим к чужим ошибкам, могут использовать синоним svn praise.) Кроме того, можно без труда узнать о различиях относительно некоторой даты или версии. Например, если вы хотите узнать, что было изменено в файле foo. с начиная с 4 июля 2010 года, вам по- может следующая команда. $ svn diff -г ”{2010-07-04}’’ foo.с Последнюю версию системы Subversion можно загрузить на сайте subversion, tigris. org. Стандартной документацией является книга Version Control with Subversion, опубликованная в издательстве O’Reilly. Полный текст этой книги доступен в интерак- тивном режиме на сайте svnbook. red-bean. com. Subversion имеет также знаменитый интерфейс Windows, именуемый TortoiseSVN (зайдите на сайт tortoisesvn.tigris.org). Мы использовали его для управления ис- ходными файлами для этой книги. Система Git Характерной особенностью системы Git является то, что она не имеет центрального хранилища. Вместо регистрации конкретной версии файлов некоторого проекта вы про- сто копируете хранилище (включая всю его историю) и уносите его с собой, подобно тому как рак-отшельник перемещается со своим панцирем. Ваши обращения к храни- лищу представляют собой локальные операции, поэтому они выполняются быстро, и вам не приходится беспокоиться о соединении с центральным сервером. Git использует интеллектуальную систему сжатия данных, чтобы уменьшить стои- мость хранения всей истории, и в большинстве случаев эта система достаточно эффек- тивна. Зачастую рабочие требования на область памяти оказываются даже ниже, чем при использовании Subversion. Git прекрасно подходит для разработчиков, поскольку они могут накапливать свой исходный код в ноутбуке и работать без подключения к сети, используя при этом все преимущества системы управления изменениями. Когда же подходит время совмещать работу многих разработчиков, их изменения могут быть объединены из разных копий хранилища любым способом, подходящим для вашей организации. Всегда можно вер- нуть две копии хранилища к их общему предшествующему состоянию, вне зависимости от того, сколько изменений и итераций было выполнено после разделения. Смешанная стратегия копирования и ветвления, реализованная в Git, не очень-то соответствует контексту системного администрирования, но ее использование локаль- ного хранилища можно считать большим шагом вперед по отношению к системным ад- министраторам (точнее сказать, большим шагом назад, но в хорошем смысле). Системы управления изменениями предыдущего поколения (например, RCS и CVS) хотя и ис-
Глава 12. Управление программным обеспечением и конфигурацией 451 пользовали локальные хранилища, но не могли координировать совместную деятель- ность, обрабатывать объединение изменений и независимую разработку. Сейчас мы прошли полный цикл и очутились в точке, в которой помещение файлов под “надзор” управления версиями является быстрой, простой, локальной операцией. Все современ- ные Git-функции обеспечения совместной работы доступны для использования в соот- ветствующих ситуациях. Прежде чем начать работу с системой Git, укажите свое имя и адрес электронной почты. $ git config —global user.name "John Q. Ulsah" $ git config —global user.email "ulsab@book.admin.com" Для того чтобы отслеживать обычные изменения, вносимые в файлы конфигурации, как правило, используются хранилища, которые никогда не дублируются, и, следова- тельно, никогда не возникает необходимость в их согласовании или объединении. Это соглашение делает использование системы Git очень простым, но поскольку действия будут совершаться от имени пользователя root, важно позаботиться, чтобы все потен- циальные субъекты деяния указали свои имена и адреса электронной почты, как было показано выше. (Git использует ваши персональные данные для записей в журнале, даже когда вы запускаете эту систему через команду sudo.) Для того чтобы создать хранилище, которое охватывает каталог /etc, вам^следует выполнить эти команды. $ cd /etc $ sudo git init Initialized empty Git repository in /etc/.git/ $ sudo git add . $ sudo git commit -m "Initial commit" Created initial commit ed25c29: Initial commit 2538 files changed, 259122 insertions(+), 0 deletions (-) create mode 100644 .java/.systemPrefs/.system.lock create mode 100644 .java/.systemPrefs/.systemRootModFile В приведенной выше последовательности команда git init создает инфраструктуру хранилища в каталоге /etc/ .git. Команда gife^dSR помещает каталог /etc и все его содержимое в Git-список “стадийности”, который представляет собой список файлов, подлежащих использованию в следующей операции git commit. Флаг -m команды git commit включает зарегистрированное сообщение в командной строке. Если вы оставите его, команда git откроет редактор, с помощью которого вы сможете построить это за- регистрированное сообщение. Давайте сделаем изменение и внесем его в хранилище. $ sudo vi mdadm/mdadm.conf $ sudo git commit mdadm/mdadm.conf -m "Added spare to svr4west array" Created commit 901bd39: Added spare to svr4west array 1 files changed, 1 insertions(+), 0 deletions(-) Присваивание имен модифицированным файлам в строке команды git commit иг- норирует обычное использование в Git области “стадийности” и создает модификацию, которая включает только изменения, внесенные в названые файлы. Существующая об- ласть “стадийности” остается неизменной, и Git игнорирует все остальные файлы, кото- рые, возможно, были модифицированы.
452 Часть I. Основы администрирования Если некоторое изменение коснулось нескольких файлов, у вас есть два варианта действий. Если вы точно знаете, какие файлы были изменены, можете всегда перечис- лить их в командной строке, как показано выше. Если вам лень это делать, можете вы- полнить команду git commit -а, чтобы заставить Git добавить все модифицированные файлы в области “стадийности” до выполнения операции. Однако последний вариант имеет два подводных камня. Во-первых, могут существовать модифицированные файлы, которые не связаны с вашими изменениями. Например, файл /etc/mtab в системах Linux поддерживается системой, поэтому он может изменяться даже при отсутствии конфигурационных из- менений. Позволяя этому файлу участвовать в commit-наборах, вы “нарываетесь” на проблемы в будущем, поскольку он (файл) не является реальной составляющей ваших текущих изменений. Если вам позже придется возвращать свои изменения к предше- ствующему состоянию, будет ошибкой “откатывать” назад и файл mtab. Во-вторых, команда git commit -а проверяет на наличие изменений только те фай- лы, которые находятся “во власти” системы управления изменениями в данный момент. Новые файлы такой “заботой” охвачены не будут. Для того чтобы избежать этих “неувязок”, выполните команду git status и оце- ните ситуацию вручную. Эта команда информирует вас о новых, модифицированных и “поэтапных” файлах одновременно. Например, предположим, что мы отредактировали файл /etc/mdadm/mdadm.conf (как в предыдущем примере), а также инсталлировали новый системный демон foobard, конфигурация которого содержится в файле /etc/ foobard/foobard. conf. Тогда Git представит следующую информацию10. $ sudo git status # On branch master # Changed but not updated: # (use "git add <file>..." to update what will be committed) # # modified: mdadm/mdadm.conf # modified: mtab # modified: passwd #Untracked files: # (use "git add <file>..." to include in what will be committed) # # foobard/ no changes added to commit (use "git add" and/or "git commit -a") Имя файла foobard.conf здесь не указано, поскольку Git не “видит” содержимое каталога foobard, который содержит его. Мы видим, что оба файла mtab и passwd имеют неожиданные изменения. Изменения в файле mtab определенно фиктивны, но изменения в файл passwd могли быть внесены. Возможно, сценарий инсталляции для foobard создал специальную учетную запись либо кто-нибудь отредактировал файл passwd и забыл внести изменения в хранилище. Для того чтобы прояснить ситуацию, можно выполнить команду git diff passwd и узнать о реальных изменениях, внесенных в файл passwd. Предположим, что в данном случае изменения в файле passwd не были связаны с нашими недавними действиями. Следовательно, нам имеет смысл зарегистрировать эти изменения отдельно от только что сделанных. 10 Даже если эта команда не вносит никаких изменений, тем не менее она должна быть выпол- нена от имени пользователя root, поскольку она создает заблокированные файлы в каталоге . git.
Глава 12. Управление программным обеспечением и конфигурацией $ sudo git commit passwd -m "Checking in existing passwd changes" > Created commit 6f7853c: Checking in existing passwd changes 1 files changed, 1 insertions(+), 0 deletions(-) Мы можем заставить Git игнорировать файл mtab раз и навсегда, но для этого не- обходимо выполнить два действия. Во-первых, “удалим” файл mtab из текущего образа хранилища. $ sudo git rm —cached mtab rm 'mtab’ Опция —cached предотвращает реальное удаление файла mtab, поэтому не выбра- сывайте ее! По существу, мы переводим операцию виртуального удаления файла в Git- область “стадийности”. Git будет вести себя так, как если бы мы удалили файл с помо- щью команды rm. Во-вторых, удаление файла mtab из Git-вселенной предполагает его добавление в Git-список файлов, которые будут игнорироваться в будущем. Это реализуется посред- ством создания или редактирования файла .gitignore. $ sudo sh -с "echo mtab » .gitignore"11 Наконец, мы должны выполнить все оставшиеся изменения. $ sudo git add . $ sudo git commit -m "Installed foobard; added RAID spare" Created commit 32978e6: Installed foobard; added RAID spare 4 files changed, 3 insertions(+), 1 deletion(-) create mode 100644 .gitignore create mode 100644 foobard/foobard.conf delete mode 100644 mtab Обратите внимание на то, что файл .gitignore сам становится частью управляе- мого набора файлов. Было бы неплохо файлы, которые уже находятся под управлением этой системы, повторно добавить в такой набор, поэтому команда git add . — это простой способ выразить следующее желание: “Хочу, чтобы новый образ хранилища вы- глядел так же, как текущий каталог”. В данной ситуации вы могшбы просто выполнить команду git commit -а, поскольку она не затронет ни файл foobard. conf, ни файл .gitignore (эти файлы “слишком свежие” для управляющего Git-механизма и должны быть добавлены в круг управления в явном виде). Стараясь заставить вас подумать, что система Git управляет не только содержимым файлов, но и правами доступа к ним, при добавлении новых файлов в хранилище она отображает режимные коды файлов. Но это не так: Git не отслеживает ни режимы, ни владельцев, ни время модификации. Если вы используете Git для возврата изменений в системных файлах, дважды убедитесь в том, что их атрибуты остались правильными. Отсюда делаем вывод, что вы не можете рассчитывать на использование Git, если пред- полагаете “с нуля” восстанавливать сложные файловые иерархии в ситуациях, когда для вас важна информация о принадлежности ресурсов и правах доступа на них. Использовать Git для базового управления изменениями ненамного труднее, чем создавать резервные копии вручную. Однако трудно требовать от всей вашей команды администраторов быстрого обслуживания системы и при этом пребывать в уверенности, что она (система) используется надлежащим образом. 11 Вызов команды sh в явном виде заставляет выполнить оператор перенаправления в контек- сте корневой оболочки (root shell). Если бы мы просто ввели команду echo mtab » . gitignore, интерпретатор попытался бы открыть файл .gitignore до выполнения команды sudo.
454 Часть I. Основы администрирования 12.10. Локализация и конфигурирование ПРОГРАММНОГО ОБЕСПЕЧЕНИЯ Адаптация компьютеров к вашей локальной среде является одним из основных зада- ний системного администрирования: вы должны сообщить системе обо всех принтерах, доступных в сети, запустить специальный демон лицензирования, добавить задачу cron, очищающую каталог /scratch один раз в неделю, интегрировать поддержку для специ- ального сканера и т.п. Для выполнения этих задач нужен структурированный и воспро- изводимый способ. Вам нужно помнить о следующем. • У пользователей нет привилегий системного администратора. Необходимость в них в ходе выполнения обычных операций вызывает подозрение и наверняка свиде- тельствует о том, что кто-то имеет злой умысел. • У пользователей нет намерений причинить вред системе. Вы должны организо- вать защиту системы таким образом, чтобы она была защищена от неумышленных ошибок и не передавала “первому встречному” привилегии системного админи- стратора. • Прежде чем наказывать пользователей, изредка делающих что-то не так, нужно провести с ними беседу. На неумелые действия администратора пользователи за- частую реагируют неадекватно. Следовательно, если ваши действия мешают поль- зователям работать, то это свидетельствует о проблемах в архитектуре. • Старайтесь ориентироваться на заказчика. Беседуйте с пользователями и поста- райтесь узнать, какие задачи для них являются сложными. Попытайтесь сделать эти задачи гораздо проще. • Ваши предпочтения — только ваши, и ничьи более. Пользователи должны иметь собственные предпочтения. По мере возможности такие варианты нужно предла- гать всегда и везде. • Если ваши решения, принимаемые в административных целях, влияют на способ- ность пользователей обучаться системе, постарайтесь их изменить. Расскажите о них пользователям. • Постоянно обновляйте вашу локальную документацию и делайте ее легкодоступ- ной. Более подробно об этом можно прочитать в разделе 32.5. Организация локализации Когда в организации тысяча компьютеров с различными конфигурациями, админи- стратор вынужден тратить большую часть времени на выяснение причин того, почему такая-то проблема возникла только на этом компьютере. Думаете, решением проблемы будет унификация всех конфигураций? Не спешите с выводами! Ограничения, суще- ствующие в реальном мире, а также различные нужды ваших пользователей делают это невозможным. Между администрированием “многочисленных” и “бесчисленных” конфигураций есть разница. Важно разделить вашу установку на управляемые части. Вы увидите, что одни части локализации применяются ко всем управляемым компьютерам, другие — только к некоторым из них, а третьи — только к отдельным компьютерам.
Глава 12. Управление программным обеспечением и конфигурацией 455 Помимо выполнения инсталляций с “чистого листа”, вам придется также постоянно загружать и инсталлировать обновления. Следует иметь в виду, что на разных компьюте- рах установлены различные сроки действия и предъявляются разные требования к ста- бильности и периоду работоспособности. Предусмотрительный системный администратор никогда не станет развертывать но- вые выпуски программного обеспечения на всех компьютерах сразу. Наоборот, нужно делать это с учетом нужд каждой группы и потратить некоторое время на выявление проблем на самых ранних этапах, чтобы не допустить серьезного повреждения системы. Важные серверы нельзя обновлять до тех пор, пока не будет уверенности в надежности производимых изменений, и “избегайте пятниц”, если вы не готовы проводить долгие выходные перед монитором12. Однако в процессе проектирования системы локализации следует убедиться в том, что все исходные данные хранятся в системе управления изменениями. Так вы сможете всегда знать, какие изменения были тщательно проверены и готовы к развертыванию. Кроме того, это позволит вам идентифицировать пользователя, являющегося автором проблематичных изменений. Чем больше человек вовлечено в этот процесс, тем более важным является последнее утверждение. Свои преимущества есть и у разделения базового выпуска ОС и выпуска локализа- ции. В зависимости от того, какую степень стабильности необходимо достичь в вашей среде, вы можете использовать второстепенные локальные выпуски только для того, чтобы устранить ошибки. Наш опыт подсказывает, что добавление новых функций не- большими порциями приводит к более стабильному выполнению операций, чем при постановке изменений в очередь на следующие крупные выпуски, что сразу же снизит качество обслуживания. Часто имеет смысл определять максимальное количество “выпусков”, с которыми вы хотите работать в любой момент времени. Некоторые администраторы придерживаются мнения, что если программное обеспечение работает надежно, то ничего изменять в нем не нужно. Они полагают, что не имеющая под собой почвы модернизация систем стоит времени и денег и что “передовой выпуск” слишком часто означает “выпуск с множе- ством ошибок”. Те же, кто вооружается этими принципами на практике, должны быть готовы к тому, что активные выпуски придется коллекционировать во вместительном каталоге. В отличие от них, активные пользователи ссылаются на присущую выпускам слож- ность и трудность в осмыслении (не говоря уже об управлении) случайной коллекции выпусков, вышедших много лет тому назад. Их козырем являются “заплаты” системы защиты, которые должны обычно применяться универсальным образом и в строгом по- рядке. Инсталлировать “заплаты” в устаревших версиях операционной системы часто бывает просто невозможно, поэтому администраторы сталкиваются с выбором: не ин- сталлировать обновления на некоторые компьютеры или полностью переходить на но- вые внутренние выпуски. Это не сулит ничего хорошего. Ни одна из этих перспектив не является доказуемо верной, хотя мы стараемся при- держиваться мнения, что лучше использовать ограниченное количество выпусков. Лучше выполнять модернизацию по вашему собственному плану, чем руководствоваться чьим-то планом. 12 Вероятным исключением из этого правила являются “заплаты” системы защиты. Нужно ста- раться закрывать все бреши в защите сразу же после их выявления. С другой стороны, “заплаты” системы защиты могут сами вызвать ошибки в работе системы.
456 Часть I. Основы администрирования Тестирование Важно протестировать изменения, пока их еще можно отменить. По меньшей мере, это означает тестирование собственных настроек. Но в той же степени это касается и системного программного обеспечения. Один известный поставщик UNIX однажды выпустил “заплату”, которая, будучи примененной определенным образом, выполняла команду rm -rf /. Представьте последствия установки такой “заплаты” во всей орга- низации без предварительного тестирования. Тестирование особенно полезно, когда применяются средства, способные автомати- чески устанавливать “заплаты” (как большинство систем управления пакетами, рассмо- тренных в этой главе). Не стоит подключать компьютеры, ответственные за выполнение ключевых задач, к службе обновления, спонсируемой поставщиком. Постарайтесь под- ключить к этой службе простой компьютер и уже с него распространяйте изменения на остальные компьютеры в вашей организации. Не допускайте производство обновлений во время проверки, иначе они могут раньше времени проникнуть в вашу производствен- ную систему. CQ О выявлении проблем речь пойдет в разделе 32.2. Если вы предвидите, что заранее запланированное обновление или изменение может вызвать у пользователей некоторые проблемы, уведомьте их о ваших планах и позвольте им связаться с вами, если у них возникнут какие-либо трудности. Позаботьтесь о том, чтобы пользователи имели возможность оперативно сообщать о замеченных ошибках. В транснациональной компании можно подключить к тестированию иностранные офисы. Участие пользователей из других стран особенно важно в случае многоязыковых систем. Если никто в американском офисе не говорит по-японски, необходимо связать- ся с офисом в Токио и попросить их проверить все, что касается поддержки раскладки кандзи (kanji). Вообще, на удивление, большое число системных параметров зависит от региональных особенностей. К примеру, при тестировании систем печати имеет смысл проверять, что произойдет, если задать иной размер бумаги. Ведь в разных странах мо- жет использоваться офисная бумага разного формата. Локальная компиляция Давным-давно, когда существовало множество аппаратных платформ UNIX, про- граммы обычно распространялись в виде архивов исходных текстов. Как правило, это были файлы с расширением . tar. Z, которые нужно было разархивировать с помощью команды uncompress, а потом скомпилировать. Затем программу требовалось инстал- лировать в соответствующий каталог, например /usr/local. Сегодня, в эпоху систем управления пакетами, все меньше программ инсталлируется подобным образом. Задачи администраторов тоже сильно упростились, так как в пакетах указано, куда их инстал- лировать. Несмотря на простоту управления пакетами, многие предпочитают самостоятель- но компилировать программы13. Это позволяет лучше контролировать параметры ком- пиляции. Фанатики могут даже изучить исходный код, чтобы быть уверенными в его безопасности. Кому-то это кажется важным, но мы считаем, что если у вас нет времени и достаточного опыта для анализа каждой из 20 000 строк приложения, то такая мера предосторожности приносит минимальную пользу. 13 Для этой цели можно воспользоваться дистрибутивом Gentoo Linux, который можно пере- компилировать с “чистого листа”.
Глава 12. Управление программным обеспечением и конфигурацией 457 Далеко не все программы выпускаются в виде пакетов для всех дистрибутивов Linux и UNIX, поэтому вам наверняка придется столкнуться с программами, которые необ- ходимо скомпилировать и инсталлировать вручную, особенно если речь идет о 32-раз- рядных компьютерах на платформе Intel. В организации, разрабатывающей собственное программное обеспечение, необходимо также решить, куда его инсталлировать. Исторически сложилось так, что локальные программы чаще всего помещают в ката- лог /usr/local, и это соглашение до сих пор широко распространено. Применяемый в UNIX/Linux стандарт FHS (Filesystem Hierarchy Standard — стандарт иерархии файловой системы) определяет, что после начальной инсталляции операционной системы каталог /usr/local должен присутствовать и быть пустым. Каталог /usr/local хоть и традиционный, но управлять им не всегда легко. Его способ организации (исполняемые файлы помещаются в подкаталог /usr/local/bin, man-страницы — в подкаталог /usr/local/man и так далее) таков, что возникает ряд проблем: трудно инсталлировать несколько версий одной и той же программы, подката- логи сильно разрастаются, сложно поддерживать несколько платформ и т.д. Распространение локализаций Система локализации в вашей организации должна справляться как с исходной инсталляцией, так и с последующими обновлениями. Особую сложность могут пред- ставлять обновления. Основным в этом вопросе является достижение эффективности, поскольку нет смысла повторять всю локализацию с самого начала, чтобы обновить разрешения для одного файла. Несмотря на то что этот процесс производится автома- тически, модель с повторной сборкой с “чистого листа” делает обновление дорогим и длительным во времени процессом. Простой и масштабируемый способ организации локализации заключается в под- держке файлов в структуре дерева, которая напоминает файловую систему производ- ственного компьютера. Специальный инсталляционный сценарий может скопировать дерево на искомый компьютер и выполнить все необходимые дополнительные действия по редактированию. Такой тип установки имеет несколько преимуществ. Вы можете поддерживать столько деревьев локализации, сколько необходимо для реализации вашей локальной администра- тивной схемы. Некоторые деревья будут альтернативными, причем каждый компьютер по- лучит только один доступный вариант. Остальные деревья будут использоваться в качестве оверлеев — их можно будет копировать поверх уже существующих деревьев. Деревья лока- лизации могут перезаписывать файлы, если это будет необходимо, или могут полностью за- менить их структуру. Каждое дерево, которое потенциально инсталлируется независимым образом, должно быть представлено в отдельном проекте управления изменениями. Подход с использованием деревьев-оверлеев позволяет внести гибкость в реализа- цию. Если вы используете систему упаковки для распространения ваших локальных на- строек, то оверлеи можно просто реализовать в независимых пакетах. Можно добавить в пакет соответствующие сценарии настройки и задать их таким образом, чтобы они за- пускались как часть процесса инсталляции. Еще одна хорошая идея с реализацией заключается в использовании утилиты rsync, которая согласовывает искомые компьютеры с деревьями-оверлеями. Утилита rsync ко- пирует только те файлы, которые являются устаревшими, поэтому она может быть эффек- тивной для распространения инкрементных изменений. Такого поведения трудно добить- ся с помощью одной лишь системы упаковки. Утилита rsync описана в разделе 19.2.
458 Часть I. Основы администрирования 12.11. Использование средств УПРАВЛЕНИЯ КОНФИГУРАЦИЕЙ Системы локализации обычно являются “доморощенными”. Частично это объясня- ется тем, что все организации отличаются друг от друга и каждая имеет свои особенно- сти. Однако большой вклад вносит также синдром “придуманного не здесь” (not invented here). Возможно, отсутствие господствующего инструмента с открытым исходным кодом для управления конфигурацией заставляет нас смотреть на эту проблему как на такую, которая выходит за рамки стандартизированных средств. Тем не менее такие средства существуют и стоят того, чтобы вы обратили на них вни- мание. В следующих разделах будут рассмотрены распространенные системы в порядке их популярности и схожести. Утилита cfengine: компьютерная иммунная система Одной из наиболее известных утилит локализации является утилита cfengine, раз- работанная Марком Бургессом (Mark Burgess). Она была представлена как “компьютер- ная иммунная система”, выполняющая свои операции на основе модели, в соответствии с которой выбирается способ конфигурирования системы. В случае расхождений между моделью и реальностью, cfengine выполняет определенные действия, направленные на то, чтобы привести систему в соответствие. Благодаря этой модели, утилита cfengine действительно является полезной для постоянной поддержки конфигурации. Утилита cfengine умеет создавать резервные копии файлов, которые она модифи- цирует, и может хранить специальный журнал своих изменений. Ее можно запускать в режиме “бездействие”, в котором она описывает изменения, которые она может произ- вести, в действительности не реализуя их. С помощью специального языка утилиты cfengine можно описать способ конфигу- рирования компьютеров. Это можно сделать, например, так: “Файл xyz должен суще- ствовать в каталоге /etc, иметь права доступа 644 и принадлежать суперпользователю”. Можно написать правила в зависимости от содержимого отдельных файлов. Например, можно определить, что файл /etc/hosts должен содержать строку “router 192.168.0.1”. Утилита cfengine добавит эту строку, если она будет отсутствовать. Язык конфигурации утилиты cfengine позволяет формулировать индивидуальные правила в зависимости от таких факторов, как имя компьютера, тип операционной си- стемы или маска подсети. Эта особенность облегчает написание одного конфигурацион- ного файла, который удовлетворит нужды всех компьютеров, находящихся в зоне вашей административной ответственности. Ниже показан простой пример из мира UNIX. В нем проверяется, является ли /bin символической ссылкой на /usr/bin в компьютерах Sun, производится дополнитель- ная проверка ссылок в старых “коробочных” версиях OSF и удаление из каталога /var/ scratch любых файлов, “возраст” которых превышает семь дней. control: actionsequence = ( links tidy ) links: sun4:: /bin -> /usr/bin # другие ссылки osf::
Глава 12. Управление программным обеспечением и конфигурацией 459 # некоторые специальные osf-ссылки tidy: /var/scratch pattern=* age=7 recurse=inf На домашней странице утилиты cfengine (cfengine. org) можно найти ее описание. LCFG: крупномасштабная система конфигурирования LCFG первоначально была разработана Полом Андерсоном (Paul Anderson) в уни- верситете Эдинбурга (Edinburgh University) в 1993 году. Последний вариант этой систе- мы известен под именем LCFG(ng); она стала популярна среди многочисленных поль- зователей за пределами этого университета. LCFG первоначально предназначалась для управления большими установками Solaris или Linux. Веб-сайт этой системы находится по адресу lefд. огд. Как и cfengine, LCFG имеет специализированный язык конфигураций. Конфи- гурации всех управляемых компьютеров хранятся на центральном сервере в виде под- борки главных конфигурационных файлов. На основе этих файлов LCFG генерирует специализированные XML-файлы, описывающие конфигурацию каждого управляемого компьютера. Демон центрального сервера наблюдает за изменениями, происходящими в главных конфигурационных файлах, и генерирует необходимые XML-файлы. XML-файлы публикуются на внутреннем веб-сервере, из которого клиенты могут из- влекать свои собственные конфигурации. Клиенты используют разнообразные сценарии компонентов для своего конфигурирования в соответствии с XML-образцами. Template Tree 2: помощник cfengine Система Template Tree 2 была создана в Швейцарском федеральном технологическом институте (Swiss Federal Institute of Technology — ETH) Тобиасом Оэтикером (Tobias Oetiker). Она построена на основе компонентов и управляется центральной конфигура- цией. Ее изюминка заключается в возможности использовать двухуровневый подход в определении конфигурации организации. Кроме того, она может работать с перемещен- ными корневыми каталогами на бездисковых компьютерах. На нижнем уровне система состоит из множества “пакетов с функциональными особенностями”. Такой пакет представляет собой коллекцию файлов, сопровождаемых МЕТА-файлом, который описывает, как эти файлы должны быть инсталлированы в иско- мой системе. В качестве функциональной особенности может быть что угодно, начиная от сетевой конфигурации и заканчивая последней версией OpenSSH. Функциональные особенности могут предлагать конфигурируемые параметры, которые можно задавать в главном конфигурационном файле. На верхнем уровне конфигурации представлен главный конфигурационный файл организации, в котором функции собраны вместе и который связывает их с компьюте- рами или группами компьютеров. На этом уровне вы должны определить значения для свободных конфигурационных параметров, предлагаемых каждой функцией. Например, одним из параметров для почтового сервера может быть имя почтового домена. Template Tree 2 комбинирует информацию из главного конфигурационного фай- ла и МЕТА-файлов отдельных функций для генерирования конфигурационного файла cfengine для всей организации. Так как каждая функция должна содержать докумен- тацию о ее назначении и использовании, Template Tree 2 может также генерировать со- ставную документацию.
460 Часть I. Основы администрирования DMTF/CIM: общая информационная модель Группа Distributed Management Task Force (DMTF — группа распределенного управ- ления), насчитывающая, по их собственному признанию, более 3000 активных членов, с 1992 года работает над общей информационной моделью (Common Information Model — CIM), пытаясь разработать стандарты для объектно-ориентированной, межплатформен- ной системы управления. Как утверждает группа DMTF, CIM — это “схема управления..., предназначенная для установления общей концептуальной структуры на уровне фундаментальной топологии по отношению как к классификации и ассоциации, так и к базовому набору классов, ориентированных на установление общей структуры для описания управляемой среды”. Или что-то в этом роде. Членами DMTF являются все основные производители, начиная от Microsoft и за- канчивая Sun. К сожалению, предложенные ими стандарты показывают, что эти фир- мы в совершенстве овладели искусством сбивать с толку и вводить модные словечки. Фирмам, принимающим участие в этом проекте и имеющим солидную репутацию, не к лицу демонстрировать свою привычку стандартизировать все подряд, без разбору. Стандарты сосредоточены вокруг XML и объектной ориентации. Однако нам пока что приходится видеть основанный на них удобный продукт. Во всем этом безобразии есть один светлый момент: благодаря усилиям DMTF по- ставщики вынуждены предоставлять для своих систем, основанных на открытом стан- дарте, интерфейсы конфигурации, доступные программным образом. Для сред UNIX и Linux в этом нет ничего нового, однако и DMTF не является детищем UNIX. Членами DMTF являются Cisco, Microsoft, Symantec и многие другие компании, имеющие не- богатый опыт в обеспечении удобных способов написания сценариев для своих систем. Если бы эти продукты получили API-конфигурации, то это было бы здорово, даже если бы реализация была несовершенной. 12.12. Организация совместного ИСПОЛЬЗОВАНИЯ ПРОГРАММ ЧЕРЕЗ NFS Где следует инсталлировать дополнительное программное обеспечение: на отдель- ных клиентах или на центральном файловом сервере, на котором его можно совместно использовать через NFS? Если речь идет о Linux, то ответ будет такой: “на клиентах”. Однако NFS позволяет выполнять обновления гораздо быстрее (обновить десяток сер- веров NFS будет гораздо быстрее и надежнее, чем 1000 клиентов) и экономить место на дисках клиентов (это не важно для тех, кто живет в мире терабайтовых дисков). На самом деле вопрос сводится к сравнению управляемости и надежности. Доступ на основе сетевой файловой системы с каждым днем становится более централизованным и простым в управлении; с его помощью варианты устранения ошибок и новые пакеты становятся сразу же доступными на всех клиентах. Однако работа по сети может вестись медленнее, чем при доступе к локальному диску. Кроме того, в модели с сетевым сер- вером появляется зависимость от сети и файлового сервера, не только потому, что она добавляет потенциальные места сбоев, но и потому также, что она требует, чтобы кли- енты и серверы согласовывали свои действия относительно таких вопросов, как доступ к общим библиотекам и версии этих библиотек. Недостатком является то, что эти би- блиотеки программ NFS представляют собой продвинутую технологию администриро-
Глава 12. Управление программным обеспечением и конфигурацией 461 вания и должны быть опробованы только в тех средах, в которых координация действий производится из центра. Вообще, в сетях, состоящих из однородных систем, большая часть преимуществ до- стигается за счет совместно используемых хранилищ программного обеспечения. Если ваша организация стандартизировала операционную систему и эта система имеет удоб- ные функциональные средства для управления пакетами, то вам, наверное, лучше всего будет отказаться от использования родной системы. Пространства имен пакетов В традиционной системе UNIX содержимое новых пакетов распределяется по мно- жеству каталогов. Библиотеки поступают в каталог /usr/lib, бинарные файлы — в ка- талог /usr/bin, документация — в каталог /usr/share/docs и т.д. Linux наследует эти свойства в той или иной мере, хотя стандарт Filesystem Hierarchy Standard (Стандарт ие- рархии файловой системы) помогает сделать размещение предсказуемым. (Подробные сведения о FHS можно узнать на сайте pathname. com/fhs.) Преимущество этого соглашения состоит в том, что файлы оказываются в хорошо зна- комых местах. Например, если переменная окружения PATH указывает на каталог /usr /bin и другие стандартные бинарные библиотеки, то новые программы будут доступны сразу же после инсталляции. Недостатком является то, что источники файлов должны быть явным образом от- слежены (средствами системы управления пакетами) и что разрозненные файлы трудно использовать совместно по сети. К счастью, системные администраторы могут выйти из затруднения благодаря пространствам имен пакетов. Суть этой схемы заключается в том, чтобы инсталлировать каждый пакет в его соб- ственный отдельный корневой каталог. Например, вы можете инсталлировать gimp в каталог /tools/graphics/gimp, а бинарные файлы — в каталог /tools/graphics /gimp/bin/gimp. Вы можете создать заново единый бинарный каталог для вашей кол- лекции утилит, поместив символические ссылки в каталог, такой как /tools/bin, на- пример. /tools/bin/gimp -> /tools/graphics/gimp/bin/gimp Пользователи могут добавить каталог /tools/bin в свои переменные РАТЙ, чтобы иметь возможность пользоваться всеми общими утилитами. Определять структуру каталога /tools можно разными способами. Иерархический подход (например, /tools/graphics, /tools/editors и так далее) облегчает обзор и повышает производительность. В соглашение о назначении имен можно включить вер- сию программы, архитектуру оборудования, операционную систему или инициалы от- ветственных пользователей, чтобы одним набором утилит могли пользоваться многие типы клиентов. Например, пользователи Solaris могут включить в свои переменные PATH ссылку /tools/sun4/bin, а пользователи Ubuntu — ссылку /tools/ubuntu/bin. Когда вы инсталлируете новую версию основной утилиты, то старые версии жела- тельно хранить как можно дольше, особенно если пользователи подолгу работают в про- ектах, в которых используется данная утилита. В идеале, новые версии утилит должны быть совместимыми со старыми файлами данных и программным обеспечением, однако на практике иногда встречается обратное. Неплохо заставить пользователей разобраться с конфигурацией и получить доступ к старой версии пакета, но неприятно просто пре- рвать их работу и вынудить иметь дело с последствиями.
462 Часть I. Основы администрирования Управление зависимостями Некоторые пакеты зависят от библиотек или других программных пакетов. Когда вы инсталлируете программное обеспечение локальным образом посредством систем управления пакетами, то для решения этих проблем вы получите всестороннюю по- мощь. Однако когда вы будете создавать собственное сетевое хранилище программ для своей организации, вам придется решать эти проблемы самостоятельно. Если вы управляете библиотеками таким же образом, как и приложениями, можете компилировать утилиты для использования библиотек из общего каталога /tools. Так вы сможете хранить активными одновременно множество версий одной библиотеки. Поскольку зависимые приложения связаны со специфическими версиями библиотеки, установка будет работать стабильно даже после выпуска новых версий библиотеки. Не- достатком является то, что этот тип установки может быть довольно сложным, чтобы его использовать и обслуживать в течение продолжительного периода времени. Старайтесь не создавать ссылки на локальный каталог /tools/lib, содержащий ссылки с обобщенными именами на общие библиотеки. Если вы измените ссылки, у вас могут возникнуть неожиданные проблемы, трудно поддающиеся диагностике. Системы с совместно используемыми библиотеками призваны избавить администраторов от не- которых возможных трудностей, однако в сложных установках лучше не рисковать. Действия, необходимые для того, чтобы компоновщик использовал конкретную вер- сию совместно используемой библиотеки, могут отличаться в разных системах. В Linux вы можете задать переменную окружения LD_LIBRARY_PATH или использовать оп- цию -R компоновщика. Сценарии упаковщика К сожалению, совместимость на уровне библиотек — это полдела. То обстоятельство, что утилиты вызывают одна другую напрямую, порождает другую возможность возник- новения конфликтов. Например, предположим, что утилита f оо часто использует ути- литу bar. После обновления версии bar, используемой по умолчанию, может оказаться, । что утилита f оо неожиданно перестала работать. В этом случае вы можете прийти к вы- ; воду, что fоо зависит от некоторого поведенческого аспекта bar, который уже не под- держивается (или, по крайней мере, не поддерживается по умолчанию). Если ваше хранилище программного обеспечения поддерживает множество версий (например, /tools/util/bar-1.0 и /tools/util/bar-2.0), вы можете устранить эту проблему, переместив исходную версию утилиты f оо в fоо. real и заменив ее неболь- шим сценарием упаковщика. # !/bin/sh # make sure the program finds any files co-packaged with it # first even if it does not use an explicit path. PATH=/tools/util/bar-l.0/bin:$PATH export PATH exec /tools/util/foo-1.0/bin/foo.real Теперь утилита foo будет запускаться с помощью специальной переменной окруже- ния PATH, и она будет вызывать старую версию утилиты bar, а не новую. Упаковщики представляют собой превосходные инструменты, которые могут не толь- • ко справляться с зависимостями между пакетами, но и решать такие задачи, как защита, зависимость от архитектуры или операционной системы и отслеживание использования. | В некоторых организациях упаковывают все совместно используемые библиотеки.
Глава 12. Управление программным обеспечением и конфигурацией 463 12.13. Рекомендуемая литература • Intel Corporation and SystemSoft. Preboot Execution Environment (PXE) Specification, v. 2.7, 1999. pix.net/software/pxeboot/archive/pxespec.pdf • PXELinux Questions, syslinux. zytor. com/wiki/index. php/PXELINUX • Rodin, Josip. Debian New Maintainers' Guide, debian. org/doc/maint-guide. Этот документ содержит хорошую информацию о пакетах формата . deb. • Silva, Gustavo Noronha. APT HOWTO, debian. org/doc/manuals/apt-how to • Hohndel, Dirk and Fabian Hershell. Automated Installation of Linux Systems Using YaST. usenix.org/events/lisa99/full_papers/hohndel/hohndel_html • Stuckelberg, Marc Vuileumier and David Clerc. Linux Remote-Boot mini-HOWTO: Con- figuring Remote-Boot Workstations with Linux, DOS, Windows 95/98 and Windows NT, 1999. tldp. org/HOWTO/Remote-Boot. html • The Red Hat Enterprise Linux System Administration Guide, redhat. com/docs • Wachsmann, Alf. How to Install Red Hat Linux via PXE and Kickstart, stanford.edu /~alf w/PXE-Kicks tart/PXE-Kicks tart. html • Burgess, Mark. “Cfengine: A Site Configuration Engine.” USENIX Computing Systems, vol. 8, No 3, 1995. cfengine.org • HPIgnite-UXAdministration Guide, docs.hp.com/en/5992-5309/5992-5309. pdf • NIMfrom A to Z. www.redbooks. ibm. com/redbooks/pdfs/sg247296 .pdf. Это полное руководство по использованию сетевого менеджера инсталляции (Network Installation Manager). • Solaris Advanced Installation Guide, docs. sun. com/app/docs/doc/802-5740 12.14. Упражнения 12.1. Опишите различия между программами Kickstart, JumpStart и Ignite-UX. Назовите преимущества и недостатки каждой из них. 12.2. Инсталлируйте Subversion из сайта subversion. tigris. org. Установите snvserve и создайте хранилище. Как можно открыть хранилище, чтобы оно использовалось из любого места в сети при поддержке надлежащего уровня безопасности? 12.3. Выясните, как организовано хранение локального программного обеспечения в ва- шей организации. Легко ли масштабируется такая система? Удобно ли с ней рабо- тать? Аргументируйте свои ответы. 12.4. Назовите самые важные особенности системы управления конфигурацией. Что вы можете сказать о защите распределения конфигурационных файлов по сети? 12.5. ★★ Сконфигурируйте какой-нибудь сетевой инсталлятор по своему усмотрению и установите новую систему с локального сервера. Перечислите действия, которые пришлось предпринять для этого. Какие возникли трудности? Какие слабые места с точки зрения масштабируемости были вами замечены при работе с выбранным инсталлятором?
Глава 13 драйверы и ядро Ядро — это часть операционной системы, которая организует доступ к аппаратным средствам через абстрактный высокоуровневый программный интерфейс. Ядро отвечает за реализацию многих концепций, которые пользователями и программами пользова- тельского уровня принимаются как нечто само собой разумеющееся. В частности, на базе низкоуровневых аппаратных возможностей ядро реализует следующие элементы операционной системы Linux: • процессы (защита адресных пространств, разделение времени и ресурсов процес- сора); • сигналы и семафоры; • виртуальную память (подкачка, страничный обмен, отображение виртуальных адресов в физической памяти); • файловую систему (файлы, каталоги, пространство имен); • общий ввод-вывод (специализированное оборудование, клавиатура, мышь, USB); • межзадачное взаимодействие (каналы и сетевые соединения). Ядро содержит драйверы устройств, которые организуют взаимодействие с отдель- ными элементами аппаратного уровня; остальная часть ядра, в основном, не зависит от внешних устройств. Взаимосвязь ядра и драйверов устройств аналогична связи между ядром и процессами пользовательского уровня. Когда процесс просит ядро “прочесть первые 64 байт файла /etc/passwd”, оно (ядро или, вернее, драйвер файловой си- стемы) транслирует эту просьбу в команду драйвера устройства, например “выбрать блок 3348 из устройства 3”. Драйвер представляет эту команду в виде последовательно- сти двоичных кодов, которые записываются в управляющие регистры устройства.
Глава 13. Драйверы и ядро____________________________________________465 Ядро написано преимущественно на языке С, хотя в некоторых случаях используется язык ассемблера, что позволяет вызывать специализированные функции устройств, не- доступные через обычные директивы компилятора. Одно из преимуществ Linux и других сред с открытым исходным кодом заключается в том, что доступность исходного кода ядра позволяет легко, если это слово здесь во- обще применимо, писать собственные драйверы устройств и модули ядра. На заре Linux умение писать такие программные компоненты было необходимым, поскольку для эф- фективного администрирования операционной системы требовалось адаптировать ее к конкретной аппаратной среде. Разрабатывать программы без специальных знаний для разновидностей системы UNIX еще труднее. (Выражаем благодарность компании IBM за прекрасную документацию по разработке драйверов (и не только драйверов).) К счастью, администраторам не приходится копаться в коде ядра. Считается, что подобной деятельностью должны заниматься разработчики ядра и драйверов, а адми- нистраторам следует сосредоточивать усилия на организации работы пользователей. Администраторы могут настраивать ядро и добавлять существующие модули, как описа- но в данной главе, но им не обязательно проходить курс программирования на языке С или языке ассемблера. (Это не всегда справедливо.) 13.1. Адаптация ядра Все платформы UNIX, описанные в этой книге, используют монолитные ядра, в ко- торых вся операционная система работает в пространстве ядра, т.е. в разделе памяти, зарезервированном для привилегированных функций операционной системы. В моно- литном ядре такие службы, как драйверы устройств, взаимодействие процессов, вир* туальная память и планирование (диспетчеризация), выполняются в одном и том же адресном пространстве. Такой подход идет вразрез с архитектурой “микроядра”, в ко- торой многие из перечисленных служб выполняются в пользовательском (непривилеги- рованном) режиме (т.е. в виде регулярных процессов). Преимущества и недостатки этих двух архитектур горячо обсуждались годами, но большинство разработчиков ядра согла- шаются с тем, что оба подхода заслуживают внимания. По сути, Linux также представляет собой монолитное ядро, но оно всегда позволяет использовать драйверы пространства пользователя для многих устройств. Такие проек- ты, как Gelato, UIO, FUSE и FUSD, предоставляют интерфейсы с устройствами в про- странстве пользователя. Тем не менее большинство драйверов все еще реализовано в режиме ядра (защищенном режиме работы процессора), большей частью, по причинам быстродействия. Современные монолитные ядра поддерживают загрузку модулей по запросу, поэтому вы можете включать драйверы устройств и другие функции ядра по необходимости без пересоздания ядра и перезагрузки системы. Драйверы, файловые системы и новые си- стемные вызовы реализованы в большинстве случаев как модули. Память, используемая модулем, выделяется и освобождается по мере загрузки кода или его удаления, что осо- бенно полезно для встроенных систем с ограниченной памятью, поскольку разработчи- ки могут настроить ядро на возможность удаления ненужных устройств. Ядро может узнать о системном оборудовании различными способами. Самый про- стой — предоставление ядру явной информации об устройствах, которые необходимо найти (или в отношении которых можно сделать вид, будто их не существует, как иногда бывает). Некоторые ядра самостоятельно ищут устройства либо на этапе начальной за- грузки, либо динамически в процессе работы системы. Последний метод наиболее часто
466 Часть I. Основы администрирования применяется для современных USB-устройств: карт памяти, цифровых камер, принте- ров и пр. Linux предоставляет поддержку широкого множества таких устройств. Системы AIX и HP-UX обеспечивают весьма ограниченную поддержку, a Solaris занимает, можно сказать, промежуточное положение. В табл. 13.1 указано местоположение каталога построения ядра и стандартное назва- ние инсталлированного ядра в каждом из наших примеров систем. Таблица 13.1. Каталоги построения и названия ядер Система Linux /usr/src/linux /vmlinuz или /boot/vmlinuz Solaris _a /platform/hardware-class-name/unix HP-UX /stand /s tand/vmunix AIX _б /usr/lib/boot/unix а Администраторы редко занимаются построением ядер Solaris, но когда это случается, они создают произ- вольный каталог построения. 6 Ядро системы AIX никогда не перестраивается, даже при добавлении новых модулей и устройств. 13.2. Драйверы и файлы устройств Драйвер устройства — это программа, которая организует взаимодействие системы с аппаратным компонентом определенного типа. Драйвер играет роль переводчика ко* манд конкретного устройства на “язык” API-функций ядра. Благодаря наличию драйвер- ров обеспечивается приемлемый уровень независимости ядра от внешних устройств. В большинстве случаев драйверы устройств являются компонентами ядра, а не полы- зовательскими процессами. Тем не менее доступ к драйверу возможен как из ядра, так, и со стороны команд пользовательского уровня. Для последних создаются специальные - файлы устройств, хранящиеся в каталоге /dev. Ядро преобразует операции, выполняв* мые над этими файлами, в вызовы функций драйвера. Учитывая темпы появления новых устройств, практически невозможно выпускать основные дистрибутивы операционных систем, в которых интегрирована поддержка всех новинок. Поэтому нередко приходится самостоятельно добавлять в систему новые драйверы. В каждой системе можно инсталлировать только “свои” драйверы, причем зачастую только те, которые разработаны специально для конкретной версии ядра. Драйверы для других операционных систем (например, Windows) работать не будут. Об этом следует помнить, покупая новое оборудование1. Кроме того, различные устройства в различной степени совместимы с дистрибутивами Linux и при работе в ее среде могут предостав- лять различные функциональные возможности. Поэтому, выбирая оборудование, следу- ет учитывать опыт его применения в других организациях. Изготовители оборудования обращают все больше внимания на рынки UNIX и Linux и иногда создают UNIX- и Linux-версии драйверов. Если повезет, к устройству будут прилагаться и драйвер, и инструкции по его инсталляции. Но с наибольшей вероятно- стью нужный драйвер можно найти на каком-нибудь неофициальном веб-сайте. Как бы то ни было, ниже мы опишем, что происходит в системе при добавлении в нее драйвера устройства. 1 Проект NDISwrapper для некоторых сетевых устройств позволяет использовать драйверы ; Windows под управлением Linux. Подробнее см. sourceforge.net/projects/ndiswrapper.
Глава 13. Драйверы и ядро 467 Файлы и номера устройств Для многих устройств в каталоге /dev имеются соответствующие специальные фай- лы; исключение в современных операционных системах составляют лишь сетевые уст- ройства. Сложные серверы могут поддерживать сотни различных устройств. Solaris с эти- ми сложностями прекрасно справляется за счет использования отдельного подкаталога /dev для каждого типа устройства: жесткого диска, компакт-диска, терминала и т.д. С каждым файлом связаны старший и младший номера устройства. Посредством этих номеров ядро преобразует обращения к файлу устройства в вызовы нужного драйвера. Старший номер устройства обозначает драйвер, за которым закреплен данный файл (другими словами, он определяет тип устройства). Младший номер устройства обыч- но указывает на то, к какому конкретно устройству данного типа следует обращаться. Младший номер иногда называют номером модуля. Узнать номера устройств позволяет команда Is -1. linux$ Is -1 /dev/sda brw-rw---- 1 root disk 8, 0 Jul 13 01:38 /dev/sda В этом примере выдана информация о первом SCSI-диске. Его старший номер ра- вен 8, а младший — 0. Младший номер иногда используется драйвером для выбора или активизации опре- деленных функций (характеристик) устройства. Например, накопителю на магнитной ленте может соответствовать два файла в каталоге /dev, один из которых при закрытии будет автоматически обеспечивать обратную перемотку, а второй — нет. Драйвер волен интерпретировать младший номер устройства по своему усмотрению. Особенности ра- боты драйвера можно узнать на соответствующей шап-странице. Файлы устройств бывают двух типов: блочно-ориентированные (блочные) и байт- ориентированные (символьные). Чтение из блочного устройства и запись в него осу- ществляются по одному блоку за раз (блок — это группа байтов, размер которой обычно кратен 512), тогда как чтение из символьного устройства и запись в него происходят в побайтовом режиме. Диски и магнитные ленты “ведут двойную жизнь”, а терминалы и принтеры — нет. Драйверы устройств предоставляют стандартный интерфейс с ядром. Каждый драйвер оснащен процедурами для выполнения некоторых или всех перечис- ленных ниже функций. attach close dump ioctl psize read receive reset strategy timeout transmit write open select probe stop Определенные системные функции удобно реализовывать, используя драйвер устрой- ства, даже если связанное с ним устройство не существует. Такие фантомные устройства называют псевдоустройствами. Например, пользователю, зарегистрировавшемуся в си- стеме по сети, назначается псевдотерминал (PTY), который с точки зрения высокоуров- невого программного обеспечения ничем не отличается от обычного последовательного порта. Благодаря такому подходу программы, написанные в эпоху алфавитно-цифровых терминалов, могут функционировать в мире окон и сетей. Вот еще примеры псевдоу- стройств: /dev/zero, /dev/null и /dev/random. Когда программа выполняет операцию над файлом устройства, ядро перехватывает обращение к файлу, ищет в таблице переходов соответствующую функцию и передает Управление соответствующей части драйвера. Для выполнения необычных операций, не имеющих прямых аналогов в модели файловой системы (например, выталкивание дис- кеты из дисковода), используется системный вызов ioctl, который передает пользова- тельскую команду непосредственно драйверу.
468 Часть I. Основы администрирования Создание файлов устройств Файлы устройств можно создавать вручную с помощью команды mknod, которая имеет следующий синтаксис. mknod имя_файла тип старший младший, где имя_ файла — это создаваемый файл устройства, тип — тип устройства (с — в случае символьного устройства и b — в случае блочного), а старший и младший — старший и младший номера устройства соответственно. Если вручную создаете файл устройства, драйвер которого уже имеется в ядре, просмотрите соответствующую этому драйверу шап-страницу и найдите указанные в ней старший и младший номера. jB Под управлением Linux система udev динамически управляет созданием и Zjb удалением файлов устройств в соответствии с реальным наличием (или отсут- ствием) устройств. Демон udevd слушает (т.е. ожидает) сообщения, исходя- щие от ядра, относительно изменений в статусе устройств. На основе данных о конфигурации, хранимых в каталогах /etc/udev и /lib/udev, демон udevd может предпринять множество действий при обнаружении устройства или его отсоединении. По умолчанию он просто создает файлы устройств в каталоге /dev. Подробно система udev описана в разделе 13.8. в системах Solaris каталог /dev в действительности состоит из символических soiaris ссылок на файлы, хранящиеся в каталоге /devices, который представля- ет собой отдельную файловую систему. Файловая система устройств (Device File System — devfs) управляет файлами устройств, содержащихся в каталоге /devices. Эти файлы создаются автоматически во время начальной загруз- ки системы демоном devfsadmd, который продолжает выполняться после загрузки системы для обработки уведомлений об обновлениях, поступающих от ядра. Администраторы могут использовать демон devf sadm для настройки этого процесса, но большинство администраторов не испытывают необходи- мости в его использовании. ЕД Ядро системы HP-UX создает файлы устройств во время загрузки системы. Если новое устройство присоединяется позже, администратор должен соз- давать файлы устройства вручную с помощью команд mksf, insf и mknod. Кроме того, утилита smh включает ограниченный интерфейс для просмотра информации об устройствах. • В системе AIX во время загрузки системы выполняется команда cfgmgr для конфигурирования устройств и инсталляции драйверов для устройств, которые прежде отсутствовали. Она выводит предупреждения относительно устройств, для которых программное обеспечение или драйверы не установлены. После обнаружения устройства система AIX запоминает его, поместив идентифика- тор в Object Data Manager, который мы рассмотрим в разделе 13.6. Команда cfgmgr создает файлы в каталоге /dev для устройств, которые успешно обна- ружены и инициализированы. Если в системе присутствуют описанные выше средства автоматизации (создающие файлы устройств), системным администраторам, использующим текущие версии UNIX и Linux, никогда не приходится вручную управлять файлами устройств с помощью ко- манды mknod.
Глава 13. Драйверы и ядро 469 Соглашения об именовании устройств Соглашения об именовании устройств — это нечто весьма неопределенное. Во мно- гих случаях применяется древняя методика, которую использовали еще при работе на компьютерах PDP-11 фирмы DEC. Для устройств, имеющих как блочную, так и символьную идентичности, имя устрой- ства с посимвольным вводом-выводом обычно начинается с буквы “г” (от англ. raw). Сравните, например, имена /dev/daO и /dev/rdaO. Альтернативное соглашение пред- лагает хранить файлы “символьных” устройств в подкаталоге, имя которого начинается с буквы “г” (сравните, например, имена /dev/dsk/dks0d3s0 и /dev/rdsk/dks0d3s0). Однако буква “г” не всегда означает использование исходного, или необработанного, файла устройства (raw device file). CQ Подробнее о последовательных портах рассказывается в главе 31. Имена файлов последовательных портов обычно состоят из префикса tty и последо- вательности букв, обозначающих конкретный интерфейс, к которому подключен порт. Иногда для терминала имеется несколько файлов устройств. Дополнительные файлы предназначены для поддержки альтернативных методов управления потоками и прото- колов блокировки. Имена накопителей на магнитной ленте часто включают не только ссылку на сам накопитель, но и указание на то, перематывается ли лента после закрытия устройства. У каждого изготовителя свой алгоритм действий. Соглашения об именовании устройств для файлов, которые представляют жесткие диски и SSD (Solid-State Disk — полупроводниковые диски), в большинстве систем до- вольно сложны. Подробнее см. раздел 8.5. Сравнение пользовательских ядер с загружаемыми модулями При инсталляции системы создается базовое ядро, которое рассчитано на запуск большинства приложений в большинстве аппаратных сред. В эту конфигурацию вхо- дит множество различных драйверов устройств и дополнительных пакетов. Кроме того, некоторые драйверы можно динамически вставлять в работающее ядро. В Linux систе- ма udev может также в реальном времени управлять такими изменениями, как вставка USB-устройства. Существуют различные “идеологические” направления на предмет того, должны ли промышленные серверы иметь ядра, построенные по специальному заказу. Несмотря на некоторый потенциальный выигрыш в производительности, особенно во встроенных системах, не использующих большой объем памяти, выбор между наложением заплат и обновлением системы обычно является решающим фактором при принятии решений. Если не существует серьезной необходимости выжимать из системы “последние соки” по части производительности, мы рекомендуем использовать ядро из ассортимента по- ставщика. Когда дело касается поддержки ядра, умный администратор обычно ведет себя как самый ленивый. Используйте везде, где только возможно, динамические модули. Избе- гайте строить ядра на заказ, если в этом нет большой необходимости. В системах Linux большинство USB-устройств можно подключать без какого бы то ни было вмешатель- ства администратора.
470 Часть I. Основы администрирования 13.3. Конфигурирование ядра Linux Д Существует четыре основных метода конфигурирования ядра Linux: • модификация настраиваемых (динамических) параметров ядра; • повторное создание ядра (компиляция исходных файлов ядра с возможны- ми модификациями и дополнениями); • динамическая загрузка новых драйверов и модулей в существующее ядро; • передача ядру директив на этапе начальной загрузки или GRUB (подробнее об этом рассказывалось в разделе 3.2). Каждый из перечисленных методов имеет свою область применения. Проще всего настраивать параметры ядра. Именно так обычно и поступают. Компиляция ядра — наи- более сложный метод, и к нему прибегают реже всего. Но любой метод вполне можно освоить, это лишь вопрос практики. Конфигурирование параметров ядра linux Многие модули и драйверы ядра разрабатывались с учетом того, что все в системе подвержено изменению. Для повышения гибкости были созданы специальные инфор- мационные каналы, которые позволяют системному администратору динамически кор- ректировать различные параметры, определяющие размеры внутренних таблиц ядра й его поведение в конкретных ситуациях. Все эти каналы расположены в файловой си- стеме /ргос (также называемой procfs), которая представляет собой интерфейс между ядром и приложениями пользовательского уровня. Часто большие приложения пользо- вательского уровня (особенно такие приложения “инфраструктуры”, как базы данных) требуют настройки параметров ядра. Специальные файлы в каталоге /ргос/sys позволяют просматривать и динамически из* менять значения параметров ядра. Они напоминают стандартные файлы Linux, но на самом деле являются “шлюзами” к ядру. Если в одном из файлов есть значение, которое требуется изменить, можно попытаться осуществить запись в этот файл. К сожалению, не все фай- лы доступны для записи (независимо от прав доступа), а объем имеющейся документации оставляет желать лучшего. Информацию о некоторых значениях и их назначении можно получить в подкаталоге Docunentation/syscnt каталога с исходным кодом ядра. Например, чтобы изменить максимальное число файлов, которые одновременно мо- гут быть открыты в системе, выполните такие действия. linux$ cat /ргос/sys/fs/file-max 34916 linux$ sudo sh -c "echo 32768 > /proc/sys/fs/file-max" Co временем вырабатывается привычка к столь нетрадиционному способу взаимо- действия с ядром, тем более что он очень удобен. Но сразу предупредим: изменения не сохраняются при перезагрузке. В табл. 13.2 перечислены некоторые обычно настраиваемые параметры. В разных ди- стрибутивах значения, действующие по умолчанию, варьируются в широких пределах. Более надежный способ модификации тех же параметров в большинстве систем реа- лизован в виде команды sysctl. Она либо берет значения переменных из командной строки, либо читает список пар переменная=значение из файла. По умолчанию файл /etc/sysctl. conf, в котором заданы начальные (пользовательские) значения параме- тров, считывается на этапе начальной загрузки.
Глава 13. Драйверы и ядро 471 Таблица 13.2. Файлы каталога /proc/sys, содержащие некоторые настраиваемые параметры ядра Ката- лог" Файл/ладаметр Наз»шче^м»^нта₽1т . j? autoeject Автоматически выталкивает компакт-диск при размонтировании дисково- да CD-ROM F file-max Задает максимальное число открытых файлов. В системе, которой при- ходится работать с большим количеством файлов, можно попытаться увеличить это значение до 16384 F inode-max Задает максимальное число открытых индексных дескрипторов в одном процессе. Этот параметр полезен при создании приложения, которое от- крывает десятки тысяч дескрипторов файлов К Ctrl-alt-del Перезагружает при нажатии комбинации клавиш <Ctrl+Alt+Del>. Применение этого параметра может диктоваться личными предпочтения- ми или соображениями повышения уровня безопасности незащищенных серверных консолей К printk ratelimit Минимальный интервал между сообщениями ядра, в секундах К printk__ ratelimit__burst Устанавливает количество последовательных сообщений, которые долж- ны быть получены, прежде чем значение минимального интервала между сообщениями printk действительно вступит в действие К shmmax Задает максимальный размер совместно используемой памяти N conf/default/ rp_filter Включает проверку маршрута к исходному файлу. Этот механизм проти- водействия имитации соединений вынуждает ядро не обращать внимания на пакеты, полученные по “невозможным” маршрутам N icmp_echo_ ignore__all Задает игнорирование ICMP-запросов, если равен 1 N icmp_echo_ ignore^ broadcasts Задает игнорирование широковещательных ICMP-запросов, если ра- вен 1. Практически во всех ситуациях целесообразно устанавливать это значение равным 1 N ip_forward Разрешает перенаправление IP-пакетов, если равен 1. Если же компью- тер Linux используется в качестве маршрутизатора, это значение необхо- димо устанавливать равным 1 N ip__local_port_ range Определяет диапазон локальных портов, выделяемый во время конфи- гурирования соединения. Для того чтобы повысить производительность серверов, которые инициируют много исходящих соединений, диапазон этого параметра следует расширить до 1024-65000 N tcp__f in_timeout Определяет интервал ожидания (в секундах) заключительного пакета FIN. Для того чтобы повысить производительность серверов, через которые проходит большой объем трафика, следует устанавливать более низкое значение (порядка 20) N tcp_syncookies Защищает от атак волнового распространения пакетов SYN. Этот пара- метр необходимо включать при наличии подозрения о наличии атак отка- за от обслуживания (DOS). а F — /ргос/sys/fs, N — /proc/sys/net/ipv4, К — /proc/sys/kernel, С — /proc/sys/dev/cdram Например, команда linux$ sudo sysctl net.ipv4.ip_forward=0 отключает перенаправление IP-пакетов. (В качестве альтернативного варианта вы може- те просто отредактировать файл /etc/sysctl.conf вручную.) Обратите внимание на
472 Часть I. Основы администрирования то, что символы косой черты в имени файла, хранящегося в структуре каталога /ргос /sys, заменяются точками. Сборка ядра Linux Операционная система Linux развивается столь быстрыми темпами, что рано или поздно ее ядро приходится компилировать заново. Постоянно появляются новые “за- платы” к ядру, драйверы устройств и новые функции. Все это вызывает противоречивые чувства. С одной стороны, удобно иметь под рукой всегда “самое новое и свежее”, а с другой — стремление идти в ногу со временем требует постоянных усилий и значи- тельных затрат времени. Кроме того, если вы используете “стабильную” версию, сборка собственного ядра вряд ли потребуется. Первоначально в Linux была принята схема нумерации ядер, со- гласно которой вторая часть номера версии указывает на то, является ядро стабильным (четный номер) или находится в стадии разработки (нечетный номер). Например, ядро версии 2.6.6 — стабильное, в отличие от ядра версии 2.7.4. В настоящее время эта схема нумерации соблюдается не всегда. Поэтому за официальной информацией по этому во- просу лучше обратиться на сайт kernel. org. Этот сайт является также наилучшим ис- точником исходного кода ядра Linux на тот случай, если конкретный дистрибутив (или его поставщик) не вызывает доверия. Не чините то, что еще не поломано Хороший системный администратор тщательно взвешивает все за и против, плани- руя обновление ядра. Конечно, самая последняя версия — это всегда модно, но является ли она столь же стабильной, что и текущая версия? Нельзя ли подождать до конца ме- сяца, когда будет инсталлироваться целая группа “заплат”? Важно, чтобы желание быть “на гребне волны” не шло вразрез с интересами пользователей. Возьмите за правило устанавливать обновления и заплаты, только когда планируемая выгода (обычно определяемая на основе критериев надежности и производительности) окупит усилия и время, затрачиваемые на инсталляцию. Если выгоду оценить затруд- нительно, это верный признак того, что с обновлением можно подождать. (Безусловно, заплаты, связанные с безопасностью, следует инсталлировать без промедления.) Конфигурирование параметров ядра В данной главе мы используем строку путь_к_исходным_текстам_ядра в каче- стве шаблона любого каталога, который выбран для хранения исходного кода ядра. Большинство дистрибутивов инсталлируют исходные файлы ядра в каталог /usr/src. В любом случае, чтобы можно было создавать ядро системы, должен быть инсталлиро- ван пакет его исходных кодов. Об инсталляции пакетов рассказывается в разделе 12.4. Весь процесс сосредоточен вокруг файла . config, находящегося в каталоге исхо- дных кодов ядра. В данном файле приведена вся информация, касающаяся конфигури- рования ядра, но его формат очень труден для понимания. Для выяснения смысла раз- личных параметров воспользуйтесь пособием по параметрам конфигурирования ядра, приведенным в файле путь_к_исходным_ текстам_ядра/Documenta tion/Conf igure. help. Для того чтобы не редактировать файл . config напрямую, в Linux предусмотрено несколько целевых модулей утилиты make, реализующих различные интерфейсы кон-
Глава 13. Драйверы и ядро 473 фигурирования ядра. Если в системе инсталлирована оболочка KDE, то удобнее всего воспользоваться командой make xconf ig. Аналогично, если вы используете оболочку GNOME, вероятно, лучше всего использовать команду make gconfig. Эти команды отображают окно конфигурации, в котором можно выбрать драйверы устройств, добав- ляемые к ядру (или компилируемые в качестве загружаемых модулей). В отсутствие графической среды на помощь придет команда make menuconfig, ра- ботающая на основе библиотеки curses. Наконец, есть старая команда make config, которая выводит запрос на изменение каждого конфигурационного параметра и не по- зволяет изменять ранее установленные значения. Мы рекомендуем пользоваться коман- дой make xconfig или make gconfig, если используемая среда их поддерживает, и ко- мандой make menuconfig — в противном случае. Применения команды make config лучше избегать (как самой негибкой и самой трудоемкой). При переносе конфигурации существующего ядра в новую версию ядра (или фай- ловую систему) можно использовать команду make oldconf ig для считывания ранее использовавшегося файла . config и определения только тех параметров, которые из- менились или являются новыми. Все эти команды довольно просты, так как их действие сводится к установке нужных опций. Тем не менее они мало подходят для ситуации, когда нужно поддерживать не- сколько версий ядра для различных платформ или аппаратных конфигураций. В любом случае генерируется файл . config, имеющий примерно такой вид. # Automatically generated make config: don't edit # Code maturity level options CONFIG_EXPERIMENTAL=y # Processor type and features t CONFIG_M386 is not set # CONFIG_M486 is not set # CONFIG_M586 is not set # CONFIG_M586TSC is not set CONFIG_M686=y CONFIG_X8 6_WP_WORKS_OK=y CONFIG_X8 6_INVLPG=y CONFIG_X8 6_BSWAP=y CONFIG_X8 6_POPAD_OK=y CONFIG_X86_TSC=y CONFIG_X86_GOOD_APIC=y Как видите, содержимое файла не слишком понятно. Не дается никаких поясне- ний относительно того, что означают параметры CONFIG—*. По сути, каждая строка CONFIG—* указывает на активизацию того или иного параметра ядра. Значение у гово- рит о том, что соответствующий компонент компилируется вместе с ядром; значение m означает, что компонент станет загружаемым модулем. Не все компоненты можно сконфигурировать в виде модулей. Сведений об этом в файле . config нет, поэтому нужно самостоятельно покопаться в документации. Не так- то легко узнать и назначение параметров CONFIG—*. Компиляция ядра Формирование файла . config — самый важный этап конфигурирования ядра Linux, но нужно выполнить еще ряд действий, прежде чем будет получено готовое ядро.
474 Часть I. Основы администрирования Схема всего процесса такова: • перейти в каталог верхнего уровня, содержащий исходные коды ядра; • выполнить команду make xconfig, make gconf ig или make menuconfig; • выполнить команду make dep (не требуется для ядер версии 2.6.x и более поздних); • выполнить команду make clean; • выполнить команду make; • выполнить команду make modules_install; • скопировать файл arch/i386/boot/bzlmage под именем /boot/vmlinuz; • скопировать файл arch/i386/boot/System.map под именем /boot/Sys tern, тар; • отредактировать файл /etc/lilo.conf (LILO) или /boot/grub/grub.conf (GRUB) и добавить в него конфигурационные параметры для нового ядра. Выполнять команду make clean не всегда нужно, но удаление всего лишнего позво- лит избежать множества проблем. Добавление драйвера устройства в Linux В Linux драйверы устройств распространяются в одной из трех форм: • “заплаты” к конкретной версии ядра; • загружаемого модуля; • инсталляционного сценария или пакета, устанавливающего соответствующие “за- платы”. Наиболее распространенная форма — инсталляционный сценарий или пакет. Если вам повезло и вы располагаете таким сценарием или пакетом для нового устройства, до- статочно выполнить стандартную процедуру установки новой программы. В большинстве случае установку “заплаты” для конкретной версии ядра можно вы- полнить с помощью следующей команды. linux # cd путь_к_исходным_текстам_ядра ; patch -pl < файл_заплаты Если ни один из этих вариантов неприменим, вам, скорее всего, придется вручную интегрировать драйвер нового устройства в дерево каталогов исходного кода ядра. Ниже мы рассмотрим, как вручную добавить к ядру драйвер некоего вымышленного сетево- го устройства “snarf”. В действительности в Linux этот процесс достаточно утомителен, особенно по сравнению с некоторыми другими версиями UNIX. В подкаталоге drivers дерева файлов исходного кода ядра найдите подкаталог, со- ответствующий типу добавляемого устройства. Вот как выглядит список существующих подкаталогов. linux$ Is -F путъ_к_исходным__текстам_ядра/ асогп/ char/ i2c/ Makefile net/ s390/ telephony/ acpi/ dio/ ide/ md/ nubus/ sbus/ usb/ atm/ f c4/ ieeel394/ media/ parport/ scsi/ video/ block/ gsc/ input/ message/ pci/ sgi/ zorro/ bluetooth/ hil/ isdn/ misc/ pcmcia/ sound/ cdrom/ hotplug/ macintosh/ mtd/ pnp/ tc/ Чаще всего драйверы добавляются в каталоги block, char, net, scsi, sound и usb. В них хранятся драйверы блочных устройств (например, IDE-дисков), символьных устройств (например, последовательных портов), сетевых устройств, SCSI-плат, звуко-
Глава 13. Драйверы и ядро 475 вых плат и USB-устройств соответственно. В других каталогах находятся, в частности, драйверы для самих шин (pci, nubus и zorro); маловероятно, чтобы потребовалось до- бавлять в них файлы. Некоторые каталоги содержат платформенно-зависимые драйверы (macintosh, s390, acorn). Поскольку наше устройство “snarf ’ является сетевым, мы поместим его драйвер в ка- талог drivers/net. Потребуется модифицировать следующие файлы: • drivers/net/Makef ile, чтобы драйвер мог быть скомпилирован; • drivers/net/Kconf ig, чтобы имя устройства появилось в списке конфигурируе- мых параметров. После помещения файлов с расширениями .си .h в каталог drivers/net/snarf нужно добавить запись о драйвере в файл drivers/net/Makefile. Вот эта строка (она располагается ближе к концу файла). obj-$ (CONFIGJSNARF_DEV) += snarf/ Эта строка добавляет драйвер (хранящийся в каталоге snarf/) в процесс компиля- ции ядра. Когда запись добавлена в файл Makefile, нужно убедиться в том, что устройство будет доступно для конфигурирования при настройке ядра. Все сетевые устройства долж- ны быть перечислены в файле drivers/net/Kconf ig. В нашем случае требуется записать в него приведенные ниже строки, чтобы драйвер был добавлен либо как загружаемый мо- дуль, либо как часть ядра (в соответствии с тем, что было заявлено в файле Makefile). config SNARF_DEV tristate ’Snarf device support' Первый компонент, следующий за ключевым словом config, — имя конфигураци- онного макроса, которое должно совпадать с компонентом, следующим за ключевым словом CONFIG в файле Makefile. Ключевое слово tristate означает, что драйвер мо- жет стать загружаемым модулем. Если это не соответствует действительности, вместо tristate необходимо указать ключевое слово bool. Следующим элементом инструк- ции является строка, которая будет отображаться в окне конфигурации. Это может быть произвольный текст, но он должен идентифицировать конфигурируемое устройство. Как при компиляции в ядро нового драйвера устройства указать ядру, что оно должно использовать новый драйвер? В версиях ядра, предшествовавших версии 2.6, эта задача была весьма трудоемкой и требовала знаний в области программирования. Недавние ар- хитектурные изменения, внесенные в модель драйверов устройств, позволяют драйверам стандартным образом связывать себя с ядром. Подробное описание этого процесса выходит за рамки данной книги, но в резуль- тате драйверы устройств, созданные для версии 2.6 (и последующих), выполняют свою регистрацию с помощью макроса MODULE_DEVICE_TABLE. Этот макрос создает соответ- ствующие скрытые связи, чтобы такие утилиты, Kaxmodprobe (описывается ниже в раз- деле 13.7), могли активизировать новые устройства в ядре. 13.4. Конфигурирование ядра Solaris .^>4^ Во время загрузки ядро Solaris исследует устройства и инициализирует драйвер soiaris для каждого найденного устройства. Оно широко использует загружаемые мо- дули и загружает код только для тех устройств, которые реально присутствуют в системе, если нет причин для других действий.
476 Часть I. Основы администрирования В зависимости от вашей точки зрения, такая автоматическая конфигурация делает конфигурирование пользовательского ядра в большей или меньшей степени необходи- мостью в Solaris, по сравнению с другими системами. В идеальном мире ядро должно корректно идентифицировать свою аппаратную среду 100% времени. К сожалению, не- надежное, нестандартное или просто проблемное оборудование (или драйверы) может подчас превратить эти блага цивилизации в источник мучений. Поэтому имеет смысл рассмотреть, как выполнить пользовательскую конфигурацию ядра Solaris и возникнет ли когда-либо необходимость это делать. Пространство ядра Solaris Для того чтобы сделать загрузку модулей по запросу корректной, система Solaris опи- рается на организацию конкретных каталогов. Система Solaris работает в предположе- нии, что определенные каталоги находятся в определенных местах, и эти каталоги долж- ны содержать конкретные типы модулей: • /kernel — общие модули для компьютеров, которые совместно используют на- бор команд; • /platform/имя_платформы/к&хп&1 — модули, специфичные для одного типа компьютеров (например, Sun Fire Т200); • /platform/имя_класса_оборудования/kernel — модули, специфичные для одного класса оборудования (например, все компьютеры sun4u); • /usr/kernel — аналогично каталогу /kernel. Элементы имя_платформы и имя_класса_оборудования можно определить с по- мощью команд uname -i и uname -m соответственно. Рассмотрим пример. solaris$ uname -i SUNW,Sun-Fire-T200 solaris$ uname -m sun4v Во время загрузки Solaris, чтобы найти ядро, проверяет путь /platform/имя_ платформы/kernel: /kernel: /usr/kernel Сначала находятся файлы с именами unix, а затем — файлы с именами genunix. Genunix — это обобщенное ядро, которое представляет независимую от платформы часть базового ядра. Каждый из перечисленных выше каталогов может содержать несколько стандартных подкаталогов, приведенных в табл. 13.3. Поскольку эти подкаталоги могут существовать внутри любых каталогов ядра, для обозначения любого или всех каталогов ядра мы ис- пользуем обобщенное имя ЯДРО. Таблица 13.3. Подкаталоги каталогов ядра Solaris —----— ... и . , ни и-. ! ill ii. . г — Подкаталог Его содержимое . . а drv Загружаемые файлы объектов для драйверов устройств. Файлы конфигурации, которые перечисляют тестовые адреса для каждого устройства Загружаемые файлы объектов для смешанных программ ядра сРи Специальный ЦПУ-модуль для UltraSPARC strmod Модули STREAMS
Глава 13. Драйверы и ядро 477 Окончание табл, 13.3 ...... 'L I 11 1 I > t' Г '.J1 L PI- .4 д I J * '^ВД' 1 И'^нму^ Подкаталог Егосодержимое , . ,.Л;. sparcv9 fs 64-разрядное ядро Модули ядра, связанные с файловой системой exec sched Модули для декодирования существующих форматов Планировщики операционной системы sys genunix unix Загружаемые системные вызовы Обобщенное платформенно-независимое ядро Базовое ядро конкретной платформы Обычно не приходится изменять какие бы то ни было файлы в этих каталогах, если не нужно инсталлировать драйвер нового устройства. У этого правила может быть одно исключение в виде файлов . conf в каталоге ЯДРО/drv, которые задают параметры кон- фигурации конкретных устройств. Однако необходимость изменять их возникает редко, и в действительности вы будете это делать только в случае, если есть соответствующее предписание от производителя устройства. Конфигурирование ядра с помощью файла /etc/system В системе Solaris файл /etc/system служит в качестве основного файла конфигура- ции для ядра. В табл. 13.4 перечислены директивы и переменные, которые могут быть включены в этот файл. Директивы — это самостоятельные ключевые слова; перемен- ным же должны быть присвоены значения с помощью директивы set. Таблица 13.4. Директивы и переменные, используемые в файле /etc/system Имя Тип" ’ Wee»^‘-J:; л ГХ: -'s: rootfs D Задает тип файловой системы корневого раздела rootdev D Задает местоположение корневого раздела forceload D Задает драйверы (“модули”), которые должны быть загружены exclude D Задает модули, которые не должны быть загружены moddir D Задает новый путь к модулям set D Устанавливает переменные настройки ядра (например, maxusers) maxusers V Управляет размерами таблицы и другими параметрами pt_cnt V Устанавливает количество доступных псевдотерминалов (PTY) max_nproc V Устанавливает максимальное количество процессов maxuprc V Устанавливает максимальное количество пользовательских процессов а D — директива, V — переменная Обращение к файлу /etc/system происходит во время загрузки, и если его содержи- мое будет искажено, то система больше не загрузится. Команда boot -а позволяет указать Резервную копию файла /etc/system, если вы создали таковую. (Если у вас нет резерв- ной копии, а существующий оригинал не работает, можете использовать файл /dev/null.) Рассмотрим пример файла /etc/system для простого ядра. rootfs:ufs rootdev:/sbus@l,f8000000/esp@0,800000/sd@3, 0:a
478 Часть I. Основы администрирования Этими строками определяется, что корневая файловая система будет иметь тип UFS (UNIX File System) и что она будет раниться в дисковом разделе sd3a. Синтаксис, ис- пользуемый для задания корневого устройства, идентичен используемому Sun-монито- ром openprom. На разных платформах он разный, поэтому обратитесь к соответствую- щему руководству по работе с аппаратурой или используйте символические ссылки в /dev, которые преобразуют “странные” имена в понятные. Команда Is -1, заданная после ссылки, покажет ее точное длинное имя. moddir: /platform/SUNW,Sun-Fire-T200/kernel:/platform/sun4v/kernel: /kernel:/usr/kernel Эта строка (физически занимающая две строки) задает путь поиска для загружаемых модулей. Это значение предлагается man-страницей ядра, но оно не действует по умол- чанию, поэтому вы должны задать его в явном виде. exclude: lofs forceload: drv/sd Первая строка исключает зацикленную файловую систему из ядра, а вторая прину- дительно обеспечивает загрузку общего драйвера SCSI (sd). set maxusers=64 Эта строка надлежащим образом изменяет размеры таблиц ядра для 64 параллельных регистрационных имен. Добавление в систему Solaris драйверов устройств Solaris-драйверы обычно распространяются как пакеты. Для добавления драйвера устройства в систему используйте утилиту pkgadd. Если драйверы не распространяются как пакеты или добавление пакета завершилось неудачно, обычно тогда драйверы до- бавляют вручную, поскольку все они реализованы как загружаемые модули ядра. Solaris-драйверы почти всегда распространяются как объектные файлы, а не в виде исходного кода, как это принято в системах Linux. В этом примере мы добавляем в Solaris устройство “snarf”. Его драйвер должен быть представлен, как минимум, дву- мя файлами: snarf. о (собственно драйвер) и snarf. conf (файл конфигурации). Оба должны находиться в каталоге /platform/4uname -m' /kernel/drv. После копирования конфигурационный файл можно отредактировать, чтобы задать параметры конкретного устройства. Обычно этого делать не требуется, но иногда неко- торые параметры доступны для “тонкой” настройки. После копирования файлов нужно загрузить модуль. Модули подключаются к рабо- тающему ядру командой add_drv (подробнее о загружаемых модулях речь пойдет ниже в этой главе). В нашем случае команда имеет вид add_drv snarf. Вот и все! Более про- стую процедуру трудно себе представить. Отладка Solaris-конфигурации Поскольку Solaris формирует свой “взгляд на мир” на лету, отладка проблемного компьютера может вызвать трудности. К счастью, Solaris предоставляет ряд инструмен- тов, которые отображают текущую конфигурацию компьютера. Команда prtconf позволяет вывести общую конфигурацию компьютера, включая тип устройства, номер модели, объем памяти и некоторую информацию о сконфигу- рированных аппаратных устройствах. Строки, которые описывают устройства (драй-
Глава 13. Драйверы и ядро 479 веры), имеют отступы, чтобы обозначить существующие зависимости. Удобная опция prtconf -D отображает имя драйвера для каждого устройства. Как видно из следующего фрагмента результатов выполнения команды prtconf, не- сколько строк содержат текст “driver not attached” (драйвер не присоединен). Это сооб- щение может иметь несколько значений: нет драйвера для устройства, устройство скон- фигурировано, но не присоединено к системе или устройство не используется и драйвер не загружен. solaris$ sudo prtconf System Configuration: Sun Microsystems i86pc Memory size: 580 Megabytes System Peripherals (Software Nodes): i86pc scsi_vhci, instance #0 isa, instance #0 i8042, instance #0 keyboard, instance #0 mouse, instance #0 Ip, instance #0 (driver not attached) asy, instance #0 (driver not attached) asy, instance #1 (driver not attached) fdc, instance #0 fd, instance #0 (driver not attached) pit_beep, instance #0 Команда prtconf -D показывает, какие драйверы загружены в каталог /etc/system. solaris$ sudo prtconf -D System Configuration: Sun Microsystems i86pc Memory size: 580 Megabytes System Peripherals (Software Nodes): i86pc (driver name: rootnex) scsi_vhci, instance #0 (driver name: scsi_vhci) isa, instance #0 (driver name: isa) i8042, instance #0 (driver name: i8042) keyboard, instance #0 (driver name: kb8042) mouse, instance #0 (driver name: mouse8042) Ip, instance #0 (driver name: ecpp) asy, instance #0 (driver name: asy) asy, instance #1 (driver name: asy) fdc, instance #0 (driver name: fdc) fd, instance #0 (driver name: fd) pit_beep, instance #0 (driver name: pit_beep) Команда sysdef, помимо информации, выдаваемой командой prtconf, также пере- числяет драйверы псевдоустройств, настраиваемые параметры ядра и имена файлов за- гружаемых модулей. Если вы модифицируете стандартное ядро для важного компьюте- ра, включите в его документацию вывод команды sysdef. Команда modinfo сообщает информацию о динамически загружаемых модулях. Solaris (среди прочего) динамически загружает драйверы устройств, модули STREAMS и драйверы файловых систем. Не удивляйтесь, если результат выполнения команды modinfo будет содержать более 200 элементов. Больше информации о команде modinfo вы найдете в разделе 13.7.
480 Часть I. Основы администрирования 13.5. Конфигурирование ядра HP-UX КЯ Ядро HP-UX — самое монолитное среди наших примеров операционных си- стем, и для него предпочтительнее загружать большинство модулей статиче- ски. Его файл конфигурации отличается сложностью и беспорядочностью. К счастью, HP предоставляет удобное средство конфигурации kcweb, которое в случае доступности X Windows и браузера работает с графическим интерфей- сом; в противном случае используется режим командной строки. Для того чтобы установить режим командной строки, используйте команду kcweb -t. HP-UX считывает параметры конфигурации ядра (модули и настраиваемые значе- ния) из файла /stand/system. Этот файл управляется утилитой kcweb и другими ин- струментами, и администраторы не должны модифицировать его напрямую. Модули и параметры конфигурации могут быть статическими или динамическими. Для изменения статического значения или инсталляции статического модуля необходи- мо перестраивать ядро и перезагружать систему. Динамические модули загружаются и выгружаются по мере их использования, не требуя перезагрузки системы. Подобным образом динамически настраиваемые значения немедленно вступают в силу. Список наиболее полезных настраиваемых свойств ядра HP-UX приведен в табл. 13.5. Таблица 13.5. Настраиваемые значения конфигурации ядра HP-UX Переменная Тип умолчанию -vZ-. <•; maxfiles_lim Динамическая 4096 Жесткое ограничение на количество открытых файлов для процесса maxfiles Статическая 2048 Мягкое ограничение на количество открытых файлов для процесса maxuprc Динамическая 256 Максимальное количество пользовательских процессов nproc Динамическая 4200 Максимальное количество процессов nflocks Динамическая 4096 Максимальное количество блокировок файлов ninode Статическая 8192 Максимальное количество открытых индексных де- скрипторов (inodes) npty Статическая 60 Максимальное количество псевдотерминалов (РТУ) nstrtel Статическая 60 Максимальное количество устройств, находящихся в сеансе сетевого теледоступа (telnet) nkthread Динамическая 8416 Максимальное количество потоков ядра Если необходимо внести изменения в статические модули или статические настраи- ваемые значения, утилита kcweb автоматически выполняет команду mk_kernel для по- строения нового ядра. Новое ядро вступает в силу после следующей перезагрузки системы. 13.6. Управление ядром AIX • Ядро AIX никогда не требует перестройки. Новые устройства конфигуриру- ются динамически посредством черного IBM-ящика, известного как админи- стратор объектных данных (Object Data Manager — ODM). Это довольно за- гадочная структура. Многие параметры, которые обычно можно настраивать
Глава 13. Драйверы и ядро 481 в других ядрах (например установки совместно используемой памяти), совсем не поддаются настройке в системе AIX. Они самостоятельно управляются ядром. Другие реконфигурируемые параметры управляются последовательно- стью шести команд настройки. Администратор объектных данных Вместо хранения данных о конфигурации устройств в текстовых файлах или сцена- риях, AIX собирает их в ODM-базе данных атрибутов/значений. Еще один связующий слой соединяет эти списки свойств с конкретными устройствами (экземплярами драй- веров) и связывает эти драйверы с данными о конфигурации. Цель AIX состоит в поддержке сохраняемости данных, необходимых для конфигури- рования устройств. Вместо возможности конфигурировать устройства “на лету” (напри- мер, с помощью команд if config или ndd) и параллельной системы файлов конфигу- рации и сценариев для выполнения конфигурации во время загрузки, в AIX реализована попытка унифицировать эти функции, чтобы большинство изменений в устройствах происходило автоматически во время перезагрузки системы. Но если бы вы “приняли красную пилюлю” и заглянули на происходящее внутри системы, сложность механизма вас бы могла испугать. Эта система имеет больше то- чек входа, чем традиционная система UNIX, а взаимодействие между компонентами не всегда очевидно. Вот как выглядит структура различных слоев этой системы. • Администратор объектных данных (ODM) представляет собой хранилище конфи- гурации, подобное системному реестру в Microsoft Windows. В действительности оно еще сложнее, чем реестр Windows, поскольку реализует идею объектных схем и экземпляров, а не просто произвольные списки свойств. • Программы получают доступ к ODM через библиотечные подпрограммы, ншвытак- же можете работать с базой данных ODM с помощью команд odmadd, odmcreate, odmdrop, odmshow, odmget, odmchange и odxndelete2. • Семейство команд chdev, Isdev, Isattr, mkdev, rmdev, Is conn и 1 sparent пре- образует ODM-данные конфигурации в информацию для конкретных устройств. В действительности AIX-команда chdev подобна Solaris- и HP-UX-команде ndd (см. раздел 14.13), но по умолчанию chdev записывает ваши изменения как в ре- альный драйвер, так и в ODM-базу данных конфигурации. Даже обычные параме- тры (такие, как имя хоста системы и детали статической маршрутизации) хранятся как атрибуты устройств (под устройством в данном случае понимается экземпляр “интернет-драйвера”). • Несколько административных утилит обеспечивают внешние интерфейсы для се- мейства команды chdev. Например, команда mktcpip ведет себя подобно посто- янной команде ifconf ig, которая преобразует свои аргументы в последователь- ность вызовов команды chdev в сетевых интерфейсах, оказывая влияние как на 2 Дэн Фостер (Dan Foster), один из наших рецензентов, прокомментировал это так: “Управлять базой данных ODM напрямую с помощью odm-команд не рекомендуется, если вы точно не знаете, что именно делаете. Эти команды не выполняют никакого контроля ошибок в данных, которые вы модифицируете, тогда как обычные сЬ-/шк-/гт-средства проверяют достоверность данных до внесения изменений. Эти odxn-команды можно сравнить с заряженным автоматом Калашникова (АК-47) без предохранительного механизма: одно неосторожное прикосновение — и несколько ав- томатных очередей тут же будет выпущено в несчастную цель”.
482 Часть I. Основы администрирования активную, так и на сохраненную конфигурации. (А вы подумали, что ее синтаксис отражает синтаксис команды ifconfig? Вы подумали неправильно.) • ODM — это средство пользовательского уровня, поэтому драйверы не получают к нему непосредственный доступ. Как и в случае с традиционной конфигурацией на базе текстовых файлов, некоторые программы должны считывать ODM-koh- фигурации во время загрузки и записывать соответствующие значения в работаю- щие драйверы. К счастью, большинству администраторов не нужно погружаться в сложности ODM благодаря SMIT (System Manager Interface Tool — интерфейсные средства администрато- ра системы) и таким инструментам более высокого уровня, как mktcpip. Одной обязательной утилитой для управления AIX-устройствами является команда cfgmgr. Выполняйте ее без аргументов от имени суперпользователя после добавления в систему нового оборудования, и это новое оборудование чудесным образом будет распо- знано и станет доступным для использования (ну, как правило, так и происходит). Если же драйверы устройств еще не загружены в базу данных ODM, команда cfgmgr любезно предложит вам пакет для инсталляции из инсталляционных средств AIX. Подробнее о команде cfgmgr можно узнать из соответствующей шап-страницы. Настройка ядра В системе AIX имеется шесть категорий настраиваемых значений и предусмотре- но шесть соответствующих команд для их настройки. Большинство значений связано с оптимизацией рабочих характеристик. Назначение каждой из этих команд описано в табл. 13.6. Отталкиваясь от стандартного соглашения AIX, эти команды используют об- щий синаксис. Параметрами можно также управлять посредством интерфейса SMIT, а именно после “магического заклинания” smit tuning. Подробнее о каждой команде можно узнать из соответствующей шап-страницы. Таблица 13.6. Команды установки настраиваемых параметров ядра в системе AIX драйва, vmo Виртуальная память Минимальное количество свободных страниц ioo Ввод-вывод Асинхронное поведение при вводе-выводе. Конфигурирование JFS2 schedo Планирование про- цессов Временные интервалы, выделяемые процессам, и свойства процессов. Управление виртуальными процессами no Сеть 1Р-пересылка. Размеры буферов TCP- и UDP-сокетов. Значения времен существования пакетов nfso NFS Поддержка формата UTF-8. Поддержка делегирования. Максимальное количество соединений NFS raso Надежность Всего несколько параметров, ни один из которых не представляет ____________большую ценность для администраторов__________________ Эти команды просты в применении. Например, чтобы разрешить IP-форвардирова- ние, выполните следующую команду. aix$ sudo по -о ipforwarding=l
Глава 13. Драйверы и ядро 483 ioooor Для того чтобы получить список всех доступных для настройки параметров подсистемы ввода-вывода, введите такую команду. aix$ sudo ioo -а Для того чтобы гарантировать, что ваши изменения сохранятся после перезагрузки, добавьте к любой из перечисленных выше команд флаг -г. 13.7. Загружаемые модули ядра Загружаемые модули ядра в настоящее время являются общим фактором практиче- ски для всех версий UNIX. Каждый из наших примеров систем в той или иной форме реализует возможность динамической загрузки. Благодаря наличию загружаемых модулей, появляется возможность подключать и отключать драйверы устройств и другие компоненты ядра непосредственно в процессе работы системы. Это значительно облегчает инсталляцию драйверов, поскольку испол- няемый код ядра не нужно менять. Кроме того, уменьшается размер ядра, так как не- нужные драйверы просто не загружаются. Загружаемые драйверы очень удобны, но они не обеспечивают стопроцентную без- опасность. При каждой загрузке и выгрузке модуля существует риск нарушить работо- способность ядра. Поэтому во избежание нарушения работы системы не используйте непроверенные модули. Подобно другим аспектам управления устройствами и драйверами, реализация за- гружаемых модулей зависит от операционной системы. В следующих разделах описаны команды для систем Solaris и Linux, которые поддерживают больше устройств и предо- ставляют администраторам больше возможностей по конфигурированию, чем в других наших примерах систем. Загружаемые модули ядра в Linux Д Система Linux сложнее и одновременно проще системы Solaris в области обра- ботки загружаемых модулей ядра, по крайней мере с точки зрения системного администратора. В Linux почти все программные компоненты можно сделать загружаемыми модулями. Исключение составляет драйвер устройства, на котором расположена корневая файловая система, а также драйвер мыши PS/2. Загружаемые модули обычно хранятся в каталоге /lib/modules/версия, где послед- няя часть имени — это версия ядра Linux, сообщаемая командой uname -г. Получить список загруженных в данный момент модулей можно с помощью команды Ismod. redhat$ sudo /sbin/lsmod Module Size Used by ipmi_devintf 13064 2 ipmi_si 36648 1 ipmi_msghandler 31848 2 ipmi_devintf,ipmi_si iptable_filter 6721 0 ip_tables 21441 1 iptable_filter Как видно из списка, в системе установлены модули интеллектуального интерфейса управления платформой (Intelligent Platform Management Interface — IPMI) и брандмауэр ip tables.
484 Часть I. Основы администрирования Приведем пример загрузки вручную модуля ядра snarf, который был установлен в предыдущем разделе. redhat$ sudo insmod /путь/куда/snarf.ко Загружаемым модулям ядра можно также передавать конфигурационные параметры. redhat$ sudo insmod /путь/куда/snarf .ко io=0xXXX irq=X После того как модуль вручную добавлен к ядру, удалить его можно только по явному запросу или при перезагрузке системы. Для удаления нашего модуля подойдет команда xmmod snarf. Команду rmmod можно использовать в любой момент времени, но она будет рабо- тать, только если число действующих ссылок на модуль (это число указано в столбце Used by (Используется) результата выполнения команды Ismod) равно 0. Модули ядра Linux могут загружаться полуавтоматически с помощью команды modprobe, которая является оболочкой команды insmod и распознает межмодульные зависимости, параметры модулей, процедуры инсталляции и выгрузки. Эта команда просматривает файл /etc/modprobe.conf, чтобы узнать правила обработки каждого модуля. Можно динамически создать файл /etc/modprobe. conf, соответствующий текущей конфигурации ядра, выполнив команду modprobe -с. Эта команда генерирует длинный файл, который выглядит примерно так. #This file was generated by: modprobe -c path [pcmcia] =/lib/modules/pref erred path [pcmcia] =/lib/modules/default path [pcmcia] =/lib/modules/2.6.6 path[misc]=/lib/modules/2.6.6 # Aliases alias block-major-1 rd alias block-major-2 floppy alias char-major-4 serial alias char-major-5 serial alias char-major-6 Ip alias dos msdos alias plipO plip alias pppO ppp options ne io=x0340 irq=9 Инструкции path указывают на то, где находится конкретный модуль. Можно моди- фицировать или добавлять записи данного типа, если нужно хранить модули в нестан- дартных каталогах. Инструкция alias обеспечивает привязку старших номеров блочных устройств, старших номеров символьных устройств, файловых систем, сетевых устройств и сетевых протоколов к соответствующим модулям. Строки с ключевым словом options не генерируются динамически, но администра- тор должен добавить их вручную. Они задают параметры, передаваемые модулю при за-
Глава 13. Драйверы и ядро 485 грузке. Например, в следующей строке модулю устройства “snarf” сообщается его адрес ввода-вывода и вектор прерываний3. options snarf io=0xXXX irq=X Команда modprobe понимает также инструкции install и remove. С их помощью указываются команды, которые выполняются, когда соответствующий модуль подклю- чается к работающему ядру или отключается от него. Загружаемые модули ядра в Solaris В Solaris практически каждый элемент системы представляет собой загружае- SOLSriS мый модуль. Команда modinfo выводит список загруженных на данный мо- мент модулей. Результат выполнения этой команды выглядит так. solaris$ modinfo Id Loadaddr Size Info Rev Modu1eName 1 ff07e000 3ba0 1 1 specfs (filesystem for specfs) 2 ff086000 1340 - 1 swapgeneric (root/swap config) 3 ff082000 la56 1 1 TS (time sharing sched class) 4 ff084000 4 9c - 1 TS_DPTBL (Timesharing dispatch) 5 ff095000 15248 2 1 ufs (filesystem for ufs) 6 ff0b8000 20e0 1 1 rootnex (sun4c root nexus) 7 ff084a00 170 57 1 options (options driver) 8 ff08dc00 2f4 62 1 dma (Direct Memory Access) 9 ff08c000 968 59 1 sbus (SBus nexus driver) В нашей системе Solaris список содержал более 80 строк. Многие элементы, Kdtb- рые в других системах UNIX (например, локальной файловой системе UFS) включейы в ядро, в Solaris представляют собой загружаемые драйверы. Такая организация должна упрощать сторонним фирмам написание пакетов, которые можно легко и безшовно ин- тегрировать в ядро (по крайней мере, теоретически). Как описано выше в этой главе, вы можете добавить в конфигурацию ядра Linux лю- бой драйвер с помощью команды add_drv. Эта команда позволяет загрузить драйвер в ядро и создать соответствующие ссылки на устройства (все эти ссылки пересоздаются при каждой загрузке ядра). После выполнения команды add_drv добавленный драйвер остается частью системы до тех пор, пока вы не удалите его. Вы можете выгружать драй- веры вручную с помощью команды rem_drv. Добавив драйвер с помощью команды add_drv, имеет смысл также выполнить ко- манду drvconf ig. Эта команда переконфигурирует каталог /devices и добавит любые файлы, необходимые для только что загруженного драйвера. Загружаемые модули, которые не доступны посредством файлов устройств, можно загружать и выгружать с помощью команд modload и modunload соответственно. 3 Если система установлена на нестандартном персональном компьютере, то довольно сложно подобрать такую конфигурацию, в которой векторы прерываний и адреса ввода-вывода не пере- крываются. Для того чтобы узнать текущую конфигурацию системы, нужно просмотреть содержи- мое файлов /ргос/interrupts и /proc/ioports. Как правило, для современного оборудования ПК всех основных типов перекрытие векторов прерываний и адресов ввода-вывода не создает осо- бых проблем.
486 Часть I. Основы администрирования 13.8. Linux-менеджер устройств udev — полезно и ПРИЯТНО Файлы устройств в течение многих лет представляли для администраторов серьезную проблему. Когда системы поддерживали лишь несколько типов устройств, обслужива- ние файлов устройств вручную было вполне приемлемым. Но по мере увеличения ко- личества доступных устройств файловая система /dev загромождается, зачастую “обро- стая” файлами, не относящимися к текущей системе. Система Red Hat Enterprise Linux версии 3 включала более 18 000 файлов устройств, по одному для каждого возможного устройства, которое потенциально могло быть подключено к системе! Создание статиче- ских файлов устройств быстро становится крупной проблемой, создающей для систем- ного администратора тупиковую ситуацию. USB, FireWire, PCMCIA и другие интерфейсы с устройствами привносят дополни- тельные трудности. Например, если пользователь подключается к двум внешним жест- ким дискам, то для системы было бы удобно распознавать и автоматически монтировать каждый драйвер с постоянным именем устройства. В идеале драйвер, который в ис- ходном положении распознается под именем /dev/sda, должен оставаться доступным под тем же именем (/dev/sda), несмотря на периодические отключения и безотноси- тельно к активности других устройств и шин (каналов). Наличие таких динамических устройств, как камеры, принтеры, сканеры и другие типы съемных носителей данных, наводит дополнительную “тень на плетень” и более усложняет проблему постоянной идентичности. Элегантное решение этих проблем пришло в виде менеджера устройств udev, пред- ставляющего собой реализованную в пространстве пользователя (а не внутри ядра) си- стему управления устройствами, которая информирует приложения конечного пользо- вателя об устройствах при их подключении или отключении. Менеджер устройств udev опирается на описанную ниже систему sysf s, которая позволяет узнать, что происходит с системными устройствами. Он использует ряд специальных правил для понимания со- ответствующих соглашений о назначении имен. Менеджер udev автоматически поддер- живает файлы устройств в каталоге /dev ( причем при минимальном их разрушении). Только те устройства, которые доступны в системе в данный момент, имеют файлы в каталоге /dev. Администраторам Linux следует понимать, как работает системное правило менедже- ра udev, и знать, как использовать команду udevadm. Но прежде чем углубляться в эти детали, рассмотрим сначала базовую технологию sysf s. Файловая система sysfs: доступ к "сердцу" устройств в Linux Виртуальная файловая система sysfs (была добавлена в ядро Linux в версии 2.6) предоставляет хорошо организованную и подробную информацию обо всех доступных устройствах, их конфигурациях и состоянии. Доступ к драйверу возможен как из ядра, так и со стороны команд пользовательского уровня. Для выяснения всей информации об устройстве (используемом им прерывании IRQ, количестве блоков, поставленных в очередь на запись контроллером диска, и т.п.) мож- но исследовать каталог /sys, в котором обычно монтируется система sysfs. Один из основополагающих принципов формирования этой файловой системы состоит в том,
Глава 13. Драйверы и ядро 487 что каждый файл в каталоге /sys должен представлять только один атрибут связанно- го с ним устройства. Это соглашение обеспечивает определенное структурирование в остальном хаотичного набора данных. В табл. 13.7 перечислены каталоги, включенные в корневой каталог /sys, каждый из которых является подсистемой, регистрируемой с помощью sysf s. Состав этих катало- гов зависит от дистрибутива. Таблица 13.7. Подкаталоги каталога /sys Каталог Описание ’ : С /., ~ block bus class Информация о блочных устройствах (например, о жестких дисках) Шины, известные ядру: PCI-E, SCSI, USB и др. Дерево, организованное функциональными типами устройств, например звуковые и графи- ческие карты, устройства ввода и сетевые интерфейсы dev devices firmware Информация об устройствах, разделенная между символьными и блочными устройствами Корректное представление (с точки зрения наследственности) всех обнаруженных устройств Интерфейсы с такими зависимыми от платформы подсистемами, как ACPI fs kernel module Каталог для хранения некоторых (но не всех) файловых систем, известных ядру Значение таких внутренних характеристик ядра, как кеш и виртуальная память Динамические модули, загруженные ядром power Некоторые сведения о состоянии производительности системы (обычно не используется) Первоначально информация о конфигурации устройств, если таковая существовала, хранилась в файловой системе /ргос. Хотя информация о процессах и ядре, связанная со временем выполнения, и в дальнейшем будет храниться в каталоге /ргос, предпо- лагается, что со временем вся информация об устройствах будет перемещена в каталог /sys. Исследование устройств с помощью команды udevadm Команда udevadm запрашивает информацию об устройствах, инициализиру- ет события, управляет демоном udevd и отслеживает события менеджера udev и ядра. Системные администраторы используют ее, в основном, для создания и тестирования правил, которые описываются в следующем разделе. Команда udevadm в качестве своего первого аргумента ожидает одну из шести ко- манд: info, trigger, settle, control, monitor или test. Особый интерес для систем- ных администраторов представляют две команды: info, которая выводит информацию, зависящую от конкретного устройства, и control, которая запускает и останавливает работу менеджера устройств udev или заставляет его перезагрузить свои файлы правил. Команда monitor отображает события по мере того, как они происходят в системе. Следующая команда отображает все udev-атрибуты для устройства sdb. Здесь резуль- тат выполнения команды представлен в усеченном виде, но в действительности он со- держит список всех родительских устройств (например, шины USB), которые в дереве Устройств являются предками устройства sdb. linux$ udevadm info -a -n sdb looking at device ’/devices/pciOOOO:00/0000:00:11.0/0000:02:03.O/usbl/l-l/ 1-1:1.0/host6/target6:0:0/6:0:0:0/block/sdb': KERNEL=="sdb"
488 Часть I. Основы администрирования SUBSYSTEM=="block" DR1VER=="" ATTR{range}=="16" ATTR{ext_range}=="2 5 6" ATTR{removable}=="!" ATTR{ro}=="0" ATTR{size}=="1974271" ATTR{capab i1i tу}=="5 3" ATTR{stat}==" 71 12 0 592 986 1561 860 872" 0 1 1 Все пути в результате выполнения команды udevadm (например, /devices /pciOOOO: 00/...) даны относительно каталога /sys. Этот результат отформатирован так, чтобы вы могли при построении правил обра- щаться к менеджеру udev. Например, если бы запись ATTR{size}=="1974271" была уникальной для этого устройства, вы могли бы скопировать этот фрагмент в правило в качестве идентифицирующего критерия. Узнать дополнительные возможности и синтаксис команды udevadm вы сможете, об- ратившись к ее man-странице. Создание правил и постоянных имен Менеджер устройств udev опирается на набор правил, определяющих возможности управления устройствами и присваивания им имен. Стандартные правила хранятся в каталоге /lib/udev/rules .d, а локальные — в каталоге /etc/udev/rules .d. Вам не нужно редактировать или удалять стандартные правила — их можно игнорировать или переопределить путем создания нового файла стандартных правил с прежним именем в пользовательском каталоге правил. Главным файлом конфигурации для менеджера udev является файл /etc/udev /udev. conf. Файлы udev. conf в наших примерах дистрибутивов содержат только ком- ментарии, за исключением одной строки, которая позволяет выполнять регистрацию ошибок. Жаль, но из-за политических разногласий между дистрибьюторами и разработчика- ми совместная деятельность дистрибьюторов на ниве создания правил оставляет желать лучшего. Многие имена файлов в каталоге стандартных правил не меняются при пере- ходе от дистрибутива к дистрибутиву, в то время как содержимое этих файлов претерпе- вает существенные изменения. Файлы правил именуются в соответствии с шаблоном пп-описание, rules, где пп — обычно двузначное число. Файлы обрабатываются в лексическом порядке, поэто- му меньшие числа обрабатываются первыми. Файлы из двух каталогов правил объеди- няются до того, как демон менеджера udev, udevd, проанализирует их. Суффикс . rules обязателен — без него файлы игнорируются. Правила задаются в таком формате. условие, [условие, ...] назначение [,назначение ...] Здесь элемент условие определяет ситуации, в которых должно применяться данное правило. Каждое выражение условия состоит из ключа, знака операции и значения. Например, в качестве потенциального компонента правила может использоваться усло- вие ATTR{size}="1974271" (см. пример выше), отбирающее все устройства, атрибут size которых в точности равен значению 1 974 271.
Глава 13. Драйверы и ядро 489 Большинство ключей, участвующих в задании условия, связаны со свойствами устройств (которые демон udevd получает из файловой системы /sys), но есть и такие ключи, которые относятся к другим контекстно-зависимым атрибутам, таким как обра- батываемая операция (например, добавление устройства или его удаление из системы). Все элементы условие должны сопоставляться в порядке активизации правила. Ключи, воспринимаемые менеджером устройств udev, представлены в табл. 13.8. Таблица 13.8. Ключи, воспринимаемые менеджером устройств udev ACTION Сопоставляется с типом события, например добавление или удаление DEVPATH Сопоставляется с конкретным путем устройства KERNEL8 Сопоставляется с именем ядра для устройства SUBSYSTEM8 Сопоставляется с конкретной подсистемой DRIVER3 Сопоставляется с драйвером, используемым устройством ATTR{имя файла}3 Сопоставляется с sysf s-значениями устройства; имя файла — это листок в де- реве sysf s, который соответствует конкретному атрибуту ENV{ключ} Сопоставляется со значением переменной среды TEST{omask} Проверяет факт существования файла; элемент omask необязателен PROGRAM Выполняет внешнюю команду; условие считается выполненным, если код завер- шения команды равен 0 RESULT Сопоставляется с результатом последнего вызова посредством ключа PROGRAM а Возможна также смешанная версия. Выполняется поиск пути устройства, который совпадает с заданным значением. В правилах сопоставления элементы назначение задают действия, которые должен предпринять демон udevd, чтобы обработать событие. Формат этих элементов подобен формату элементов условие. Самым важным ключом элемента назначение является ключ NAME, который означает, каким именем менеджер udev должен назвать устройство. Необязательный ключ SYMLINK создает символическую ссылку на устройство через путь, заданный в каталоге /dev. Рассмотрим совместную работу этих компонентов на примере флеш-памяти USB. Предположим, что мы хотим сделать имя этого устройства постоянным и обеспечить автоматическое его монтирование и размонтирование. Вставим нашу флеш-память и посмотрим, как ядро может идентифицировать ее. Возможны два пути. Выполнив команду Isusb, мы можем исследовать шину USB на- прямую. ubuntu$ Isusb Bus 001 Device 007: ID 1307:0163 Transcend, Inc. USB Flash Drive Bus 001 Device 001: ID ld6b:0002 Linux Foundation 2.0 root hub Bus 002 Device 001: ID ld6b:0001 Linux Foundation 1.1 root hub В качестве альтернативного варианта можем проверить записи в журнале, представ- ленные в файле /var/log/messages. В нашем случае устройство оставляет простран- ную контрольную запись. Aug 9 19:50:03 ubuntu kernel: [42689.253554] scsi 8:0:0:0: Direct-Access Utl63 USB2FlashStorage 0.00 PQ: 0 ANSI: 2 Aug 9 19:50:03 ubuntu kernel: [42689.292226] sd 8:0:0:0: [sdb] 1974271 512- byte hardware sectors: (1.01 GB/963 MiB)
490 Часть I. Основы администрирования Aug 9 19:50:03 ubuntu kernel: [42689.304749] sd 8:0:0:0: [sdb] 1974271 512- byte hardware sectors: (1.01 GB/963 MiB) Aug 9 19:50:03 ubuntu kernel: [42689.307182] sdb: sdbl Aug 9 19:50:03 ubuntu kernel: [42689.427785] sd 8:0:0:0: [sdb] Attached SCSI removable disk Aug 9 19:50:03 ubuntu kernel: [42689.428405] sd 8:0:0:0: Attached scsi generic sg3 type 0 Представленные выше зарегистрированные сообщения означают, что устройство было распознано как sdb, и это позволяет нам просто идентифицировать устройство в файловой системе /sys. Теперь мы можем просмотреть файловую систему /sys с помо- щью команды udevadm и поискать фрагменты правил, которые служат характеристикой устройства и могут использоваться в правилах менеджера udev. ubuntu $ udevadm info -a -p /block/sdb/sdbl looking at device '/devices/pciOOOO:00/0000:00:11.0/0000:02:03.0/usbl/l-l/ 1-1:1.0/host30/target30:0:0/30:0:0:0/block/sdb/sdbl': KERNEL=="sdbl" SUBSYSTEM=="block" DRIVER=="" ATTR(partition}=="1" ATTR{start}=="63" ATTR{size}=="1974208" ATTR{ stat }==" 71 792 1857 808 0 0 0 0 0 512 808" looking at parent device ’/devices/pciOOOO:00/0000:00:11.0/0000:02:03.0/ usbl/1-1/1-1:1.0/host30/target30: 0:0/30:0:0:0/block/sdb': KERNELS=="sdb" SUBSYSTEMS=="block" DRIVERS=="" ATTRS{scsi_level}=="3" ATTRS(vendor}=="Utl63 " ATTRS(model}=="USB2FlashStorage" Результат выполнения команды udevadm отображает возможности совпадений с за- данными значениями. Одна из них — поле size, которое, вероятно, является уникаль- ным для данного устройства. Но если бы размер раздела изменился, устройство не было бы распознано. Мы можем также использовать сочетание двух значений: соглашение ядра о назначении имен в виде sd с дополнительной буквой и содержимое атрибута мо- дели USB2Flashstorage. При создании правил для данного конкретного устройства флеш-памяти еще одним вариантом мог бы послужить регистрационный (серийный) номер устройства (здесь он не отображен). Поместим наши правила для этого устройства в файл /etc/udev/rules. d/10-local. rules. Поскольку мы собираемся “убить сразу несколько зайцев”, нужно создать ряд правил. Прежде всего, мы должны позаботиться о создании символических ссылок на устрой- ство в каталоге /dev. Следующее правило для идентификации устройства использует наши знания о ключах условий ATTRS и KERNEL, почерпнутых из команды udevadm. ATTRS{model}=="USB2FlashStorage", KERNEL=="sd[a-z]1", SYMLINK+="ate- flash%n"
Глава 13. Драйверы и ядро 491 Когда наше правило срабатывает, демон udevd устанавливает значение /dev/ate- f lashN в качестве символической ссылки на устройство. В действительности мы не ожидаем в системе появления более одного такого устройства. Если обнаружится не- сколько копий устройства, они получат уникальные имена в каталоге /dev, но точные имена зависят от порядка вставки устройств в систему. Затем мы используем ключ ACTION для выполнения ряда команд всякий раз, ког- да устройство будет появляться на шине USB. Ключ элемента назначение RUN позво- ляет создавать соответствующий каталог точки монтирования и монтировать там наше устройство. ACTION=="add", ATTRS{model}=="USB2FlashStorage", KERNEL=="sd[a-z]1", RUN+="/bin/mkdir -p /mnt/ate-flash%n” ACTION=="add", ATTRS{model}=="USB2FlashStorage", KERNEL=="sd[a-z]1", PROGRAM=="/lib/udev/vol_id -t %N", RESULT=="vfat", RUN+="/bin/mount -t vfat /dev/%k /mnt/ate-flash%n" Ключи PROGRAM и RUN выглядят похожими, но напомним, что PROGRAM — это ключ условия, который активен во время фазы выбора правила, тогда как RUN — это ключ назначения, который является частью действий, инициированных правилом. Второе правило с помощью опции -t vfat в команде mount еще до операции монтирования проверяет, что флеш-память содержит файловую систему Windows. Аналогичные правила после удаления устройства из системы позволяют выполнить очистительно-восстановительные операции. ACTION=="remove", ATTRS{model}=="USB2FlashStorage", KERNEL=="sd[a-z]1", RUN+="/bin/umount -1 /mnt/ate-flash%n" ACTI0N=="remove", ATTRS{model}=="USB2FlashStorage", KERNEL=="sd[a-z]1", RUN+="/bin/rmdir /mnt/ate-flash%n" Теперь, когда правила подготовлены, мы должны уведомить демон udevd о наших изменениях. Команда control, используемая в качестве аргумента команды udevadm, — одна из немногих, которые требуют полномочий суперпользователя. ubuntu$ sudo udevadm control —reload-rules Опечатки молча игнорируются после перезагрузки, даже с использованием флага —debug, поэтому не забудьте дважды проверить синтаксис своих правил. Вот и все! Теперь, когда флеш-память вставляется в разъем USB-порта, демон udevd создает символическую ссылку /dev/ate-f lashl и монтирует устройство /mnt/ate- flashl. ubuntu$ Is -1 /dev/ate* Irwxrwxrwx 1 root root 4 2009-08-09 21:22 /dev/ate-flashl -> sdbl ubuntu $ mount | grep at /dev/sdbl on /mnt/ate-flashl type vfat (rw) 13.9. Рекомендуемая литература • Bovet, Daniel P. and Marco Cesati. Understanding the Linux Kernel (3rd Edition). Seba- stopol, CA: O’Reilly Media, 2006. • Corbet, Jonathan, et al. Linux Device Drivers (3rd Edition). Sebastopol, CA: O’Reilly Media, 2005. Эта книга доступна также по адресу: lwn.net/Kernel/LDD3.
492 Часть I. Основы администрирования • Love, Robert. Linux Kernel Development (2nd Edition). Indianapolis, IN: Novell Press, 2005. (Роберт Лав. Разработка ядра Linux, 2-е издание. ИД “Вильямс”, 2006 г.) • McDougall, Richard and Jim Mauro. Solaris Internals: Solaris 10 and Open-Solaris Kernel Architecture (2nd Edition). Upper Saddle River, NJ: Prentice Hall PTR, 2006. 13.10. Упражнения 13.1. Опишите, что делает ядро. Объясните разницу между загрузкой драйвера в каче- стве модуля и его статической компиляцией в ядро. 13.2. Процесс в системе HP-UX завершился аварийным отказом и выдал странное со- общение об ошибке: “слишком много открытых файлов: права доступа к файлам отрицают доступ сервера”. Что могло стать причиной такой ошибки? Какие изме- нения необходимо внести, чтобы решить проблему? 13.3. ★ Предлагают ли системы AIX загружаемые модули ядра? Как разработчик дол- жен добавить в ядро AIX поддержку новой файловой системы или новых систем- ных вызовов? Когда могут потребоваться такие функции? 13.4. ★ Вы недорого купили Ethemet-плату для портативного компьютера, которая по- зволяет подключаться к сети через параллельный порт. Какие действия необхо- димо предпринять, чтобы операционная система Linux распознала новую плату? Нужно ли встроить поддержку платы непосредственно в ядро или ее следует реа- лизовать в виде модуля? Почему? (Вопрос на засыпку: если ваша почасовая ставка составляет $80, во сколько обойдется установка этой “дешевой” платы?) 13.5. ★★ Настройте ядро с помощью команды make xconfig или make menuconfig и создайте исполняемый образ ядра. Инсталлируйте ядро и перезагрузите систему. Включите выполнение команды dmesg на этапе инициализации системы и срав- ните результаты, выдаваемые старым и новым ядрами. (Необходим доступ с пра- вами суперпользователя.)
ЧАСТЬ II Работа в сети
Глава 14 Сети TCP/IP Трудно переоценить важность сетей в современном компьютерном мире, хотя мно- гие все же пытаются это сделать. Во многих организациях — возможно, даже в большин- стве из них — компьютеры используются, в первую очередь, для работы в веб и доступа к электронной почте. По оценкам сайта internetworldstat. com, к средине 2010 года в Интернете работало более 1,5 млрд пользователей, что составляет более 21% населения Земли. В Северной Америке внедрение Интернета уже достигло 75%. TCP/IP — это сетевая система (networking system), лежащая в основе Интернета. Сис- тема TCP/IP не зависит ни от аппаратного обеспечения, ни от операционной системы, поэтому все устройства, использующие протоколы TCP/IP, могут обмениваться данны- ми (“взаимодействовать”), несмотря на различия. Система TCP/IP работает в сетях любого размера и любой топологии, независимо от того, соединены они с внешним миром или нет. В этой главе протоколы TCP/IP рассма- триваются в политическом и техническом аспектах, связанных с Интернетом, но изоли- рованные сети на уровне протоколов TCP/IP очень похожи друг на друга. 14.1. Система TCP/IP и Интернет История системы TCP/IP тесно связана с историей Интернета и уходит корнями на несколько десятилетий назад. Популярность Интернета во многом обусловлена элегант- ностью и гибкостью системы TCP/IP, а также тем, что это открытое и некоммерческое семейство протоколов. В свою очередь, широкое распространение системы TCP/IP именно в Интернете позволило этому семейству одержать верх над несколькими конку- рирующими семействами, популярными в свое время по политическим или коммерче- ским причинам.
496 Часть II. Работа в сети Прародительницей Интернета была сеть ARPANET, организованная в 1969 году Министерством обороны США. К концу 1980-х годов эта сеть перестала быть научно- исследовательской и наступила эра коммерческого Интернета. В настоящее время Ин- тернет представляет собой совокупность частных сетей, принадлежащих провайдерам интернет-услуг (ISP — internet service provider) и соединяющихся в так называемых “точ- ках обмена трафиком” (peering center). Кто сегодня управляет Интернетом Проектирование Интернета и его протоколов всегда осуществлялось на коопера- тивных и открытых началах, но его точная структура изменялась по мере того, как Ин- тернет превращался в инструмент открытого пользования и движущую силу мировой экономики. В настоящее время управление Интернетом разделено на административ- ное, техническое и политическое, но границы между этими функциями часто размыты. Основными действующими лицами в управлении Интернетом являются следующие ор- ганизации. • ICANN (Internet Corporation for Assigned Names and Numbers — Корпорация по на- значению имен и адресов в Интернете). Эта группа с наибольшим правом может быть названа ответственной за Интернет. Только она обладает всеми реальными полномочиями. Корпорация ICANN контролирует выделение адресов и доменных имен в Интернете, а также другие аспекты его деятельности, например номера про- токольных портов. Эта организация, основанная как некоммерческая корпорация, расположена в Калифорнии и действует в рамках меморандума по взаимопонима- нии с Министерством торговли США (www. icann. org). • ISOC (Internet Society — Сообщество пользователей Интернета) — открытая член- ская организация, представляющая интересы пользователей Интернета. Несмотря на то что эта организация преследует образовательные и политические цели, она широко известна как прикрытие для технического развития Интернет. В частно- сти, организация ISOC является головной организацией по отношению к проблем- ной группе проектирования Интернета (ietf. org), контролирующей всю техни- ческую работу. ISOC является международной некоммерческой организацией. Ее офисы расположены в Вашингтоне, округ Колумбия, и Женеве (www. isoc. org). • IETF (Internet Engineering Task Force — Проблемная группа проектирования Ин- тернета) — эта организация отвечает за разработку и публикацию технических стандартов Интернета, являясь открытым форумом, принять участие в котором может любой желающий (www. ietf. org). • IGF (Internet Governance Forum) — это организация, созданная Организацией Объединенных Наций относительно недавно, в 2005 году, чтобы предоставить воз- можность для проведения международных и политических дискуссий, посвящен- ных Интернету. Она проводит ежегодные конференции, но ее роль со временем постепенно возрастает, поскольку правительства разных стран пытаются устано- вить более жесткий контроль за Интернетом (intgovforum.org). Среди перечисленных организаций наибольшая ответственность лежит на ICANN: она выступает в качестве руководящего органа Интернета, исправляя ошибки, допущен- ные в прошлом, и продумывая пути дальнейшего развития Интернета с учетом потреб- ностей пользователей, правительств и бизнеса.
Глава 14. Сети TCP/IP 497 Сетевые стандарты и документация Если вы не уснули сразу после того, как прочитали название этого раздела, значит, выпили несколько чашек кофе. Тем не менее, умение разбираться в технической доку- ментации, выпускаемой руководящими органами Интернета, чрезвычайно важно для сетевых администраторов, и при этом это не так уж и скучно, как кажется на первый взгляд. Техническая деятельность сообщества пользователей Интернета находит отражение в серии документов, известных как RFC (Request For Comments — запрос коммента- риев). В формате документов RFC публикуются стандарты протоколов, предлагаемые нововведения, а также информационные бюллетени. Получая сначала статус черновых проектов (Internet Draft), после бурных дебатов в телеконференциях и на форумах IETF они либо отвергаются, либо получают официальный статус. Свое мнение по поводу предлагаемого стандарта может высказать любой участник обсуждения. Иногда доку- мент RFC представляет собой не стандартизацию протоколов Интернета, а всего лишь констатацию или объяснение некоторых аспектов современной практики. Документы RFC имеют порядковые номера. На сегодняшний день их более 5600. У каждого документа есть описательное название (например, Algorithms for Synchronizing Network Clocks — алгоритмы сетевой синхронизации часов), но, во избежание неодно- значности, на документы чаще всего ссылаются по номерам. Будучи опубликованным, документ RFC никогда не меняется. Изменения и дополнения публикуются в виде но- вых документов с собственными номерами. Обновление может либо дополнять и разъяс- нять документ RFC, либо полностью его заменять. Существует множество источников, распространяющих документы RFC, но сайт tfc-editor. org является центральным диспетчерским пунктом и всегда содержит са- мую свежую информацию. Прежде чем тратить время на чтение документа RFC, вы- ясните его статус на сайте tf c-editor. org; возможно, этот документ уже не содержит наиболее актуальную информацию. Процесс публикации стандартов Интернета подробно описан в документе RFC2026. Другой полезный метадокумент — RFC5540, 40 Years of RFCs (40 лет существования до- кументов RFC). В нем описаны культурные и технические аспекты публикации доку- ментов RFC. Пусть читателей не пугает обилие технических подробностей в документах RFC. В большинстве из них содержатся вводные описания, резюме и толкования, которые будут полезны системным администраторам. Некоторые документы специально напи- саны в виде обзора или общего введения. Чтение документов RFC — это, возможно, не самый простой способ разобраться в той или иной теме, но это авторитетный, лаконич- ный и бесплатный источник информации. Не все документы RFC написаны сухим техническим языком. Встречаются докумен- ты развлекательного содержания (часть из них опубликована первого апреля), среди ко- торых нам особенно нравятся следующие: • RFC 1149 — A Standard for the Transmission of IP Datagrams on Avian Carriers (стандарт передачи датаграмм с помощью птиц)1; • RFC 1925 — The Twelve Networking Truths (12 сетевых истин); 1 Группа энтузиастов системы Linux из города Берген в Норвегии, называющая себя BLUG (Bergen Linux User Group), действительно реализовала протокол CPIP (Carrier Pigeon Internet Pro- tocol — межсетевой протокол голубиной почты) в соответствии с документом RFC1149. Детали см. на их веб-сайте по адресу: blug.linux.no/rfcll49.
498 Часть II. Работа в сети • RFC3251 — Electricity over IP (передача электричества по протоколу IP); • RFC3514 — The Security Flag in the IPv4 Header (защитный флажок в заголовке про- токола IPv4). • RFC4041 — Requirements for Morality Section in Routing Area Drafts (моральный кодекс маршрутизатора). Помимо собственных порядковых номеров, документам RFC могут назначаться но- мера серий FYI (For Your Information — к вашему сведению), ВСР (Best Current Practi- ce — лучший существующий подход) и STD (Standard — стандарт). Перечисленные се- рии являются подмножествами серии RFC, группирующими документы по важности или назначению. Документы FYI — это вводные или информационные материалы, предназначенные для широкой аудитории. Как правило, именно с них лучше всего начинать изучать не- знакомую тему. К сожалению, эта серия в последнее время стала иссякать и сейчас со- временных документов FYI очень немного. Документы ВСР описывают рекомендуемые процедуры для администраторов веб- сайтов в Интернете. Они содержат административные предписания и представляют большую ценность для системных администраторов. Документы STD содержат описания протоколов Интернета, прошедших процедуру проверки и тестирования в IETF и формально принятых в качестве стандартов. Нумерация документов в рамках серий RFC, FYI, STD и ВСР ведется раздельно, по- этому один документ может иметь несколько номеров. Например, документ RFC1713, Tools for DNS Debugging (инструменты для отладки системы DNS) известен также под номером FYI127. 14.2. Дорожная карта сети Завершив краткий обзор, давайте подробнее рассмотрим, что собой представляют протоколы TCP/IP. TCP/IP — это семейство сетевых протоколов, ориентированных на совместную работу. В состав семейства входит несколько компонентов: • IP (Internet Protocol — межсетевой протокол) обеспечивает передачу пакетов дан- ных с одного компьютера на другой (RFC791); • ICMP (Internet Control Message Protocol — протокол управляющих сообщений в Интернете) отвечает за различные виды низкоуровневой поддержки протокола IP, включая сообщения об ошибках, вспомогательные маршрутизирующие запро- сы и отладочные сообщения (RFC792); • ARP (Address Resolution Protocol — протокол преобразования адресов) обеспечи- вает трансляцию IP-адресов в аппаратные адреса (RFC826)2; • UDP (User Datagram Protocol — протокол передачи датаграмм пользователя) обе- спечивает непроверяемую одностороннюю доставку данных (RFC768); • TCP (Transmission Control Protocol — протокол управления передачей) обеспечи- вает надежный дуплексный канал связи между процессами на двух компьютерах с возможностью управления потоками и контроля ошибок (RFC793). 2 Мы немного грешим против истины, утверждая, что протокол ARP входит в семейство TCP/IP. На самом деле он вполне может использоваться вместе с другими семействами протоколов. Просто этот протокол является неотъемлемой частью стека TCP/IP в большинстве локальных сетей.
Плава 14. Сети TCP/IP 499 Эти протоколы образуют иерархию, или стек, в котором протокол верхнего уровня использует протокол нижележащего уровня. Систему TCP/IP обычно описывают в виде пятиуровневой структуры (рис. 14.1), но реальная система TCP/IP содержит только три из этих уровней. Уровень приложений Транспортный уровень Сетевой уровень > Канальный уровень Физический уровень arp I SSH, FTP, HTTP I TCP I IP ' ARP, драйверыустройств Медный провод, оптоволокно, радиоволны .......... DNS.Hatos "гэг:::1 UDP traceroute Рис. 14.1. Семейство TCP/IP Версии IPv4 и IPv6 В течение последних трех десятилетий широкое распространение получила четвертая версия протокола TCP/IP, известная также под именем IPv4. Она использует четырех- байтовые IP-адреса. Современная версия, IPv6, расширила адресное пространство до 16 байт, а также учла опыт использования версии IPv4. В нее не были включены воз- можности протокола IPv4, которые оказались не очень нужными. Это позволило уско- рить работу протокола и облегчило его реализацию. Кроме того, версия IPv6 объединила системы безопасности и аутентификации в рамках одного базового протокола. Все современные операционные системы и многие сетевые устройства уже поддер- живают протокол IPv6. Однако в реальности степень активного использования прото- кола IPv6 остается практически нулевой.3 Опыт показывает, что администраторам луч- ше было бы отложить использование протокола IPv6 на как можно более долгий срок. В конце концов все будут вынуждены перейти на протокол IPv6, но на это потребуется еще несколько лет. В то же время этот переход не настолько далек, чтобы не учитывать его при покупке новых сетевых устройств. Приобретая новое оборудование, настаивайте на том, чтобы оно поддерживало протокол IPv6. Разработка протокола IPv6 была в большой степени мотивирована беспокойством о том, что адресное пространство протокола IPv4 практически исчерпано. Это действи- тельно так: прогнозы показывают, что современная система выделения адресов в про- токоле IPv4 примерно в 2011 году испытает коллапс. (См. сайт ipv4.potaroo.net, который обновляется ежедневно.) И все же адаптация протокола IPv6 в Интернете в ближайшее время не предвидится. Более вероятно, что организации ISP и ICANN (точнее, их филиал IANA (Internet Assigned Numbers Authority — Администрация адресного пространства Интернета)) предпримут временные меры по усилению господства протокола Iv4 в течение несколь- 3 Компания Google на конференции RIPE 57г которая проходила в октябре 2008 года, отмети- ла, что степень внедрения версии IPv6 (не возможности ее поддержки, а реального использования) равна 0,24%. Нет ни одной страны, в которой степень внедрения версии IPv6 превысила бы 0,76%.
500 Часть II. Работа в сети ких следующих лет. Мы ожидаем увеличения степени использования протокола IPv6 в Интернете, но, за исключением крупных провайдеров интернет-услуг, академических сайтов и универсальных провайдеров вроде компании Google, протокол IPv6 в ближай- шем будущем не повлияет на работу большинства системных администраторов. Дефицит адресов в рамках протокола IPv4 особенно остро ощущается за пределами США, поэтому там протокол IPv6 ожидает более теплый прием. В США резкому росту внедрения протокола IPv6 может способствовать потрясающее приложение: новое поко- ление мобильных телефонов, отображающих адрес IPv6 в телефонный номер. (Системы голосовой связи через Интернет также получат выгоду от более тесного соответствия телефонных номеров и адресов IPv6.) В книге мы сосредоточились на протоколе IPv4, поскольку именно он является основной версией протокола TCP/IP. Все, что касается версии IPv6, мы выделяем явным образом. К счастью для системных администраторов, версии IPv4 и IPv6 очень похожи. Если вы знаете протокол IPv4, то вы знаете большую часть того, что вам следует знать о протоколе IPv6. Основное различие между этими версиями заключается в том, что они используют разные схемы адресации. В версии IPv6 использовано несколько новых кон- цепций адресации и несколько новых обозначений. Вот и все. Пакеты и их инкапсуляция Система TCP/IP располагает средствами поддержки целого ряда физических сетей и транспортных систем, включая технологии Ethernet, Token Ring, MPLS (Multiprotocol Label Switching), беспроводную технологию Ethernet, а также системы с последователь- ными соединениями. Управление аппаратными устройствами осуществляется на каналь^ ном уровне архитектуры TCP/IP, а протоколам более высоких уровней неизвестно, кам" именно используются аппаратные средства. Данные передаются по сети в виде пакетов, которые имеют максимальный размер, определяемый ограничениями канального уровня. Каждый пакет состоит из заголовка и полезного содержимого. Заголовок содержит сведения о том, откуда прибыл пакет и куда он направляется. В него могут также включаться контрольные суммы, информа- ция, характерная для конкретного протокола, и другие инструкции, касающиеся обра- ботки пакета. Полезное содержимое — это данные, подлежащие пересылке. Название базового блока передачи данных зависит от уровня протокола. На каналь- ном уровне это кадр, или фрейм, в протоколе IP — пакет, а в протоколе TCP — сегмент. Мы будем придерживаться универсального термина “пакет”. Готовящийся к отправке пакет передается вниз по стеку протоколов, и каждый про- токол добавляет в него собственный заголовок. Сформированный пакет одного прото- кола становится полезным содержимым пакета, генерируемого следующим протоколом. Эта операция называется инкапсуляцией. На принимающей стороне инкапсулированные пакеты восстанавливаются в обратном порядке при прохождении вверх по стеку. Например, датаграмма (пакет UDP), передаваемая по сети Ethernet, упакована в трех различных “конвертах”. В среде Ethernet она “вкладывается” в простой физический фрейм, заголовок которого содержит сведения об аппаратных адресах отправителя и ближайшего получателя, длине фрейма и его контрольной сумме (CRC). Полезным содержимым Ethemet-фрейма является IP-пакет. Полезное содержимое IP-пакета — это UDP-пакет, и, наконец, полезное содержимое UDP-пакета состоит из собственно дан- ных, подлежащих передаче. Компоненты такого пакета изображены на рис. 14.2.
Глава 14. Сети TCP/IP 501 Заголовок Ethernet Заголовок IPv4 Заголовок UDP 8 байт Данные приложения Ethernet CRC 14 байт 20 байт 100 байт 4 байт UDP пакет (108 байт) IPv4 пакет (128 байт) Ethernet фрейм (146 байт) Рис. 14.2. Стандартный сетевой пакет4 Стандарты формирования фреймов Ethernet На канальном уровне добавляются заголовки к пакетам и вставляются разделители между ними. Заголовки содержат информацию об адресах канального уровня и кон- трольные суммы, а разделители позволяют принимающей стороне понять, где закан- чивается один пакет и начинается другой. Процесс добавления вспомогательных битов называется формированием фреймов или кадровой разбивкой. На самом деле канальный уровень разделен на две части: МАС (подуровень Media Access Control) и LLC (подуровень Link Layer Control). Подуровень MAC работает с ау- диовизуальной информацией и передает пакеты по проводам. Подуровень LLC форми- рует фреймы. В настоящее время существует единственный стандарт формирования фреймов по тех- нологии Ethernet: DIX Ethernet II. Кроме того, по историческим причинам используется еще несколько стандартов, основанных на стандарте IEEE 802.2, особенно в сетях Novell. Максимальный размер передаваемого блока Размер сетевых пакетов ограничивается как характеристиками аппаратных средств, так и требованиями протоколов. Например, объем полезного содержимого стандартного Ethemet-фрейма не может превышать 1500 байт. Предельный размер пакета устанавли- вается на канальном уровне и называется максимальной единицей передачи (Maximum Transfer Unit, MTU). Стандартные значения параметра MTU для разных видов сетей приведены в табл. 14.1. Таблица 14.1. Максимальные размеры передаваемых блоков в сетях различных типов Типсетевого соединения Ж., й s. А Ethernet FDDI Token Ring Модемное PPP-соединение 1500 байт (1492 в спецификации 802.2) 4470 байт (4352 для IP/FDDI) Конфигурируетсяа Конфигурируется, обычно 512 или 576 байт Двухточечные каналы ГВС (Т1, ТЗ) Конфигурируется, обычно 1500 или 4500 байт а Распространенные значения таковы: 552,1064,2088,4508 и 8232. Иногда выбирается значение 1500 для совме- стимости с Ethernet. 4 К примеру, в документах RFC, описывающих протоколы, часто используется термин “октет” (octet) вместо “байт” (byte).
502 Часть II. Работа в сети В семействе TCP/IP протокол IP отвечает за разбивку пакета на такие фрагменты, чтобы их размер соответствовал требованиям конкретного сетевого соединения. Если пакет проходит через несколько сетей, в одной из них параметр MTU может оказать- ся меньшим, чем в исходной сети. В этом случае маршрутизатор, пересылающий пакет в сеть с меньшим значением MTU, подвергнет пакет дальнейшей фрагментации. фрагментация “на лету” нежелательна в условиях сильной загруженности маршрути- заторов. В протоколе IPv6 эта возможность устранена. Пакеты по-прежнему могут фраг- ментироваться, но эту задачу должен выполнять вызывающий хост. Отправитель может обнаружить канал, способный пропустить пакет с наименьшим показателем MTU, установив на пакете флаг “не фрагментировать”. Если пакет до- стигнет промежуточного маршрутизатора, который не способен его пропустить, этот маршрутизатор вернет отправителю сообщение об ошибке ICMP. Пакет ICMP содержит показатель MTU сети, требующей пакеты меньшего размера, и этот показатель затем становится ориентировочным размером для пакетов, отправляемых по данному адресу. В протоколе TCP путь MTU определяется автоматически, даже в версии IPv4. Про- токол UDP такой возможности не имеет и перекладывает дополнительную работу на уровень IP. Иногда проблема фрагментации оказывается достаточно коварной. Несмотря на то что выявление пути MTU должно автоматически разрешить конфликты, иногда ад- министратор должен вмешаться. Например, в виртуальной частной сети с туннельной структурой необходимо проверять размер пакетов, проходящих через туннель. Обычно их начальный размер — 1500 байт, но когда к ним добавляется туннельный заголовок, * размер пакетов становится равным примерно 1540 байт и уже требуется фрагментация. Уменьшение максимального размера передаваемого блока позволяет избежать фрагмен- тации и повысить производительность туннельной сети. Просмотрите справочную стра- ницу команды if conf ig, чтобы узнать, как настроить параметр MTU сетевой платы. 14.3. Адресация пакетов Подобно письмам и сообщениям электронной почты, сетевые пакеты могут достичь ’ пункта назначения только при наличии правильного адреса. В системе TCP/IP исполь- зуется сочетание нескольких схем адресации. • Адреса MAC (media access control) для использования в сетевом оборудовании. • Сетевые адреса протоколов IPv4 и IPv6 для использования в программном обе- спечении. • Имена компьютеров для использования пользователями. Аппаратная адресация (МАС) Каждый сетевой интерфейс компьютера имеет один МАС-адрес канального уров- ня, который отличает его от других компьютеров в физической сети, а также один или несколько IP-адресов, идентифицирующих интерфейс в глобальной сети Интернета. Последнее утверждение стоит повторить: IP-адрес идентифицирует сетевые интерфейсы, а не машины. (Для пользователей это различие не имеет значения, но администраторы должны об этом знать.) Самый нижний уровень адресации задается сетевыми аппаратными средствами. Например, Ethemet-устройствам в процессе изготовления назначаются уникальные
Глава 14. Сети TCP/IP 503 шестибайтовые аппаратные адреса. Эти адреса традиционно записываются в виде ряда двухцифровых шестнадцатеричных байтов, разделенных двоеточиями, например 00:50:8D:9A:3B:DF. Сетевые платы Token Ring также имеют шестибайтовые адреса. В некоторых сетях с двухточечным соединением (например, в PPP-сетях) аппаратные адреса вообще не нуж- ны: адрес пункта назначения указывается непосредственно при установке соединения. Шестибайтовый Ethemet-адрес разбивается на две части: первые три байта опреде- ляют изготовителя устройства, а последние три — выступают в качестве уникального серийного номера, назначаемого изготовителем. Системные администраторы могут вы- яснить марку устройства, вызывающего проблемы в сети, поискав трехбайтовый иденти- фикатор соответствующих пакетов в таблице идентификаторов изготовителей. Текущая таблица доступна по адресу http://www.iana.org/assignments/ethernet-numbers. Трехбайтовые коды на самом деле представляют собой идентификаторы OUI (Orga- nizationally Unique Identifier — уникальный идентификатор организации), присваивае- мые организацией IEEE, поэтому их можно найти непосредственно в базе данных IEEE по адресу http://standards.ieee.org/regauth/oui. Разумеется, отношения между производителями микросхем, компонентов и систе- мы носят сложный характер, поэтому идентификатор изготовителя, закодированный в МАС-адресе, может ввести пользователя в заблуждение. Теоретически, аппаратные адреса Ethernet должны назначаться на постояйЙЙЙ основе и оставаться неизменными. К сожалению, некоторые сетевые платы допуска- ют программное задание аппаратных адресов. Это удобно при замене испорченных компьютеров или сетевых карт, МАС-адрес которых менять по тем или иным причи- нам нежелательно (например, если его фильтруют все ваши коммутаторы, если вагЙ DHCP-сервер выдает адреса на основе МАС-адресов или МАС-адрес был использоваЙ как лицензионный ключ для программного обеспечения). Фальсифицируемые МАС- адреса могут также оказаться полезными, если вам необходимо проникнуть в беспро- водную сеть, использующую механизм управления доступом на основе МАС-адресов. Однако, чтобы не усложнять ситуацию, мы рекомендуем сохранять уникальность МАС- адресов. IP-адресация На следующем, более высоком, уровне используется Интернет-адресация (чаще на- зываемая IP-адресацией). IP-адреса глобально уникальны5 и аппаратно независимы. Соответствие между IP-адресами и аппаратными адресами устанавливается на ка- нальном уровне модели TCP/IP. В сетях, поддерживающих широковещательный режим (т.е. в сетях, позволяющих адресовать пакеты “всем компьютерам данного физического сегмента”), протокол ARP обеспечивает автоматическую привязку адресов без вмеша- тельства системного администратора. В протоколе IPv6 МАС-адреса интерфейсов мож- В принципе IP-адреса идентифицируют конкретный и уникальный пункт назначения. Днако в особых случаях ситуация усложняется. Механизм NAT (Network Adrresses Translation — Реобразование сетевых адресов) использует IP-адреса интерфейсов для того, чтобы обработать с й ИК На нескольких машинах. Пространство частных IP-адресов присваивает адреса нескольким Дйтам, которые могут использовать их одновременно, поскольку они не видимы в Интернете, адресация в методе Anycast распределяет один и тот же адрес среди нескольких машин.
504 Часть II. Работа в сети но использовать как часть IP-адресов, благодаря чему преобразование IP-адресов в ап- паратные адреса становится практически автоматическим. СЭ Подробнее о протоколе ARP рассказывается в разделе 14.6. “Адресация" имен машин Поскольку IP-адреса представляют собой длинные, на первый взгляд, случайные чис- ла, запоминать их трудно. Операционные системы позволяют закреплять за IP-адресом одно или несколько текстовых имен, чтобы вместо 128.9.160.27 пользователь мог ввести “rfc-editor.org”. В системах UNIX и Linux это отображение можно осуществить с помо- щью статического файла (/etc/hosts), базы данных LDAP и, наконец, DNS (Domain Name System) — глобальной системы доменных имен. Следует помнить о том, что имя компьютера — это лишь сокращенный способ записи IP-адреса, и он относится к сете- вому интерфейсу, а не компьютеру. 03 Подробнее о глобальной системе DNS рассказывается в главе 17. Порты IP-адреса идентифицируют сетевые интерфейсы компьютера, но они недостаточно конкретны для идентификации отдельных процессов и служб, многие из которых могут активно использоваться в сети одновременно. Протоколы TCP и UDP расширяют кон- цепцию IP-адресов, вводя понятие порта. Порт представляет собой 16-разрядное число, добавляемое к IP-адресу и указывающее конкретный канал взаимодействия. Всем стан- дартным службам, в частности электронной почте, FTP и HTTP, назначаются “хорошо известные” порты, которые определены в файле /etc/services.6 Для того чтобы пре- дотвратить попытки посторонних процессов замаскироваться под стандартные службы, системы UNIX предоставляют доступ к портам с номерами до 1024 только процессам пользователя root. (Взаимодействовать с сервером через порты с небольшими номера- ми может кто угодно; ограничение распространяется лишь на программы, прослуши- вающие этот порт.) Типы адресов В протоколе IP поддерживается несколько типов адресов, некоторые из которых имеют эквиваленты на канальном уровне. • Направленные (unicast) — адреса, которые обозначают отдельный сетевой интер- фейс. • Групповые (multicast) — адреса, идентифицирующие группу узлов. • Широковещательные (broadcast) — адреса, обозначающие все узлы локальной сети. • Альтернативные (anycast) — адреса, обозначающие любой из группы узлов. Режим группового вещания используется, к примеру, в видеоконференциях, где одна и та же последовательность пакетов посылается всем участникам конференции. Прото- кол IGMP (Internet Group Management Protocol — протокол управления группами узлов Интернета) отвечает за управление совокупностями узлов, идентифицируемыми как один обобщенный адресат. 6 Полный список присвоенных портов можно найти на веб-странице iana. org/assignments/ port-numbers.
Глава 14. Сети TCP/IP 505 Групповые адреса в настоящее время в Интернете практически не используются. Тем не менее они были использованы в протоколе IPv6, в котором широковещательные адре- са, по существу, представляют собой специализированную форму групповой адресации. Альтернативные адреса обеспечивают балансирование нагрузки на канальный уро- вень сети, разрешая доставлять пакеты в ближайший из нескольких пунктов назначения в смысле сетевой маршрутизации. Можно было ожидать, что эти адреса будут напоми- нать групповые, но фактически они больше похожи на направленные адреса. Большинство деталей механизма альтернативных адресов скрыто на уровне маршру- тизации, а не на уровне протокола IP. Благодаря альтернативной адресации произошло реальное ослабление традиционных требований, чтобы IP-адреса однозначно иденти- фицировали пункт назначения. С формальной точки зрения, альтернативная реализация предназначена для протокола IPv6, но аналогичный трюк можно осуществить и в про- токоле IPv4, например, так, как это сделано для корневых серверов имен DNS. 14.4. IP-адреса За исключением групповых адресов, адреса Интернета состоят из двух частей: сетевой и машинной. Сетевая часть идентифицирует логическую сеть, к которой относится адрес, а машинная — узел этой сети. В протоколе IPv4 адреса состоят из четырех байтов, а гра- ница между сетевой и машинной частями устанавливается административно. В протоко- ле IPv6 адреса состоят из 16 байт, а сетевая и машинная части всегда состоят из 8 байт. В протоколе IPv4 адреса записываются в виде группы десятичных чисел (по одному на каждый байт), разделенных точками, например 209.85.171.147. Самый левый байт — старший; он всегда относится к сетевой части адреса. Если первым байтом адреса является число 127, то оно обозначает интерфейс обрат- ной связи (“loopback network”) — фиктивную сеть, не имеющую реального аппаратного интерфейса и состоящую из одного компьютера. Адрес 127.0.0.1 всегда ссылается на текущий компьютер. Ему соответствует символическое имя “localhost”. (Это еще одно небольшое нарушение требования уникальности IP-адресов, поскольку каждый компью- тер интерпретирует адрес 127.0.0.1 как адрес другого компьютера, хотя этим компью- тером является он сам.) Адреса в протоколе IPv6 и их текстовые эквиваленты являются немного более слож- ными. Они будут рассмотрены далее в подразделе “Адресация в протоколе IPv6”. IP-адрес и другие параметры сетевого интерфейса задаются командой if conf ig. Она описывается в разделе 14.10. Классы адресов в протоколе IPv4 Исторически IP-адреса группировались в классы, которые определялись на осно- вании первых битов самого левого байта. Классы отличались распределением байтов адреса между сетевой и машинной частями. Современные маршрутизаторы используют явные маски для задания сетевой части адреса, причем компоненты адреса могут раз- деляться не обязательно по границе байтов. Тем не менее традиционные классы все еще используются по умолчанию, если не предоставлена явная маска. Классы А, В и С обозначают обычные IP-адреса, а классы D и Е применяются при групповой адресации и в исследовательских целях. В табл. 14.2 представлены характери- стики каждого класса адресов. Сетевая часть адреса помечена буквой С, а машинная — буквой М.
506 Часть II. Работа в сети Таблица 14.2. Классы IP-адресов Класс А 1-126 С.М.М.М Самые первые сети или адреса, зарезервированные для Министерства обороны США В 128-191 С.С.М.М Крупные организации, обычно с подсетями; адреса данного класса почти полностью заняты С 192-223 С.С.С.М Небольшие организации; адреса данного класса получить легко, они выделяются целыми блоками D 224-239 — Групповые адреса; не назначаются на постоянной основе Е 240-255 — Экспериментальные адреса а Значение 0 не используется в качестве первого байта обычных IP-адресов. Значение 127 зарезервировано для адресов обратной связи. В редких случаях в состав локальной сети входит более ста компьютеров. По этой причине полезность адресов класса А или В (которые допускают наличие в одной сети, соответственно, 16777214 и 65534 узлов) весьма сомнительна. К примеру, 127 адресов класса А занимают половину доступного адресного пространства. Кто же знал, что адресное пространство протокола IPv4 станет таким ценным! Подсети Для того чтобы эффективнее использовать адреса, определенную долю машинной части адреса можно “одолжить” для расширения сетевой части, явно указав четырехбай- товую маску подсети (“subnet mask”), или сетевую маску (“netmask”), в которой едини- цы соответствуют сетевой части, а нули — машинной. Единицы должны занимать левую часть маски и следовать одна за другой без разрывов. Сетевая часть должна занимать не менее восьми битов, а машинная — не менее двух битов. Следовательно, маска подсети в соответствии с протоколом IPv6 допускает только 22 возможных значения. Например, четыре байта адреса класса В обычно интерпретируются как С.С.М.М. Следовательно, неявная маска подсети класса В в десятичной системе выглядит как 255.255.0.0. Однако адрес с маской 255.255.0.0 можно интерпретировать как С.С.С.М. ; Использование такой маски превращает одну сеть класса В в 256 разных подсетей, по- добных сетям класса С, т.е. в каждую из них может входить 254 компьютера. Маски подсети, как и любой сетевой интерфейс, задаются с помощью команды J if config. По умолчанию команда if config использует класс адреса для того, чтобы" выяснить, какие биты относятся к сетевой части. Если задается явная маска, то эта функ- ция просто отменяется. 03 Подробнее о команде if config рассказывается в разделе 14.10. Сетевые маски, не оканчивающиеся на границе байта, труднее декодировать. Они обычно записываются в виде суффикса /XX, где XX — число битов в сетевой части адре- са (длина маски). Такую запись иногда называют нотацией CIDR (Classless Inter-Do- main Routing — протокол бесклассовой междоменной маршрутизации). Например, адрес 128.138.243.0/26 обозначает первую из четырех сетей с общим компонентом адреса 128.138.243. В трех других сетях последний байт адреса равен 64, 128 и 192. Сетевая ма- ска, связанная с этими сетями, имеет вид 255.255.255.192 или OxFFFFFFCO. В двоичном представлении это 26 единиц с последующими шестью нулями (рис. 14.3).
Глава 14. Сети TCP/IP 507 Двоичная сетевая маска IP-адрес Десятичная сетевая маска Шестнадцатеричная сетевая маска 1111 11»f . till 1111 1111 1111 Рис. 14.3. Структура маски подсети в разных системах счисления В сети с маской /26 для нумерации узлов отводится шесть битов (32 — 26 = 6). Таким образом, появляется возможность задать 64 адреса (26 = 64). В действительности допуска- ется использовать лишь 62 адреса, поскольку адреса, полностью состоящие из нулей или единиц, зарезервированы (для самой сети и широковещательного режима соответственно). В нашем примере старшие два бита последнего байта адреса могут принимать значе- ния 00,01, 10и 11.Таким образом, сеть 128.138.243.0/24 может быть разделена на четыре сети /26: • 128.138.243.0/26 (0 - 00000000); • 128.138.243.64/26 (64-01000000); • 128.138.243.128/26 (128 - 10000000); • 128.138.243.192/26 (192 - 11000000). Выделенные полужирным шрифтом биты последнего байта каждого адреса относят- ся к сетевой части. Трюки и инструменты для арифметических вычислений, связанных с подсетями Манипулировать всеми этими битами в уме трудно, но есть ряд приемов, позволяю- щих упростить вычисления. Число узлов в сети и значение последнего байта сетевой ма- ски в сумме всегда дают 256. последний байт сетевой маски = 256 — размер сети Так, в рассмотренном выше случае формула даст результат 256 — 64 = 192, где 192 — последний байт маски. Другое правило гласит о том, что значение последнего байта фак- тического адреса сети (не сетевой маски) должно нацело делиться на число узлов сети. В рассматриваемом примере последние байты равны 0, 64, 128 и 192 — каждое из этих чисел делится нацело на 64.7 Имея только IP-адрес (допустим, 128.138.243.100), невозможно сказать, каким будет адрес сети и широковещательный адрес. В табл. 14.3 представлены возможные вариан- ты для масок /16 (выбирается по умолчанию для адресов класса В), /24 и /26 (наиболее приемлемая длина, если имеющееся адресное пространство невелико). Таблица 14.3. Пример расшифровки IP-адреса IP-адрес 128.138.243.100/16 255.255.0.0 128.138.0.0 128.138.255.255 128.138.243.100/24 255.255.255.0 128.138.243.0 128.138.243.255 128.138.243.100/26 255.255.255.192 128.138.243.64 128.138.243.127 7 Разумеется, нуль делится на любое число.
508 Часть IL Работа в сети Сетевой (все нули в машинной части) и широковещательный (все единицы в машин- ной части) адреса сокращают число узлов в каждой локальной сети на 2, поэтому в са- мой маленькой сети формально должно быть 4 узла: два реальных, соединенных напря- мую, и два фиктивных (сетевой и широковещательный). Для того чтобы создать такую сеть, необходимо отвести два бита под машинную часть адреса, т.е. суффикс адреса будет /30, а сетевая маска — 255.255.255.252 или OxFFFFFFFC. Но есть еще сеть с маской /31, которая трактуется как особый случай (RFC3021): у нее нет сетевого и широковещатель- ного адресов, а оба оставшихся адреса используются для идентификации узлов. Маска такой сети равна 255.255.255.254. Кришан Джодис (Krischan Jodies) написал полезную программу под названием IP Cal- culator (она доступна по адресу jodies. de/ipcalc), позволяющую выполнять арифмети- ческие операции над двоичными, шестнадцатеричными числами и масками. Программа IP Calculator делает все, что требуется пользователю при работе с сетевыми адресами и маска- ми подсети, а также широковещательными адресами и т.п. Кроме того, существует архив формата tar для версии калькулятора ipcalc, которая запускается из командной строки. ®В операционной системе Ubuntu программу ipcalc можно установить с по- мощью команды apt-get. Ниже приведен образец работы программы ipcalc (формат вывода для наглядности немного изменен). Address: 24.8.175.69 00110000.00001000.10101111.01000101 Netmask: 255.255.255.0 = 24 11111111.11111111.11111111.00000000 Wildcard: 0.0.0.255 00000000.00000000.00000000.11111111 Network: 24.8.175.0/24 00011000.00010000.10101111.00000000 (Class A) Broadcast: 24.8.175.255 00011000.00010000.10101111.11111111 HostMin: 24.8.175.1 00011000.00010000.10101111.00000001 HostMax: 24.8.175.254 00011000.00010000.10101111.11111110 Эти результаты позволяют не только просто и понятно представить адреса, но и “ко- пировать и вставлять” версии. Очень полезная программа. В операционной системе Red Hat имеется утилита, тоже называющаяся ipcalc, но она довольно неуклюжа и в большинстве случаев предполагает, что 1Р-ад- реса относятся к классу, предусмотренному по умолчанию. Если этот калькулятор вам по каким-то причинам не подойдет, можно воспользо- ваться стандартной утилитой Ьс, поскольку она может выполнять арифметические опе- рации в любой системе счисления. Установите основания систем счисления для ввода и вывода, используя директивы ibase и obase. Сначала выполните директиву obase, в противном случае ее результат будет интерпретироваться в зависимости от нового основания системы счисления, установленной директивой ibase. CIDR: протокол бесклассовой междоменной маршрутизации Как и подсети, прямым расширением которых он является, протокол CIDR основан на использовании явной маски подсети, определяющей границу между сетевой и ма- шинной частями адреса. Но, в отличие от подсетей, протокол CIDR допускает, чтобы сетевая часть была меньше, чем того требует класс адреса. Благодаря укороченной маске возникает эффект объединения нескольких сетей для облегчения маршрутизации. По этой причине протокол CIDR иногда называют протоколом формирования суперсетей.
Глава 14. Сети TCP/IP 509 Протокол CIDR упрощает информацию о маршрутизации и устанавливает иерархию в этом процессе. Несмотря на то что протокол CIDR задумывался как временная мера для облегчения маршрутизации в рамках протокола IPv6, он оказался достаточно мощ- ным средством для решения проблемы роста Интернета, возникшей в последнее деся- тилетие. Предположим, организации предоставлен блок из восьми адресов класса С, про- нумерованных последовательно от 192.144.0.0 до 192.144.7.0 (в нотации CIDR — 192.144.0.0/21). Внутри самой организации адреса могут распределяться так: • 1 сеть с длиной маски 21 — 2046 узлов, сетевая маска 255.255.224.0; • 8 сетей с длиной маски 24 — 254 узла в каждой, сетевая маска 255.255.255.0; • 16 сетей с длиной маски 25 — 126 узлов в каждой, сетевая маска 255.255.255.128; • 32 сети с длиной маски 26 — 62 узла в каждой, сетевая маска 255.255.255.192 и т.д. Ценность протокола CIDR заключается в том, что для перечисленных адресов не обязательно иметь 32, 16 или даже 8 записей в таблице маршрутизации. Ведь все они ссылаются на узлы одной и той же организации, поэтому пакеты предварительно нужно доставлять в общий приемный пункт. В таблицу маршрутизации достаточно внести за- пись 199.144.0.0/21. Протокол CIDR позволяет даже выделять фрагменты адресных про- странств классов А и В, благодаря чему увеличивается число доступных адресов. Внутри сети допускается смешение подсетей с разной длиной маски, если только они не перекрывают друг друга. Это называется формированием подсетей перемен- ного размера. Например, интернет-провайдер, которому выделена адресная область 193.144.0.0/21, может создать группу сетей /30 для коммутируемых PPP-клиентов, не- сколько сетей /24 — для крупных клиентов и ряд сетей /27 — для более мелких компаний. Все узлы конкретной сети должны конфигурироваться с помощью одной сетевой ма- ски. Нельзя для одного узла задать длину маски 24, а для другого — 25. Выделение адресов Формально назначаются лишь адреса сетей. Организации должны самостоятельно определять номера компьютеров и закреплять за ними IP-адреса. Деление на подсети также осуществляется произвольно. Организация ICANN в административном порядке делегировала полномочия по распределению адресов трем региональным организациям, которые предоставляют бло- ки адресов интернет-провайдерам в рамках своих регионов (табл. 14.4). Провайдеры, в свою очередь, выделяют адреса отдельным клиентам. Только крупные провайдеры могут напрямую посылать запросы в один из регистров, спонсируемых организацией ICAAN. Таблица 14.4. Региональные реестры IP-адресов Организация ARIN arin.net Северная часть Карибских островов APNIC apnic.net Азия и Океания, включая Австралию и Новую Зеландию AfriNIC adrinic.net Африка LACNIC lacnic.net Центральная и Южная Америка, часть Карибских островов __RIPE NCC ripe.net Европа и прилегающие регионы Делегирование полномочий от организации ICANN к региональным регистрам обе- спечивает должную агрегацию адресов в таблицах маршрутизации магистральных сетей.
510 Часть II. Работа в сети Клиенты, получившие адреса от своего провайдера, не обязаны иметь маршрутные за- писи в магистральных серверах. Достаточно одной записи, ссылающейся на провайдера. Частные адреса и система NAT Другое временное решение проблемы сокращающегося адресного пространства про- токола IPv4 заключается в использовании частных областей IP-адресов, описанных в документе RFC1918. Частные адреса используются только внутри сайта и никогда не демонстрируются в Интернете (по крайней мере, непреднамеренно). Преобразование частных адресов в адреса, выделенные интернет-провайдером, осуществляется погра- ничным маршрутизатором. Документ RFC1918 определяет, что одна сеть класса А, 16 сетей класса В и 256 сетей класса С резервируются для частного использования и никогда не выделяются глобаль- но. В табл. 14.5 показаны диапазоны частных адресов (каждый диапазон представлен в более короткой нотации протокола CIDR). Из перечисленных диапазонов организа- ции могут выбирать для себя сети нужного размера. Таблица 14.5. IP-адреса, зарезервированные для частного использования Класс ДиапазонСЮЙ А 10.0.0.0 10.255.255.255 10.0.0.0/8 В 172.16.0.0 172.31.255.255 172.16.0.0/12 С 192.168.0.0 192.168.255.255 192.168.0.0/16 Изначально идея состояла в том, чтобы узлы могли самостоятельно выбирать класс адресов из указанных возможностей, чтобы правильно определить свой размер. Однако в настоящее время протокол CIDR и подсети стали универсальным инструментом, по- этому для всех новых частных сетей целесообразнее всего использовать адреса класса А (разумеется, с подсетями). Для того чтобы узлы, использующие частные адреса, могли получать доступ в Ин- тернет, на пограничном маршрутизаторе организации должна выполняться система NAT (Network Address Translation — трансляция сетевых адресов). Эта система перехватыва- ет пакеты и заменяет в них адрес отправителя реальным внешним IP-адресом. Может также происходить замена номера исходного порта. Система хранит таблицу преобразо- ваний между внутренними и внешними адресами/портами, чтобы ответные пакеты до- ставлялись нужному адресату. Благодаря нумерации портов, появляется возможность подключить несколько исхо- дящих соединений к общему IP-адресу, чтобы внутренние узлы совместно использовали одинаковый внешний IP-адрес. Иногда в организации достаточно иметь один “настоя- щий” внешний адрес. Например, эта конфигурация по умолчанию установлена в боль- шинстве популярных маршрутизаторов, использующих кабель и модемы DSL. Узел, использующий систему NAT, запрашивает адреса у провайдера, но большин- ство адресов теперь используется для внутрисистемных привязок и не назначается от- дельным компьютерам. Если узел позднее захочет сменить провайдера, потребуется лишь изменить конфигурацию пограничного маршрутизатора и его системы NAT, но не самих компьютеров. Существует возможность заставить операционные системы UNIX или Linux выпол- нять функции NAT, хотя во многих организациях предпочитают делегировать эти обя-
Глава 14. Сети TCP/IP 511 занности маршрутизаторам или устройствам подключения к сети.8 Вопросы, связанные с конкретными поставщиками, мы обсудим в этой главе позднее. Неправильная конфигурация системы NAT может привести к тому, что пакеты с част- ными адресами начнут проникать в Интернет. Они могут достичь узла назначения, но ответные пакеты не будут получены. Организация CAIDA9, замеряющая трафик маги- стральных сетей, сообщает о том, что 0,1—0,2% пакетов, проходящих по магистрали, имеют либо частные адреса, либо неправильные контрольные суммы. На первый взгляд показатель кажется незначительным, но на самом деле это приводит к тому, что каж- дую минуту в сети циркулируют тысячи пакетов. Информацию по статистике Интернета и средствам измерения производительности глобальной сети можно получить на веб- узле www.caida.org. Одной из особенностей системы NAT является то, что узел Интернета не может на- прямую подключиться к внутренним машинам организации. Для того чтобы преодолеть это ограничение, в некоторых реализациях системы NAT разрешается создавать тунне- ли, которые поддерживают прямые соединения с выбранными узлами.10 Еще одна проблема заключается в том, что некоторые приложения встраивают IP-адреса в информационную часть пакетов. Такие приложения не могут нормально ра- ботать совместно с NAT. К ним относятся определенные протоколы маршрутизации, программы потоковой доставки данных и ряд FTP-команд. Система NAT иногда также отключает виртуальные частные сети (VPN — virtual private network). Система NAT скрывает внутреннюю структуру сети. Это может показаться преиму- ществом с точки зрения безопасности, но специалисты считают, что на самом деле си- стема NAT не обеспечивает должную безопасность и уж во всяком случае не устраняет потребность в брандмауэре. Кроме того, она препятствует попыткам оценить размеры и топологию Интернета. См. документ RFC4864, Local Network Protection for IPv6, содер- жащий полезную информацию о реальных и мнимых преимуществах системы NAT и протокола IPv4. Адресация в стандарте IPv6 В IPv6 адрес имеет длину 128 бит. Изначально столь длинные адреса вводились для того, чтобы решить проблему сокращающегося адресного пространства IPv4. Сегодня они служат также целям маршрутизации и локализации ссылок. Адреса в протоколе IPv4 никогда не были географически сгруппированы подобно тому, как это имеет место в случае телефонных номеров или почтовых индексов. Теперь, с появлением протокола CIDR, IP-адреса стали группироваться в кластеры. (Разумеется, прилагательное “географический” относится к пространству маршрутизации, а не к фи- зическим координатам.) Протокол CIDR оказался настолько удачным с технической 8 Разумеется, многие маршрутизаторы в настоящее время могут запускать встроенные ядра системы Linux. Но даже в этом случае их изначальные системы остаются более эффективными и безопасными, чем универсальные компьютеры, которые также пересылают пакеты. 9 CAIDA (Cooperative Association for Internet Data Analysis — совместная ассоциация по анали- зу данных в сети Internet) находится в Центре суперкомпьютеров, который расположен в здании Калифорнийского университета в Сан-Диего (www.caida.org). 10 Многие маршрутизаторы поддерживают также стандарты Universal Plug and Play (UPnP), про- двигаемые компанией Microsoft. Эти стандарты позволяют внутренним машинам устанавливать собственные динамические туннели NAT. В зависимости от точки зрения пользователя, это может оказаться как удачным решением, так и угрозой безопасности. При желании эту функциональную возможность маршрутизатора легко отключить.
512 Часть II. Работа в сети точки зрения, что иерархические переприсваивания сетевых адресов вошли в стандарт IPv6. Интернет-провайдер, действующий по протоколу IPv6, присваивает вам пре- фиксный адрес, который просто приписывается перед локальной частью вашего адреса, обычно перед адресом пограничного маршрутизатора. Граница между сетевой и машинной частями адреса в протоколе IPv6 зафиксирована на отметке /64, поэтому не может возникнуть никаких недоразумений, связанных с тем, насколько длинной является сетевая часть в адресе “на самом деле”. Иначе говоря, в протоколе IPv6 больше нет настоящих подсетей, хотя термин “подсеть” сохранился как синоним “локальной сети”. Несмотря на то что сетевые номера всегда имеют длину 64 бит, маршрутизаторы могут не обращать внимания на все 64 бит в процессе принятия решения. Они могут направлять пакеты на основе анализа префиксов, точно так же как это делается в протоколе CIDR. Первая схема, описанная в документе RFC2374, предусматривала четыре стандар- тизованных уровня разделения внутри сетевой части адреса в протоколе IPv6. Однако опыт эксплуатации показал, что интернет-провайдеры могут успешно управлять разде- лением свои собственных адресов по протоколу IPv4, поэтому первоначальный план в документе RFC3587 был отменен. В настоящее время интернет-провайдеры могут сво- бодно устанавливать границы между частями адресов. Идентификатор узла, состоящий из 64 бит, потенциально может быть выведен из 48-битовых адресов МАС интерфейсов аппаратного обеспечения.11 В протоколе IPv6 МАС-адреса видны на уровне протокола IP, что имеет как поло- жительные, так и отрицательные стороны. Положительный момент заключается в том, что конфигурация адресов узла может быть полностью автоматической. Отрицательный аспект состоит в том, что в первой половине МАС-адреса кодируются тип и модель се- тевой платы, что облегчает задачу хакерам. Однако разработчики стандарта IPv6 указали на то, что использование МАС-адресов не является обязательным. Они также предло- жили схемы включения случайного идентификатора в локальную часть адреса. Перечислим несколько полезных источников информации, касающейся протоко- ла IPv6. • ipv6tf. org — информационный портал, посвященный протоколу IPv6 • ipv6.org — часто задаваемые вопросы и техническая информация • www. ipv6forum. com — форум приверженцев протокола IPv6 • RFC3587 — документ IPv6 Global Unicast Address Format • RFC4291 — документ IP Version 6 Addressing Architecture Были предложены разные схемы перехода с версии IPv4 на IPv6, включая использо- вание системы NAT, чтобы прятать адреса IPv6 при передаче пакетов по туннелю через существующие сети IPv4. В настоящее время чаще всего используются туннельные си- стемы 6to4 и Teredo. Вторая система, которая была названа в честь семейства шашелей, буравящих древесину, может использоваться на устройствах, работающих под управле- нием системы NAT. 11 Точнее говоря, в средину добавляется адрес МАС с двумя байтами OxFFFE, дополненны- ми одним битом (шестым битом первого байта, считая слева и начиная с нуля); см. документ RFC4921. Стандарт, регулирующий преобразование 48-битовых адресов МАС в 64-битовые номера интернет-провайдеров, называется EUI-64.
Глава 14. Сети TCP/IP 513 14.5. Маршрутизация Маршрутизация — это процесс направления пакета по лабиринту сетей, находящих- ся между отправителем и получателем. В системе TCP/IP маршрутизация происходит примерно так, как путешественник, первый раз посетивший страну, находит нужный ему дом, задавая вопросы местным жителям. Первый человек, с которым он заговорит, возможно, укажет ему нужный город. Войдя в город, путешественник спросит другого человека, и тот расскажет, как попасть на нужную улицу. В конце концов наш путеше- ственник подойдет достаточно близко к конечному пункту своих странствий, чтобы кто- нибудь указал ему дом, который он ищет. Маршрутная информация в системе TCP/IP имеет форму правил (маршрутов), на- пример: “Для того чтобы достичь сети А, посылайте пакеты через компьютер С”. Часто существует и стандартный маршрут. В нем объясняется, что нужно делать с пакетами, предназначенными для отправки в сеть, маршрут к которой не указан явным образом. Данные маршрутизации хранятся в одной из таблиц ядра. Каждый элемент этой та- блицы содержит несколько параметров, включая сетевую маску (раньше это поле было опциональным, но теперь оно обязательно, если стандартная сетевая маска неверна). Для направления пакета по заданному адресу ядро подбирает наиболее конкретный маршрут (т.е. тот, где самая длинная маска). Если ни один из маршрутов (в том числе стандартный) не подходит, то отправителю возвращается ICMP-сообщение вида “net- work unreachable” (сеть недоступна). Слово “маршрутизация” широко употребляется в двух различных смыслах: • процедура поиска сетевого адреса в специальной таблице для передачи пакета в пункт его назначения; • процесс построения этой таблицы. Ниже мы рассмотрим, как осуществляется переадресация пакетов и как вручную доба* вить или удалить маршрут. Более сложные вопросы, связанные с работой протоколов марш- рутизации, создающих и обслуживающих маршрутные таблицы, освещаются в главе 15. Таблицы маршрутизации Таблицу маршрутизации можно просмотреть с помощью команды netstat -г. Ко- манда netstat -rn запрещает поиск доменных имен в системе DNS, вследствие чего все адреса будут представлены в числовом виде. Команда netstat подробно описыва- ется в разделе 21.5, здесь же мы дадим небольшой пример, чтобы у читателей сложилось представление о том, что такое маршруты. % netstat -rn Kernel IP routing table Destination Genmask Gateway Fl MSS Iface 132.236.227.0 255.255.255.0 132.236.227.93 U 1500 ethO default 0.0.0.0 132.236.227.1 UG 1500 ethO 132.236.212.0 255.255.255.192 132.236.212.1 U 1500 ethl 132.236.220.64 255.255.255.192 132.236.212.6 UG 1500 ethl 127.0.0.1 255.255.255.255 127.0.0.1 U 3584 lo В рассматриваемой системе есть два сетевых интерфейса: 132.236.227.93 (ethO) — в сети 132.236.227.0/24 и 132.236.212.1 (ethl) - в сети 132.236.212.0/26.
514 Часть IL Работа в сети Поле destination обычно содержит адрес сети. В поле gateway отображается адрес локального сетевого интерфейса или соседнего узла; в ядре системы Linux для вызова шлюза, установленного по умолчанию, в поле gateway может быть записан адрес О.О.О.О. Например, четвертый маршрут указывает, что для достижения сети 132.236.220.64/26 пакеты следует посылать в шлюз 132.236.212.6 через интерфейс ethl. Вторая запись со- держит описание стандартного маршрута. Пакеты, не адресованные явно ни в одну из трех указанных сетей (или самому компьютеру), будут направлены в стандартный шлюз 132.236.227.1. Компьютеры могут посылать пакеты только тем шлюзам, которые физически под- ключены к той же сети. Локальные компьютеры могут перемещать пакеты только на один шаг в направлении пункта назначения, поэтому в него бессмысленно включать информацию о шлюзах, не являющихся смежными в таблице локальной маршрутиза- ции. Каждый шлюз, через который проходит пакет, принимает следующее решение о его перемещении, анализируя собственную таблицу локальной маршрутизации.12 Вести таблицы маршрутизации можно статически, динамически или комбинирован- ным способом. Статический маршрут задается в явном виде с помощью команды route. Он должен оставаться в таблице маршрутизации в течение всего времени работы систе- мы. Во многих случаях такие маршруты задаются на этапе начальной загрузки с помо- щью одного из сценариев запуска системы. Например, команды route add -net 132.236.220.64 netmask 255.255.255.192 gw 132.236.212.6 ethl route add default gw 132.236.227.1 ethO добавляют, соответственно, четвертый и второй маршруты из числа тех, что отобра- жаются выше командой netstat -rn (первый и третий маршруты добавляются коман- дой ifconfig при конфигурировании интерфейсов ethO и ethl). Ш Полное описание команды route см. в разделе 14.10. Последний маршрут также добавляется на этапе начальной загрузки. Он определя- ет псевдоустройство, называемое интерфейсом обратной связи (loopback interface). Это устройство препятствует пакетам, которые компьютер посылает сам себе, выходить в сеть. Вместо этого они напрямую переносятся из выходной сетевой очереди ядра во входную очередь. В относительно стабильной локальной сети статическая маршрутизация является до- 1 статочно эффективным решением. Эта система проста в управлении и надежна в экс- плуатации, но требует знания системным администратором топологии сети на момент начальной загрузки, а также того, чтобы эта топология в периоды между загрузками не изменялась. Большинство компьютеров локальной сети имеет единственный выход во внешний мир, поэтому маршрутизация осуществляется очень просто: достаточно на этапе начальной загрузки добавить стандартный маршрут. Компьютер может получить стандартный марш- рут вместе со своим IP-адресом у сервера DHCP (этот протокол описан в разделе 14.7). В сетях с более сложной топологией требуется динамическая маршрутизация. Она осуществляется процессом-демоном, который ведет и модифицирует таблицу маршру- тизации. Демоны маршрутизации, “обитающие” на различных компьютерах, взаимо- действуют друг с другом с целью определения топологии сети и решения вопроса о том, как добраться до удаленных адресатов. Существует несколько таких демонов. Подробно они будут рассмотрены в главе 15. 12 Маршрутизация IP-источника является исключением из этого правила; см. раздел 14.8.
Глава 14. Сети TCP/IP 515 директивы переадресации протокола ICMP Несмотря на то что протокол IP не предусматривает средств управления маршрутной информацией, в нем имеется механизм контроля нарушений: директивы переадресации протокола ICMP. Если маршрутизатор направляет пакет компьютеру, находящемуся в той же сети, из которой этот пакет был получен, то что-то работает неправильно. Поскольку от- правитель, маршрутизатор и маршрутизатор следующего перехода находятся в одной сети, то пакет можно послать не через два перехода, а через один. Маршрутизатор делает вывод о том, что таблицы маршрутизации отправителя являются неточными или неполными. В этой ситуации маршрутизатор может уведомить отправителя о проблеме с помощью переадресующего ICMP-пакета. В таком пакете сообщается следующее: “Не нужно по- сылать мне пакеты для узла ххх; их следует адресовать узлу у у у”. Теоретически, получив директиву переадресации, отправитель может обновить свою таблицу маршрутизации, чтобы следующие пакеты, г^дназначенные данному адресату, шли по более прямому пути. На практике переадресация не подразумевает этапа аутен- тификации и поэтому не может считаться доверенной. Маршрутизатор может цроиг- норировать полученную команду перенаправить трафик в другое место, но чащ© всего системы UNIX и Linux пытаются это сделать по умолчанию. В таких ситуациях необхо- димо уточнить возможные источники команд переадресации в своей сети и отключить их, если они могут создать проблемы. ДВ Linux допустимость ICMP-директив определяется элементом adttept_ redirects файловой системы /ргос. О том, как проверять й устанавливать этот и подобные ему параметры, рассказывается в разделе 14.14. Для того чтобы отключить маршрутизацию по протоколу ICMP, в системе Solaris SOiariS следует использовать команду ndd -set /dev/ip ip ip_ignore_redirect 1. Несмотря на то что система HP-UX также использует команду ndd для управ- ления стеком протокола IP, в этой реализации протокола нет возможности игнорировать переадресацию по протоколу ICMP. Однако есть возможЙёВть удалить команды переадресации из таблицы маршрутизации через <З^Ййу, выполнив следующую команду. ndd -set /dev/ip ip__ire__redirect__interval 1000 Некоторые версии системы HP-UX позволяют задавать этот параметр равным не меньше 5 или 60 секунд (сам параметр выражается в миллисекундах), но в системе HP- UX есть возможность задавать еще меньше значения. • Для того чтобы отменить ICNP-переадресацию в системе AIX, необходимо вы- полнить команду по -р -о ipignoreredirects=l. Опция -1 делает эту за- мену постоянной; при временном тестировании эту опцию следует отключить. Более подробная информация приведена в разделе 14.15. 14.6. ARP: протокол преобразования адресов Ш Протокол ARP определен в документе RFC826. Несмотря на то что IP-адреса являются аппаратно-независимыми, для фактической передачи данных на канальном уровне должны применяться аппаратные адреса13. ARP 13 Это не касается двухточечных соединений, где получатель иногда подразумевается неявно.
516 Часть IL Работа в сети (Address Resolution Protocol — протокол преобразования адресов) определяет, какой ап- паратный адрес связан с тем или иным IP-адресом. Этот протокол можно применять в сетях любых типов, которые поддерживают широковещательный режим, но чаще всего его рассматривают в контексте сетей Ethernet. Когда компьютер А хочет послать пакет компьютеру Б, находящемуся в том же Ethemet-сегменте, он использует протокол ARP для нахождения аппаратного адреса Б. Если же компьютер Б расположен в другой сети, то компьютер А с помощью подсисте- мы маршрутизации определяет IP-адрес маршрутизатора следующего перехода, а затем с помощью протокола ARP выясняет аппаратный адрес этого маршрутизатора. Так как в ARP применяются широковещательные пакеты, которые не могут выйти за пределы локальной сети14, этот протокол позволяет находить только адреса устройств, непосред- ственно подключенных к той же сети. Каждый компьютер хранит в памяти специальную таблицу, называемую кешем ARP. Кеш содержит результаты последних ARP-запросов. В нормальных условиях многие адреса, необходимые компьютеру, выявляются вскоре после начальной загрузки, поэто- му протокол ARP мало влияет на загруженность сети. Протокол ARP функционирует путем широковещательной рассылки пакетов пример- но следующего содержания: “Знает ли кто-нибудь аппаратный адрес для 128.138.116.4?” Устройство, которое разыскивают, узнает свой IP-адрес и посылает ответ: “Да, это IP-адрес одного из моих сетевых интерфейсов, соответствующий Ethernet-адрес — 8:0:20:0:fb:6a”. Исходный запрос включает IP- и Ethernet-адрес запрашивающей стороны, благодаря чему разыскиваемое устройство может ответить, не посылая собственный ARP-запрос. Это позволяет обоим компьютерам узнать адреса друг друга за один сеанс обмена па- кетами. Другие компьютеры, “слышавшие” исходное широковещательное сообщение, посланное инициатором запроса, тоже могут записать информацию о его адресах. Команда агр изучает и обрабатывает содержимое кеша ARP. Обычно она использу- ется для добавления и удаления записей, но может также очищать всю таблицу и ото- бражать ее. В частности, команда агр -а отображает содержимое кеша. Формат вывода может варьироваться. Команда агр, как правило, применяется в целях отладки и при работе со специаль- ным оборудованием. Например, если два узла сети имеют одинаковый IP-адрес, то на одном из них запись в ARP-таблице будет правильной, а на другом — нет. С помощью команды агр можно найти узел-нарушитель. 14.7. DHCP: протокол динамического КОНФИГУРИРОВАНИЯ УЗЛОВ Ш Протокол DHCP определен в документах RFC2131 и 2132. Когда вы добавляете устройство или компьютер в сеть, то обычно получаете свой IP- адрес в локальной сети, настраиваете соответствующий маршрутизатор, заданный по умолчанию, и присоединяетесь к локальному серверу DNS. Все это за вас может сделать протокол DHCP (Dynamic Host Configuration Protocol — протокол динамического кон- фигурирования узлов). 14 Маршрутизатор можно сконфигурировать так, чтобы он пропускал широковещательные па- кеты в другие сети, но это, в принципе, неудачная идея. Необходимость пропускать широкове- щательные пакеты является признаком неблагополучия в работе сети или неудачной архитектуры сервера.
Глава 14. Сети TCP/IP 517 Протокол DHCP дает возможность клиенту взять сетевые и административные пара- метры “в аренду” у центрального сервера, отвечающего за их распространение. Принцип аренды особенно удобен для персональных компьютеров, которые выключены, когда на них никто не работает, и интернет-провайдеров, чьи клиенты подключаются по комму- тируемым линиям. К “арендуемым” параметрам относятся следующие: • IP-адреса и сетевые маски; • адреса шлюзов (стандартные маршруты); • адреса DNS-серверов; • имена компьютеров, на которых выполняется система Syslog; • адреса серверов WINS, Х-серверов шрифтов, прокси-серверов и NTP-серверов; • адреса серверов ТЕТР (для получения файла начальной загрузки) и десятки других (см. RFC2132). • Экзотические параметры редко используются на практике. Периодически клиенты должны повторно обращаться к DHCP-серверу с целью продления срока аренды. Если этого не делать, аренда рано или поздно закончится. DHCP-сервер будет тогда волен предоставить адрес (или иной арендованный параметр) другому клиенту. Срок аренды конфигурируется, но обычно он достаточно велик (дб не- скольких дней). Даже если вы хотите, чтобы каждый узел имел собственный постоянный IP-адрес, про- токол DHCP может значительно сэкономить ваши время и усилия. Когда сервер DHCP сконфигурирован и запущен, клиенты почти автоматически определяют параметры се- тевой конфигурации на этапе начальной загрузки, и никакой путаницы не возникает. Программное обеспечение DHCP Организация ISC (Internet Software Consortium — консорциум разработчиков ПЙЙ- граммного обеспечения для Интернета) поддерживаеТпре красный открытый источник информации о протоколе DHCP. В настоящее время широко используются версии паке- та IVS 2, 3 и 4, которые прекрасно выполняют основные функции. Версия 3 поддержи- вает резервное копирование серверов DHCP, а версия 4 — протокол IPv6. Сервер, кли- ент и агента ретрансляции (agent relay) можно загрузить с веб-сайта ics. org. Все основные дистрибутивы системы Linux используют ту или иную версию пакета ISC, хотя его серверную часть, возможно, придется устанавливать явно. В системе Red Hat эта серверная часть называется dhcp, в системе Ubuntu — dhcp3-server, а в системе SUSE — dhcp-server. Другие системы часто имеют собственные реализации протокола DHCP. К сожале- нию, к этой категории относятся и все экземпляры системы UNIX. Мы рекомендуем не вмешиваться в клиентскую часть протокола DHCP, поскольку эта часть кода относительно проста и поставляется заранее сконфигурированной и готовой к использованию. Изменение клиентской части протокола DHCP — непростая задача. Однако если вам необходимо запустить DHCP-сервер, мы рекомендуем использовать пакет ISC, а не пакеты конкретных поставщиков. В обычной гетерогенной среде проце- дура администрирования сильно упростится, если будет применяться единая стандарт- ная реализация протокола DHCP. Пакет ISC — это надежное, открытое решение, без проблем инсталлируемое в большинстве систем UNIX.
518 Часть II. Работа в сети В следующих подразделах мы вкратце рассмотрим особенности протокола DHCP, инсталляцию сервера ISC, реализующего этот протокол, а также конфигурирование DHCP-клиентов. Схема работы DHCP Протокол DHCP — это расширение протокола ВООТР, который был придуман для того, чтобы бездисковые UNIX-станции могли загружаться по сети. Протокол DHCP не ограничивается этими параметрами, вводя понятие “аренды”. DHCP-клиент начинает диалог с DHCP-сервером, посылая широковещательное со- общение вида “помогите мне узнать, кто я”15. Если в локальной сети есть DHCP-сервер, он договаривается с клиентом об аренде IP-адреса и других сетевых параметров (сетевая маска, адреса сервера имен и стандартного шлюза). Если же такого сервера нет, то серверы других подсетей могут получить первоначальное широковещательное сообщение через осо- бую часть программного обеспечения DHCP, которая называется агентом ретрансляции. По истечении половины срока аренды клиент должен ее продлить. Сервер обязан отслеживать адреса, предоставленные в аренду, и сохранять эту информацию при пе- резагрузке. Предполагается, что клиенты делают то же самое, хотя это не обязательно. Благодаря этому достигается максимальная стабилизация сетевой конфигурации. Тео- ретически, все программное обеспечение должно быть готово к мгновенному измене- нию сетевой конфигурации, но большая часть программного обеспечения по-прежнему необоснованно допускает, что сеть остается неизменной. Программное обеспечение DHCP, созданное организацией ISC Демон сервера ISC называется dhcpd, а его файл конфигурации — dhcpd.conf. Обычно этот файл находится в каталоге /etc или /etc/dhcp3. Формат файла конфигу- рации довольно хрупкий; стоит только пропустить двоеточие, как вы получите запутан- ное и бесполезное сообщение об ошибке. Для настройки нового DHCP-сервера необходимо также создать пустой файл базы данных. Проверьте резюме в конце справочной страницы о демоне dhcpd, чтобы опре- делить правильное место для лицензионного файла вашей системы. Обычно оно нахо- дится где-то под каталогом /var. Для заполнения файла dhcpd.conf потребуется следующая информация: • адреса подсетей, для которых демон dhcpd должен управлять IP-адресами, и диа- пазоны выделяемых адресов; • список статических адресов, которые вы хотите создать, а также аппаратные МАС- адреса получателей; • начальный и максимальный сроки аренды в секундах; • остальные параметры, которые сервер должен передавать DHCP-клиентам: сете- вая маска, стандартный маршрут, домен DNS, адреса серверов имен и т.д. На справочной странице (man page), посвященной демону dhcpd, дан обзор процес- са конфигурации. Точный синтаксис конфигурационного файла описан на справочной 15 Клиенты инициируют обмен информацией с DHCP-сервером, используя обобщенный ши- роковещательный адрес. В этот момент клиенты еще не знают маски своих подсетей и, следова- тельно, не могут использовать широковещательный адрес подсети.
Глава 14. Сети TCP/IP 519 странице файла dhcpd. conf. Кроме того, следует убедиться, что демон dhcpd автома- тически запускается на этапе начальной загрузки системы (см. главу 3). Если система не выполняет эту операцию автоматически, полезно сделать запуск демона условным, осуществляемым при наличии файла dhcpd.conf. Ниже показан пример файла dhcpd. conf, взятого из Linux-системы с двумя сетевы- ми интерфейсами: внутренним и внешним, подключенным к Интернету. На компьютере выполняется система NAT для трансляции адресов внутренней сети, которой предостав- ляются десять IP-адресов. Файл содержит пустую запись для внешнего интерфейса (обя- зательна) и запись host для одного компьютера, которому нужен фиксированный адрес. # глобальные параметры option domain-name ”synack.net”; option domain-name-servers gw.synack.net; option subnet-mask 255.255.255.0; default-lease-time 600; max-lease-time 7200; subnet 192.168.1.0 netmask 255.255.255.0 { range 192.168.1.51 192.168.1.60; option broadcast-address 192.168.1.255; option routers gw.synack.net; } subnet 209.180.251.0 netmask 255.255.255.0 { } host gandalf { hardware ethernet 08:00:07:12:34:56; fixed-address gandalf.synack.net; } Ш Более подробная информация о системе DNS приведена в главе 17. Если вы не назначаете статические адреса, как это сделано выше, необходгйй‘&про- анализировать, как ваша DHCP-конфигурация будет взаимодействовать с СЙЪ^емой DNS. Проще всего присвоить каждому динамически выделяемому адресу обпШ имя (например, dhcpl. synack. net) и разрешить, чтобы имена отдельных компьютеров из- менялись вместе с IP-адресами. В качестве альтернативы можно сконфигурировать де- мон dhcpd так, чтобы он обновлял базу данных DNS при выделении очередного адреса. Динамические обновления — сложное решение, но оно позволяет сохранять имена ком- пьютеров неизменными. Агентом ретрансляции в протоколе DHCP, реализованном организацией ISC, яв- ляется отдельный демон dhcrelay. Это простая программа, не имеющая собственно- го файла конфигурации, хотя дистрибутивы системы Linux часто добавляют средства инсталляции, передающие соответствующие аргументы командной строки для вашего сайта. Агент dhcrelay прослушивает запросы DHCP в локальной сети и передает их на Указанные вами удаленные серверы DHCP. Это удобно и для централизации управления службами DHCP, и для облегчения резервного копирования серверов DHCP. Клиент протокола DHCP по версии организации ISC также не имеет конфигурации. Он хранит файл состояний для каждого соединения в каталогах /var/lib/dhcp или /var/lib/dhclient. Имена файлов совпадают с именами интерфейсов, которые они
520 Часть II. Работа в сети описывают. Например, файл dhclient-ethO. leases может содержать все сетевые па- раметры, которые клиент dhclient установил для интерфейса ethO. 14.8. Вопросы безопасности Теме безопасности посвящена глава 22, но ряд вопросов, касающихся IP-сетей, за- служивает отдельного упоминания. В этом разделе рассмотрим сетевые механизмы, ко- торые традиционно вызывают проблемы безопасности, и опишем пути решения этих проблем. Детали функционирования систем, приводимых в качестве примера, очень отличаются друг о друга (как и методы их изменения), поэтому они описываются в от- дельных подразделах. Перенаправление IP-пакетов Если в UNIX- или Linux-системе разрешено перенаправление IP-пакетов, то ком- пьютер может выступать в качестве маршрутизатора. Иначе говоря, он может принимать пакеты от третьей стороны, поступающие на его сетевой интерфейс, сравнивать их со шлюзом или пунктом назначения и передавать по сети. Если ваша система не имеет несколько сетевых интерфейсов и не предназначена для функционирования в роли маршрутизатора, эту функцию рекомендуется отключить. Узлы, перенаправляющие пакеты, часто оказываются вовлеченными в атаки на системы безопасности, будучи вынужденными выдавать внешние пакеты за свои собственные. Эта уловка позволяет пакетам злоумышленников обходить сетевые сканеры и фильтры. Лучше всего, чтобы узел использовал несколько сетевых интерфейсов для своего соб- ственного трафика и не пересылал посторонние пакеты. Директивы переадресации протокола ICMP С помощью переадресующих ICMP-пакетов можно злонамеренно менять направле- ние трафика и редактировать таблицы маршрутизации. Большинство операционных си- стем по умолчанию принимает эти пакеты и следует содержащимся в них инструкциям. Но, согласитесь, вряд ли можно назвать приемлемой ситуацию, когда на несколько ча- сов весь трафик организации перенаправляется конкуренту, особенно если в это время выполняется резервное копирование. Мы рекомендуем так конфигурировать маршрути- заторы (или системы, играющие роль маршрутизаторов), чтобы переадресующие ICMP- пакеты игнорировались и, возможно, фиксировались в журнальном файле. Маршрутизация "от источника” Механизм маршрутизации “от источника” в протоколе IP позволяет отправителю явно указать последовательность шлюзов, через которые должен пройти пакет на пути к получателю. При этом отключается алгоритм поиска следующего перехода, выполняе- мый на каждом шлюзе для определения того, куда нужно послать пакет. Маршрутизация “от источника” была частью исходной спецификации протокола IP и служила для целей тестирования. Но она создает проблему с точки зрения безо- пасности, ведь пакеты часто фильтруются в зависимости от того, откуда они прибыли. Злоумышленник может так подобрать маршрут, что пакет будет казаться прибывшим из внутренней сети, а не из Интернета, поэтому брандмауэр его пропустит. Мы рекоменду- ем не принимать и не перенаправлять доставленные подобным образом пакеты.
Глава 14. Сети TCP/IP 521 Широковещательные ICMP-пакеты и другие виды направленных широковещательных сообщений Пакеты команды ping, несущие в себе широковещательный адрес сети (а не кон- кретного узла), обычно доставляются всем узлам сети. Такие пакеты применяются в ата- ках типа “отказ от обслуживания”, например в так называемых атаках “smurf” (по на- званию программы, в которой они впервые были применены). Широковещательные ICMP-пакеты являются “направленными” в том смысле, что они посылаются по широковещательному адресу конкретной удаленной сети. Стандартные подходы к обработке таких пакетов постепенно меняются. Например, в операционной системе Cisco IOS 11.x и более ранних версий по умолчанию осущест- влялась переадресация направленных широковещательных пакетов, но в версиях 12.0 и выше этого уже нет. Обычно можно настроить стек TCP/IP так, чтобы широковеща- тельные пакеты, приходящие из других сетей, игнорировались, но, поскольку это нужно сделать для каждого сетевого интерфейса, подобная задача является весьма нетривиаль- ной в крупной организации. Подмена IP-адресов Исходный адрес IP-пакета обычно заполняется функциями сетевых библиотек и пред- ставляет собой адрес узла, с которого был отправлен пакет. Но если программа, создающая пакет, работает с низкоуровневым IP-сокетом, она может подставить любой исхфЙйяй адрес, какой пожелает. Это называется подменой IP-адресов и обычно ассоцив^&тся с попытками взлома сети. В этой схеме жертвой часто становится компьютер, идйнти- фицируемый по поддельному IP-адресу (если он действительно существует). Сообщения об ошибках и ответные пакеты могут переполнить и вывести из строя сеть жертвы. Поддельные IP-адреса следует запрещать на пограничном маршрутизаторе, блокируя отправляемые пакеты, исходные адреса которых не находятся в подконтрольном диапа- зоне. Это особенно важно в университетских сетях, где студенты любят эксперименти- ровать и часто подобным образом срывают свою злость. В то же время, если в локальной сети используются адреса из частного диапазона, то фильтрации могут подвергаться пакеты с частными адресами, пытающиеся “проско- чить” в Интернет. Ответ на такие пакеты никогда не будет получен из-за отсутствия со- ответствующих маршрутов в магистральной сети. Их появление свидетельствует о том, что в системе имеется внутренняя ошибка конфигурации. Нужно также защищаться от хакеров, подделывающих исходные адреса внешних па- кетов, вследствие чего брандмауэр начинает считать, будто они поступили из локальной сети. Помочь этому может эвристический метод, названный как “одноадресная транс- ляция по обратному пути ” (unicast reverse path forwarding — uRPF). В этом случае IP- шлюзы будут отвергать все пакеты, удовлетворяющие следующему условию: интерфейс, через который пришел пакет, не совпадает с тем интерфейсом, через который пакет уй- дет, если его исходный адрес будет равен целевому адресу. Для проверки источника се- тевых пакетов этот метод использует обычную таблицу IP-маршрутизации. Метод uRPF применяется не только в специализированных маршрутизаторах, но и в ядре системы Linux, в которой этот режим включен по умолчанию. Если ваш сайт имеет несколько выходов в Интернет, целесообразно разделить внеш- ние маршруты на исходящие и входящие. В этом случае следует отключить режим uRPF, чтобы протокол маршрутизации работал правильно. Если же выход в Интернет только один, безопаснее включить режим uRF.
522 Часть II. Работа в сети Встроенные брандмауэры Как правило, соединение вашей локальной сети с внешним миром и управление тра- фиком в соответствии с правилами сайта, осуществляют сетевые фильтры пакетов или брандмауэры (firewalls). К сожалению, компания Microsoft извратила представление о том, как должен работать брандмауэр, на примере своих систем Windows, печально из- вестных своей уязвимостью. Несколько последних выпусков системы Windows содержа- ли свои собственные брандмауэры и “громко возмущались”, когда пользователь пытал- ся их отключить. Все системы, которые мы используем в качестве примеров, содержат программное обеспечение для фильтрации пакетов, но отсюда не следует, что каждой UNIX- или Linux-машине нужен отдельный брандмауэр. Это не так. Механизмы фильтрации паке- тов, встроенные в эти системы, позволяют этим машинам выполнять функции сетевых шлюзов. Однако мы не рекомендуем использовать рабочую станцию как брандмауэр. Даже самая совершенная операционная система слишком сложна, чтобы быть надежной. Специальное программное обеспечение более предсказуемое и более надежное, даже если оно тайно использует систему Linux. Даже сложное программное обеспечение, предлагаемое, например, компанией Check Point (чьи программы выполняются на узлах под управлением операционных систем UNIX, Linux и Windows), уступает в надежности межсетевым экранам серии Adaptive Security Appliance компании Cisco, хотя имеет почти такую же цену! Более подробное обсуждение брандмауэров содержится в разделе 22.11. Виртуальные частные сети Многим организациям, имеющим офисы в различных частях света, хотелось бы, что- бы все эти офисы были соединены одной большой частной сетью. К сожалению, стои- мость аренды трансконтинентальных и даже транснациональных линий связи делает это нереальным. Таким организациям приходится использовать Интернет в качестве “част- ного” канала, организуя серию защищенных, зашифрованных “туннелей” между офиса- ми. Сетевые конгломераты подобного рода называются виртуальными частными сетями (virtual private network — VPN). Возможности виртуальных частных сетей необходимы также сотрудникам, которые должны соединяться с офисом из дома или находятся в поездке. Система VPN не реша- ет всех вопросов, связанных с безопасностью и данным специальным соединением, но во многих отношениях она вполне безопасна. СЗ О протоколе IPsec рассказывается в разделе 22.14. В ряде частных сетей используется протокол IPsec, который в 1998 году был стандар- тизирован организацией IETF в качестве низкоуровневого приложения к протоколу IP. В других сетях, таких как OpenVPN, система безопасности VPN реализуется на основе протокола TCP с помощью криптографического протокола Transport Layer Security (TSL), который ранее был известен под названием Secure Sockets Layer (SSL). Протокол TSL ожидает своей очереди на стандартизацию в организации IETF, хотя он все еще не при- нят окончательно. Существует масса запатентованных реализаций систем VPN. Эти системы не взаимо- действуют ни друг с другом, ни со стандартизованными системами VPN, но это нельзя считать недостатком, если все конечные точки сети находятся под контролем.
Глава 14. Сети TCP/IP 523 С этой точки зрения системы VPN, основанные на протоколе TLS, являются лидера- ми. Они также безопасны, как и протокол IPsec, но намного проще. Свободная реализа- ция в виде OpenVN также не наносит никакого вреда. (К сожалению, эта система пока не работает под управлением операционных систем HP-UX и AIX.) Для поддержки пользователей, работающих дома или в поездке, стало общеприня- тым использование небольшого компонента Java или ActiveX, загружаемого через их веб- браузеры. Эти компоненты устанавливают соединение VPN с сетью предприятия. Этот механизм удобен для пользователей, но следует учесть, что браузеры сильно отличаются друг от друга: некоторые из них реализуют службу VPN с помощью псевдосетевого ин- терфейса, а другие используют только специальные порты. Впрочем, веб-браузеры по- следней категории намного малочисленнее, чем знаменитые веб-прокси. Пожалуйста, проверьте, что вы правильно понимаете технологию, на которо>осно- ваны применяемые решения, и не ожидайте невозможного. Истинная служба VPN (т.е. полноценное IP-соединение через сетевой интерфейс) требует наличия административ- ных привилегий и инсталляции программного обеспечения на клиентской машине, не- зависимо от того, какая операционная система на ней установлена: Windows или UNIX. Кроме того, следует проверить совместимость браузера, поскольку механизм, применяем мый при реализации систем VPN с помощью одного браузера, часто не поддерживается другим. 14.9. РРР: протокол двухточечного соединения Протокол РРР определен в документе RFC 1331. PPP (Point-to-Point Protocol — протокол двухточечного соединения) представляет базовый канал связи в виде интерфейса виртуальной сети. Однако поскольку базовый канал может не иметь свойств реальной сети, связь ограничена двумя узлами, располо- женными на концах соединения, т.е. виртуальная сеть состоит из двух узлов. Протокол РРР по-разному используется как в самых медленных, так и в самых быстрых IP- соединениях, но по разным причинам. В асинхронной форме протокол РРР широко известен как протокол, обеспечиваю- щий выход в Интернет по телефонным и последовательным каналам. Эти каналы не предназначены для работы с пакетами, поэтому за кодирование и декодирование сете- вых пакетов, передаваемых в поток однородных данных, отвечает драйвер РРР. Он до- бавляет к пакетам заголовки канального уровня и маркеры-разграничители. В синхронной форме протокол РРР представляет собой протокол инкапсуляции пакетов, используемый в высокоскоростных соединениях, на обоих концах которых установлены мощные маршрутизаторы. Протокол РРР широко применяется для реали- зации DSL и кабельных модемов при оказании услуг по широкополосному доступу в Интернет. Во втором случае протокол РРР не только превращает базовую сетевую си- стему (например, ATM (Asynchronous Transfer Mode — асинхронный способ передачи Данных) в технологии DSL (Digital Subscriber Line — цифровая абонентская линия)) в форму, подходящую для работы с протоколами IP, но и осуществляет аутентификацию и управлением доступом в рамках самого соединения. Неким сюрреалистическим обра- зом протокол РРР позволяет реализовать семантику, подобную технологии Ethernet, на основе реальной технологии Ethernet. Эта конфигурация известна под названием “РРР over Ethernet” или РРРоЕ. Поскольку протокол РРР был разработан группой, он представляет собой протокол инкапсуляции “всего на свете и кухонной мойки”. Помимо спецификации установки,
524 Часть II. Работа в сети наладки и демонтажа соединения, протокол РРР осуществляет проверку ошибок, аутен- тификацию, шифрование и сжатие. Эти функциональные возможности позволяют адап- тировать его к любым ситуациям. Протокол РРР, реализующий сетевые технологии на основе телефонных каналов, когда-то представлял большой интерес для системных администраторов, работающих с операционными системами UNIX или Linux, но быстрое распространение широко- полосных сетей сделало телефонные конфигурации практически ненужными. В то же время протокол РРР был широко внедрен в разнообразные специальные сетевые устройства. В настоящее время главной областью применения протокола РРР является обеспечение соединений с помощью сотовых модемов. 14.10. Основы КОНФИГУРИРОВАНИЯ СЕТИ Процесс подключения нового компьютера к существующей локальной сети состоит всего из нескольких этапов, но каждая система делает это по-своему. Системы обычно предоставляют графический пользовательский интерфейс, позволяющий настроить ба- зовую сетевую конфигурацию, но в более сложных (или автоматизированных) сценари- ях инсталляции может понадобиться отредактировать файл конфигурации вручную. Прежде чем подключать компьютер к сети, где есть выход в Интернет, его нужно ос- настить средствами защиты (см. главу 22), чтобы ненароком не привлечь в локальную сеть хакеров. Основные этапы подключения компьютера. • Назначение компьютеру уникального IP-адреса и сетевого имени • Настройка компьютера на конфигурирование своих сетевых интерфейсов в про- цессе начальной загрузки • Задание стандартного маршрута и, возможно, других параметров маршрутизации • Настройка DNS-сервера, чтобы к компьютеру можно было получать доступ через Интернет Если в сети используется сервер DHCP (Dynamic Host Configuration Protocol — про- токол динамического конфигурирования узлов), он возьмет на себя перечисленные выше обязанности. Инсталляция новой операционной системы обычно настраивает свою конфигурацию через протокол DHCP, поэтому новые машины могут вообще не по- требовать определения сетевой конфигурации. Общая информация о протоколе DHCP приведена в разделе 14.7. После внесения любого изменения, которое может повлиять на загрузку операци- онной системы, следует выполнить ее перезагрузку, чтобы проверить, что машина была подключена правильно. Через полгода, когда произойдет сбой питания и машина от- кажется загрузиться, будет сложно вспомнить, какие изменения вызвали эти проблемы (см. также главу 21). Процесс проектирования и инсталляции физической сети описан в главе 16. Если вы имеете дело с существующей сетью и в общих чертах знаете, как она организована, то, наверное, читать о физических аспектах сетей имеет смысл только в том случае, когда планируется расширение действующей сети. В этом разделе мы рассмотрим разные команды и проблемы, связанные с ручной на- стройкой конфигурации сети. Этого вполне достаточно для применения к любой версии систем UNIX или Linux. В разделах, посвященных конкретным версиям операционных
Глава 14. Сети TCP/IP 525 систем, мы обсудим особенности, которые отличают эти системы от систем UNIX и Linux и друг от друга. Просматривая базовую конфигурацию сети любой машины, полезно протестировать соединение с помощью базовых инструментов, таких как утилиты ping и tUbuntuoute. Эти инструменты описаны в главе 21 (более подробная информация приведена в раз- деле 21.2). Присвоение сетевых имен и IP-адресов Существует множество теорий о том, как лучше всего определить соответствие между именами компьютеров и IP-адресами в локальной сети: с помощью файла hosts, про- токола LDAP, системы DNS или комбинации этих средств. С одной стороны, возни- кают конфликтующие цели, такие как возможность масштабирования, согласованность и удобство эксплуатации, а с другой — системы, достаточно гибкие, чтобы позволить загрузку и функционирование компьютеров, когда не все службы доступны. Управление этими факторами описывается в разделе 19.5. CQ Система DNS описывается в главе 17. Еще один важный аспект, который следует учитывать, — возможность изменения адресов в будущем. Если вы не используете частные адреса RFC 1918 (см. раздед/Й.4), то ваши IP-адреса могут быть изменены при переключении на нового интернет- провайдера. Это довольно неприятная процедура, если администратор должен Лично посетить каждый компьютер и вручную сконфигурировать его. Чтобы не усложнять себе жизнь, указывайте в конфигурационных файлах сетевые имена, а привязки к IP-адресам храните только в базе данных DNS и файлах конфигурации DHCP. Использование файла /etc/hosts — старейший и простейший способ преобразова- ния сетевых имен в IP-адреса. Каждая строка файла начинается с IP-адреса и содержит различные символьные имена, под которыми известен адрес. Ниже показан пример со- держимого файла /etc/hosts для узла lollipop. 127.0.0.1 192.108.21.48 192.108.21.254 192.108.21.1 192.225.33.5 localhost lollipop.xor.com lollipop loghost chimchim-gw.xor.com chimchim-gw ns.xor.com ns licenses.xor.com license-server Минимальный вариант этого файла должен содержать первые две строки. Чаще все- го в первой записи файла определяется узел localhost. Кроме того, в этом файле могут быть записаны 1Ру6-адреса. Поскольку файл /etc/hosts содержит лишь локальные адреса привязки и должен находиться на каждой клиентской системе, лучше всего зарезервировать его для ото- бражений, требующихся при загрузке (т.е. для адресов самого узла и маршрутизатора, заданного по умолчанию, а также для имен серверов). Для поиска остальных локальных и глобальных адресов лучше использовать систему DNS или протокол LDAP. Иногда в файле /etc/hosts хранятся записи, о которых не следует “знать” другим компьютерам и которых нет в DNS.16 Команда hostname назначает компьютеру сетевое имя. Она обычно вызывается на этапе начальной загрузки из сценариев запуска системы, которые запрашивают назнача- емое имя из конфигурационного файла. (Естественно, все поставщики систем называют 16 Для этой цели можно также использовать разделенную конфигурацию системы DNS (см. раз- дел 17.9).
526 Часть II. Работа в сети этот файл по-разному. Информация о конкретных системах приведена в разделе 14.11.) В большинстве современных систем компьютеру назначается полностью определен- ное доменное имя, т.е. оно включает как имя узла, так и имя домена DNS, например anchor.cs.Colorado.edu. СЭ Более подробная информация о протоколе LDAP приведена в разделе 19.3. В небольшой организации вполне можно выделять IP-адреса и сетевые имена вруч- ную. Когда же в организации множество сетей и разнородных административных групп, лучше придерживаться принципа централизации. Об уникальности динамически назна- чаемых сетевых параметров заботится сервер DHCP. В некоторых организациях сетевы- ми именами и IP-адресами управляют с помощью баз данных LDAP. Команда ifconfig: конфигурирование сетевых интерфейсов Команда ifconfig используется для подключения и отключения сетевого интер- фейса, а также задания его IP-адреса, маски подсети, других опций и параметров. Она обычно выполняется на этапе начальной загрузки. Аргументы командной строки берут- ся из конфигурационного файла, но могут применяться и для внесения изменений в ра- ботающую систему. Будьте осторожны при модификации удаленной системы, так как не всегда есть возможность оперативно исправить ошибки. В большинстве случаев команда ifconfig имеет следующий формат. ifconfig интерфейс [семейство] адрес опции .. . Например, команда ifconfig ethO 128.138.240.1 netmask 255.255.255.0 up задает 1Ру5-адрес и сетевую маску, связанную с интерфейсом ethO, и приводит интер- фейс в состояние готовности. Параметр интерфейс обозначает аппаратный интерфейс, к которому применяется команда. Обычно он представляет собой двух- или трехсимвольное имя, за которым следует число, но в системе Solaris этот параметр может быть длиннее. Наиболее распро- страненные имена — ieO, 1е0, lei, InO, enO, weO, qeO, nmeO, ethO и lanO. В системе Linux интерфейс обратной связи называется 1о, а в системах Solaris, HP-АХ и AIX — 1о0. В большинстве систем команда ifconfig -а перечисляет сетевые интерфейсы си- стемы и их текущие установки. В системе HP-UX для этой цели используется команда netstat -i. В системе Solaris необходимо сначала “присоединить” сетевые интерфейсы soiaris с помощью команды ifconfig интерфейс plumb и лишь затем настраивать конфигурации и выводить на экран с помощью команды ifgonf ig -а. Параметр семейство сообщает команде ifconfig, какой именно протокол (“семей- ство адресов”) вы хотите конфигурировать. Вы можете установить несколько протоко- лов для одного интерфейса и использовать их одновременно, но конфигурировать их необходимо по отдельности. Основными опциями являются inet для протокола IPv4 и inet6 — для протокола IPv6. По умолчанию используется параметр inet. Система Linux поддерживает также множество унаследованных протоколов, таких как AppleTalk и NoveU IPX. Параметр адрес задает IP-адрес интерфейса. Имя узла также допускается в качестве адресного параметра, но на этапе загрузки по имени узла должен определяться его адрес.
Глава 14. Сети TCP/IP 527 Для основного машинного интерфейса это значит, что имя узла должно находиться в локальном файле hosts, поскольку другие методы разрешения имен зависят от инициа- лизированной сети. Ключевое слово up указывает на активизацию интерфейса, а ключевое слово down — на его отключение. Когда команда if conf ig назначает интерфейсу IP-адрес, как в опи- санном выше примере, ключевое слово up подразумевается неявно и может быть опущено. Команда if conf ig понимает множество опций. Мы рассмотрим лишь самые основ- ные. Как всегда, детали, касающиеся конкретной системы, можно узнать на страницах интерактивного руководства. Все опции имеют символические имена. Некоторые опции требуют аргументов, которые должны следовать сразу за названием опции через пробел. Опция netmask задает маску подсети для данного интерфейса. Эта опция обязатель- на, если подсеть формируется не на основании класса адреса (А, В или С). Маску можно указывать в точечной нотации либо в виде четырехбайтового шестнадцатеричного чис- ла, начинающегося с префикса Ох. В любом случае единичные биты являются частью номера сети, а нулевые биты — частью номера узла. Опция broadcast задает широковещательный IP-адрес интерфейса в шестнадцате- ричной или точечной записи. По умолчанию в широковещательном адресе все биты ма- шинной части равны единице. В приведенном выше примере использования команды ifconfig автоматически конфигурируется широковещательный адрес 192.168.1.255. В качестве широковещательного адреса можно использовать любой IP-адрес, допу- стимый в сети, к которой подключен компьютер. В некоторых организациях широкове- щательный адрес специально выбран нестандартным для предотвращения сетевых ат$^ основанных на широковещательной команде ping. Однако это рискованно и, вероятно, излишне. Сбой при конфигурации каждого широковещательного адреса компьютера может вызвать широковещательный шторм, в ходе которого пакеты будут блуждать от машины к машине, пока не будет исчерпано время TTL (Time to live — время жизни Па- кета данных в протоколе IP. — Примеч. ред.)17 Лучший способ избежать проблем с широковещательными запросами состоит в том, чтобы запретить пограничному маршрутизатору перенаправлять их, а отдельным узлам — отвечать на них. В главе 22 будет рассказано о том, как реализовать подобные ограничения. Система Solaris интегрирует команду ifconfig с клиентским демоном про- soiaris токола DHCP. Команда ifconfig интерфейс dhcp конфигурирует именован- ный интерфейс с помощью параметров, арендованных у локального DHCP- сервера, затем запускает программу dhcpagent, чтобы управлять этими параметрами в течение долгого времени. Другие системы используют команду ifconfig независимо от протокола DHCP, при этом программное обеспече- ние DHCP функционирует на отдельном уровне. 17 Широковещательный шторм (broadcast storm) возникает из-за того, что для транспорта паке- тов должен использоваться один и тот же широковещательный адрес, независимо от того, какой адрес установлен. Например, машина X считает, что широковещательный адрес равен А1, а маши- на Y считает, что он равен А2. Если машина X посылает пакет по адресу А1, то машина Y получит пакет (поскольку адрес назначения на уровне соединения — это широковещательный адрес), затем Увидит, что этот пакет предназначен ни ей, ни широковещательному адресу (поскольку машина Y полагает, что широковещательный адрес равен А2), и может возвратить этот пакет обратно в сеть. Если обе машины находятся в состоянии машины Y, то пакет будет циркулировать в сети, пока не закончится его время жизни. Широковещательные штормы могут разрушить полосу пропускания, особенно в больших коммутируемых сетях.
528 Часть II. Работа в сети Кроме того, с помощью команды if conf ig интерфейс можно получить конфигура- цию отдельного интерфейса. solaris$ ifconfig elOOOgO elOOOgO: flags=1000843<UP,BROADCAST,RUNNING,MULTICAST,IPv4> mtu 1500 index 2 inet 192.168.10.10 netmask ffffffOO broadcast 192.168.10.255 redhat$ ifconfig elOOOgO ethO Link encap:Ethernet HWaddr 00:02:B3:19:C8:86 inet addr:192.168.1.13 Beast:192.168.1.255 Mask:255.255.255.0 UP BROADCAST RUNNING MULTICAST MTU: 1500 Metric:1 RX packets:206983 errors:0 dropped:0 overruns:0 frame:0 TX packets:218292 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:100 Interrupt:? Base address:Oxef00 Отсутствие коллизий в интерфейсе Ethernet во втором примере может указывать на слабо загруженную сеть или, что более вероятно, на коммутируемую сеть. В сети обще- го доступа (организованной с помощью концентраторов, а не коммутаторов) этот по- казатель должен быть ниже уровня 5% от числа отправленных пакетов. Большое число коллизий свидетельствует о загруженности сети, которую, возможно, требуется разбить на подсети или перевести на коммутируемую инфраструктуру. Теперь, когда мы рассмотрели процедуру ручного конфигурирования сетевого ин- терфейса, осталось выяснить, как задавать параметры команды ifconfig на этапе на- чальной загрузки системы. Кроме того, требуется убедиться в том, что новые значения введены правильно. Для этого необходимо отредактировать один или несколько конфи- гурационных файлов. Информация, касающаяся конкретных систем, приведена далее в этой главе. И еще одно замечание по поводу команды ifconfig: вы можете назначать интерфей- су несколько адресов, используя “интерфейсы виртуальной сети” или “1Р-псевдонимы” (IP-aliases). Администраторы могут делать это для того, чтобы позволить одной машине служить хостом для нескольких веб-сайтов (см. раздел 23.3). Параметры сетевого оборудования Довольно часто сетевое устройство имеет настраиваемые параметры, зависящие от типа передающей среды. Чрезвычайно распространенный пример — современные платы Ethernet, которые могут поддерживать скорость передачи 10, 100, 1000 и даже 10000 Мбит/с как в полудуплексном, так и в дуплексном режимах. Большинство уст- ройств по умолчанию находится в режиме автоматического согласования, когда обе сто- роны — сетевая плата и вышестоящее устройство (обычно порт коммутатора) — пыта- ются угадать параметры друг друга. По историческим причинам, процедура автоматического согласования была разра- ботана так, что она напоминает попытку вставить ключ в замочную скважину с завя- занными глазами. Следствием неудачного согласования является высокий коэффициент потери пакетов (особенно больших пакетов). Если в сети начинают происходить загадочные потери пакетов, в первую очередь от- ключите везде режим автоматического согласования. Зафиксируйте скорость и режимы работы сетевых интерфейсов как на серверах, так и на портах коммутатора, к которым они подключены. Автоматическое согласование удобно в динамических сетях организа- ций, где многие сотрудники имеют портативные компьютеры, и совершенно не нужно для статически подключенных компьютеров.
Глава 14. Сети TCP/IP 529 Точный метод, с помощью которого задаются параметры автоматического согласова- ния, меняется от системы к системе. Обсуждение этих вопросов мы начнем в разделе 14.11. Команда route: конфигурирование статических маршрутов Команда route определяет статические маршруты — явно заданные элементы табли- цы маршрутизации, которые обычно не меняются даже в тех случаях, когда запускается демон маршрутизации. При подключении нового компьютера к локальной сети доста- точно указать стандартный маршрут. Маршрутизация рассматривается нами в этой главе и следующей. И хотя информа- ция по основам маршрутизации и команде route приведена здесь, полезно прочитать также несколько первых разделов главы 15. Маршрутизация осуществляется на сетевом уровне. Когда приходит пакет, предназна- ченный для другого узла, его целевой IP-адрес сравнивается с записями в таблице маршру- тизации ядра. При совпадении (хотя бы частичном) с каким-нибудь маршрутом в таблице пакет направляется по IP-адресу следующего шлюза, связанного с данным маршрутом. Но есть два особых случая. Во-первых, пакет может быть адресован компьютеру, включенному в ту же сеть, что и узел-отправитель. В этом случае адрес следующего шлю- за соответствует одному из интерфейсов локального компьютера, и пакет посылает- ся прямо в пункт назначения. Маршруты такого типа добавляются командой ifconfig при конфигурировании интерфейса. Во-вторых, может вообще не оказаться маршрута, совпадающего с адресом пункта назначения. В этом случае применяется маршрут по умолчанию, если таковой имеется, иначе отправителю посылается ICMP-сообщение “network unreachable” (сеть недоступ- на) или “host unreachable” (узел недоступен). Многие локальные сети имеют единственный выход во внешний мир, поэтому им требуется только один маршрут, указывающий на этот выход. В магистральной сети Ин- тернета нет стандартных маршрутов — это конец пути. Каждая команда route добавляет или удаляет один маршрут. К сожалению, команда route — это одна из немногих команд системы UNIX, которые одинаково работают во всех системах, но в каждой из них имеют свой синтаксис. Прототип команды route вы- глядит следующим образом. # route add -net 192.168.45.128/25 zulu-gw.atrust.net Эта команда добавляет маршрут в сеть 192.168.45.128/25 через шлюз маршрутизато- ра zulu-gw. atrust. net, который должен быть либо соседним узлом, либо одним из локальных интерфейсов узла. (Система Linux требует указывать имя gw перед адресом шлюза.) Естественно, маршрутизатор должен уметь преобразовывать имя zulu-gw. atrust. net в IP-адрес. Если ваш DNS-сервер находится на другой стороне шлюза, ис- пользуйте числовой 1Р-адрес! Л Система Linux в качестве пункта назначения для маршрута допускает исполь- зование имени интерфейса (например, ethO). Это эквивалентно указанию пер- вичного IP-адреса интерфейса в качестве адреса шлюза. Иначе говоря, 1-стек пытается осуществить непосредственную доставку на этот интерфейс, а не перенаправлять пакет на отдельный шлюз. Адреса шлюзов на этом маршруте в результатах работы команды netstat -г выглядят как О.О.О.О. Для того чтобы увидеть, где именно проходит маршрут, необходимо поискать в столбце Iface имя интерфейса.
530 Часть II. Работа в сети Сети назначения традиционно задаются отдельными IP-адресами и сетевыми ма- сками, но в настоящее время все версии команды route, за исключением ее версии в системе HP-UX, понимают обозначения CIDR (например, 128.138.176.0/20). Система обозначений CIDR яснее, и пользователю остается лишь побеспокоиться о некоторых вопросах синтаксиса, зависящего от системы. Даже система Linux допускает обозначе- ния CIDR, хотя в справочной системе на странице, посвященной команде route, об этом ничего не сказано. В системе Solaris есть остроумная опция -р для команды route, которая позво- soians ляет сохранить изменения даже после перезагрузки. Кроме таблицы маршру- тизации, принадлежащей ядру, изменения записываются в файл /etc/inet/ static_routes и хранятся там в момент загрузки. Перечислим еще несколько приемов. • Если вы хотите увидеть имена, а не числа, то для того, чтобы проверить суще- ствующие маршруты, используйте команды netstat -nr или netstat -г. Числа часто удобнее при отладке, поскольку имя может быть искажено. Пример работы команды netstat приведен в разделе 14.5. • Для указания стандартного маршрута системы используйте ключевое слово default вместо адреса или сетевого имени. • Для того чтобы удалить записи из таблицы маршрутизации, используйте команды route delete или route del. • Для инициализации таблицы маршрутизации и начала работы в системе UNIX ис- пользуйте команды route -f или route flush. • Маршруты в протоколе IPv6 задаются так же, как и маршруты в протоколе IPv4. Для того чтобы указать команде route, что используется адресное пространство протокола IPv6, необходимо использовать опции -inet6 или -A inet6. • Файл /etc/networks задает преобразование имен в сетевые номера, аналогич- но тому как файл hosts отображает имена узлов в IP-адреса. Такие команды, как route, ожидающие сетевой номер, могут принимать имя, если оно указано в фай- ле networks. Сетевые имена можно также перечислить в базах данных NIS или DNS (см. документ RFC1101). • Для установки маршрута, специфичного для заданного IP-адреса, можно исполь- зовать команду route add -host. По существу, эта команда аналогична заданию маршрута с маской 255.255.255.255, но при этом он отдельно отмечается в таблице маршрутизации. Конфигурирование DNS Для того чтобы сконфигурировать компьютер в качестве DNS-клиента, достаточно отредактировать файл /etc/resolv.conf. DNS-служба при этом, строго говоря, не нужна (см. раздел 19.5), но трудно представить себе ситуацию, в которой без нее можно было бы вообще обойтись. Файл /etc/resolv.conf содержит список DNS-доменов, просматриваемых при анализе неполных имен (например, “anchor” вместо anchor.cs.colorado.edu), и список IP-адресов серверов имен, в которых осуществляется поиск имен. Ниже показан пример этого файла; подробнее о нем рассказывается в разделе 17.3.
Глава 14. Сети TCP/IP 531 search cs.colorado.edu colorado.edu nameserver 128.138.242.1 nameserver 128.138.243.151 nameserver 192.108.21.1 Первым должен быть приведен “ближайший” стабильный сервер имен, так как он опрашивается в первую очередь. Всего можно задать три записи nameserver. Жела- тельно указывать более одного сервера. Период тайм-аута DNS-запроса к конкретному серверу имен достаточно велик, поэтому, если первый сервер не отвечает, пользовате- ли это заметят. Если локальный узел получает адреса своих DNS-служб через протокол DHCP, то клиентское программное обеспечение протокола DHCP записывает адреса, полученные в аренду, в файл resolv.conf. Поскольку конфигурация DHCP в боль- шинстве систем задана по умолчанию, обычно нет необходимости редактировать файл resolv.conf самостоятельно, если DHCP-сервер настроен корректно. Многие сайты используют реализацию DNS-сервера Active Directory, созданную ком- панией Miscosoft. Она прекрасно работает с файлом resolv.conf в системах UNIX и Linux, и нет никакой необходимости придумывать что-либо другое. 14.11. Сетевое конфигурирование В РАЗЛИЧНЫХ СИСТЕМАХ В ранних версиях систем UNIX настройка сетевой конфигурации осуществлялась пу- тем редактирования сценариев системной загрузки и непосредственного изменения со- держащихся в них команд. Современные системы содержат сценарии, доступные только для чтения; они охватывают множество сценариев конфигурирования и осуществляют выбор, основываясь на повторном использовании информации, содержащейся в других системных файлах, или на данных, содержащихся в файлах конфигурации. Несмотря на то что разделение конфигурации и реализации — хорошая идея, каждая система осуществляет ее немного иначе, чем другая. Формат и способы использования файлов /etc/hosts и /etc/resolv.conf в системах UNIX и Linux довольно хорошо согласованы, но этого нельзя со всей определенностью сказать обо всех системах. Многие системы обеспечивают графический пользовательский интерфейс дая вы- полнения основных задач, связанных с конфигурированием, однако соответствие между визуальным интерфейсом и файлами конфигурации часто остается неясным. Кроме того, графический пользовательский интерфейс часто игнорирует сложные варианты конфигурации и остается довольно неудобным для удаленного и автоматизированного администрирования. В следующих разделах мы раскритикуем некоторые варианты кон- фигурирования, опишем то, что происходит за кулисами, и раскроем детали сетевого конфигурирования для каждой из популярных операционных систем. В частности, мы рассмотрим следующие вопросы. • Основная конфигурация • Конфигурация DHC-клиента • Динамическое конфигурирование и настройка • Безопасность, брандмауэры, фильтрация и конфигурация NAT • Трюки Однако в каждом разделе не обязательно обсуждать все операционные системы.
532 Часть и. Работа в сети Следует иметь в виду, что в большинстве случаев сетевое конфигурирование осущест- вляется в момент загрузки, поэтому эта тема частично перекрывается с информацией, представленной в главе 3. 14.12. Сетевое конфигурирование в системе Linux Д Система Linux — одна из систем, в которых новые сетевые функциональные возможности реализуются в первую очередь. Семейство систем Linux иногда изменяется настолько быстро, что теряет возможность взаимодействия с осталь- ной сетевой инфраструктурой. Например, реализация в системе Linux явного уведомления о перегруженности (explicit cogestion notification — ECN), опи- санного в документе RFC2481, противоречит некорректным установкам, за- данным по умолчанию в устаревшем брандмауэре компании Cisco, что вызы- вает удаление всех пакетов, содержащих набор битов ECN. Разработчики системы Linux любят чинить ее на скорую руку и часто реализуют функциональные возможности и алгоритмы, пока не имеющие принятых стандартов. Примером этого является включение сменных алгоритмов контроля за перегрузкой в ядро системы Linux версии 2.6.13. Некоторые функциональные возможности предусма- тривают варианты для сетей с потерями (lossy networks), высокоскоростных глобальных вычислительных сетей (wide area network — WAN) с большими потерями пакетов, спут- никовыми связями и т.д. Стандартный механизм “гепо”, реализованный в протоколе TCP (медленный старт, избегание перегрузок, быстрая повторная пересылка и быстрое восстановление), по-прежнему используется по умолчанию, но в конкретной среде мо- жет оказаться более приемлемым другой вариант. После внесения любых изменений в файл, управляющий сетевой конфигурацией в момент загрузки, необходимо либо перезагрузить систему, либо отключить сетевой ин- терфейс, а затем снова включить его, чтобы изменения вступили в силу. В большинстве систем Linux для этой цели можно использовать команды if down интерфейс или if up интерфейс, хотя их реализации не являются идентичными. (В системе SUSE команды ifup и ifdown выполняются, только если работа в сети не находится под управлением демона NetworkManager.) Демон NetworkManager Поддержка работы в мобильной сети, осуществляемая в системе Linux, некоторое вре- мя была довольно неорганизованной, пока в 2004 году не появился демон NetworkManager. Он состоит из службы, предназначенной для непрерывного функционирования, а так- же приложения для работы с областью уведомлений, позволяющего конфигурировать индивидуальные сетевые интерфейсы. Кроме разнообразных проводных сетей, демон NetworkManager поддерживает также работу беспроводных сетей, систем беспроводного широкополосного доступа и частных виртуальных сетей (VPN). Он постоянно осущест- вляет оценку доступных сетей и переключает службу на “предпочтительные” сети, как только те становятся доступными. Наиболее предпочтительными являются проводные сети, за ними следуют обычные беспроводные сети. Все это довольно сильно изменило сетевую конфигурацию системы Linux. Помимо того, что она стала более изменчивой по сравнению с традиционной статической кон- фигурацией, теперь она запускается и управляется пользователем, а не системным ад- министратором. Демон NetworkManager широко внедрен в дистрибутивы систем Linux,
Глава 14. Сети TCP/IP 533 включая все экземпляры, рассматриваемые в книге, но для того чтобы избежать нару- шения существующих сценариев и настроек, он обычно предусматривается как “парал- лельная вселенная” в дополнение к традиционной сетевой конфигурации, которая ис- пользовалась в прошлом. Система SUSE предлагает сделать выбор между миром демона NetworkManager и уста- ревшей конфигурацией, управляемой посредством программного пакета YaST. Система Ubuntu запускает демона NetworkManager по умолчанию, сохраняя при этом статически конфигурируемые сетевые интерфейсы за пределами демона NetworkManager. Система Red Hat Enterprise Linux вообще не запускает демона NetworkManager по умолчанию. Демон NetworkManager, в основном, используется в ноутбуках, поскольку их се- тевое окружение может часто изменяться. Для серверов и настольных систем демон NetworkManager не обязателен и фактически может даже усложнять администрирова- ние. В этом окружении он должен игнорироваться или отключаться. Сетевое конфигурирование в системе Ubuntu ®Как показано в табл. 14.6, система Ubuntu задает конфигурацию сети в файлах /etc/hostname/ и /etc/network/interfaces, а справочная информация записана в файле /etc/network/options. Таблица 14.6. Сетевая конфигурация системы Ubuntu, записанная в каталоге /etc Файл • ' ;~ hostname Имя компьютера network/interfaces IP-адрес, сетевая маска, стандартный маршрут Имя компьютера задается в файле /etc/hostname/. Имя, записанное в этом файле, должно быть полностью квалифицированным; оно используется в самых разных кон- текстах, некоторые из которых требуют полной квалификации. IP-адрес, сетевая маска и стандартный шлюз задаются в файле /etc/network /interfaces. Каждый интерфейс задается строкой, начинающейся с ключевого слова i face. За этой строкой могут следовать строки, задающие дополнительные параметры. Рассмотрим пример. auto lo ethO iface lo inet loopback iface eyhO inet static address 192.168.1.102 netmask 255.255.255.0 gateway 192.168.1.254 Команды ifup и ifdown читают этот файл и, соответственно, подключают или от- ключают интерфейсы, вызывая низкоуровневые команды (например, ifconfig) с соот- ветствующими параметрами. Строка auto задает интерфейсы, которые должны вклю- чаться при загрузке или при выполнении команды ifup -а. Ключевое слово inet в строке iface определяет семейство адресов наподобие ifconfig. Ключевое слово static обозначает способ описания интерфейса и указывает на то, что IP-адрес и сетевая маска интерфейса ethO будут заданы непосредственно. Для статических интерфейсов строки address и netmask являются обязательными. В пер- вых версиях ядра Linux необходимо было указывать также адрес сети, но современные Ядра “умнее” и могут самостоятельно определить его на основании IP-адреса и маски. В строке gateway определяется адрес стандартного шлюза.
534 Часть и. Работа в сети Сетевое конфигурирование в системе SUSE Система SUSE осуществляет выбор между демоном NetworkManager и тради- ционной системой конфигурирования. Выбор происходит в пакете YaST; вы можете также использовать графический пользовательский интерфейс паке- та YaST. Здесь будем предполагать, что используется традиционная система. Кроме конфигурирования сетевых интерфейсов, пакет YaST обеспечивает не- посредственные пользовательские интерфейсы для ввода файла /etc/hosts, статических маршрутов и конфигурации DNS. Описание файлов конфигура- ции приведено в табл. 14.7. Таблица 14.7. Сетевые конфигурационные файлы SuSE из каталога /etc/sysconf ig/network 1 " Файл •.-•i-z.' ... ifcfg-интерфейс ifroute-интерфейс routes config Имя компьютера, IP-адрес, сетевая маска и др. Определение маршрута, связанного с интерфейсом Стандартный маршрут, статические маршруты Множество переменных, которые используются относительно редко За исключением параметров DNS и имени компьютера, система SUSE устанавливает большинство сетевых опций в файлах ltatg-интерфейс, находящихся в каталоге /etc /sysconfig/network. Каждому интерфейсу в системе должен соответствовать отдель- ный файл. Кроме IP-адресов, шлюза и информации о широкополосном доступе для интер- фейса, файлы ifcfg-* могут содержать другие сетевые настройки. В качестве приме- ра можно открыть файл ifcfg. template, в котором содержатся ясные комментарии о возможных параметрах. Рассмотрим пример, содержащий наши комментарии. BOOTPROTO='static' #Подразумевается статический IP-адрес IPADDR='192.168.1.4/24' #/24 определяет переменные NETWORK и NETMASK NAME='AMD PCnet - Fast 79C971' #Используется для запуска #и остановки интерфейса STARTMODE=’auto' #3апускается автоматически во время загрузки USERCONTROL='по' #Отключает управление со стороны графического #пользовательского интерфейса kinternet/cinternet Глобальная статическая информация о маршрутизации в системе SUSE (включая стандартный маршрут) хранится в файле route. Каждая строка в этом файле напоми- нает команду route с пропущенными необязательными именами и содержит информа- цию о пункте назначения, шлюзе, сетевой маске, интерфейсе и других необязательных параметрах, которые должны храниться в таблице маршрутизации и предназначаются для демонов маршрутизации. Файл route для компьютера, конфигурация которого по- казана выше и который имеет только один стандартный маршрут, содержит следующую строку. default 192.168.1.254 - - Маршруты, являющиеся уникальными для каждого конкретного интерфейса, хра- нятся в файле if route-интерфейс, в котором номенклатура компонента интерфейс со- впадает с номенклатурой файлов ifcfg-*. Содержимое этих файлов имеет тот же фор- мат, что и содержимое файла route.
Глава 14. Сети TCP/IP 535 Сетевое конфигурирование в системе Red Hat Графический пользовательский интерфейс для сетевой конфигурации системы Red Hat называется system-config-network; он также доступен из меню System->Admi- nistration под именем Network. Этот инструмент обеспечивает простой пользовательский интерфейс для конфигурирования индивидуальных сетевых интерфейсов и статических маршрутов. Он также имеет панели для установки туннелей IPsec, конфигурирования системы DNS и добавления записей в файл /etc/hosts. Файлы конфигурации, которые можно редактировать с помощью графического поль- зовательского интерфейса, перечислены в табл. 14.8. Таблица 14.8. Сетевые конфигурационные файлы SuSE из каталога /etc/sysconfig/network Файл , network Имя компьютера, стандартный маршрут static-routes Статические маршруты network-scripts/ifcfg-ifname Параметры интерфейсов: IP-адреса, сетевые маски и т.д. Имя компьютера записывается в файл /etc/sysconfug/network, который также содержит имя домена DNS и информацию о стандартном шлюзе. Например, ниже приведено содержимое файла network для компьютера с един- ственным интерфейсом Ethernet. NETWORKING=yes NETW0RKING_IPV6=no HOSTNAME=redhat.toadranch.com DOMAINNAME=toadranch.com ### необязательное поле GATEWAY=192.168.1.254 Данные, связанные с интерфейсом, хранятся в файле /etc/sysconfig/network- scripts/ifcfg-i fname, где параметр i fname — имя сетевого интерфейса. Эти файлы конфигурации задают IP-адрес, сетевую маску, сеть и широковещательный адрес для каждого интерфейса. Они также содержат строку, указывающую, должен ли интерфейс включаться в момент загрузки. Типичный компьютер имеет файлы для интерфейса Ethernet (ethO) и интерфейс об- ратной связи (1о). Рассмотрим пример. Обычно в системе присутствуют файлы для Ethemet-платы (ethO) и интерфейса об- ратной связи (1о). Вот каким будет содержимое файлов ifcfg-ifcfg-ethO и ifcfg-lo Для узла redhat. toadranch. com, описанного выше в файле network. DEVICE=ethO IPADDRS92.168.1.13 NETMASK=255.255.255.0 NETWORKS92.168.1.0 BROADCASTS 92.168.1.255 ONBOOT=yes И devices© IPADDRS27.0.0.1 NETMASK=255.0.0.0 NETWORKS27.0.0.0 BROADCASTS27.255.255.255
536 Часть II. Работа в сети ONBOOT=yes NAME=loopback Настройки интерфейса ethO на основе протокола DHCP выглядят еще проще. DEVICE=ethO BOOTROTO=dhcp ONBOOT=yes После изменения информации о конфигурации в файле /etc/sysconfig следует выполнить команду if down if пате, а затем ifup if пате, где if пате — имя соответ- ствующего интерфейса. Для одновременной конфигурации нескольких интерфейсов можно использовать команду service network restart, которая перезагружает сеть. (На самом деле эта команда представляет собой упрощенный способ вызова утилиты /etc/rc.d/init.d/network, которая вызывается в момент загрузки с аргументом start.) Сценарии запуска Red Hat также могут конфигурировать статические маршруты. Любой маршрут, внесенный в файл /etc/sysconfig/static-routes, добавляется в таблицу маршрутизации на этапе начальной загрузки. Записи этого файла содержат ар- гументы для команды route add, хотя и в смешанном порядке (интерфейс указан пер- вым, а не последним). ethO net 130.225.204.48 netmask 255.255.255.248 gw 130.225.204.49 ethl net 192.38.8.0 netmask 255.255.255.224 gw 192.38.8.129 Интерфейс указывается первым, но на самом деле он перемещается в конец команд- ной строки route, устанавливая связь маршрута с конкретным интерфейсом. (Этот же прием используется в графических пользовательских интерфейсах, где маршруты кон- фигурируются как часть настройки каждого интерфейса.) Оставшаяся часть строки со- держит аргументы команды route. Пример команды static-routes, приведенный выше, генерирует следующие команды. route add -net 130.225.204.48 netmask 255.255.255.248 gw 130.225.204.49 ethO route add -net 192.38.8.0 netmask 255.255.255.224 gw 192.38.8.129 ethl Ядра современных систем семейства Linux не используют параметр metric команды route, но позволяют вводить его в таблицу маршрутизации для использования демона- 5 ми маршрутизации. Настройка сетевого оборудования в системе Linux Команда ethtool запрашивает и устанавливает параметры сетевого интерфейса, ха- рактерные для среды, например скорость связи и дуплекс. Она представляет собой заме- ну старой команды mii-tool, но в некоторых системах используются обе команды. Запросить состояние интерфейса можно, просто назвав его имя. Например, интер- фейс ethO (типичная сетевая карта на материнской плате персонального компьютера), описанный ниже, допускает автонастройку и в настоящий момент работает на предель- ной скорости. ubuntu# ethtool ethO Settings for ethO: Supported ports: [ TP Mil ] Supported link modes: lObaseT/Half lObaseT/Full lOObaseT/Half lOObaseT/Full lOOObaseT/Half lOOObaseT/Full Supports auto-negotiation: Yes
Глава 14. Сети TCP/IP 537 Advertises link modes: lObaseT/Half 100baseT/Half lOOObaseT/Half Advertises auto-negotiation: Yes Speed: lOOOMb/s Duplex: Full Port: Mil PHYAD: 0 Transceiver: internal Auto-negotiation: on Supports Wake-on: pumbg Wake-on: g Current message level: 0x00000033 (51) Link detected: yes lObaseT/Full lOObaseT/Full lOOObaseT/Full Для того чтобы перевести этот интерфейс в полнодуплексный режим на скорости 100 Мбит/с, используется следующая команда. ubuntu# ethtool -s ethO speed 100 duplex full Если вы пытаетесь определить, надежна ли автонастройка в вашей среде, то может оказаться полезной команда ethtool -г. Она вызывает мгновенную перенастройку па- раметров связи. Еще одним полезным вариантом является опция -к, которая показывает, какая из задач, связанных с протоколом, была назначена сетевому интерфейсу, а не выполняется ядром. Большинство интерфейсов может вычислять контрольные суммы, а также вы- полнять сегментацию. Если вы сомневаетесь, что сетевой интерфейс надежно выпол- няет эти задания, то лучше их отключить. Для включения и отключения этих функций используется команда ethtool -К в сочетании с другими опциями. (Опция -к демон- стрирует текущее состояние, а опция -К устанавливает его.) Любые изменения, сделанные с помощью команды ethtool, являются временны- ми. Если вы хотите, чтобы они стали постоянными, то следует убедиться, что команда ethtool выполняется как часть конфигурации сетевого интерфейса. Для этого лучше всего сделать ее частью конфигурации каждого интерфейса; если просто выполнять какие-то команды ethtool во время загрузки, то ваша конфигурация не будет правиль- но учитывать случаи, когда интерфейсы запускаются вновь без перезагрузки системы. Работая с системой Red Hat, можно включить в файл конфигурации интер- фейса, расположенный в каталоге /etc/sysconfig/network-scripts, стро- ку ETHTOOL_OPTS=line. В качестве аргумента команда ifup передает коман- де ethtool целую строку. Система SUSE выполняет команду ethtool аналогично системе Red Hat, но опция называется ETHTOOL OPTIONS и файлы конфигурации каждого интер- фейса хранятся в каталоге /etc/sysconf ig/network. В системе Ubuntu команду ethtool можно выполнить в рамках сценария post-up, заданного в конфигурации интерфейса в каталоге /etc/network/ interfaces. Опции протокола Linux TCP/IP Система Linux помещает представление каждой настраиваемой переменной ядра в виртуальную файловую систему /ргос. Сетевые переменные находятся в каталоге /ргос/
538 Часть II. Работа в сети sys/net/ipv4. Приведем для иллюстрации сокращенный список наиболее интересных из них. ubuntu$ cd /proc/sys/net/ipv4; Is -F t cp_n o_me t r i c s_s a ve conf/ tcp_congestion_control tcp_orphan_retries icmp_echo_ignore_all tcp_dma_copybreak tcp_reordering icmp_echo_ignore_broadcast tcp_dsack tcp_retrans_collapse tcp_ecn tcp_retriesl icmp_ratelimit tck_fack tcp_retries2 icmp_ratemask tcp_fin_timeout tcp_rfcl337 i gmp__max_membe r s h ip s tcp_frto tcp_rmem igmp_max_msf tcp_frto_response tcp_sack inet_peer_gc_maxtime tcp_keepa1ive_intvl .. . i ne t_pee r_g c_mi n t ime tcp_keepalive_probes tcp_stdurg inet_peer_maxttl t cp_keepa1ive_t ime tcp_synack_retries inet_peer_minttl tcp_low_latency tcp_syncookies inet_peer_threshold tcp_max_orphans tcp_syn_retries ip_de f au11_111 tcp_max_ssthresh t cp_t ime s t amp s ip_default_ttl tcp_max_syn_backlog ... ip_forward t cp_max_t w_bu c ke t s udp_mem ... tcp_mem udp_rmem_min neigh/ t cp_mo de r a t e_r cvbu f udp_wmem_min route/ tcp_mtu_probing Многие переменные, имена которых содержат слова rate и шах, используются для противодействия DoS-атакам (denial of service attacks). Подкаталог conf содержит пе- ременные, устанавливаемые для каждого интерфейса. Он содержит подкаталоги all и default и отдельный подкаталог для каждого интерфейса (включая интерфейсы loopback). Каждый подкаталог содержит один и тот же набор файлов. ubuntu$ cd conf/default; Is -F accept_redirects disable_policy promote_secondaries accept_redirects disable_xfrm proxy_arp arp_accept force_igmp_version rp_filter arp_announce forwarding secure_redirects arp_filter log_martians send_redirects arp_ignore mc_forwarding shared_media bootp_relay medium_id tag Например, если изменить переменную в подкаталоге conf/ethO, то это изменение будет относиться только к данному интерфейсу. Если изменить значение в каталоге conf/all, то можно ожидать, что соответствующее изменение произойдет во всех су- ществующих интерфейсах, но не факт, что это произойдет на самом деле. Для каждой переменной существуют собственные правила принятия изменений с помощью каталога all. Некоторые изменения применяются к существующим значениям по правилу OR, некоторые — по правилу AND, а остальные — по правилам МАХ и MIN. Кроме ис- ходного кода ядра, этот процесс больше не описан ни в одном документе, поэтому таких неопределенных ситуаций лучше всего избегать, ограничивая изменения отдельными интерфейсами. Если изменить переменную в каталоге conf/default, то новое значение будет отно- ситься ко всем интерфейсам, которые будут конфигурироваться позднее. С другой сто- роны, лучше всего использовать значения, принятые по умолчанию, лишь для справки;
Глава 14. Сети TCP/IP 539 это позволит восстановить нормальное функционирование системы в случае неудачного конфигурирования. Каталог /proc/sys/net/ipv4/neigh содержит также подкаталоги для каждого ин- терфейса. Файлы в каждом из этих подкаталогов управляют ARP-таблицей и выявлением “соседей” данного интерфейса по протоколу IPv6. Приведем список этих переменных; переменные, имена которых начинаются с букв gc (garbage collection — сборка мусора), определяют, каким образом устаревают и аннулируются записи в ARP-таблице. ubuntu$ cd neigh/default; Is -F anycast_delay gc_stale_time proxy_delay app_solicit gc_threshl proxy_qlen base_reachable_time gc_thresh2 retranS—time bade_reachable_time_ms gc_thresh3 retrans_time_ms delay_first_probe_time locktime ucast_solicit gc_interval mcast_solicit unres_qlen Для того чтобы увидеть значение переменной, следует применить команду echo к Со- ответствующему имени файла. Например, команда ubuntu# cat icmp__echo__ignore_broadcast О показывает, что значение этой переменной равно нулю, т.е. широковещательная про- верка связи не игнорируется. Для того чтобы установить это значение равным единице (и тем самым предотвратить атаку DoS типа Smurf), следует выполнить команду ubuntu# sudo sh -с "echo 1 > icmp_echo_ignore_broadcasts"18 в каталоге /ргос/sys/net. Обычно вы зарегистрированы в той же сети, которую пытаетесь настроить, поэто- му будьте осторожны! Вы можете так запутать настройки, что придется перегружать си- стему с консоли, а это может оказаться неудобным, если система, например, находится в Пойнт-Барроу, штат Аляска, и за окном январь. Прежде чем даже просто подумать о настройке головного компьютера (production machine), проведите тестирование на своей настольной системе. Для того чтобы указанные изменения стали постоянными (или, говоря точнее, что- бы они восстанавливались при каждой перезагрузке системы), добавьте сосхйЁМетвую- щие переменные в каталог /etc/sysctl. conf, который считывается командой sysctl во время загрузки. Формат файла sysctl.conf выглядит так: переменная=значение, а не echo value > variable, как это принято в оболочке при изменении переменно вручную. Именами переменных являются относительные пути к каталогу /ргос/зуй; кроме того, если хотите, можно использовать точки, а не косые черты. Например, каж- дая из строк net.ipv4.ip_forward=0 net/ipv4/ip_forward=0 в файле /etc/sysctl/conf отключает пересылку IP-пакетов на заданный хост. Некоторые подкаталоги каталога /ргос документированы лечше, чем другие. Лучше всего обратиться к разделу 7 справочной системы протокола. Например, команда 18 Если попытаться выполнить эту команду в форме sudo echo 1 > icmp_echo_ignore^ broadcasts, то будет сгенерировано сообщение “в разрешении отказано”, потому что ваша обо- лочка пытается открыть выходной файл до выполнения команды sudo. Вы же хотите применить команду sudo как к команде echo, так и к перенаправлению. Следовательно, вы должны создать корневую подоболочку (root subshell), в которой необходимо выполнять всю команду целиком.
540 Часть II. Работа в сети man 7 icmp документирует четыре из шести возможных вариантов. (При этом необхо- димо, чтобы справочные страницы о ядре системы Linux были инсталлированы заранее.) Кроме того, полезные комментарии можно найти в файле ip_sysctl. txt, находя- щемся в дистрибутивах исходного кода ядра. Если исходный код ядра не инсталлирован, то отправьте в поисковую систему запрос ip-sysctl-txt. Переменные ядра, связанные с безопасностью В табл. 14.9 описано стандартное поведение Linux-систем в отношении различных сетевых методик обеспечения безопасности. Все они кратко рассмотрены выше. Мы ре- комендуем установить соответствующие параметры так, чтобы система не отвечала на широковещательные ICMP-запросы, не подчинялась директивам переадресации и не принимала пакеты, маршрутизируемые “от источника”. Таблица 14.9. Режимы безопасности в системе Linux, заданные по умолчанию функциональная ' - -‘ ВОЗМОЖНОСТЬ - ? Пересылка IP-пакетов Отключена Включена ipjorward для всей системы conf/интерфейс/forwarding для каж- дого интерфейсаа Переадресующие Принимаются Игнорируются conf/wHrep(/)ewc/accept_redirects ICMP-пакеты Маршрутизация “от источника” Переменная Переменная conf/MHrep</)eMc/accept_source_route Широковещательное тестиро- Игнорируется Игнорируется icmp_echo_ignore_broadcasts вание а В качестве параметра интерфейс может быть задано имя конкретного интерфейса или ключевое слово all. Система Linux NAT и фильтрация пакетов В системе Linux традиционно реализуется лишь отдельная разновидность системы NAT (Network Address Translation — трансляция сетевых адресов), называемая PAT (Port Address Translation — трансляция адресов портов). В ней не используется диапазон част- ных адресов, как в истинной системе NAT, а все соединения коммутируются по одному адресу. Впрочем, с практической точки зрения это не имеет особого значения. Утилита iptables реализует не только систему NAT, но и фильтрацию пакетов. В ранних версиях системы Linux эта функциональная возможность была относительно запутанной, но утилита iptables позволила намного точнее отделить систему NAT от фильтрации пакетов. Фильтрации пакетов посвящен раздел 22.11. Если система NAT используется для обеспечения доступа в Интернет с локальных компьютеров, то при ее работе необходимо использовать полный набор фильтров брандмауэра. Тот факт, что “система NAT не осу- ществляет реальную маршрутизацию” не делает шлюз Linux NAT более безопасным, чем маршрутизатор Linux. Для краткости мы опишем только реальную конфигурацию систе- мы NAT, однако следует помнить, что это лишь малая часть полной конфигурации. Для того чтобы осуществлялось IP-маскирование, нужно включить перенаправление IP-пакетов и скомпилировать ядро, задав переменную ядра в каталоге /proc/sys/net /ipv4/ip_forward равной 1. Кроме того, необходимо вставить соответствующие мо- дули ядра.
Глава 14. Сети TCP/IP 541 ubuntu $ sudo /sbin/modprobe iptable_nat ubuntu$ sudo /sbin/modprobe iptable_conn track ubuntu $ sudo /sbin/modprobe iptable__conntrack_ftp Существует много других модулей, обслуживающих соединения; их более полный список можно найти в подкаталоге /lib/modules. Команда iptables для маршрутизации пакетов с помощью системы NAT имеет сле- дующий вид. sudo iptables -t -nat -A -POSTROUTING -0 ethl -j SNAT -to 63.173.189.1 В данном примере интерфейсом для связи с Интернетом является интерфейс ethO. Он не появляется в этой командной строке непосредственно. Вместо него в командной строке используется его IP-адрес в качестве аргумента —to. Интерфейс ethl связан с внутренней сетью. Оказывается, все пакеты, направляемые от интернет-хостов во внутреннюю сеть имеют IP-адрес интерфейса ethO. Хост, выполняющий систему NAT, получает входные пакеты, ищет их настоящие адреса, заменяет эти адреса соответствующими адресами внутренней сети и “отпускает их с миром”. 14.13. Работа в сети под управлением системы Solaris У4*/ Система Solaris поставляется с огромным набором сценариев запуска. На SOiariS одной презентации мы выиграли отрывной календарь системного админи- стратора, в котором на каждой странице были помещены тривиальные вопро- сы. Вопрос для 1 января звучал так: “Назовите все файлы, которые следует открыть, если вы хотите изменить имя компьютера и IP-адрес машины, на которой выполняется система Solaris”. Ответ состоял из имен шести файлов. Такая модульность представляет собой эксцентричную крайность. Однако^ вернемся к сетевой конфигурации системы Solaris. Основная сетевая конфигурация системы Solaris Система Solaris одну часть файлов сетевой конфигурации прячет в каталоге /etc, а другую — в каталоге /etc/inet. Многие из них дублируются посредством таинствен- ных символьных связей, благодаря которым реальные файлы могут находиться в катало- ге /etc/inet, а связи — в каталоге /etc. Для того чтобы задать имя компьютера, введите его в файл /etc/nodename. Изме- нение вступит в силу при перезагрузке компьютера. Некоторые сайты используют ко- роткое имя компьютера, в то время как другие — полностью квалифицированное до- менное имя. Ш Информация о переключении службы имен приводится в разделе 19.5. Имя файла /etc/defaultdomain означает, что его можно использовать только в Данном домене DNS, но на самом деле он задает доменное имя NIS или NIS+. Домен DNS задается в каталоге /etc/resolv.conf, как обычно. Для определения порядка, в котором производится просмотр имен компьютеров в базе данных /etc/hosts и в службах NIS, NIS+ и DNS, система Solaris использует файл /etc/nsswitch. conf. Для того чтобы не усложнять загрузку, рекомендуем сначала про-
542 Часть II. Работа в сети сматривать файл hosts, а затем службу DNS. Строка в файле nsswitch.conf должна выглядеть следующим образом. hosts: files dns Эта конфигурация задается по умолчанию, если компьютер получает адреса от DNS- серверов с помощью протокола DHCP. Использование сетей в системе Solaris происходит либо в традиционном режиме, либо в режиме “Network Auto-Magic” (NWAM), в котором работа в сети управляется автономно демоном nwamd. Режим NWAM прекрасно подходит для рабочих станций, но он предусматривает ограниченные возможности для конфигурирования и допускает только один активный интерфейс в каждый момент времени. Дальнейшее описание от- носится к традиционному режиму. Для того чтобы увидеть, какой режим работы сети установлен, следует выполнить ко- манду svcs svc: /network/physical. В файле конфигурации должно быть две строки: для режима NWAM и для традиционного режима (“по умолчанию”). Для переключения конфигурации необходимо выполнить команду svcadm. Например, следующие команды изменяют режим работы системы с NWAM на традиционный. solaris$ svcs svc:/network/physical STATE STIME FMRI disabled Mar_31 svc:/network/physical:default online Mar_31 svc:/network/physical:nwam Solaris$ sudo svcadm disable svc:/network/physical:nwam Solaris $ sudo svcadm enable svc:/network/physical: def auld Система Solaris конфигурирует IP-адрес для каждого сетевого интерфейса с помощью файла /etc/hostname. интерфейс, интерфейс — это обычное имя интерфейса. Эти файлы могут содержать либо имя компьютера, которое записано в файле hosts, либо IP-адрес. Значение, записанное в файле hostname. интерфейс, используется как параметр адрес команды ifconfig, поэтому безопаснее всего использовать адрес, даже несмотря на то, что имя файла конфигурации подразумевает, что используется имя компьютера. В файл hostname. интерфейс можно также записать любые специальные опции ко- манды ifconfig. Эти опции должны находиться в той же строке, что и имя компьютера или его IP-адрес; все это порождает длинную командную строку ifconfig. Сценарии запуска пытаются выяснить IP-адреса всех интерфейсов, используя не соответствующие файлы hostname, а протокол DHCP.19 В исходной поставке загрузочные файлы системы Solaris содержат опции netmask* и broadcast* команды ifconfig. Плюсы означают, что маску подсети, по которой определяется широковещательный адрес, следует искать в файле /etc/netmasks. Этот файл содержит сетевые номера и соответствующие им значения масок подсетей. В этом файле должна быть представлена любая сеть, которая разделяется на подсети иначе, чем сети класса А, В или С. Рассмотрим пример файла netmasks. # CS Department network masks database # Network netmask # ===== ======= # 1 28.138.0.0 255.255.255.192 # default for dept. # 19 Сетевые интерфейсы в системе Solaris должны находиться в пределах области видимости ко- манды ifconfig plumb, чтобы сделать их доступными. При ручном конфигурировании эту команду, возможно, придется выполнять самостоятельно.
Глава 14. Сети TCP/IP 543 128.138.192.64 255.255.255.192 # drag 128.138.192.192 255.255.255.192 # csops 128.138.193.0 255.255.255.224 # berg 128.138.193.32 255.255.255.224 # database 128.138.193.0 255.255.255.192 # slip В первой строке задается стандартная маска /26 для адреса 128.138.0.0 класса В, ко- торая затем заменяется конкретными масками, отличающимися от стандартной. Здесь перечислены все сети, даже те, которые используют стандартную маску и поэтому могут не указываться. В системах, из которых был взят этот пример, файл netmasks хранится на центральном узле и распределяется по всем остальным машинам. Ни на одном от- дельно взятом компьютере нет интерфейсов для всех этих сетей. В предыдущих версиях системы Solaris сетевые сценарии загрузки были записа- ны в файлах каталога /etc/unit.d (преимущественно в файлах rootusr, inetinit, sysid.net и inetsvc). В версии Solaris 10 способ управления загрузочными файлами и системными службами был коренным образом пересмотрен. Сценарии были перерабо- таны и теперь хранятся в каталоге /lib/sve/method. Обзор механизма Service Manage- ment Facility в системе Solaris содержится в разделе 3.6. Если существует файл /etc/defaultrouter, то предполагается, что он содержит идентификатор (который, в свою очередь, может представлять собой имя машины или адрес) стандартного шлюза и дальнейшее конфигурирование маршрутов не выполняет- ся. Как обычно, предпочтительнее указывать адреса; если же задано имя, то для него должна существовать запись в файле /etc/hosts или на сервере DNS в локальной сети. Если стандартный шлюз не указан, то система Solaris пытается запустить демон routed (который на самом деле называется in. routed), но в системе Solaris 10 и бо- лее поздних версиях необходимо запустить демон routed явным образом с помощью команды sveadm enable routing/route. Для определения текущего состояния служб используется команда sves route. Будь осторожны! Если машина имеет несколько интерфейсов или существует файл /etc/gateways, то демон routed запускается в режиме сервера (“болтливом”). Как правило, это не соответствует желаниям пользователей. Для того чтобы предотвратить “верещание”, можно установить флаг “бесшумного” режима. Solaris# sveefg -s routing/route:default setprop routing/quiet_mode = true Примеры конфигураций системы Solaris Рассмотрим несколько команд, необходимых для подключения сетевого интерфейса в системе Solaris и добавления маршрута к стандартному шлюзу. Solaris $ sudo ifconfig elOOOgO plumb solaris$ sudo ifconfig elOOOgO 192.108.21.48 netmask 255.255.255.0 up solaris$ sudo route add default 192.108.21.254 Следующие примеры демонстрируют, как выяснить статус сетевого интерфейса и содержимое таблиц маршрутизации. Команды, вызываемые с помощью утилиты sudo, должны запускаться как корневые (root). Последний пример иллюстрирует особенность команды route в системе Solaris, отсутствующую в других архитектурах: аргумент get позволяет получить информацию о следующем переходе на пути к пункту назначения. Рассмотрим несколько вариантов, отформатированных так, чтобы их было удобно читать. solaris$ ifconfig -а 110: flags=2001000849<UP,LOOPBACK,RUNNING, MULTICAST,IPv4,VIRTUAL>
544 Часть II. Работа в сети mtu 8232 index 1 inet 127.0.0.1 netmask ff000000 elOOOgO: flags=1000843<UP,BROADCAST,RUNNING,MULTICAST,IPv4> mtu 1500 index 2 inet 192.108.21.48 netmask ffffffOO broadcast 192.108.21.255 solaris$ sudo ifconfig elOOOgO elOOOgO: flags=1000843<UP,BROADCAST,RUNNING,MULTICAST,IPv4> mtu 1500 index 2 inet 192.108.21.48 netmask ffffffOO broadcast 192.108.21.255 ether 0:14:4f:e:e6:1c Обратите внимание: когда команда ifconfig запускается как корневая, она выводит аппаратный адрес интерфейса, а когда ее выполняет пользователь, она этого не делает. solaris% netstat -nr Routing Table: Ipv4 Destination Gateway Flags Ref Use Interface default 192.108.21.254 UG 1 9959 192.108.21.0 192.108.21.48 U 1 4985 elOOOgO 127.0.0.1 127.0.0.0 UH 1 107 loO solaris$ sudo route get google.com route to: gw-in-f100.google.com destination: default mask: default gateway: 192.108.21.254 interface: elOOOgO flags: <UP,GATEWAY,DONE,STATIC> recvpipe sendpipe ssthresh rtt,ms rttvar,ms hopcount mtu expire 0 0 0 0 0 0 1500 0 Конфигурирование протокола DHCP в системе Solaris В системе Solaris существует DHCP-клиент, и она заслуживает награду за самую про-^ стую и разумную процедуру конфигурирования этого клиента. 1 solaris$ sudo ifconfig интерфейс dhcp } Это действительно работает! Команда inconfig вызывает программу dhcpagent*' чтобы получить параметры интерфейса от сервера DHCP и конфигурировать этот ин- терфейс в соответствии с ними. В командной строке ifconfig можно указывать разные опции, чтобы задать интерфейс первичным, установить тайм-аут, увеличить срок аренды параметров или вывести состояние интерфейса. Для того чтобы аннулировать конфигу* рацию DHCP-клиента вручную, необходимо выполнить следующую команду. solaris$ sudo ifconfig интерфейс drop Все это прекрасно, но иногда необходимо автоматически опрашивать сервер DHCP на этапе начальной загрузки. Это можно сделать, вообще не указав никаких файлов конфигурации для интерфейса (тем самым полагаясь на автоматическое конфигуриро- вание, как в программе NetworkManager в системе Linux) либо создав файл /etc/dhcp. интерфейс в дополнение к файлу /etc/hostname. интерфейс. Если хотите, можете за- писать в файл dhcp. интерфейс дополнительные опции, которые будут переданы ко- манде ifconfig. Для того чтобы интерфейс можно было активизировать, должен, как и раньше, суще- ствовать файл hostname. интерфейс, хотя его можно оставить пустым. Если этот файл не пуст, то сценарии загрузки сначала статически конфигурируют интерфейс, используя содержимое этого файла, а затем изменят его конфигурацию с помощью сервера DHCP.
Глава 14. Сети TCP/IP 5$5 Программа dhpagent управляет интерфейсом в соответствии с протоколом DHCR Кроме выполнения других задач, она согласовывает с сервером продление срока аренды и отмену арендованных параметров, когда они уже не нужны. Если конфигурация ин- терфейса, который был настроен с помощью DHCP-сервера, впоследствии изменяемся вручную, то программа dhpagent прекращает им управлять. Программа dhcpagent собирает параметры, арендованные у DHCP-сервера (стан- дартный маршрут, домен, имена серверов и так далее), но не влияет на большинство из них напрямую. Вместо этого она делает их доступными с помощью команды dhcpinfo. Сценарии управления службами обращаются к команде dhcpinf о за разной информа- цией, которая используется в качестве аргументов команды route, записывается в файл resolv. conf и т.д. Программа dhcpagent направляет ошибки в системный журнал с помощью демона и ранжирует информацию по приоритетам. Вывести содержание системного журнала при заданном уровне отладки можно с помощью флага -d. Для того чтобы увидеть конфигурацию конкретного интерфейса, можно просмо- треть файлы в каталоге /etc/dhcp. Однако существование файла интерфейс .dhc еще не означает, что программа dhcpagent в настоящее время управляет данным интерфей- сом, — срок аренды мог закончиться. Команда ndd: протокол TCP/IP и настройка интерфейса в системе Solaris Команда ndd в системе Solaris позволяет изменить конфигурацию стека протоколов TCP/IP в выполняющейся системе. Возможно, “изменить конфигурацию” — слишком сильное выражение. На самом деле каждый модуль предоставляет доступ к своим пара- метрам для проверки и, в некоторых случаях, для уточнения “на ходу”. Основная синтаксическая конструкция этой команды выглядит следующим образом: ndd [-set] устройство ? | переменная [значение] Если указан аргумент ? (его следует защитить от оболочки символом \?), то команда ndd возвращает список переменных, распознаваемых драйвером указанного устройства. Если задать имя переменной, то команда ndd вернет ее значение. Если же использовать флаг -set и задать значение, то оно будет присвоено указанной переменной, К сожалению, на справочной странице, посвященной команде ndd, не перечисляют- ся все возможные имена устройств и ничего не говорится о том, что для доступа к одним устройствам (например, ip и hme) команда ndd должна выполняться как корневая, а для доступа к другим (например, tcp и udp) — нет. Табл. 14.10 представляет собой краткую шпаргалку по работе с командой ndd. Таблица 14,10. Устройства, с которыми может работать команда ndd в системе Solaris Устройство /dev/tcp Переменные протокола TCP tcp_* /dev/udp Переменные протокола UDP udp_* /dev/jp Переменные протокола IP ip_* e ip6_* /dev/icmp Переменные протокола ICMP icmp_* /dev/rawip Идентично устройству /dev/icmp icmp_* /dev/arp Переменные протокола ARP arp*
546 Часть II. Работа в сети Связанные с интерфейсами имена переменных в категории /dev/ip управляют пе- ренаправлением (IP-forwarding) на конкретные сетевые интерфейсы. Например, пере- менная elOOOgO : ip_forwarding управляет перенаправлением на интерфейс /dev/ elOOOgO. Наряду с ней существует и глобальная переменная ip forwarding. Если у вас есть доступ к машине HP-UX, выполните команду ndd с флагом -h (для получения справки), и вы увидите имена устройств, переменных и назначение каждой переменной. Многие имена переменных в системах HP-UX и Solaris совпадают, поэтому можно ограничиться минимальной man-страницей, посвященной команде ndd. С помощью команды ndd можно также устанавливать такие опции, связанные с ин- терфейсами, как скорость связи, автосогласование и поддержка jumbo-пакетов. Для это- го необходимо применить команду ndd непосредственно к файлу устройства, связанно- го с интерфейсом (например, /dev/elOOOgO). К сожалению, способ, которым система Solaris реализует эту возможность, делает имена параметров конфигурации зависимыми от конкретного драйвера, поэтому не существует универсального рецепта, например, для фиксации скорости работы сетевого интерфейса на уровне 100 Мбит/с. Для того чтобы изменить скорость, необходимо идентифицировать соответствующие переменные, задающие “производительность” (обычно они называются *_сар), и от- ключить их (установить равными нулю). Кроме того, следует отключить переменную *autoneg_cap. Например, следующий сценарий устанавливает с помощью переменной /dev/elOOOgO полнодуплексный режим и скорость, равную 100 Мбит/с. #!/bin/sh ndd -set /dev/elOOOgO adv_autoneg_cap 0 ndd -set /dev/elOOOgO adv_1000fdx__cap 0 ndd -set /dev/elOOOgO adv_100fdx_cap 1 ndd -set /dev/elOOOgO adv_100hdx_cap 0 ndd -set /dev/elOOOgO adv_10fdx_cap 0 ndd -set /dev/elOOOgO adv_10hdx_cap 0 Безопасность в системе Solaris В табл. 14.11 описано поведение системы Solaris в некоторых щекотливых ситуаци- ях, касающихся безопасной работы в сети. Краткое описание этих ситуаций приведено в разделе 14.8. Большинство этих настроек можно изменить с помощью команды ndd. Таблица 14.11. Поведение системы Solaris, связанное с сетевой безопасностью Перенаправление IP-пакетов Запрещено Переадресующие ICMP-пакеты По ситуации Направленная маршрутизация Игнорируется Широковещательные ping-пакеты (ответ) Разрешено Широковещательные ping-пакеты (перена- Запрещено правление) ip_forwarding Не может изменятьсяа ip_forward_src_routed ip_respond_to_echo_broadcast ip_forward_directed_broadcast а Можно модифицировать только время существования. Брандмауэры и фильтрация в системе Solaris Как уже говорилось, не следует использовать системы UNIX, Linux или Windows в качестве брандмауэра или шлюза NAT. Для этого лучше использовать специальное ап-
Глава 14. Сети TCP/IP 547 паратное обеспечение. В системе Solaris этому правилу следовать легче, поскольку в нее вообще не входит никакое программное обеспечение для фильтрации. Тем не менее в большинство дистрибутивов сейчас включается свободно распространяемое программ- ное обеспечение IPFilter, созданное Дарреном Ридом (Darren Reed). Оно представляет собой хороший выбор для фильтрации IP-пакетов в системе Solaris. Пакет IPFilter реализует фильтрацию IP-пакетов и прозрачное перенаправление пор- тов. Он представляет собой открытое, свободно распространяемое программное обеспе- чение и работает на компьютерах, имеющих архитектуру SPARC или Intel. Пакет IPFilter содержит утилиты ipf (для конфигурирования брандмаэура), ipfstat (для распечатки инсталлированных правил фильтрации) и ipnat (для реализации механизма NAT). Детали функционирования пакета IPFilter приведены в разделе 22.13, а пока обсудим функциональные возможности механизма NAT, которыми обладает пакет IPFilter. Механизм NAT в системе Solaris Для того чтобы механизм NAT заработал, вы должны сообщить ядру внутренние и внешние адреса, а также диапазон портов, которые будут использоваться для расшире- ния адресного пространства. Обсуждение общих принципов механизма NAT и способов перехода из частного в публичное адресное пространство содержится в разделе 14.4. Для настройки механизма NAT необходимо указать правила для команды ipnat. Эти правила аналогичны правилам, установленным для утилиты ipf при реализации паке- та фильтрации. Однако следует быть осторожным: как и правила ipf, правила ipnat упорядочены, но в обратном порядке. Просто будьте внимательными: выбирается первое применимое правило, а не последнее. Ниже приведено несколько правил ipnat. Для того чтобы привести их в действие во время загрузки, они записаны в файле /etc/ipf/ipnat.conf. map ethl 192.168.1.0/24 -> 128.138.198.0/26 portmap tcp/udp 20000:65000 map ethl 192.168.1.0/24 -> 128.138.198.0/26 Мы предположили, что ethl — это наш интерфейс для выхода в Интернет и что наша внутренняя сеть пронумерована как частное адресное пространство класса С. Эти правила отображают адреса сети /24 в адреса сети /26. Поскольку сеть /26 может вме- стить в себя только четверть машин, которые могут поместиться в сети /24, потенци- ально возможно, что адреса назначения могут выйти за пределы этой конфигурации. Однако пункт portmap расширяет диапазон адресов, разрешая использовать каждый из 45 тыс. разных портов. Первое правило, сформулированное выше, охватывает весь трафик по протоколам TCP и UDP, но не учитывает протокол ICMP, поскольку этот протокол неиспользует концепцию порта. Второе правило перехватывает ICMP-сообщения и пытается отпра- вить их назад на правильную машину. Если ядро не может однозначно определить адре- сата конкретного ICM-сообщения, оно посылает его как широковещательный пакет; машины, которые получат его вне контекста, могут его просто игнорировать. На своем домашнем компьютере вы можете иметь только один IP-адрес, который присвоен вам вашим ISP- или DHCP-сервером. Если вашему компьютеру присвоен статический IP-адрес, то в строке тар просто присвойте в качестве целевой сети пункт назначения /32 и задайте достаточно широкий диапазон портов, чтобы удовлетворить потребности всех ваших локальных машин. Если при каждом соединении вы получае- те новый динамический адрес, то в строке тар следует указать пункт назначения 0/32. Это позволит утилите ipnat считывать адрес непосредственно с сетевого интерфейса.
548 Часть II. Работа в сети В качестве примера приведем строку, которую можно использовать для единственного динамически присваиваемого адреса. map ethl 192.168.1.0/24 -> 0/32 portmap tcp/ip 20000:65000 Для проверки этой конфигурации выполните следующую команду. solaris$ sudo ipnat -CF -f /etc/ipf/ipnat.config Эти опции сначала отменяют все существующие правила, а затем загружают полный набор правил из файла /etc/ipf/ipnat. conf. Особенности сетевого конфигурирования Результат выполнения команды ifconfig -а зависит от того, выполняется ли она как корневая команда или как команда пользователя. В первом случае, помимо IP-адре- сов и параметров, отображаются также адреса Ethernet канального уровня. Система Solaris разрешает менять адреса канального уровня (МАС-адреса) сетевого интерфейса с помощью команды ifconfig и семейства адресов ether. Эта возмож- ность может оказаться полезной, если вам необходимо проникнуть в беспроводную сеть с ограниченными МАС-адресами. 14.14. Работа в сети под управлением системы HP-UX ESI Конфигурирование операционной системы HP-UX не вызывает трудностей: все параметры конфигурации хранятся в файле /etc/rc. config. d/netconf. Значения параметров из этого файла (а также других файлов в каталоге rc.config.d) считываются в переменные окружения на этапе загрузки и ис- пользуются сценарием /sbin/rn. Файл netconf содержит многочисленные комментарии, которые сообщают вам, что именно должно быть записано в ту или иную переменную и для чего. Базовое конфигурирование сетей в системе HP-UX Для того чтобы назначить.машине имя и сконфигурировать ее первый сетевой ин- терфейс, отредактируйте файл netconf, присвоив значения следующим переменным. HOSTNAME INTERFACE_NAME[0) IP_ADDRESS[0] SUBNET_MASK[0] Например: HOSTNAME=disaster INTERFACE_NAME[0]=1ап0 IP_ADDRESS[0]=192.108.21.99 SUBNET_MASK[0]=255.255.255.0 Второй интерфейс будет иметь индекс 1. О его наличии свидетельствует значение переменной net_cards, равное 2.
Глава 14. Сети TCP/IP 549 Файл netconf содержит также переменные для конфигурирования статических маршрутов и запуска демона маршрутизации. Для того чтобы задать стандартный марш- рут, необходимо задать значения следующих переменных. ROUTE-DESTINATION[0]=default ROUTE_MASK[0]="" ROUTE_GATEWAY[0)=192.108.21.254 ROUTE_COUNT[0]=l Переменная ROUTE_MASK необходима для сети, в которой маска подсети отличает- ся от стандартной маски, используемой в данном классе адресов. Переменная ROUTE COUNT должна равняться нулю, если в качестве шлюза используется локальный компью~ тер, и единице, если шлюз расположен на удаленной машине. Параметры остальных статических маршрутов задаются в переменных ROUTE_* с индексами [1], [2] и т.д. Эти значения передаются непосредственно команде route. Например, переменной ROUTE_ destination можно присвоить ключевое слово default, как показано выше, а также выражения net адрес сетпи или host адрес машины. В системе HP-UX используется демон gated, а не routed. Для использования де- мона gated необходимо задать переменную GATED равной 1, а в массив GATED ARGS за- писать список аргументов, передаваемых демону при его выполнении. Подробнее демон gated описывается в главе 15. Много полезной информации содержится на справочной странице, посвященной маршрутизации (man routing). Многие поля в файле netconf могут содержать либо имя компьютера, либо 1Р-адрес. Если указано имя компьютера, то оно обязательно должно присутствовать в файле /etc/hosts. На этапе загрузки система HP-UX просматривает только файл /etc/hosts и не использует никаких других поисковых механизмов. В этом файле сначала должны перечисляться полностью квалифицированные доменные имена, затем короткие имена и псевдонимы. В системе HP-UX используется команда lanscan, с помощью которой можно полу- чить информацию о сетевых интерфейсах, существующих в компьютере. В данной ситу- ации работает команда ifconfig интерфейс, а не ifconfig -а. Имена сетевых интер- фейсов начинаются с префикса “Ian” или “snap”. Префикс “1ап” обозначает канальный уровень Ethernet, а префикс “snap” — спецификацию IEEE 802.3. Первый интерфейс обозначается как 1ап0, второй — lanl и т.д. В системе HP-UX, как и в системе Solaris, принята концепция “подключения” ин- терфейсов. Однако все интерфейсы “подключаются” автоматически, когда команда ifconfig назначает им IP-адреса. SMH — это системная административная утилита системы HP-UX, значительно об- легчающая управление системой UNIX. Она оснащена меню и может использоваться Для конфигурирования сетевых интерфейсов, а также выполнения многих других адми- нистративных задач. Примеры конфигураций в системе HP-UX Для того чтобы вручную подключить сетевой интерфейс в системе HP-UX и задать стандартный маршрут, нужно выполнить команды следующего вида. hp-ux$ sudo ifconfig lanO 192.108.21.99 netmask OxffffffOO hp-ux$ sudo route add default 192.108.21.254 l20 20 В версии HP-UX поле для счетчика переходов не требуется; если оно явно не указано, то по Умолчанию равно нулю. В предыдущих версиях поле для счетчика было обязательным.
550 Часть II. Работа в сети Команда lanscan выводит список сетевых интерфейсов, существующих в системе, и параметры драйверов, которые ими управляют. Команда lanscan -v отображает чуть больше информации. Ниже показан ряд примеров, слегка измененных так, чтобы по- меститься на странице. Поле МАС со значением ETHER означает, что устройство должно называться 1ап0, а не snapO. Команда ifconfig подтверждает, что это соответствует дей- ствительности. $ lanscan Hardware Station Crd Hdw Net-Int NM MAC HP-DLPI DLPI Path Address In# State NamePPA ID Type Support Mjr# 8/0/20/0 0x001 0 UP lanO snapO 1 ETHER Yes 130 $ ifconfig lanO lanO: flags=843<UP, BROADCAST, RUNNING, MULTICAST inet 192.108. 21.99 netmask ffffffOO broadcast 192.108.21.255 $ ifconfig snapO ifconfig: no such interface Команда netstat -i отображает имена сетевых интерфейсов, а команда netstat -nr выводит таблицы маршрутизации. $ netstat -i Name Mtu Network Address Ipkts Opkts lanO 1500 192.108.21. 0 disaster. , xor.com 6047 3648 loO 4136 127.0.0.0 localhost.xor.com 231 231 $ netstat -nr Routing tables Dest/Netmask Gateway Flags Refs Use Int Pmtu 127.0.0.1 127.0.0 UH 0 231 loO 4136 192.108.21.99 192.108.21 .99 UH 8 lanO 4136 192.108.21.0 192.108.21 .99 U 2 0 lanO 1500 127.0.0.0 127.0.0.1 U 0 0 loO 4136 default 192.108.21 .254 UG 0 0 lanO 1500 Программа lanadmin отображает статистику сетевого трафика для каждого обнару- женного интерфейса. С ее помощью можно управлять интерфейсами и следить за их ра- ботой. Эта программа оснащена меню, облегчающим доступ к требуемой информации. Ниже показан пример, в котором демонстрируются данные об интерфейсе 1ап0. % lanadmin LOCAL AREA NETWORK ONLINE ADMINISTRATION, Version 1.0 Copyright 1994 Hewlett Packard Company. All rights are reserved. Test Selection mode. Ian = LAN Interface Administration menu - Display this menu quit = Terminate the Administration terse = Do not display command menu verbose = Display command menu Enter command: lan LAN Interface test mode. LAN Interface PPA Number = 0 clear = Clear statistics registers
Глава 14. Сети TCP/IP 551 display = Display LAN Interface status/statistics end = End LAN Interface Admin., go up 1 level menu = Display this menu ppa = PPA Number of the LAN Interface quit = Terminate the Admin, return to shell reset = Reset LAN Interface, execute selftest specific = Go to Driver specific menu Enter command: display LAN INTERFACE STATUS DISPLAY Thu, Mar 2,2000 00:41:24 PPA Number Description Type (value) MTU Size Speed Station Address Administration Status (value) Operation Status (value) = 0 = lanO Intel PCI Pro 10/100Tx Server Adapter = ethernet-csmacd(6) = 1500 = 100000000 = 0x00306eea9237 = up(l) = up(l) Inbound Unicast Packets Inbound Non-Unicast Packets = 45691 = 2630 Deferred Transmissions Late Collisions Excessive Collisions = 0 = 0 = 0 Конфигурирование протокола DHCP в системе HP-UX Как и в случае других параметров сетевой конфигурации, включить протокол DHCP на этапе загрузки можно, задав переменные в файле /etc/rc.config.d/netconf. В данном случае переменные хранятся в массиве DHCP ENABLE: индекс [0] означает пер- вый интерфейс, индекс [1] — второй и т.д. Например, запись DHCP_ENABLE[С]=1 переводит первый интерфейс в режим DHCP. Интерфейс получит свой IP-адрес, маску подсети и другие сетевые параметры от DHCP-сервера, расположенного в локальной сети. Если задать переменную равной нулю, то протокол DHCP будет отключен; в этом случае вам придется назначать интерфейсу статический адрес в файле netconf. Если запись dhcp_enable отсутствует, считается, что соответствующая переменная по умол- чанию равна единице. Основную задачу по взаимодействию с DHCP-сервером выполняет сценарий /sbin/ autojparms. Программа dhcpdb2conf записывает параметры DHCP, записанные сце- нарием auto_parms в файл netconf, из которого извлекается конфигурационная ин- формация на этапе загрузки. Динамическое переконфигурирование и настройка в системе HP-UX Как и в системе Solaris, для настройки различных сетевых параметров (более 100) в системе HP-UX можно применять команду ndd. В интерактивном режиме команда ndd
552 Часть II. Работа в сети меняет значения “на ходу”. Для того чтобы изменения стали постоянными, следует до- бавить их в файл /etc/rc. config .d/nddconf, который считывается на этапе загрузки. Ш Более подробно команда ndd описана в разделе 14.13. В системе HP-UX довольно полезной является опция -h (вызов справки) команды ndd. Если не указаны дополнительные аргументы, то команда ndd -h выводит список всех настраиваемых параметров. Если указано имя переменной, то команда ndd -h ото- бражает информацию о назначении переменной, а также о ее минимальном и макси- мальном значениях и значении, задаваемом по умолчанию. Рассмотрим пример. $ ndd -h | grep source ip_forward_src_routed - Controls forwarding of source routed packets $ ndd -h ip__forward_src_routed ip_forward_src_routed: Set to 1 to forward source-routed packets; set to 0 to disable forwarding. If disabled, an ICMP Destination Unreachable message is sent to the sender of source- routed packets needing to be forwarded. [0,1] Default: 1 Вывод результатов выполнения команды ndd свидетельствует о том, что в данной версии HP-UX по умолчанию поддерживается направленная маршрутизация пакетов. Это может быть требованием ядра, но фактически файл /etc/rc/conf ig. d/nddconfig позволяет отключить эту возможность. TRANSPORT_NАМЕ [2 ] =ip NDD—NAME[2]=ip_forward_scr_routed NDD_VALUE[2]=0 Двойки в этих записях означают, что в файле nddconfig задается значение третьей из десяти возможных переменных. Если вы захотите изменить следующую переменную* то будет достаточно скопировать эти три строки и заменить индекс 2 на 3. К сожалению, с помощью файла nddconf можно задать только десять параметров. Для того чтобы просмотреть и модифицировать значение переменной ip forward^ src_routed, воспользуемся командами ndd -get и ndd -set (их синтаксическая кон- струкция слегка отличается от принятой в системе Solaris). $ ndd -get /dev/ip ip_forward_src__routed 0 $ sudo ndd -set /dev/ip ip__forward__src—routed 1 $ ndd -get /dev/ip ip__forward__src__routed 1 Безопасность, брандмауэры, фильтрация и система NAT В табл. 14.12 описано стандартное поведение системы HP-UX в ситуациях, связанных с безопасностью работы в сети. Краткое описание последствий этого поведения приве- дено в разделе 14.8. Большинство настроек можно изменить с помощью команды ndd. Таблица 14.12. Поведение системы HP-UX, связанное с сетевой безопасностью_________ ^функциональная возможность По умолчанию Управлениесп<^ ДЙ Перенаправление IP-пакетов Динамическоеа Устанавливает параметр ip_f orwarding; 0 — отключить, 1 — включить, 2 — динамический режим Переадресующие ICMP-пакеты По ситуации6 Для того чтобы отключить эту возможность, устанавливает параметр ip ire redirect interval равным 0
Глава 14. Сети TCP/IP 553 Окончание табл. 14.12 Направленная маршрутизация Игнорируется Для того чтобы включить эту возможность, уста- навливает параметр ip_forward_src_routed равным 1 Широковещательные ping-пакеты Игнорируется (перенаправление) Широковещательные ping-пакеты Блокируется (ответ) Устанавливает параметр ip_forward_directed_broadcast Устанавливает параметр ip respond to echo broadcast а Если параметр больше единицы, то интерфейс включен, иначе — выключен. 6 Записи о перенаправлении по умолчанию хранятся до пяти минут. Как и система Solaris, система HP-UX включает в себя пакет IPFilter для фильтра- ции и реализации механизма NAT, разработанный Дарреном Ридом. Этот пакет описан в разделах 14.13 и 22.13. В системе HP-UX пакет IPFilter ничем не отличается от своего аналога в системе Solaris, хотя система HP-UX конфигурирует его при загрузке несколь- ко иначе. Вместо использования команды svcadm для подключения пакета IPFilter, в системе HP-UX следует редактировать файл /etc/rc.config.d/ipconfig и вклю- чить требуемые опции. Файлы конфигурации для утилит ipf и ipnat должны находить- ся в каталоге /etc/opt/ipf, а не /etc/ipf. Версия демона inetd в системе HP-UX содержит встроенные функции работы с протоколом TCP, которые можно конфигурировать посредством файла /var/adm/ inetd.sec. Если вас интересует, как именно система HP-UX может оказаться незащищенной, прочитайте статью Кевина Стивса (Kevin Steves) о действиях, которые необходимо пред- принять, чтобы превратить систему HP-UX 11 в крепость, стоящую на входе в незащи- щенную сеть: tynyurl. com/5sf fy2. Этот документ немного устарел (он опубликован в 2002 г.), но в нем прекрасно описаны все функциональные возможности, предостав- ляемые системой HP-UX, которые следует отключить, если вы хотите защитить свой компьютер в открытой среде Интернета. Мы бы хотели, чтобы появились аналогичные документы, посвященные другим операционным системам. 14.15. Работа в сети под управлением системы AIX • Вместо того чтобы хранить информацию о сетевой конфигурации в тексто- вых файлах или сценариях, система AIX скрывает ее в базе данных атрибутов и значений Object Data Manager (ODM). Ассоциацию этих списков свойств с конкретными устройствами (на самом деле, с экземплярами устройств) и связывание драйверов с информацией о конфигурации осуществляет другой слой. В общих чертах база данных Object Data Manager описана в разделе 13.6. Ее общая схема довольно сложная. Кроме того, она обеспечивает доступ к сетевой конфигурации разных уровнях. В табл. 14.13 приведено несколько команд системы AIX для зада- ния сетевых адресов интерфейсов. В основном, они отличаются тем, что влияют либо на конфигурацию во время выполнения системы, либо на конфигурацию во время загруз- ки, либо на обе конфигурации.
554 Часть II. Работа в сети Таблица 14.13. Восемь способов задания IP-адресов интерфейса в системе AIX Команда ' /Л*'/' Действует ли на текущую конфигурацию? Действуетли . наконфигурацию загрузки? smitty mktcpip (и заполняет форму) Да Да mktcpip -i епЗ -а 192.168.0.1 Да Да chdev -1 епЗ -a netaddr=192.168.0.1 Да Да chdev -1 епЗ -a netaddr=192.168.0.1 -Р Нет Да chdev -1 епЗ -a netaddr=192.168.0.1 -Т Да Нет ifconfig епЗ inet 192.168.0.1 Да Нет odmchange -о CuAt -q’name=en3 AND attribute=netaddr'<configa Нет Да echo ’Hey! I set the network address!’ Нет Нет а Команда odmchange требует на вход список атрибутов. Задать их значения в командной строке невоз- можно. Точнее говоря, команда mktcpip делает немного больше, чем обычная установка па- раметров конфигурации, — она также запускает сценарий rc.tcpip для запуска соот- ветствующего сетевого демона. Для настройки сетевой конфигурации существует довольно полный набор инстру- ментов под названием SMIT, который вы можете и должны использовать в большин- стве случаев. Опции конфигурации протокола TCP/IP можно найти в пункте меню Communications Applications and Services. Большинство системных администраторов никогда не испытывают необходимости углубляться ниже уровня chdev/lsattr. Однако этот уровень может оказаться полезным для просмотра списка важных параметров конфигурации устройства. Например, следую- щий запрос демонстрирует конфигурируемые параметры для сетевого интерфейса епЗ. aix$ Isattr -Н -Е -1 епЗ attribute value description settable alias4 IPv4 Alias including Subnet Mask True alias6 IPv6 Alias including Prefix Length True а гр on Address Resolution Protocol (ARP) True authority Authrozed Users True broadcast 192.168.10.255 Broadcast Address True mtu 1500 Maximum IP Packet Size True netaddr 192.168.10.11 Internet Address True netaddr6 IPv6 Internet Address True netmask 255.255.255.0 Subnet Mask True prefixlen Prefix Lenght for IPv6 Address True remmtu 576 Max. Packet Size for REMOTE Nets True security none Security Level True state up Current Interface Status True tcp_mssdflt Set TCP Maximum Segment Size True tcp_nodelay Enable/Disable TCP_NODELAY Option True tcp_recvspace Set Socket Buffer Space for Receiving True tcp_sendspace Set Socket Buffer Space for Sending True Флаг -Н позволяет выводить столбцы с заголовками, флаг -Е запрашивает текущие (“настоящие”, в отличие от заданных по умолчанию) значения, а флаг -I идентифици- рует тестируемое устройство. Многие устройства, которыми можно управлять с помощью
Глава 14. Сети TCP/IP 555 команды chdev и других команд, не перечислены в каталоге /dev. Для того чтобы уви- деть полный список устройств, выполните команду Isdev -С. Для того чтобы задать значение, используйте команду chdev. Например, для того чтобы задать значение MTU для интерфейса епЗ больше 1450, выполните следующую команду. aix$ sudo chdev -1 епЗ mtu=1450 Команда по: настройка сетевых параметров в системе AIX Система AIX разделяет системные опции протокола TCP/IP на отдельные непере- секающиеся и постоянные пары “атрибут/значение”, доступ к которым обеспечивает команда по, а не chdev. (Отличие заключается в том, что команда по предназначена для конфигурирования системы, а команда chdev — для конфигурирования конкретных драйверов или устройств.) Для того чтобы увидеть полный список всех доступных переменных (в настоящее время их больше 125), выполните команду по -а. Некоторые переменные, относящиеся к безопасности, перечислены в табл. 14.14. Таблица 14.14. Переменные для настройки системы AIX, связанные с протоколами TCP/IP и безопасностью 11 j1 111 'j Командаr bcastping directed_broadcast ipforwarding ipignoreredirects ipsrcrouteforward ipsrcrouterecv ipsrcroutesend Разрешает ответ на широковещательные ping-пакеты 0 Разрешает перенаправление широковещательных пакетов 0 Разрешает перенаправление IP-пакетов 0 Игнорирует перенаправляющие ICMP-пакеты 0а Разрешает отправлять IP-пакеты с заданным маршрутом 1а Разрешает принимать IP-пакеты с заданным маршрутом 0 Блокирует IP-пакеты с заданным маршрутом 1 а Изменять не рекомендуется. Для того чтобы установить переменную, используйте следующую команду. по -р -о переменная=значение Например, для того чтобы предотвратить перенаправление пакетов с заданным маршрутом стеком протоколов TCP/IP, выполните следующую команду. aix$ sudo no -р ipsfcrouteforward=0 Опция -р вводит изменения в действие как немедленно, так и после перезагрузки. 14.16. Рекомендуемая литература • Stevens W. Richard. TCP/IP Illustrated, Volume One: The Protocols. Reading, MA: Addison-Wesley, 1994. • Wright Gary R. and W. Richard Stevens. TCP/IP Illustrated, Volume Two: The Implemen- tation. Reading, MA: Addison-Xtesley, 1995.
556 Часть II. Работа в сети Эти два тома являются прекрасным исчерпывающим руководством по протоколам TCP/IP, хотя уже немного устарели. • Stevens W. Richard. UNIX Network Programming, Upper Saddle River, NJ: Prentice Hall, 1990. • Stevens W. Richard. UNIX Network Programming, volume 1: The Sockets Networking API (3rd Edition). Upper Saddle River, NJ: Prentice Hall, 2003. • Stevens W. Richard. UNIX Network Programming, volume 2: Interprocess Communications (2nd edition) Upper Saddle River, NJ: Prentice Hall, 1998. Эти книги являются библиями для студентов, изучающих сетевое программиро- вание. В первом издании описан только интерфейс сокетов Беркли. В третьем из- дании рассмотрены также интерфейс STREAMS и стандарт IPv6. Все три издания написаны в четком и понятном стиле Рича Стивенза. • Tanenbaum Andrew. Computer Networks (4th Edition). Upper Saddle River, NJ: Prentice Hall PTR, 1996. Эта книга по-прежнему является классическим учебником по сетям. Она содержит подробнейшее описание физического и канального уровней стека сетевых прото- колов. Предыдущие издания были ориентированы на протоколы ISO, но в послед- нем издании описана современная структура сети Интернет. • Salus Peter Н. Casting the Net, From ARPANET to INTERNET and Beyond. Reading, MA Addison-Wesley, 1995. Это захватывающая история о том, как сеть ARPANET превратилась в Интернет. Книга написана историком, который многие годы общался с профессионалами UNIX, поэтому кажется, будто ее писал один из них! • Comer Douglas. Internetworking with TCP/IP, vol. 1: Principles, Protocols, and Archi- tectures, 4th Edition. Upper Saddle River, NJ: Prentice Hall, 200021. Книги Дугласа Камера долгое время считались эталонными справочниками по протоколам TCP/IP. Новое издание содержит описание современных сетевых тех- нологий, а также всех протоколов семейства TCP/IP. Оно предназначено в каче- стве учебного пособия для студентов и является хорошим источником справочно- го материала. • Hunt Craig. TCP/IP Network Administration (3rd Edition). Sebastopol, CA: O’Reilly & Associates, 2002. Эта книга ориентирована на администраторов UNIX-систем. Половина книги по- священа протоколам TCP/IP, а остальной материал касается средств UNIX более высокого уровня, таких как электронная почта и удаленный доступ. • Farrel Adrian. The Internet and Its Protocols: A Comparative Approach. San-Francisco, CA: Morgan Kaufmann Publishers, 2004. • Kozierak Charles M. The TCP/IP Guide: A Comprehensive, Illustrated Internet Protocols Reference. San-Francisco, CA: No Starch Press, 2005. Превосходное собрание документов об истории Интернета и его разнообразных технологиях можно найти на веб-сайте isoc. org/internet/history. 21 Дуглас Э. Камер. Сети TCP/IP, т. 1: Принципы, протоколы и структура, 4-е изд. — ИД “Вильямс”, 2002. — Примеч. ред.
Глава 14. Сети TCP/IP 557 14.17. Упражнения 14.1. Почему прием директив переадресации протокола ICMP может привести к не- санкционированному доступу в сеть? 14.2. Что такое значение MTU сетевого канала? Что произойдет, если это значение бу- дет слишком большим? А слишком низким? 14.3. ★ Сеть 134.122.0.0/16 разбита на подсети с длиной маски 19. а) сколько будет подсетей /19? Перечислите их. Каковы их сетевые маски? б) сколько узлов может быть в каждой подсети? в) определите, какой подсети принадлежит адрес 134.122.67.124? г) каким будет широковещательный адрес каждой подсети? 14.4. ★ С узла 128.138.2.4 в сети 128.138.2.0/24 нужно послать пакет узлу 128.138.129.12 в сети 128.138.129.0/24. Предполагается, что • узел 128.138.2.4 имеет стандартный шлюз 128.138.2.1; • узел 128.138.2.4 только что загрузился и еще не отправлял и не принимал па- кеты; • все остальные компьютеры сети работают уже долгое время; • маршрутизатор 128.138.2.1 имеет прямое соединение с узлом 128.138.129.1, ко- торый является шлюзом в подсеть 128.138.129.0/24. а) перечислите все этапы отправки пакета. Покажите исходные и целевые МАС- и IP-адреса передаваемых пакетов. б) если бы адрес сети был 128.138.0.0/16, изменился бы ответ? Если да, то каким бы он был? в) если бы сеть 128.138.2.0 имела маску /26, а не /24, изменился бы ответ? Если да, то каким бы он был? 14.5. ★ Срок аренды параметров задается на сервере DHCP. Допустим, что количество IP-адресов превышает количество потенциальных клиентов. Можете ли вы прод- лить срок аренды на как можно дольше (например, на несколько недель)? Почему да или почему нет? Что можно сказать о других параметрах протокола DHCP? 14.6. ★★ Как учесть рассмотренные в этой главе проблемы безопасности в только что инсталлированной Linux-системе? Проверьте, все ли проблемы решены в Linux- системах вашей компьютерной лаборатории. (Необходим доступ с правами поль- зователя root.) 14.7. Аж Какие действия необходимо предпринять для подключения нового компью- тера к сети в вашей лаборатории? В ответе используйте параметры конкретной среды. Предполагается, что на новом компьютере уже установлена операционная система Linux. 14.8. ★★ Приведите текст конфигурационного файла DHCP-сервера, который выде- ляет адреса в диапазоне 128.138.192.[ 1 -55]. Задайте срок аренды равным двум ча- сам и сделайте так, чтобы узел с МАС-адресом 00:10:5А:С7:4В:89 всегда получал IP- адрес 128.138.192.55.
Глава 15 Маршрутизация Управление потоками данных — непростая задача. В главе 14 вкратце рассказывалось о перенаправлении IP-пакетов. В настоящей главе мы подробнее изучим этот процесс и познакомимся с различными сетевыми протоколами, благодаря которым маршрутизато- ры автоматически находят наиболее эффективные маршруты. Эти протоколы принима- ют на себя основную нагрузку по управлению таблицами маршрутизации, существенно упрощая задачу администраторам. Они также позволяют быстро перенаправлять трафик в случае выхода из строя маршрутизатора или сетевого сегмента. Важно отличать реальное перенаправление IP-пакетов от управления таблицей марш- рутизации, хотя в обоих случаях употребляют один и тот же термин — “маршрутизация”. Перенаправление пакетов — простая процедура, тогда как вычисление маршрутов про- исходит по довольно запутанному алгоритму. Мы познакомимся только с одноадресной маршрутизацией, так как при многоадресной (когда пакеты направляются группе под- писчиков) возникает ряд новых проблем, рассмотреть которые, учитывая объем книги, не представляется возможным. Для того чтобы составить правильное представление о маршрутизации, в большин- стве случаев достаточно информации, изложенной в главе 14 “Сети TCP/IP”. Если се- тевая инфраструктура уже налажена, можно просто задать единственный статический маршрут (как описано в разделе 14.5 “Маршрутизация”) и все готово — у вас есть ин-? формация обо всем Интернете. Если же вы стремитесь справиться с сетью, имеющей сложную топологию, или используете операционные системы UNIX или Linux как часть своей сетевой инфраструктуры, тогда эта глава о протоколах и инструментах динамиче- ской маршрутизации окажется полезной для вас. В основе маршрутизации лежит принцип нахождения “следующего перехода”. В лю- бой конкретной точке требуется определить только следующий узел или маршрутизатор,
глава л 5. Маршрутизация 559 куда будет отправлен пакет на пути к пункту назначения. Это в корне отличается от многих старых протоколов, где перед отправкой пакета в сеть требовалось задать точный его маршрут (принцип маршрутизации “от источника”)1. 15.1. Подробнее о маршрутизации пакетов Прежде чем приступать к изучению алгоритмов маршрутизации, рассмотрим под- робнее, как используются таблицы маршрутизации. Предположим, сеть имеет тополо- гию, изображенную на рис. 15.1. Маршрутизатор R1 соединяет две сети, а маршрутизатор R2 — одну из этих сетей с внешним миром. Пока будем считать, что R1 и R2 — универсальные компьютеры, а не специализированные маршрутизаторы. (Во всех приводимых примерах предполагается использование операционной системы Linux и протокола IPv4, но в системе UNIX и в протоколе IPv6 используются похожие команды и принципы.) Посмотрим, как выгля- дят таблицы маршрутизации и некоторые конкретные сценарии перенаправления паке- тов. Таблица узла А выглядит следующим образом. А% netstat -rn Kernel IP routing table Destination Gateway Genmask Flags MSS Window irtt Iface 199.165.145.0 0.0.0.0 255.255.255.0 U 00 0 ethO 127.0.0.0 0.0.0.0 255.0.0.0 U 00 0 lo °.0.0.0 199.165.145.24 0.0.0.0 UG 00 0 ethO СЗ Более подробная информация о команде ifconfig приведена в разделе 14.9. Узел А имеет самую простую конфигурацию среди всех четырех компьютеров. Первые Два маршрута описывают собственные сетевые интерфейсы узла. Они необходимы, что- бы пакеты, направляемые непосредственно в подключенные сети, не маршрутизирова- лись особым образом. Устройство ethO — это Ethemet-интерфейс узла А, а 1о — интер- фейс обратной связи (виртуальный сетевой интерфейс, эмулируемый ядром). Обычно такие записи автоматически добавляются командой ifconfig при конфигурировании сетевого интерфейса. Некоторые системы интерпретируют “маршрут обратной связи” как узловой марш- рут к конкретному IP-адресу, а не ко всей сети. Поскольку 127.0.0.1 — это единственный 1 Теоретически IP-пакеты также можно отправлять, выполняя маршрутизацию от источника, Но Зто почти никогда не делается. Из соображений безопасности, подобный режим чаще всего не- доступен.
560 Часть II. Работав сети IP-адрес, существующий в сети обратной связи, по существу, неважно, как именно он определен. Единственные изменения, которые можно заметить в таблице маршрутиза- ции, заключаются в том, что в столбце Destination вместо адреса 127.0.0.0 будет стоять адрес 127.0.0.1, а в столбце Flags — буква Н. Ш Сетевые маски обсуждаются в разделе 14.4. Между узловым и сетевым маршрутами нет принципиальной разницы. Когда ядро операционной системы просматривает таблицу маршрутизации, они интерпретируются совершенно одинаково; единственное различие состоит в том, что они имеют разную длину неявной маски. Стандартный маршрут узла А задает перенаправление всех пакетов, не адресованных интерфейсу обратной связи или сети 195.165.145, на маршрутизатор R1, адрес которого в данной сети — 199.165.145.24. Флаг G указывает на то, что данный маршрут ведет к шлю- зу, а не к одному из локальных интерфейсов узла А. Шлюзы должны находиться на рас- стоянии одного перехода. 03 Различным типам адресации посвящен раздел 14.3. Предположим теперь, что узел А посылает пакет узлу В с адресом 199.165.146.4. IP- подсистема ищет маршрут к сети 199.165.146 и, не найдя такового, отправляет пакет по стандартному маршруту, т.е. маршрутизатору R1. На рис. 15.2 приведена структура па- кета, проходящего по сети Ethernet (в заголовке Ethernet указаны МАС-адреса соответ- ствующих интерфейсов компьютеров А и R1 в сети 145). От: А Кому: R1 Тип: IP От: 199.165.145.17 Кому: 199.165.146.4 Tun:UDP U001010U010101110101011Q1I0101 01110110110111010100010100100010 OlQllMlOllOlOlOlOJOOUlOlOlOOOO Рис. 15.2. Ethemet-пакет Целевой аппаратный Ethernet-адрес соответствует маршрутизатору R1, но 1Р-пакет, скрытый в Ethemet-фрейме, не содержит никаких упоминаний о маршрутизаторе. Когда маршрутизатор просматривает поступивший пакет, он обнаруживает, что не является его получателем. Тогда он обращается к собственной таблице маршрутизации, чтобы узнать, как переслать пакет узлу В, не переписывая его IP-заголовок (необходимо, чтобы отпра- вителем пакета оставался узел А). Таблица маршрутизации узла R1 выглядит следующим образом. Rl% netstat -rn Kernel IP routing table Destination Gateway Genmask Flags MSS Window irtt Iface 127.0.0.0 0.0.0.0 255.0.0.0 U 0 0 0 lo 199.165.145.0 0.0.0.0 255.255.255.0 U 0 0 0 ethO 199.165.146.0 0.0.0.0 255.255.255.0 U 0 0 0 ethl 0.0.0.0 199.165.146.3 0.0.0.0 UG 0 0 0 ethl
Глава 15. Маршрутизация 56$ Она Почти аналогична таблице узла А, за исключением того, что здесь присутству- ет два физических сетевых интерфейса. Стандартный маршрут в данном случае ведет к узлу R2, пЬскольку через него осуществляется выход в Интернет. Пакеты, адресованные любой из сетей 199.165, доставляются напрямую. Подобно узлу А, узел В имеет один реальный сетевой интерфейс. Но для корректного функционирования ему необходим дополнительный маршрут, поскольку узел имеет пря- мое соединение сразу с двумя маршрутизаторами. Трафик сети 199.165.145 должен прохо- дить через узел R1, а весь остальной трафик — направляться в Интернет через узел R2. В% netstat -rn Kernel IP routing table Destination Gateway Genmask Flags MSS Window irtt Iface 127.0.0.0 0.0.0.0 255.0.0.0 u 0 0 0 lo 199.165.145.0 199.165.146.1 255.255.255.0 и 0 0 0 ethO 199.165.146.0 0.0.0.0 255.255.255.0 и 0 0 0 ethO 0.0.0.0 199.165.146.3 0.0.0.0 UG 0 0 0 ethO CQ Описание протокола ICMP приведено в разделе 14.5. Как и узел А, узел В можно сконфигурировать так, чтобы изначально он “знал” толь- ко об одном шлюзе, полагаясь на помощь директив переадресации протокола ICMP для устранения избыточных переходов. Ниже показан пример начальной конфигурации. В% netstat -rn Kernel IP routing table Destination Gateway Genmask Flags MSS Window irtt Iface 127.0.0.0 0.0.0.0 255.0.0.0 U 00 0 lo 199.165.146.0 0.0.0.0 255.255.255.0 U 00 0 ethO 0.0.0.0 199.165.146.3 0.0.0.0 UG 00 0 ethO Теперь, если узел В посылает пакет узлу А (199.165.145.17), прямой маршрут найден не будет, и пакет отправится на узел R2. Поскольку узел R2 является маршрутизатором, он имеет полную информацию о состоянии сети и, следовательно, “знает” о роли узла R1, куда и будет послан пакет. Кроме того, маршрутизатор R2 обнаружит, что узлы R1 и В находятся в одной сети, поэтому он дополнительно направит узлу В ICMP-сообщение, в соответствии с которым узел В добавит в свою таблицу маршрутизации прямой марш- рут к узлу А. 199.165.145.17 199.165.146.1 255.255.255.255 UGHD 00 0 ethO Благодаря этому маршруту весь трафик, адресованный узлу А, начнет идти непосред- ственно через маршрутизатор R1. Однако это изменение не затрагивает трафик к другим узлам в сети 145. Для них нужно получить отдельные директивы от маршрутизатора R2. Некоторые администраторы выбирают для своих систем директивы переадресации про- токола ICMP в качестве основного “протокола” маршрутизации, думая, что подобный под- ход обеспечит большую динамичность. К сожалению, системы и маршрутизаторы осущест- вляют перенаправление по-разному. Некоторые хранят эти директивы постоянно. Другие Удаляют их из таблицы маршрутизации через относительно короткое время (5—15 минут). Третьи вообще игнорируют их, что, вероятно, правильно с точки зрения безопасности. 15.2. Демоны и протоколы маршрутизации В простейших сетях, подобно той, которая представлена на рис. 15.1, целесообразно настраивать маршрутизацию вручную. Однако с определенного момента сети становят-
562 Часть II. Работа в сети ся слишком сложными для подобного администрирования. Вместо того чтобы явно со- общать каждому компьютеру, как находить другие компьютеры и сети, лучше заставить сами компьютеры искать эту информацию. Данная задача возлагается на протоколы маршрутизации и демоны, которые их реализуют. Основное преимущество протоколов маршрутизации над системами статической маршрутизации заключается в том, что они позволяют быстро адаптироваться к изме- нениям в топологии сети. Когда пропадает канал связи, демоны быстро находят альтер- нативные маршруты, если они существуют, и сообщают о них в сети, связанные с этим каналом. Демоны маршрутизации собирают информацию из трех источников: конфигураци- онных файлов, существующих таблиц маршрутизации и “родственных” демонов других систем. Собранные данные объединяются, и вычисляется оптимальный набор маршру- тов, после чего новые маршруты записываются в системную таблицу (и при необходимо- сти посылаются другим системам посредством протоколов маршрутизации). Состояние сети время от времени меняется, поэтому демоны должны периодически опрашивать друг друга, чтобы убедиться в актуальности имеющейся у них информации. Конкретный алгоритм вычисления маршрутов зависит от протоколов. Последние бывают двух типов: дистанционно-векторные и топологические. Дистанционно-векторные протоколы В основе дистанционно-векторных протоколов лежит следующая идея: если маршру- тизатор X находится в пяти переходах от сети Y и является моим соседом, то я нахожусь в шести переходах от данной сети. Демон, работающий по такому протоколу, объявля- ет о том, как далеко, по его расчетам, расположены известные ему сети. Если сосед- ние демоны не “знают” более коротких маршрутов к этим сетям, они помечают данный компьютер как оптимальный шлюз. В противном случае они просто игнорируют этот анонс. Предполагается, что со временем таблицы маршрутизации придут в стабильное состояние. Это довольно красивая идея, и если бы все работало так, как задумано, маршрути- зация существенно упростилась бы. К сожалению, описанный алгоритм не лучшим об- разом справляется с изменениями топологии.2 Иногда стабилизация таблиц вообще не наступает вследствие возникновения бесконечных циклов (например, маршрутизатор X получает информацию от маршрутизатора Y и посылает ее маршрутизатору Z, кото- рый возвращает ее маршрутизатору Y). На практике приходится вводить сложные эв- ристические правила или задавать ограничения. К примеру, в протоколе RIP (Routing Information Protocol — протокол маршрутной информации) считается, что любая сеть, находящаяся на расстоянии более пятнадцати переходов, недоступна. Даже в обычных ситуациях может потребоваться слишком много циклов обновлений, прежде чем все маршрутизаторы перейдут в стабильное состояние. Следовательно, чтобы не превысить допустимые пределы, необходимо сделать периоды обновлений короткими, а это, в свою очередь, ведет к тому, что дистанционно-векторные протоколы оказываются слишком “словоохотливыми”. Например, протокол RIP требует, чтобы маршрутизаторы осуществляли широковещательную рассылку всей имеющейся у них информации каж- дые 30 секунд. В протоколе EIGRP обновления анонсируются каждые 90 секунд. 2 Проблема заключается в том, что изменения топологии могут приводить к удлинению суще- ствующих маршрутов. Некоторые дистанционно-векторные протоколы, например EIGRP, хранят информацию о всех возможных маршрутах, чтобы на крайний случай был “план отступления”. Впрочем, конкретные детали не так уж важны.
Глава 15. Маршрутизация 563 В противоположность этому в протоколе BGP (Border Gateway Protocol — протокол пограничного шлюза) вся таблица посылается один раз, после чего изменения распро- страняются по мере возникновения. Такая оптимизация позволяет существенно снизить “переговорный” трафик (большей частью, ненужный). В табл. 15.1 перечислены дистанционно-векторные протоколы, широко используе- мые в настоящее время. Таблица 15.1. Распространенные дистанционно-векторные протоколы маршрутизации Аббре- виатура Полное название ” ’’ ''Л.: . ч‘ '.’'j*? - S -»f"л RIP Routing Information Protocol (протокол маршрутной ин- формации) Локальные сети RIPng Routing Information Protocol (протокол маршрутной ин- формации), следующее поколение Локальные сети с протоколом IPv6 EIGRPа Enhanced Interior Gateway Routing Protocol (улучшенный протокол маршрутизации внутреннего шлюза) Глобальные сети, корпоративные локальные сети BGP Border Gateway Protocol (протокол пограничного шлюза) Магистральные сети Интернета а Протокол EIGRP является собственностью компании Cisco. Топологические протоколы В топологических протоколах, или протоколах состояния канала, информация рассыла- ется в относительно необработанном виде. Записи выглядят примерно так: “Маршр^ратор X является смежным по отношению к маршрутизатору Y, и канал функционирует”. Полный набор таких записей образует карту сетевых связей, на основании которой каждый марш- рутизатор может сформировать собственную таблицу. Основное преимущество тополоЙ^^ ских протоколов, по сравнению с дистанционно-векторными, заключается в способного® быстро стабилизировать таблицы маршрутизации в случае непредвиденного сбоя. К из- держкам относится необходимость хранения полной карты соединений на каждом узле, для чего требуются дополнительные процессорные мощности и память. Поскольку процесс общения между маршрутизаторами не является частью собствен- но алгоритма вычисления маршрутов, появляется возможность реализовать топологи- ческие протоколы так, чтобы не возникало циклов. ШдаШййя в топологической базе данных распространяются по сети очень быстро, не перетр^^ни канал, ни централь- ный процессор. Топологические протоколы сложнее дистанционно-векторных, зато они позволяют ре- ализовать такие технологии, как маршрутизация на основании запрашиваемого типа об- служивания (поле TOS IP-пакета) и поддержка нескольких маршрутов к одному адресату. Распространение получили только два топологических протокола: OSPF и IS-IS. Несмотря на то что протокол IS-IS был реализован в широких масштабах, он не так ча- сто используется, и мы не рекомендуем его для использования в новых сетях. Дополни- тельные комментарии, касающиеся протокола IS-IS, приведены в этом разделе далее. Метрики стоимости Для того чтобы протокол маршрутизации мог определить, какой путь к заданной сети является кратчайшим, необходимо прежде всего выяснить, что значит “кратчайший”. Это путь с наименьшим числом переходов? С наименьшей задержкой? С наименьшими финансовыми затратами?
564 Часть II. Работа в сети Для целей маршрутизации качество канала связи определяется числом, называемым метрикой стоимости. Путем сложения метрик отдельных отрезков пути вычисляется общая стоимость маршрута. В простейших системах каждому каналу назначается стои- мость 1, и в результате метрикой маршрута становится число переходов. Но любой из перечисленных выше критериев может являться метрикой стоимости. Эксперты в области сетей долго и упорно трудились над тем, чтобы определение такого понятия, как метрика стоимости, было максимально гибким, а некоторые со- временные протоколы даже позволяют использовать разные метрики для разных видов сетевого трафика. Тем не менее в 99% случаев на все это можно не обращать внимания. Для большинства систем вполне подойдут стандартные метрики. Бывают ситуации, когда кратчайший физический маршрут к адресату не должен быть выбран по умолчанию из административных соображений. В таких случаях можно ис- кусственно завысить метрики критических каналов. Всю остальную работу предоставьте демонам. Внутренние и внешние протоколы Автономная система — это группа сетей, находящихся под административным или политическим контролем одного юридического лица. Такое определение довольно рас- плывчато. Реальные автономные системы могут представлять собой как глобальные корпоративные сети, так и сети университетов или даже отдельных факультетов. Все зависит от того, как осуществляется маршрутизация. Сейчас наблюдается тенденция к укрупнению автономных систем. Это упрощает администрирование и повышает эф- фективность маршрутизации. Маршрутизация внутри автономной системы отличается от маршрутизации между такими системами. Протоколы второго типа (внешние, или протоколы внешних шлю-, зов) должны управлять множеством маршрутов к различным сетям и учитывать тот факт, что соседние маршрутизаторы находятся под контролем других людей. Внешние пропь колы не раскрывают топологию автономной системы, поэтому в определенном смыслу их можно рассматривать как второй уровень маршрутизации, на котором соединяются группы сетей, а не отдельные компьютеры или кабели. На практике небольшим и среднего размера организациям редко требуется внешний протокол, если только они не подключены к нескольким провайдерам одновременно.. При наличии нескольких провайдеров традиционное разделение на локальный домен и домен Интернета нарушается, поскольку маршрутизаторам приходится определять, какой маршрут в Интернете лучше всего подходит для конкретного адреса. (Это не означает, что каждый маршрутизатор должен знать всю необходимую информацию. Большинство узлов может направлять свои пакеты внутреннему шлюзу, хранящему необходимые сведения.) Поскольку внешние протоколы не сильно отличаются от своих внутренних аналогов, в этой главе мы сосредоточим внимание на внутренних протоколах и демонах, которые их поддерживают. Если ваш сайт поддерживает внешний протокол, обратитесь к литера- турным источниками, ссылки на которые приведены в конце главы. 15.3. Основные протоколы маршрутизации В этом разделе мы познакомимся с основными внутренними протоколами маршру- тизации, узнаем их преимущества и недостатки.
глава 15. маршрутизация 565 Протоколы RIP и RIPng RIP (Routing Information Protocol — протокол маршрутной информации) — это старый протокол компании Xerox, адаптированный для IP-сетей. Его IP-версия была описана примерно в 1988 году в документе RFC 1058. Существует три версии этого про- токола: RIPvl, RIPv2 и RIPng только для протокола IPv6 (ng (next generation) означает “следующее поколение”). Все версии этого протокола представляют собой простые дистанционно-векторные протоколы, метрикой стоимости в которых является количество переходов. Поскольку протокол RIP разрабатывался в те времена, когда отдельные компьютеры были доро- гими, а сети маленькими, в версии RIPvl предполагается, что все узлы, находящиеся на расстоянии пятнадцати и более переходов, недоступны. В более поздних версиях это ограничение не было снято, чтобы стимулировать администраторов сложных сетей пе- реходить на более сложные протоколы маршрутизации. Ш Информация о бесклассовой адресации, известной под именем CIDR, приведена в раз- деле 14.4. Протокол RIPv2 — это улучшенная версия протокола RIP, в которой вместе с адресом следующего перехода передается сетевая маска. Это упрощает управление сетями, где есть подсети и применяется протокол CIDR, по сравнению с протоколом RIPvl. В нем была также предпринята невнятная попытка усилить безопасность протокола RIP. Протокол RIPv2 можно выполнять в режиме совместимости. Это позволяет сохра- нить большинство его новых функциональных возможностей, не отказываясь от по- лучателей, использующих простой протокол RIP. Во многих аспектах протокол RIPv2 идентичен исходному протоколу и отдавать предпочтение следует именно ему. Ш Детали протокола IPv6 приведены в разделе 14.2. Протокол RIPng представляет собой переформулирование протокола RIP в терминах протокола IPv6. Он может использоваться только в рамках протокола IPv6, в то время как протокол RIPv2 — только в рамках протокола IPv4. Если вы хотите использовать как протокол IPv4, так и протокол IPv6 вместе с протоколом RIP, то RIP и RIPng необходи- мо выполнять как отдельные протоколы. Несмотря на то что протокол RIP известен своим расточительным использованием широковещательного режима, он весьма эффективен при частых изменениях сети, а также в тех случаях, когда топология удаленных сетей неизвестна. Однако после сбоя канала он может замедлить стабилизацию системы. Сначала исследователи были уверены, что появление более сложных протоколов маршрутизации, таких как OSPF, сделает протокол RIP устаревшим. Тем не менее про- токол RIP продолжает использоваться, потому что он простой, легкий в реализации и не требует сложного конфигурирования. Таким образом, слухи о смерти протокола RIP оказались слишком преувеличенными. Протокол RIP широко используется на платформах, не использующих операцион- ную систему UNIX. Многие устройства, включая сетевые принтеры и сетевые управляе- мые SNMP-компоненты, способны принимать RIP-сообщения, узнавая о возможных сетевых шлюзах. Кроме того, почти во всех версиях систем UNIX и Linux в той или иной форме существует клиент протокола RIP. Таким образом, протокол RIP считается “наименьшим общим знаменателем” протоколов маршрутизации. Как правило, он при- меняется для маршрутизации в пределах локальной сети, тогда как глобальную маршру- тизацию осуществляют более мощные протоколы.
566 Часть II. Работа в сети Некоторые сайты запускают пассивных демонов протокола RIP (обычно демон routed или ripd из пакета Quagga), которые ожидают сообщений об изменениях в сети, не осу- ществляют широковещательную рассылку собственной информации. Реальные вы- числения маршрутов выполняются с помощью более производительных протоколов, таких как OSPF (см. следующий раздел). Протокол RIP используется только как меха- низм распространения. Протокол OSPF OSPF (Shortest Path First Open — открытый протокол первоочередного обнаруже- ния кратчайших маршрутов) является самым популярным топологическим протоко- лом. Термин “первоочередное обнаружение кратчайших маршрутов” (shortest path first) означает специальный математический алгоритм, по которому вычисляются маршруты; термин “открытый” (open) — синоним слова “непатентованный”. Основная версия про- токола OSPF (версия 2) определена в документе RFC2328, а расширенная версия прото- кола OSPF, поддерживающая протокол IPv6 (версия 3), — в документе RFC5340. Первая версия протокола OSPF устарела и сейчас не используется. OSPF — протокол промышленного уровня, который эффективно функционирует в крупных сетях со сложной топологией. По сравнению с протоколом RIP, он имеет ряд преимуществ, включая возможность управления несколькими маршрутами, ведущими к одному адресату, и возможность разделения сети на сегменты (“области”), которые бу- дут делиться друг с другом только высокоуровневыми данными маршрутизации. Сам про- токол очень сложный, поэтому имеет смысл использовать его только в крупных систе- мах, где важна эффективность маршрутизации. Для эффективного использования про- токола OSPF необходимо, чтобы ваша схема адресации имела иерархический характер. В спецификации протокола OSPF не навязывается конкретная метрика стоимости. По умолчанию в реализации этого протокола компанией Cisco в качестве метрики ис- пользуется пропускная способность сети. Протокол EICRP EIGRP (Enhanced Interior Gateway Routing Protocol — протокол маршрутизации вну- тренних шлюзов) — это патентованный протокол маршрутизации, используемый толь- ко маршрутизаторами компании Cisco. Протокол IGRP был разработан для устранения некоторых недостатков протокола RIP еще в те времена, когда не было такого надеж- ного стандарта, как протокол OSPF. Протокол IGRP был отклонен в пользу протоко- ла EIGRP, который допускает произвольные сетевые маски CIDR. Протоколы IGRP и EIGPR конфигурируются одинаково, несмотря на различия в их организации. Протокол EIGRP поддерживает протокол IPv6, но в нем, как и во всех других про- токолах маршрутизации, адресные пространства IPv6 и IPv4 конфигурируются отдельно и существуют как параллельные домены маршрутизации. Протокол EIGRP является дистанционно-векторным, но он спроектирован так, что- бы избежать проблем зацикливания и медленной стабилизации, свойственных другим протоколам данного класса. В этом смысле протокол EIGRP считается образцом. Для большинства применений протоколы EIGRP и OSPF обеспечивают равные функцио- нальные возможности.
Глава 15. Маршрутизация 567 IS—IS: протокол маршрутизации между промежуточными системами Протокол IS-IS (Intra-domain Intermediate System to Intermediate System Routing Pro- tocol) является ответом на протокол OSPF со стороны организации ISO. Первоначально он предназначался для маршрутизации в рамках сетевых протоколов OSI, но впослед- ствии был расширен для поддержки 1Р-маршрутизации. Оба протокола — IS-IS и OSPF — создавались в начале 90-х годов, когда протоколы организации ISO преднамеренно хранились в тайне. Благодаря усилиям со стороны ор- ганизации IETF, протокол IS-IS получил видимость законности, но со временем стал все сильнее уступать в популярности протоколу OSPF и сегодня используется редко. В на- стоящее время из-за множества ненужных функциональных особенностей, заложенных в него организацией ISO, лучше его избегать. Протоколы RDP и NDP Протокол RDP (Router Doscoveiy Protocol — протокол обнаружения маршрутизаторов) использует ICMP-сообщения, посылаемые по групповому IP-адресу 224.0.0.1, для распро- странения информации о других маршрутизаторах в сети. К сожалению, не все маршрути- заторы в настоящее время рассылают такие сообщения, и не все компьютеры могут их при- нимать. Остается надеяться, что когда-нибудь этот протокол станет более популярным. Ш Информация о протоколе ARP приведена в разделе 14.6. Протокол NDP (Neighbor Discovery Protocol — протокол обнаружения соседнего узла), основанный на протоколе IPv6, объединяет функциональные возможности про- токолов RDP и ARP (Address Resolution Protocol — протокол разрешения адреса), ис- пользуемых для отображения адресов IPv4 в адреса аппаратных устройств в локальных сетях. Поскольку этот протокол является основным компонентом протокола IPv6, он используется там, где используется протокол IPv6, и протоколы маршрутизации в рам- ках протокола IPv6 основаны именно на нем. Протокол BGP Протокол BGP (Border Gateway Protocol — протокол пограничной маршрутизации) является протоколом внешней маршрутизации, т.е. он управляет трафиком между ав- тономными системами, а не между отдельными сетями. Существовало несколько попу- лярных протоколов внешней маршрутизации, но протокол BGP пережил их всех. В настоящее время BGP является стандартным протоколом, используемым для ма- гистральной маршрутизации в Интернете. В средине 2010 года таблица маршрутизации Интернета содержала около 320 тыс. префиксов. Совершенно очевидно, что это мас- штаб, при котором магистральная маршрутизация существенно отличается от локальной. 15.4. Выбор стратегии маршрутизации Существует четыре уровня сложности, характеризующих процесс управления марш- рутизацией в сети: • отсутствие маршрутизации как таковой; • только статическая маршрутизация;
568 Часть II. Работа в сети • преимущественно статическая маршрутизация, но клиенты принимают RIP- обновления; • динамическая маршрутизация. Общая топология сети существенно влияет на маршрутизацию каждого конкретно- го сегмента. В различных сетях могут требоваться совершенно разные уровни поддерж- ки маршрутизации. При выборе стратегии следует руководствоваться перечисленными ниже эмпирическими правилами. • Автономная сеть не нуждается в маршрутизации. • Если из сети есть только один выход во внешний мир, клиенты сети (нешлюзовые узлы) должны иметь стандартный статический маршрут к этому шлюзу. Никакой другой конфигурации не требуется, кроме как на самом шлюзе. • Можно задать явный статический маршрут к шлюзу, ведущему в небольшую груп- пу сетей, и стандартный маршрут к шлюзу, ведущему во внешний мир. Однако динамическая маршрутизация предпочтительнее, если до нужной сети можно до- браться разными маршрутами. • Если сети пересекают государственные или административные границы, следует использовать динамическую маршрутизацию, даже если сложность сетей этого не требует. • Протокол RIP отлично работает и широко используется. Не отказывайтесь от него просто потому, что он имеет репутацию устаревшего протокола. • Проблема протокола RIP заключается в том, что его невозможно масштабировать до бесконечности. Расширение сети рано или поздно приведет к отказу от него. Из-за этого протокол RIP считается промежуточным протоколом с узкой обла- стью применения. Эта область ограничена с одной стороны сетями, которые явля- ются слишком простыми, чтобы применять в них какой-либо протокол маршру- * тизации, а с другой стороны — сетями, которые являются слишком сложными для ; протокола RIP. Если вы планируете расширять свою сеть, то было бы целесообраз- ? но игнорировать протокол RIP вообще. • Даже если протокол RIP не соответствует вашей стратегии глобальной маршру-) тизации, он остается хорошим способом распределения маршрутов к концевым 5 узлам. Однако его не следует применять без особой надобности: системы в сети, j имеющей только один шлюз, никогда не требуют динамического обновления. < • Протоколы EIGRP и OSPF имеют одинаковые функциональные возможности, но j протокол EIGRP является собственностью компании Cisco. Компания Cisco дела- > ет прекрасные и оптимальные по соотношению “цена-качество” маршрутизаторы; : тем не менее стандартизация протокола EIGRP ограничивает ваши возможности будущего расширения. Маршрутизаторы, подключенные к магистрали Интернета, должны использовать протокол BGP. Обычно большинство маршрутизаторов имеет только один вход и, сле- довательно, для них достаточно задать простой статический стандартный маршрут. Для организации среднего размера с относительно стабильной локальной структу- рой, где есть выход в другую сеть, подойдет сочетание статической и динамической маршрутизаций. Маршрутизаторы локальной сети, которые не являются шлюзами во внешние сети, могут использовать статическую маршрутизацию, направляя все неиз- вестные пакеты стандартной машине, способной общаться с внешним миром и выпол- нять динамическую маршрутизацию.
глава 15. Маршрутизация 569 Сеть, управлять которой по такой схеме было бы слишком сложно, должна основы- ваться на динамической маршрутизации. В концевых сетях (leaf nets) по-прежнему мож- но использовать стандартные статические маршруты, но компьютеры в сетях с более чем одним маршрутизатором должны запускать демон routed в пассивном режиме. 15.5. Демоны маршрутизации Мы не рекомендуем использовать системы UNIX и Linux в качестве маршрутизато- ров в производственных сетях. Специализированные маршрутизаторы проще, надежнее, безопаснее и более быстродействующие (даже если они скрытно запускают ядро системы Linux). Иначе говоря, очень хорошо иметь возможность организовать новую подсеть, ис- пользуя всего лишь сетевую карту стоимостью 15 долл, и коммутатор за 40 долл. Это впол- не разумный подход к организации разреженных, тестовых и вспомогательных сетей. Системы, действующие как шлюзы в таких подсетях, не требуют дополнительных инструментов для управления их собственными таблицами маршрутизации. Статические маршруты вполне адекватны как для машин, используемых в качестве шлюзов, так и для машин, представляющих собой узлы самой подсети. Однако если вы хотите, чтобы ваша подсеть была доступной для других сетей в вашей организации, вам необходимо сооб- щить о ее существовании и идентифицировать маршрутизатор, к которому будут при- вязаны пакеты, посылаемые данной подсети. Обычно для этого на шлюзе запускается демон маршрутизации. Системы UNIX и Linux могут участвовать в большинстве протоколов маршрутизации с помощью различных демонов маршрутизации. Важным исключением из этого правила является протокол EIGRP, который, насколько нам известно, не имеет широко доступ- ной реализации в системах UNIX и Linux. Поскольку демоны маршрутизации редко реализуются в производственных систе- мах, мы не будем подробно описывать их использование и конфигурацию. Тем не менее в следующих разделах мы приведем краткое описание типичных программ и укажем, где искать детали конфигурации. Демон route: устаревшая реализация в протоколе RIP Долгое время демон routed был стандартным демоном маршрутизации, и его до сих пор включают в дистрибутивы некоторых систем. Демон routed понимает только протокол RIP и при этом плохо: даже поддержка версии RIPv2 не поправила ситуацию. Демон routed не понимает протокол RIPng, реализация которого основана на совре- менных демонах, таких как Quagga и ramd в системе HP-UX. Демон routed целесообразно использовать в пассивном режиме (-q), в котором он принимает сообщения об обновлениях маршрутов, но не осуществляет широковещатель- ную рассылку собственных сообщений. Кроме указания опций в командной строке, демон routed не требует конфигурирования. Он представляет собой дешевый и простой способ получения сообщений об обновлениях маршрутов без сложного конфигурирования. Демон заносит обнаруженные маршруты в таблицу ядра. Все маршруты долж- ны анонсироваться, как минимум, каждые четыре минуты, иначе они будут удалены. Правда, демон route помнит, какие маршруты он добавлял, и не удаляет статические маршруты, заданные с помощью команды route. СЭ Команда route описана в разделе 14.9.
570 Часть II. Работа в сети демон gated: первый многопротокольный демон маршрутизации Демон gated — элегантная и легко доступная программа маршрутизации, позволяю- щая одновременно использовать несколько протоколов маршрутизации. Он предостав- ляет администратору полный контроль над анонсированными маршрутами, широкове- щательными адресами, правилами безопасности и метриками стоимости. Демон gated разрешает нескольким протоколам использовать одни и те же маршруты, позволяя тем самым создавать шлюзы между автономными областями, в которых приняты разные си- стемы маршрутизации. Наконец, демон gated имеет один из самых удобных командных интерфейсов и форматов файлов конфигурации среди всего административного про- граммного обеспечения. Увы, демон gated мертв (или, по крайней мере, при смерти), хотя память о нем еще живет в выпусках систем HP-UX 3.5.9 и AIX 6.0, которые вообще медленно реагируют на происходящие изменения. Демон gated представляет собой поучительный пример риска, с которым связаны попытки разрабатывать открытое программное обеспечение. Он задумывался как сво- бодно распространяемая программа, но в 1992 году был приватизирован и переделан консорциумом по разработке программ; в результате его обновления стали доступными только членам этого консорциума. В конце концов консорциум был расформирован, и права на коммерческую версию демона gated несколько раз “меняли” владельцев. Тем временем открытые проекты Zebra и Quagga вытеснили демон gated и сами стали играть ведущие роли в области открытых пакетов маршрутизации. В настоящее время демон gated угас и как коммерческий продукт, и как открытый проект. Печальный ко- нец полезного и хорошо спроектированного пакета. Пакет Quagga: основной демон маршрутизации Quagga (quagga. net) — это опытно-конструкторское подразделение проекта Zebra, выполняемого в рамках проекта GNU. Проект Zebra был запущен Кунихиро Ишигуро (Kunihiro Ishiguro) и Йошинари Йошикава (Yoshinari Yoshikawa) для реализации много- протокольной маршрутизации с помощью коллекции независимых демонов, а не одного монолитного приложения. В реальной жизни квагга (quagga) — это исчезнувший подвид зебры, которая была последний раз сфотографирована в 1870 году. Но его цифровая ре- инкарнация Quagga выжила, а проект Zebra закрылся. В настоящее время пакет Quagga реализует все протоколы RIP (все версии), OSPF (версии 2 и 3), BGP и IS-IS. Он выполняется в системах Linux, Solaris и разных вариан- тах системы BSD. В системе Solaris и версиях системы Linux, имеющихся в нашем рас- поряжении, пакет Quagga либо инсталлирован по умолчанию, либо доступен в качестве вспомогательного пакета, который можно загрузить из стандартного системного репози- тория программного обеспечения. В пакете Quagga демон zebra играет роль информационного центра для маршрути- зации. Он управляет взаимодействием между таблицей маршрутизации ядра и демона- ми, соответствующими отдельным протоколам маршрутизации (ripd, ripngd, ospfd, ospf 6d, bgpd и isisd). Кроме того, он управляет потоками информации о маршрутах, которыми обмениваются протоколы. Каждый демон имеет свой собственный конфигу- рационный файл в каталоге /etc/quagga. Для того чтобы послать запрос или изменить конфигурацию, можно соединиться с любым из демонов Quagga с помощью интерфейса командной строки (vtysh в системе
Глава 15. Маршрутизация 57а soians Linux и quaggaadm в системе Solaris). Командный язык разработан так, чтобы он был понятен пользователям операционной системы IOS компании Cisco; дополнительные детали можно найти в разделе 15.6, посвященном маршрутизаторам Cisco. Как и в си- стеме IOS, для того чтобы войти в режим “суперпользователя”, необходимо выполнить команду enable, для того чтобы ввести команды конфигурирования, необходимо вы- полнить команду config term, а для того чтобы сохранить изменения конфигурации в файле конфигурации демона, необходимо выполнить команду write. Официальная документация доступна на сайте quagga. net в виде файлов в форма- тах HTML и PDF. Несмотря на свою полноту, эта документация содержит, в основном, удобный каталог опций, а не общий обзор системы. Более практичную документацию можно найти на сайте wiki. quagga.net. Здесь находятся подробно прокомментиро- ванные примеры файлов конфигурации, ответы на часто задаваемые вопросы и советы. Несмотря на то что файлы конфигурации имеют простой формат, необходимо знать протокол, конфигурацию которого вы настраиваете, а также понимать, что означают те или иные опции. Список рекомендованной литературы по этому вопросу приведен в конце главы. Системы Solaris и Red Hat содержат в каталоге /ets/quagga/ кол- лекцию полезных примеров файла конфигурации для разных демо- нов Quagga. Демон ramd: многопротокольная система маршрутизации для HP-UX Система HP-UX содержит набор демонов маршрутизации, которые по своей архитектуре напоминают демонов Zebra и Quagga. Мы не знаем, можно ли объяснить эту схожесть подражанием, конвергентной эволюцией или, воз- можно, ранним ответвлением от основного кода проекта Zebra. В любом случае эта схожесть носит лишь поверхностный характер. Важным различи- ем является то, что система HP поддерживает только протокол IPv6 и протоколы внеш- ней маршрутизации (RIPng, BGP и IS-IS), но вообще не поддерживает протокол OSPF. Кроме того, язык конфигурации отличается от базового, а управляющая утилита (rdc, в отличие от утилит vtysh или quaggaadm пакета Quagga) принимает аргументы только из командной строки; она не имеет независимой интерфейсной оболочки. Эта подсистема системы HP называется Route Administration Manager Daemon, а ее демон ramd играет ту же роль, какую в пакете Quagga играет демон zebra. Как и в па- кете Quagga, демоны, соответствующие разным протоколам, называются ripngd, isisd и bgpd. Маршрутизатор XORP Проект XORP (extensible Open Router Platform — расширяемая платформа маршрути- зации с открытым кодом) был открыт примерно в то же время, что и проект Zebra, но его цели были более универсальными. Вместо маршрутизации, проект XORP был нацелен на эмулирование всех функций заданного маршрутизатора, включая фильтрацию пакетов и управление трафиком. Информация об этом проекте хранится на сайте xorp. org. Интересный аспект платформы XORP заключается в том, что она не только функци- онирует в разных операционных системах (Linux, разных версиях BSD, Mac OS X и Win- dows Server 2003), но и может запускаться непосредственно с “живого” компакт-диска (т.е. непосредственно с компакт-диска, без инсталляции на жесткий диск. — Примеч.
572 Часть II. Работа в сети ред.) на персональном компьютере. Этот “живой” компакт-диск (live CD) скрытно осно- ван на системе Linux, но он прошел долгую эволюцию и позволяет превращать типич- ный персональный компьютер в специализированное устройство для маршрутизации. Специфика поставщиков в Пакет Quagga — это лучшее программное обеспечение для маршрутизации в /А системе Linux. Все доступные нам дистрибутивы либо инсталлировали его по умолчанию, либо позволяли загружать его из репозитория. Пакет Quagga на- столько распространен, что большинство дистрибутивов больше не содержит демон routed. Даже в тех дистрибутивах, в которых он есть, содержится его устаревшая версия, не поддерживающая протокол RIPv2. Система Solaris содержит функционал routed (который на самом деле назы- soians вается in. routed), понимающий протокол RIPv2. Она также содержит пакет Quagga, поэтому вы можете выбирать. Для любой маршрутизации в рамках протокола IPv6 необходимо использовать пакет Quagga. Функционал in. routed представляет собой механизм маршрутизации, заданный по умолчанию. Он начинает работать автоматически в момент загрузки системы, если в каталоге /etc/defaultrouter пользователь не задал свой собственный шлюз сети. Система Solaris продолжает поддерживать демон поиска маршрутов (router discovery dae- mon) in. rdisc, что довольно странно, поскольку его функциональными возможностя- ми теперь обладает демон in. routed. fXfft Базовая подсистема маршрутизации ramd в системе HP-UX рассматривалась выше. Кроме того, система HP содержит также копию демона gated 3.5.9, которая является довольно старой и не поддерживает протокол IPv6. Если вы хотите управлять маршрутизацией одновременно в рамках протоколов IPv4 и IPv6 в системе HP-UX, то для протокола IPv4 следует использовать демон gated, а для протокола IPv6 — демон ramd. К сожалению, пакет Quagga в на- стоящее время в системе HP-UX не работает. ®В системе AIX есть три демона маршрутизации: gated v6.0, routed, понима- ющий только протокол RIPvl, и ndpd-router, представляющий собой реа- лизацию протоколов RIPng и NDP. Кроме того, демон gated в системе AIX понимает протокол RIPng. Однако если вы хотите использовать демон gated для маршрутизации в рамках протокола IPv6, необходимо запустить оба демо- на: gated и ndpd-router. Детали описаны в документации. 15.6. Маршрутизаторы Cisco Маршрутизаторы, выпускаемые компанией Cisco Systems, Inc., сегодня являются стандартом де-факто на рынке интернет-маршрутизаторов. Захватив более 60% рынка, компания Cisco добилась широкой известности своих продуктов, к тому же есть много специалистов, умеющих работать с этими устройствами. Раньше в качестве маршрутиза- торов часто приходилось использовать UNIX-системы с несколькими сетевыми интер- фейсами. Сегодня специализированные маршрутизаторы размещены в коммутационных шкафах и над подвесными потолками, где сходятся сетевые кабели. Большинство маршрутизаторов Cisco работает под управлением операционной сис- темы Cisco IOS, которая является собственностью компании и не имеет отношения к си-
Глава 15. Маршрутизация 579 '*Г стеме UNIX. У нее достаточно большой набор команд: полная бумажная документация занимает на полке почти полтора метра. Мы никогда не смогли бы полностью описать здесь эту операционную систему, но все же постараемся дать о ней основные сведения. По умолчанию в системе IOS определены два уровня доступа (пользовательский и при- вилегированный), каждый из которых включает механизм парольной защиты. По умол- чанию к маршрутизатору Cisco можно получить доступ на пользовательском уровне, вос- пользовавшись утилитой telnet. Вы получите приглашение на ввод пароля. $ telnet acme-gw.acme.com3 Connected to acme-gw.acme.com. Escape character is ,Л] ' . User Access Verification Password: После ввода правильного пароля появится приглашение интерпретатора ЕХЕС. ч acme-gw.acme.com> С этого момента можно начинать вводить команды, например show interfaces для отображения списка сетевых интерфейсов маршрутизатора или show ? для получения справки по возможным параметрам. Для того чтобы перейти в привилегированный режим, введите команду enable, а при последующем запросе — привилегированный пароль. Признаком привилегирован- ного режима является наличие символа ‘#’ в конце строки приглашения. acme-gw.acme.com# Будьте осторожны! В данном режиме можно делать все что угодно, включая удаление конфигурационной информации и даже самой операционной системы. Если сомневае- тесь, обратитесь к справочным руководствам по системе Cisco или одной из исчерпы- вающих книг, выпускаемых издательством Cisco Press. Команда show running позволяет узнать текущие динамические параметры маршру- тизатора, а по команде show config отображаются текущие неизменяемые параметры. В большинстве случаев оба набора данных идентичны. Вот типичная конфигурация. acme-gw. acme, с om# show running Current configuration: version 12.1 hostname acme-gw enable secret xxxxxxxx ip subnet-zero interface EthernetO description Acme internal network ip address 192.108.21.254 255.255.255.0 no ip directed-broadcast interface Ethernetl description Acme backbone network ip address 192.225.33.254 255.255.255.0 no ip directed-broadcast ip classless line con 0 3 Современные версии системы IOS поддерживают разные методы доступа, включая SSH. Ра- зумеется, утилита telnet очень опасна. Если ваша организация уже использует маршрутизаторы Cisco, свяжитесь с системным администратором и выясните, какие методы можно использовать.
574 Часть II. Работа в сети transport input none line aux 0 transport input telnet line vty 0 4 password xxxxxxxx login end Модифицировать конфигурацию маршрутизатора можно разными способами. Ком- пания Cisco предлагает графические утилиты, работающие в некоторых версиях UNIX/ Linux и Windows, но опытные сетевые администраторы никогда ими не пользуются. Их самый мощный “инструмент” — командная строка. Кроме того, с помощью команды scp можно загрузить с маршрутизатора его конфигурационный файл и отредактировать в лю- бимом текстовом редакторе, после чего снова записать файл в память маршрутизатора. Для того чтобы отредактировать конфигурационный файл в режиме командной стро- ки, введите команду config term. acme-gw.acme.com# config term Enter configuration commands, one per line. End with CNTL/Z. acme-gw(config)# Теперь можно вводить конфигурационные команды в том виде, в котором их будет отображать команда show running. Например, если требуется изменить IP-адрес ин- терфейса Ether net 0, введите следующее. interface EthernetO ip address 192.225.40.253 255.255.255.0 По окончании ввода конфигурационных команд нажмите <Ctrl+Z>, чтобы вернуть- ся к обычной командной строке. Если все прошло успешно, сохраните новую конфигу- рацию в постоянной памяти посредством команды write mem. Приведем несколько советов, касающихся эффективной работы с маршрутизаторами Cisco. • Присвойте маршрутизатору имя с помощью команды hostname. Это позволит из- бежать несчастных случаев, связанных с изменением конфигурации не того марш- рутизатора. Заданное имя всегда будет отображаться в командной строке. • Всегда храните резервную копию конфигурационного файла маршрутизатора. С помощью команд scp или tf tp можно каждую ночь пересылать текущую кон- фигурацию в другую систему на хранение. • Зачастую существует возможность хранить копию конфигурации в энергонезависи- мой памяти NVRAM или на переносном флеш-накопителе. Не пренебрегайте этим! • Сконфигурировав маршрутизатор для SSH-доступа, отключите протокол Telnet совсем. • Контролируйте доступ к командной строке маршрутизатора, создавая списки до- ступа для каждого порта VTY (аналогичен порту PTY в UNIX-системе). Это не по- зволит посторонним пользователям “взломать” маршрутизатор. • Управляйте трафиком между сетями (по возможности, и во внешний мир тоже), создавая списки доступа для каждого интерфейса. Более подробная информация приведена в разделе 22.11.
Глава 15. Маршрутизация • Физически ограничивайте доступ к маршрутизаторам. Ведь если у злоумышленни- ка будет физический доступ к устройству, он легко сможет изменить пароль вилегированного режима. Если у вас несколько маршрутизаторов и несколько сотрудников, отвечающих за их работу, воспользуйтесь утилитой RANCID, которую можно загрузить с сайта shruberry.net. Название RANCID (игра слов: rancid — негодный, — Примеч. ред.) го- ворит само за себя, но у этой программы есть одно преимущество: она регистрируемая на ваших маршрутизаторах каждую ночь и получает их файлы конфигурации. Затем она сравнивает эти файлы и сообщает вам об их изменениях. Кроме того, она автоматически передает файлы конфигурации системе управления версиями (см. раздел 12.9). 15.7. Рекомендуемая литература • Perlman Radia. Interconnections: Bridges, Routers, Switches, and Interworking Protocols (2nd Edition), Reading, MA: Addison-Wiley, 2000. Это выдающаяся книга в данной области. Если вы решили купить только одну кни- гу по основе работы в сетях, покупайте ее. Кроме того, не упускайте шанса “завис- нуть” с Радией — она очень веселая и обладает удивительно большими знаниями. • Dooley Kevin and Ian J. Brown. Cisco IOS Cookbook (2nd Edition), Sebastopol, CA: O’Reilly Media, 2007. • Doyle Jeff and Jennifer Carroll. Routing ТС/IP, Volume I (2nd Edition). Indianapolis, IN: Cisco Press, 2005. • Doyle Jeff and Jennifer Carroll. Routing ТС/IP, Volume II. Indianapolis, IN: Cisco Press, 2001. Это двухтомное издание представляет собой глубоко продуманное введение в про- токолы маршрутизации и не ориентировано на какую-то конкретную реализацию. Том I посвящен внутренним протоколам, а том II — внешним протокола, системе NAT и многоадресной маршрутизации. • Halabi Sam and Danny McPherson. Internet Routing Architectures, Second Edition, Cisco Press. 2000. • В этой книге основной акцент делается на BGP. • Huitema Christian. Routing in the Internet, Second Edition, Prentice Hall, 2000. Эта книга представляет собой отличное введение в маршрутизацию для начинаю- щих. В ней описано большинство используемых сегодня протоколов маршрутиза- ции, а также рассматривается ряд сложных тем, например групповое вещание. Есть много документов RFC, посвященных маршрутизации. Основные из них пере- числены в табл. 15.2. Таблица 15.2. Документы RFC, посвященные маршрутизации RFC 1075 Distance Vector Multicast Routing Protocol Waitzman et al. 1256 ICMP Router Discovery Messages Deering 1724 RIP Version 2 MIB Extension Malkin, Baker 2080 Ring for IPv6 Malkin, Minnear
576 Часть II. Работа в сети Окончание табл. 15.2 RFC ',/4 'Г/?г Авторы 2328 OSPF Version 2 Moy 2453 RIP Version 2 Malkin 4271 A Border Gateway Protocol 4 (BGP-4) Rekhter, Li, et al. 4552 Authentication/Confidentiality for OSPFv3 Gupta, Melam 4822 RIPv2 Cryprographic Authentication Arkinson, Fanto 4861 Neighbor Discovery for IPv6 Narten et al. 5175 IPv6 Router Advertisement Flags Option Haberman, Hinden 5308 Routing IPv6 with IS-IS Hopps 5340 OSPF for IPv6 Coltun et al. 5643 Management Information Base for OSFv3 Joyal, NManral, et al. 15.8. Упражнения 15.1. Изучите возможности команды route в Linux и составьте краткое описание ее ра- боты. Как с помощью этой команды сделать следующее: а) добавить стандартный маршрут к шлюзу 128.138.129.1 через интерфейс ethl? б) удалить маршрут 128.138.129.1? в) определить, каким образом был добавлен маршрут: с помощью демона, напри- мер gated, или директивы переадресации протокола ICMP (ту же информа- цию можно получить, анализируя вывод команды netstat -гп)? 15.2. Сравните статический и динамический способы маршрутизации, укажите преиму- щества и недостатки каждого способа. Опишите ситуации, для которых подходит тот или иной вид маршрутизации, и объясните почему. 15.3. ★ Команда netstat -rn сообщает показанные ниже результаты. Опишите каж- дый маршрут и нарисуйте общую схему сети. Какая сеть — 10.0.0.0 или 10.1.1.0 — “ближе” к Интернету? Как появился каждый из маршрутов? Destination Gateway Genmask Flags MSS Window irtt Iface 10.0.0.0 0.0.0.0 255.255.255.0 U 40 0 0 ethl 10.1.1.0 0.0.0.0 255.255.255.0 U 40 0 0 ethO 0.0.0.0 10.0.0.1 0.0.0.0 UG 40 0 0 ethl 15.4. 15.5. Определите стратегию маршрутизации в вашей системе. Какие протоколы используются? Какие компьютеры подключены к Интернету? Воспользуйтесь утилитой tcpdump для просмотра маршрутных обновлений, курсирующих в ло- кальной сети, и командой traceroute — для выхода за пределы локальной сети. (Необходим корневой доступ.) 'АтЛг Если бы вы были интернет-провайдером среднего размера, предоставляющим услуги коммутируемого доступа и виртуального хостинга, какую конфигурацию системы маршрутизации вы бы использовали? Убедитесь в том, что учитываются не только шлюзы между интернет-магистралью и вашей сетью, но и любые вну- тренние маршрутизаторы. Нарисуйте схему маршрутизации в сети.
Глава Сетевые аппаратные средства Пользуетесь ли вы поисковой машиной Google с помощью своего мобильного теле- фона1, выполняете ли интерактивные банковские операции или получаете видео^рон- ки с помощью программы Skype от своих кузин из Бельгии, практически все в мире в настоящее время обрабатывается в цифровой форме. Перемещение данных из одного места в другое на уме почти у всех. В основе всего этого сумасшествия лежит фантасти- ческое сетевое оборудование и, как вы уже догадались, множество разнообразных про- грамм, созданных в недрах системы UNIX. Крупномасштабная передача пакетов данных на основе технологии UNIX вошла в жизнь очень многих людей. Многие сетевые технологии продвигались в течение долгих лет, но в результате по- явился очевидный победитель: Ethernet. Сегодня технологию Ethernet можно встретить всюду: от игровых приставок до холодильников. Глубокое понимание принципов работы этой системы чрезвычайно важно для успешной работы системного администратора. Совершенно очевидно, что быстродействие и надежность сетей непосредственно влияют на результаты деятельности компаний. Однако в настоящее время сетевые тех- нологии настолько вездесущи, что состояние сети может повлиять на возможность взаи- модействия между людьми, например возможность делать телефонные звонки. Плохая организация сети — это личная и профессиональная неудача, которая может иметь ката- строфические социальные последствия. Кроме того, устранение этих недостатков порой обходится очень дорого. Успешное создание сети зависит от, по крайней мере, четырех важнейших факторов, а именно: • разработки разумной структуры сети; • выбора высококачественного оборудования; 1 Знаете ли вы, что на телефонах iPhone установлена встроенная система UNIX?
578 Часть II. Работа в сети • правильной инсталляции и документирования; • компетентной эксплуатации и сопровождения. В этой главе рассматриваются принципы, инсталляция и функционирование се- тей Ethernet. Мы также кратко опишем такие устаревшие технологии, как DSL (Digital Subscriber Line), которые обычно предстают перед конечными пользователями в обли- ке — сюрприз! — технологии Ethernet. 16.1. Технология Ethernet: сетевая панацея Захватив более 95% мирового рынка локальных сетей (LAN — Local Area Network), технология Ethernet в самых разных формах проявляется почти всюду. Разработку стан- дарта Ethernet начал Боб Меткалф (Bob Metcalfe) из Массачусетсского технологического института в рамках своей кандидатской диссертации, но в настоящее время она описана во многих стандартах IEEE. В первоначальной спецификации Ethernet была определена скорость передачи дан- ных 3 Мбит/с (мегабита в секунду), но почти сразу же она выросла до 10 Мбит/с. Как только в 1994 году была закончена работа над стандартом, предусматривавшим скорость 100 Мбит/с, стало ясно, что технология Ethernet будет лишь эволюционировать, а не вы- тесняться новой технологией. Это вызвало гонку технологий, в ходе которой произво- дители старались создать все более быстродействующую версию Ethernet, и это сорев- нование еще не закончено. Основные этапы эволюции различных стандартов Ethernet приведены в табл. 16.12. Таблица 16.1. Эволюция Ethernet Год Скорость , ,ц ц.. 1973 3 Мбит/с Xerox Ethernet - ? Коаксиальный кабель 1980 10 Мбит/с Ethernet 1 — 500 м Коаксиальный кабель RG-11 1982 10 Мбит/с DIX Ethernet (Ethernet II) - 500 m Коаксиальный кабель RG-11 1985 10 Мбит/с 10Base5 (“Thicknet”) 802.3 500 m Коаксиальный кабель RG-11 1985 10 Мбит/с 10Base2 (“Thinnet”) 802.3 180 m Коаксиальный кабель RG-58 1989 10 Мбит/с 10BaseT 802.3 100 m Медный кабель НВПа категории 3 1993 10 Мбит/с WBaseF 802.3 2 km 25 km ММ6 оптоволокно ОМ оптоволокно 1994 100 Мбит/с 100BaseTX(“Fast Ethernet") 802.3U 100 м Медный кабель НВП категории 5 1994 100 Мбит/с 100BaseFX 802.3U 2 km 20 km ММ оптоволокно ОМ оптоволокно 1998 1 Пбит/с 1000BaseSX 802.3z 260 м 550 m ММ оптоволокно (62,5 мкм) ММ оптоволокно (50 мкм) 1998 1 Гбит/с WOOBaseLX 802.3z 440 m 550 м 3 km ММ оптоволокно (62,5 мкм) ММ оптоволокно (50 мкм) ОМ оптоволокно 2 Мы не упомянули несколько стандартов, которым не удалось завоевать популярность, в част- чости 100BaseT4 и lOOBaseVG-AnyLAN.
Глава 16. Сетевые аппаратные средства 579 Окончание табл. 16.1 Год Скорость Название стандарта 1998 1 Пбит/с ЮООВазеСХ 802.3z 25 м Двухпроводный экранированный кабель 1999 1 Пбит/с 1000BaseT (“Gigabit Ethernet”) 802.3ab 100 м Медный кабель НВП категорий 5Еи6 2002 10 Пбит/с 10Gbase-SR 802.3ae 300 м ММ оптоволокно 10Gbase-LR 10 км ОМ оптоволокно 10Gbase-ER 802.3aq 40 км ОМ оптоволокно 10Gbase-ZR 80 км ОМ оптоволокно 2006 10 Пбит/с 10Gbase-T(“10Gig”) 802.3an 100 м ВП категории 6а, 7, НВП катего- рии 7а 2009 40 Пбит/с 40Gbase-CR4 P802.3ba Юм Медный кабель НВП 40Gbase-SR4 100 м ММ оптоволокно 2012В 1 Тбит/с TBD TBD TBD CWDM оптоволокно 2015а ЮТбит/с TBD TBD TBD DWDM оптоволокно а НВП — неэкранированная витая пара, ВП — витая пара. 6 ММ — многомодовое, ОМ — одномодовое. в Промышленный проект. Как работает Ethernet Технологию Ethernet можно представить в виде великосветского раута, на котором гости (компьютеры) не перебивают друг друга, а ждут паузы в разговоре (отсутствия трафика в сетевом кабеле), чтобы заговорить. Если два гостя начинают говорить одно- временно (т.е. возникает конфликт), оба они останавливаются, извиняются друг перед другом, ждут немного, а затем один из них начинает говорить снова. В технической терминологии такая схема называется CSMA/CD (Carrier Sense Multiple Access with Collision Detection — множественный доступ с контролем несущей и обнаружением конфликтов). Смысл этого названия заключается в следующем: • контроль несущей — можно определить, занят ли канал; • множественный доступ — кто угодно может передавать сообщения; • обнаружение конфликтов — передающая система “знает”, когда она “перебивает” кого-нибудь. Фактическая задержка при обнаружении конфликтов является случайной. Это по- зволяет избежать такого развития событий, при котором два компьютера одновремен- но передают сообщения в сеть, обнаруживают коллизию, ждут некоторое время, а затем синхронно возобновляют передачу, переполняя, таким образом, сеть конфликтами. В настоящее время важность соглашений CSMA/CD осознали даже приверженцы коммутаторов, которые обычно ограничивают количество узлов в домене, в кагором происходят коллизии, до двух. (Если продолжить аналогию с великосветским раутом, можно описать этот вариант как ситуацию, в которой два собеседника, как в старом кино, чопорно сидят на противоположных концах длинного обеденного стола.)
580 Часть II. Работа в сети Топология Ethernet С точки зрения топологии, сеть Ethernet представляет собой разветвляющуюся шину, но без петель. У пакета есть только один путь следования между любыми двумя узлами, расположенными в одной сети. В сети Ethernet могут передаваться пакеты трех типов: однонаправленные, групповые и широковещательные. Пакеты первого типа адресованы одному узлу, второго — группе узлов, третьего — всем узлам сегмента. Широковещательный домен — это совокупность узлов, которые принимают паке- ты, направляемые по аппаратному широковещательному адресу. В каждом логическом сегменте сети Ethernet существует только один широковещательный домен. В ранних стандартах Ethernet и средствах передачи (например, 10Base5) понятия физического и логического сегментов были тождественными, поскольку все пакеты передавались по одному большому кабелю, в который втыкались сетевые интерфейсы компьютеров3. С появлением современных коммутаторов логические сегменты стали включать в себя множество (десятки и даже сотни) физических сегментов, к которым подключе- но всего два устройства: порт коммутатора и компьютер. Коммутаторы отвечают за до- ставку групповых и однонаправленных пакетов в физический сегмент, где расположен нужный адресат (адресаты); широковещательные пакеты направляются во все сетевые порты логического сегмента. Логический сегмент может состоять из физических сегментов, имеющих разную ско- рость передачи данных (10 Мбит/с, 100 Мбит/с, 1 Гбит/с или 10 Гбит/с). Следовательно, коммутаторы должны иметь средства буферизации и синхронизации для предотвраще- ния возможных конфликтов. Неэкранированная витая пара Неэкранированная витая пара (НВП) — самая популярная среда передачи данных в сетях Ethernet. Она основана на звездообразной топологии и обладает рядом преиму- ществ по сравнению с другими средами: • применяется недорогой, недефицитный медный кабель (иногда можно использо- вать готовую телефонную проводку); • соединение на основе НВП гораздо проще смонтировать и наладить, чем соеди- нение на основе коаксиального кабеля или оптического волокна, к тому же легко подобрать нужную длину кабеля; • используются дешевые, надежные и удобные в эксплуатации разъемы RJ-45; • все соединения функционируют независимо друг от друга, поэтому дефект кабель- ной системы в одном соединении не повлияет на другие компьютеры сети. Общая схема сети на основе НВП изображена на рис. 16.1. Провода, используемые в современных локальных вычислительных сетях на основе неэкранированной витой пары, обычно подразделяют на восемь категорий. Эта си- стема оценки параметров была впервые введена компанией Anixter, крупным постав- щиком кабельной продукции, и впоследствии стандартизирована организацией TIA (Telecommunications Industry Association — ассоциация телекоммуникационной промыш- ленности). Сегодня выделяются категории 1—7 и промежуточные категории 5е и 6а. 3 Мы не шутим! Подключение нового компьютера к сети предполагало прокалывание отвер- стия в изоляции кабеля с помощью специального соединителя, называемого “зуб вампира”, кото- рый позволял добраться до центрального проводника. Этот соединитель затем зажимался винтами.
Глава 16. Сетевые аппаратные средства 581 Рис. 16.1. Схема сети на основе НВП Организация ISO (International Organization for Standartization — Международная ор- ганизация по стандартизации) тоже подключилась к процессу стандартизации кабелей и предложила собственную классификацию, которая почти в точности повторяет класси- фикацию TIA. Например, кабель категории 5 в системе TIA эквивалентен кабелю класса D в системе ISO. Для наглядности в табл. 16.2 подытожены ключевые различия между основными современными стандартами кабелей. Эта таблица поможет вам произвести впечатление на своих друзей во время вечеринки. Таблица 16.2. Характеристики кабелей НВП Ширина полосы МГц 100 100 250 500 600 1000 Затухание ДБ 24 24 21,7 18,4 20,8 60 NEXT ДБ 27,1 30,1 39,9 59 62,1 60,4 ELFEXT ДБ 17 17,4 23,2 43,1 46,0 35,1 Затухание отраженного сигнала (обратная потеря) ДБ 8 10 12 32 14,1 61,93 Задержка распространения сигнала нс 548 548 548 548 504 534 а NEXT (Near-end crosstalk) — ослабление перекрестной помехи на ближнем конце. ELFEXT (Equal level far-end crosstalk) — ослабление равноуровневой перекрестной помехи на дальнем конце. 6 Включая дополнительные спецификации TIA TSB 95 и ISO FDAM 2. На практике кабели категорий 1 и 2 годятся только для передачи звуковых сигналов. Кабель категории 3 является стандартом для самых медленных локальных сетей: lOBaseT со скоростью передачи 10 Мбит/с. Кабель категории 4 ни для чего конкретного не пред- назначен. Кабель категории 5 поддерживает работу на скорости 100 Мбит/с. Кабели категорий Е, 6 и 6а поддерживают скорость передачи 1 Гбит/с и в настоящее время используются в качестве стандарта. Кабель категории 6а лучше всего подходит для организации новых сетей, поскольку он особенно устойчив к помехам, возникающим из-за использования старых стандартов передачи сигналов (например, lOBaseT). При прокладке кабелей ка- тегорий 5 и 5е были зафиксированы определенные проблемы. Кабели категорий 7 и 7а предназначены для передачи данных со скоростью 10 Гбит/с. Для соединений lOBaseT требуются две пары проводов категории 3, причем длина КажДой линии передачи ограничена 100 метрами. В соединениях lOOBaseTX предельная
582 Часть II. Работа в сети длина та же, но используются две пары проводов категории 5. Соединение lOOOBaseTX требует четырех пар проводов категорий 5е или 6/6а. Аналогично соединение lOGBase- ТХ требует четырех пар проводов категорий 6а, 7 или 7а. Ш Подробнее о прокладке кабелей рассказывается в разделе 16.5. Стандарты lOOOBaseTX и 10GBase-TX предназначены для передачи данных по мно- гим парам проводов. Они используют многожильные кабели для передачи данных по линии связи, которые выполняют ее быстрее, чем это может осуществить любая отдель- ная пара проводов. Существуют провода с поливинилхлоридной и тефлоновой изоляцией. Выбор изо- ляции диктуется средой, в которой будут проложены кабели. В замкнутых помещениях, связанных с вентиляционной системой здания, обычно требуется тефлоновая изоляция4. Поливинилхлоридная изоляция дешевле и проще в эксплуатации. 03 Информация о стандарте RS-232 приведена в разделе 31.1. Подключая четырехпарный НВП-кабель к коммутационным панелям и настенным розеткам RJ-45, придерживайтесь стандарта разводки TIA/EIA-568A. Этот стандарт, со- вместимый с другими вариантами RJ-45 (например, RS-232), позволяет избежать оши- бок при разводке концов кабеля, независимо от того, есть ли свободный доступ к парам. Требования стандарта отражены в табл. 16.3. Таблица 16.3. Стандарт TIA/EIA-568A для подключения четырехпарного НВП-кабеля к розетке RJ-45 Пара Контакты разъема 1 Белый/Синий 5/4 2 Белый/Оранжевый 3/6 3 Белый/Зеленый 1/2 4 Белый/Коричневый 7/8 Имеющаяся в здании проводка может не подходить для прокладки сетей, в зависи- мости от того, как и когда она прокладывалась. В 1980-х годах многие старые здания были переоснащены новыми кабелями. К сожалению, эти кабели обычно не поддержи- вают скорость передачи данных выше 100 Мбит/с. Оптическое волокно Оптическое волокно используется в тех ситуациях, когда использование медного , кабеля по тем или иным причинам неприемлемо. Оптическое волокно передает сигнал быстрее, чем медный провод. Кроме того, оно является более устойчивым к электриче- ским помехам, что в некоторых приложениях очень важно. Там, где оптическое волокно не является абсолютно необходимым, обычно выбирают медный кабель, поскольку он дешевле и с ним легче работать. Оптическое волокно бывает “многомодовым” и “одномодовым”. Многомодовое оп- тическое волокно обычно используется в зданиях или комплексах зданий. Оно толще, чем одномодовое, и может проводить несколько лучей света; это свойство позволяет ис- пользовать менее дорогую электронику (например, в качестве источника света можно использовать светодиоды). 4 Конкретную информацию можно получить у пожарного инспектора или ответственного за пожарную безопасность.
Глава 16. Сетевые аппаратные средства 583 Одномодовое оптическое волокно часто используется в магистральных приложениях, например, для прокладки линий связи между городами и регионами. Оно может прово- дить только один световой луч и требует дорогой прецизионной электроники в конеч- ных точках. Стандарт TIA-598C рекомендует цветовую кодировку оптического волокна, пред- ставленную в табл. 16.4. Следует помнить основное правило: все элементы должны соот- ветствовать друг другу. Оптическое волокно, соединяющее конечные точки, оптические кабели перекрестной коммутации и электронные приборы, установленные в конечных точках, должны иметь один и тот же тип и размер. Обратите внимание на то, что кабели ОМ1 и ОМ2 не являются взаимозаменяемыми, хотя и окрашены в один и тот же оран- жевый цвет — проверьте размеры, указанные на кабелях, чтобы убедиться, что они со- ответствуют друг другу. Если вы нарушите это правило, то вам будет сложно обеспечить изоляцию в конечных точках. Таблица 16.4. Атрибуты стандартных оптических волокон Количество мед Название ISO ’ Диаметр сердечника, мкм Много 0М1 62,5 125 Оранжевый Много 0М2 50 125 Оранжевый Много ОМЗ 50* 125 Голубой Одна 0S1 8-10 125 Желтый На концах оптических волокон используются разъемы более чем 30 типов, и нет ни четких правил, ни принципов, регламентирующих их выбор. В каждой конкретной си- туации на выбор того или иного типа разъема влияют поставщики оборудования или параметры оптического волокна, уже проложенного внутри здания. Соединение и расширение сетей Ethernet Сети Ethernet можно соединять с помощью устройств нескольких типов. На выбор устройств, описанных ниже, влияет их стоимость, причем более дешевые устройства описаны в первую очередь. Чем сложнее логические правила, по которым устройства перемещают биты из одной сети в другую, тем больше аппаратного и встроенного про- граммного обеспечения необходимо и тем более дорогой становится сеть. Концентраторы Концентраторы (hub) иногда еще называют повторителями (repeators). Это активные устройства, используемые для соединения сегментов сетей Ethernet на физическом уров- не. Им требуется внешний источник питания. Выступая в качестве повторителя, концентратор ретранслирует Ethemet-фреймы, но никак не интерпретирует их. Он “не имеет представления” ни о том, куда направляются пакеты, ни о том, какой протокол они используют. За исключением экзотических си- туаций, концентраторы больше не должны использоваться в промышленных сетях, и мы не советуем их использовать даже в домашних сетях. (Почему? Потому что коммутаторы (switches) значительно эффективнее используют полосу пропускания частот в сети и в на- стоящее время стоят недорого.) И Сетевые уровни рассматриваются в разделе 14.2.
584 Часть II. Работа в сети Коммутаторы Коммутатор соединяет сети Ethernet на канальном уровне. Его назначение — объеди- нить две физические сети так, чтобы они выглядели как одна большая физическая сеть. В настоящее время коммутаторы являются промышленным стандартом для соединения устройств Ethernet. Коммутаторы принимают, регенерируют и ретранслируют пакеты на аппаратном уровне. Они используют алгоритм динамического обучения. Они запоминают, какие ис- ходные адреса поступают с одного порта, а какие — с другого. Пакет переходит из одно- го порта в другой только при необходимости. Первоначально пересылаются все пакеты, но через несколько секунд, когда коммутатор изучит расположение большинства узлов сети, запускается механизм фильтрации. Поскольку между сетями пересылаются не все пакеты, каждый сегмент кабеля менее загружен, чем в случае, когда все компьютеры подключены к одному кабелю. А если учесть, что основной трафик имеет тенденцию к локализации, то увеличение реальной пропускной способности может оказаться заметным. Кроме того, коммутатор не влияет на логическую модель сети, поэтому его установка требует лишь незначительного вме- шательства со стороны администратора. Если сеть имеет петли, коммутатор может безнадежно запутаться, потому что паке- ты, посылаемые одним компьютером, окажутся сразу на двух (или более) портах ком- мутатора. В одной сети Ethernet петлей не бывает, но после объединения нескольких таких сетей с помощью маршрутизаторов и коммутаторов топология изменится, вслед- ствие чего может образоваться несколько путей к одному узлу. Некоторые коммутаторы решают эту проблему путем резервирования альтернативных маршрутов на тот случай* если основной маршрут станет недоступным. Они упрощают топологию видимой ими сети, отсекая дублирующиеся пути до тех пор, пока в оставшихся сегментах не окажется только по одному маршруту к каждому узлу сети. Другие коммутаторы создают между сетями двойные каналы и переключают трафик по циклическому принципу. Коммутаторы должны просматривать каждый пакет, определяя, нужно ли его пере- сылать в другой сегмент. Производительность этих устройств обычно измеряют как скоростью просмотра пакетов, так и скоростью их пересылки. Многие поставщики не указывают в диаграммах производительности коммутаторов размеры протестированных пакетов, поэтому реальная производительность может быть ниже объявленной. Несмотря на то что быстродействие коммутаторов Ethernet все время растет, эффек- тивно использовать их можно при объединении в один логический сегмент не более сотни компьютеров. В крупных коммутируемых сетях часто возникают проблемы напо- добие “широковещательных штормов”, поскольку широковещательный трафик должен проходить через все порты. Для решения этой проблемы нужно изолировать широко- вещательный трафик между коммутируемыми сегментами посредством маршрутизатора (создавая тем самым более одного логического Ethemet-сегмента). Выбор коммутатора может представлять определенную трудность. В этом сегменте рынка очень высокая конкуренция, следствием которой являются многочисленные ре- кламные заявления, не всегда подтверждаемые на практике. Поэтому не стоит особо до- верять данным, которые приводятся поставщиками; лучше прислушаться к советам не- зависимых экспертов (просмотрите тесты, приводимые в журналах). В последние годы нередко случалось так, что чей-то продукт оказывался “лучшим” в течение нескольких месяцев, а затем, после попыток внесения улучшений, его производительность или на- дежность падала ниже критической отметки.
Глава 16. Сетевые аппаратные средства 585 В любом случае убедитесь, что скорость объединительной панели коммутатора явля- ется достаточной. У хорошо спроектированного коммутатора эта скорость должна пре- вышать сумму скоростей всех его портов. Коммутаторы, позволяющие создавать виртуальные локальные сети В крупных организациях можно использовать коммутаторы, позволяющие разбивать их порты (программным путем) на группы, называемые виртуальными локальными се- тями (VLAN — Virtual Local Area Network). Виртуальная локальная сеть — это группа портов, принадлежащая к одному логическому сегменту, как если бы порты были соеди- нены со своим собственным выделенным коммутатором. Подобное секционирование позволяет повысить степень изоляции трафика, что полезно с точки зрения как безопас- ности, так и производительности. Трафиком между виртуальными локальными сетями управляет маршрутизатор или, в некоторых случаях, модуль маршрутизации или уровень программной маршрутизации самого коммутатора. Расширение этой системы, называемое “транкингом виртуальной локальной сети” (один из примеров реализации — протокол IEEE 802.1Q), позволяет раз- ным коммутаторам обслуживать порты одной логической виртуальной локальной сети. Маршрутизаторы Маршрутизаторы (известные также как “коммутаторы третьего уровня”) направля- ют трафик на третьем сетевом уровне модели OSI. Маршрутизаторы доставляют пакеты адресатам на основании информации, хранящейся в TCP/IP-заголовках. Помимо просто- го перемещения пакетов, маршрутизаторы могут также выполнять ряд особых функций, например фильтрацию пакетов (в соответствии с правилами безопасности), разделение трафика по приоритетам (в соответствии с заданным качеством обслуживания) и обнару- жение общей сетевой топологии. Алгоритмы маршрутизации рассматриваются в главе 15. Конфигурация маршрутизаторов бывает фиксированной или модульной. Устройства первого типа содержат сетевые интерфейсы, установленные в заводских условиях. Они обычно подходят для специализированных применений. Например, маршрутизатор с интерфейсами Т1 и Ethernet может оказаться удобным, когда нужно подключить не- большую компанию к Интернету. Модульные маршрутизаторы имеют слотовую или шинную архитектуру, а интерфей- сы к ним добавляются пользователями. Как правило, это более дорогие устройства, но зато они гибче в эксплуатации. В зависимости от необходимой надежности и ожидаемого трафика, специализиро- ванный маршрутизатор может оказаться как дороже, так и дешевле системы UNIX или Linux, сконфигурированной в качестве маршрутизатора. Однако специализированное Устройство, как правило, демонстрирует более высокую производительность и надеж- ность. Это та область сетевого проектирования, где лучше заранее вложить чуть больше Денег, чем потом иметь головную боль. Автосогласование С появлением разных стандартов Ethernet возникла необходимость, чтобы устройства могли идентифицировать конфигурацию своих соседей и согласовывать с ними свои на- стРойки. Например, сеть не будет работать, если на одной стороне соединения она ра- ботает со скоростью 1 Гбит/с, а на другой — со скоростью 10 Гбит/с. Для выявления и Решения этой проблемы организацией IEEE был разработан стандарт автосогласования Ethernet. В одних случаях он работает, а в других применяется неправильно и лишь усу- губляет проблему.
586 Часть II. Работа в сети Следует запомнить два золотых правила автосогласования. • Вы обязаны использовать автосогласование всех интерфейсов, работающих на ско- рости 1 Гбит/с и выше. Этого требует стандарт. • Если интерфейсы ограничены скоростями 100 Мбит/с и ниже, необходимо либо конфигурировать оба конца соединения, либо вручную настроить скорость и ду- плекс (половинный или полный) обеих сторон. Если в режиме автосогласования настроить только одну сторону соединения, то в большинстве случаев она не смо- жет выяснить, какую конфигурацию имеет другая сторона. В результате конфигу- рация станет несогласованной и производительность упадет. Для того чтобы выяснить, как задать стратегию автосогласования интерфейсов, про- читайте специальные разделы главы 14, начиная с раздела 14.11. Передача электропитания по сетям Ethernet Технология передачи питания по сетям Ethernet (РоЕ — Power on Ethernet) основана на передаче электропитания по той же неэкранированной витой паре (UTP Ethernet), по которой передается сигнал Ethernet. Эта технология регламентируется стандартом IEEE 802.3af. Это особенно удобно для систем связи, обеспечивающих передачу речевого сигнала по сети Интернет (VoIP — Voice over IP), или пунктов доступа к системе беспро- водной связи (мы указали только два примера, но список можно продолжить), в которых требуется как мощность тока, так и сетевое соединение. По мощности тока, системы РоЕ разделяются на четыре класса в диапазоне от 3,84 до 12,95 ватт. Промышленность, которая никогда не останавливается на достигнутом, уже работает над новым стандартом (802.3at), предусматривающим более высокую мощ- ность тока (более 60 ватт). Будет ли этого достаточно, чтобы подключить духовку Easy- Bake к сетевому порту в конференц-зале?5 Технология РоЁ порождает два обстоятельства, о которых должен знать системный администратор. • Вы должны знать о существовании устройств РоЕ в вашей инфраструктуре, чтобы правильно спланировать доступ к портам коммутаторов, поддерживающих техно- логию РоЕ. Эти порты дороже, чем порты, не поддерживающие технологию РоЕ. • Вычисляя расход электроэнергии на обслуживание коммуникационных шка- фов, содержащих коммутаторы РоЕ, следует учитывать мощность устройств РоЕ. Обратите внимание на то, что вы не должны планировать тот же самый расход электроэнергии на дополнительное охлаждение коммуникационных шкафов, по- скольку большая часть тепла, выделяемого из-за потребления мощности РоЕ, рас- сеивается за пределами шкафа (обычно по офису). Гигантские пакеты Технология Ethernet стандартизована для типичного пакета размером 1 500 байт (вме- сте с фреймом — 1 518 байт). Это значение было выбрано давно, когда сети были мед- ленными и память для буферов была дефицитной. В настоящее время пакеты размером 1 500 байт выглядят крохотными в контексте гигабитных сетей Ethernet. Поскольку с каж- 5 К сожалению, выяснилось, что в духовках Easy-Ваке используется электрическая лампа мощ- ностью 100 ватт (правда, в некоторых моделях для освещения используются нагревательные элемен- ты). Это вызывает сомнения по поводу совместимости этих моделей со стандартом IEEE 802.3at. Для интересующихся этим вопросом: да, существует возможность загрузить небольшую систему Linux через порт сети РоЕ. Найти специальное оборудование для этого мы предоставляем читателям.
Глава 16. Сетевые аппаратные средства 587 дым пакетом связаны накладные расходы и определенное время задержки, производи- тельность сети можно повысить, если допустить более крупные размеры пакетов. К сожалению, стандарты IEEE для разных типов сетей Ethernet запрещают использо- вание крупных пакетов по соображениям совместимости сетей. Однако поскольку ско- рость магистрального трафика часто во много раз превышает установленный предел, не- стандартные большие пакеты Ethernet в современных сетях перестали быть редкостью. Подстрекаемые нетерпеливыми потребителями, производители сетевого оборудования негласно бойкотируют стандарт IEEE и обеспечивают поддержку крупных фреймов в своей гигабитной продукции. Для использования так называемых гигантских пакетов (jumbo frames) необходимо лишь повысить максимально возможный размер пакета (MTU — maximal transmission unit) в интерфейсах сети. Повышение производительности зависит от вида трафика, но наибольший выигрыш достигается для крупномасштабных перемещений по протоколу TCP (например, в файловых службах NFSv4 или CIFS). Ожидается, что умеренное, но заметное повышение производительности должно составить примерно 10%. Тем не менее следует отметить следующее. • Поддерживать и использовать гигантские пакеты должно все сетевое оборудова- ние в подсетях, включая коммутаторы и маршрутизаторы. Их нельзя смешивать и подгонять. • Поскольку гигантские пакеты являются нестандартными, обычно их необходи- мо разрешать явным образом. Устройства могут принимать гигантские пакеты по умолчанию, но, вероятнее всего, они не будут их генерировать. • Поскольку гигантские пакеты представляют собой незаконное явление, не суще- ствует консенсуса, насколько большими они могут или должны быть. Типичной величиной является 9 000 бит или 9 018 вместе с фреймом. Необходимо проверить, какой максимальный размер пакета может принять ваше устройство. Пакеты раз- мером больше 9 Кбайт иногда называют сверхгигантскими, но это экзотическое название вас пугать не должно. Чем больше размер, тем лучше, по крайней мере в диапазоне до 64 Кбайт. • Гигантские пакеты могут существовать только во внутренних сетях. Интернет не передает такие пакеты. Мы одобряем использование гигантских пакетов в гигабитных сетях Ethernet, но только там, где это легко и безопасно (например, в сложных промышленных средах их использовать вряд ли стоит). Будьте готовы к дополнительной отладке, если что-то пой- дет не так, как надо. Лучше всего развернуть новую сеть, задав максимально возможный размер пакета по умолчанию, а позднее, когда надежность сети будет проверена, изме- нить эти настройки и разрешить гигантские пакеты. 16.2. Беспроводной стандарт: локальная СЕТЬ ДЛЯ КОЧЕВНИКОВ Беспроводные сети состоят из беспроводных точек доступа (WAP — Wireless Access Points) и клиентов беспроводной сети. Точки WAP могут соединяться традиционными проводными сетями (обычная конфигурация) или с другими точками WAP без исполь- зования проводов (конфигурация известна под названием “беспроводная сеть”). Точки WAP обычно оснащаются специальным оборудованием, состоящим из одного или нескольких радиоприемников и встроенной операционной системы, которая часто
588 Часть II. Работа в сети представляет собой усеченный вариант системы Linux. Одна точка WAP может обеспечить доступ для многих клиентов, но их количество ограничено. Обычно одна точка промыш- ленной сети одновременно обслуживает не более восьми клиентов. Любое устройство, дей- ствующее с помощью беспроводного стандарта, поддерживается точкой WAP как клиент. Распространенными стандартами беспроводных сетей в настоящее время являются IEEE 802.11g и 802.1 In. Стандарт IEEE 802.11g работает на частоте 2,4 ГГц и обеспечи- вает доступ к локальной сети со скоростью, достигающей 54 Мбит/с. Радиус действия одной точки доступа колеблется от 100 м до 40 км, в зависимости от оборудования и физических особенностей местности. Стандарт 802.1 In обеспечивает скорость до 600 Мбит/с6 и может использовать диа- пазоны частот как 5 ГГц, так и 2,4 ГГц (при этом рекомендуется использовать диапазон 5 ГГц). Радиус действия точки доступа в стандарте IEEE 802.1 In в два раза больше, чем в стандарте IEEE 802.11g. В настоящее время стандарт IEEE 802.11g и его предшественник IEEE 802.11b ис- пользуются повсеместно. Трансиверы недороги и встроены в большинство ноутбуков. Кроме того, платы расширения также стоят недорого и легко устанавливаются в любой персональный компьютер. Для того чтобы сконфигурировать устройство с системой Linux в качестве точки до- ступа по стандарту 802.Ha/b/g, необходимы соответствующее оборудование и драйвер. Поскольку большинство плат беспроводной связи по-прежнему предназначается для системы Microsoft Windows, на заводе могут не установить драйверы для системы Linux. Прекрасным выбором для организации отдельной станции беспроводной связи в до- машних условиях или в офисе, работающей по стандарту 802.1 lb/g, является точка до- ступа Airport Express компании Apple. Она напоминает блок питания, который стоит недорого (около 99 долл.) и имеет много функций.7 Другим вариантом является приоб- ретение коммерческого устройства беспроводного доступа, работающего под управлени- ем усеченной версии системы Linux (например, Open WRT). Более подробную информа- цию можно найти на сайте openwrt. com. Точки беспроводного доступа выпускают десятки производителей. Их можно купить в интернет-магазинах и даже в бакалейных лавках. Но, как говорится, “скупой платит дваж- ды”. Дешевая точка доступа (в пределах 50 долл.), скорее всего, будет плохо работать при передаче больших файлов или при одновременном обслуживании нескольких клиентов. Отладка беспроводных сетей напоминает шаманство. Решая проблемы, вы должны учитывать множество факторов. Если вы разворачиваете беспроводную сеть промыш- ленного масштаба, то, вероятно, стоит приобрести средства для анализа беспроводных сетей. Мы настоятельно рекомендуем использовать инструменты анализа, выпускаемые компанией AirMagnet. Безопасность беспроводных сетей Традиционно безопасность беспроводных сетей очень низкая. Существует протокол WEP (Wired Equivalent Privacy), применяемый в сетях 802.11b и для шифрования паке- тов, передаваемых с помощью радиоволн. К сожалению, в современной версии стандар- 6 Скорость 600 Мбит/с в стандарте 802.1 In является, скорее, теоретической. На практике поло- са пропускания в окрестности точки WAP при оптимальной конфигурации может обеспечить ско- рость передачи данных не более 400 Мбит/с. Это объясняется различием между теоретическими и практическими возможностями оборудования и среды. В беспроводных сетях всякое бывает! 7 Фактически она также обеспечивает беспроводное соединение для воспроизведения музыки с вашего персонального компьютера или ноутбука.
Глава 16. Сетевые аппаратные средства 589 та была обнаружена фатальная проектная недоработка, которая делает его практически бесполезным. Посторонний человек, находящийся за пределами здания, может полу- чить прямой доступ к сети и остаться незамеченным. Тем не менее недавно появившиеся стандарты Wi-Fi Protected Access (WPA) возроди- ли доверие к безопасности беспроводных сетей. В настоящее время во всех новых ин- сталляциях должны использоваться стандарты WPA (в частности, стандарт WPA2), а не WEP. Без применения стандарта WPA2 беспроводные сети должны считаться полностью незащищенными и не должны использоваться за пределами предприятия. Даже дома не используйте стандарт WEP! Для того чтобы запомнить, что стандарт WEP является незащищенным, а стандарт WPA — безопасным, просто расшифруйте аббревиатуру WAP (Wired Equivalent Privacy — облегченный протокол беспроводных точек доступа). Это название точно отражает суть дела; протокол WEP обеспечивает такую защиту, как проводная сеть, допускающая не- посредственное подключение посторонних лиц. (Иначе говоря, никакой защиты — по крайне мере, на уровне IP.) Беспроводные коммутаторы и облегченные точки беспроводного доступа Аналогично тому, как концентраторы Ethernet доросли до уровня коммутаторов Ethernet, беспроводная продукция эволюционирует и постепенно достигает уровня крупных предприятий. Большое количество поставщиков (таких, как компания Cisco) в настоящее время производят “беспроводные коммутаторы”, работающие в сочета- нии с комплектами точек доступа, развернутых в зданиях. Теоретически можно развер- нуть кучу недорогих точек доступа, а затем централизованно управлять ими с помощью “умного” беспроводного коммутатора. Такой коммутатор хранит информацию о конфи- гурации стандарта WAP и обеспечивает удобную аутентификацию и роуминг. Эту функ- циональную возможность обеспечивает протокол LWAPP (Leightweight Wireless Access Point Protocol — облегченный протокол беспроводных точек доступа). Если вам нужен повсеместный беспроводной доступ в среднем или крупном пред- приятии, то определенно стоит потратить время на изучение продукции из этой катего- рии. Эта продукция не только сокращает время, затрачиваемое на управление, но и по- зволяет контролировать качество беспроводной связи, предоставляемой пользователям. Существует один изящный прием: можно развернуть сеть по стандарту 802.1 lg/п в своем здании, а затем использовать ее для голосовой связи между сотрудниками через Интернет. Это напоминает бесплатную сотовую сеть! 16.3. DSL и кабельные модемы: "последняя миля”8 Для крупных компаний не составляет особого труда перемещать большие объемы данных. Такие технологии, как Tl, ТЗ, SONET, MPLS и Frame Relay, реализуют доста- точно простые каналы обмена данными. Но они не подходят для подключения к сети в домашних условиях. Их стоимость слишком высока, да и не всегда доступно соответ- ствующее оборудование. В технологии DSL (Digital Subscriber Line — цифровая абонентская линия) использу- ется обычный медный телефонный провод, по которому передаются данные со скоро- 8 “Последняя миля” (last mile) — это кабельная линия связи между абонентом и телефонной компанией. — Примеч. ред.
590 Часть II. Работа в сети стью до 24 Мбит/с (правда, для типичного DSL-соединения этот показатель находится в диапазоне от 256 Кбит/с до 5 Мбит/с). В большинстве домов есть телефонная проводка, что делает данную технологию очень удобной для телефонных компаний. Со стороны пользователя DSL-линия заканчивается в устройстве, работающем подобно маршрути- затору TCP/IP. К нему подключаются локальные Ethemet-устройства. В отличие от обычных телефонных линий и ISDN-соединений, требующих “дозва- ниваться” до абонента, DSL — это выделенная линия, в которой постоянно есть связь. Это делает технологию DSL еще более привлекательной, поскольку отсутствуют задерж- ки, связанные с начальным конфигурированием и дозвоном. Существует несколько разновидностей технологии DSL, поэтому название техноло- гии часто приводят в виде xDSL, где х — префикс разновидности, например: А (асимме- тричная), S (симметричная), Н (высокоскоростная), RA (с адаптируемой скоростью) и I (DSL-Ha-ISDN). Последний вариант особенно полезен для удаленных от офиса рабо- чих мест, если скорость передачи данных должна быть выше, чем в обычной технологии DSL. Конкретный вариант реализации и доступная скорость передачи зависят от обо- рудования, установленного в центральном офисе или у интернет-провайдера. Подключение к сети сотен миллионов домашних пользователей — заветная мечта многих компаний. Здесь замешаны большие деньги. Технология DSL основана на суще- ствующей инфраструктуре телефонных линий, инвестиции в которую позволили опера- торам местной связи (ILEC — Incumbent Local Exchanges Carriers) извлекать сказочные прибыли, пока мимо них проносилась сетевая революция 80-х—90-х гг. Компании кабельного телевидения, развивающие собственную оптоволоконную инфраструктуру, предлагают высокоскоростные (хоть и асимметричные) решения для пользователей. В индустрии кабельных модемов не так давно начался процесс стандар- тизации протоколов передачи данных, и сегодня рекламируется стандарт DOCSIS (Data Over Cable Service Interface Specification — спецификация интерфейса передачи данных по кабельным линиям). Он определяет технические характеристики как кабельных мо- демов, так и оборудования компании, предоставляющей соответствующие услуги, и по- зволяет взаимодействовать устройствам различных производителей. Если сравнивать DSL и кабельную технологию, то выигрыш в конкурентной борьбе достанется тому, что обеспечит более высокую частоту передачи данных в конкретную точку по более низкой цене. Хорошие новости для потребителей в том, что это вынуждает компании инвестировать средства в инфраструктуру для обслуживания жилых районов. 16.4. Тестирование и отладка сетей Основной причиной широкомасштабного перехода к стандарту Ethernet (и к другим технологиям, основанным на использовании неэкранированной витой пары) явилась простота отладки сети. Поскольку эти сети можно проверять посегментно, аппаратные проблемы часто решаются в считанные секунды. Ключ к отладке сети — ее разбивка на сегменты и тестирование каждого из них до тех пор, пока не будет обнаружена неисправность. Загадочные лампочки на коммутато- рах и концентраторах (обозначающие, к примеру, состояние канала и наличие трафика пакетов) помогают быстро выявить источник проблемы. Для того чтобы эти индикаторы работали так, как вы хотите, следует руководствоваться первоклассной документацией. Как всегда, важно иметь под рукой нужные инструменты, чтобы выполнить работу правильно и без проволочек. На рынке предлагаются средства сетевой отладки двух ти- пов (правда, наблюдается тенденция к их объединению).
Глава 16. Сетевые аппаратные средства 591 Устройство первого типа — ручной кабельный тестер. Он измеряет электрические характеристики кабеля, включая его длину (для этого применяется особая технология, называемая рефлектометрией во временной области). Такие устройства способны вы- являть простейшие проблемы, например разрыв или неправильную разводку кабеля. Нашим любимым инструментом тестирования локальных сетей является устройство Fluke LanMeter. Это универсальный анализатор, способный даже посылать эхо-пакеты протокола ICMP. Профессиональные варианты этого оборудования описаны на спе- циальном сайте. Для телекоммуникационных сетей WAN лучше всего подходит тестер Т-BERD, выпускаемый компанией JDSU (jdsu.com). Средства отладки второго типа — это анализаторы сетевых пакетов. Они просматри- вают сетевые пакеты на предмет наличия ошибок протоколов, неправильной конфи- гурации и прочего беспорядка. Эти анализаторы работают на уровне каналов, а не на электрическом уровне, поэтому они не могут распознавать проблемы, связанные с фи- зическими повреждениями кабелей или электропитанием. Существуют профессиональные анализаторы сетевых пакетов, но мы нашли сво- бодно распространяемую программу Wireshark (wireshark.org), которая может вы- полняться на полнофункциональном ноутбуке. Именно ее можно считать наилучпщм выбором.9 Более подробная информация об анализаторах сетевых пакетов приведена в разделе 21.7. 16.5. Прокладка кабелей Если вы занялись прокладкой кабелей в здании, то самый ценный совет, которыймы можем вам дать, звучит так: “Делайте все правильно с первого раза”. Это не та обладь, в которой можно скупиться или халтурить. Покупая качественные материалы, выбирая компетентного подрядчика для прокладки кабелей и инсталлируя дополнительные разъ- емы (отводы), вы избегаете многолетних мучений. Неэкранированная витая пара Кабель категории 6а имеет наилучшее соотношение цены и производительности на современном рынке. Его стандартный вариант — четыре пары проводов под одной обо- лочкой, что подходит для большинства соединений, включая RS-232 и гигабитные линии. Спецификации кабеля категории 6а требуют, чтобы скрутка провода заканчивалась в точке контакта. Для того чтобы обеспечить это требование, необходимы специальное обучение и оконечное оборудование. При этом необходимо использовать настенные ро- зетки и коммутационные панели категории 6а. Самые хорошие отзывы заслужила про- дукция компании Siemon (www. siemon. com). Офисные точки подключения Одной точки подключения на офис явно недостаточно. Сколько же нужно — две или четыре? Мы рекомендуем четыре, обосновывая это следующими причинами. • Их можно использовать просто для подключения телефонов. • Их можно применять для подключения портативных или демонстрационных компьютеров. 9 Как и многие популярные программы, программа Wireshark часто подвергается атакам хаке- ров. Убедитесь, что вы используете самую последнюю версию.
592 Часть II. Работа в сети • Стоимость материалов составляет, как правило, всего 5—10% от общей стоимости прокладки сети. • Как правило, все предполагаемые оценки следует умножать на два. • Гораздо дешевле проложить весь кабель сразу, чем делать это поэтапно. • Если порты работают медленно, то люди обычно добавляют коммутаторы с че- тырьмя или восемью портами, купленные в ближайшем специализированном ма- газине, а потом жалуются на форумах на низкую скорость соединения. При прокладке кабеля в здании можно установить дополнительные розетки в кори- дорах, конференц-залах, столовых, туалетных комнатах и на потолках (для точек бес- проводного доступа). Однако не забывайте о безопасности и размещайте открыто предо- ставляемые порты на “гостевой” виртуальной локальной сети, не допуская посторонних к своим внутренним сетевым ресурсам. Стандарты кабельных систем Необходимость обеспечения всех видов деятельности внутри современных зданий обусловливает потребность в крупной и сложной кабельной инфраструктуре. Заглянув в обычный коммутационный шкаф, вы будете потрясены, увидев его стенки, сплошь покрытые непомеченными проводами одного цвета. С целью улучшения оперативного контроля и стандартизации кабельных систем зда- ний, в феврале 1993 года организация TIA опубликовала административный стандарт на телекоммуникационную инфраструктуру коммерческих зданий (TIA/EIA-606). Этот стандарт устанавливает требования и принципы идентификации и документирования телекоммуникационной инфраструктуры. Он касается следующих аспектов: • оконечной аппаратуры; • кабелей; • прокладки кабелей; • расстояний между элементами оборудования; • цветовой маркировки; • символических обозначений стандартных компонентов. В частности, определены стандартные цвета маркировки проводов (табл. 16.5). Таблица 16.5. Таблица цветовой маркировки по стандарту TIA/EIA-606 'З^адйвчного усфЬЙпа ЙС Граничное Оранжевый 150С Центральная телефонная станция Сетевые соединения Зеленый 353С Также применяется для вспомогательных электросетей Общее оборудование6 Фиолетовый 264С Основное оборудование коммутации и пере- дачи данных Магистраль первого уровня Белый — Кабели Магистраль второго уровня Серый 422С Кабели Станция Синий 291С Горизонтальные кабели Магистраль между зданиями Коричневый 465С Кампусные кабели Разное Желтый 101С Служебные и сигнальные линии
глава 16. Сетевые аппаратные средства 593 Окончание табл, 16.5 Ключевые телефонные системы Красный_184С —_____________________________ а в соответствии с цветовой моделью Pantone. о Офисные АТС, компьютеры, локальные сети, мультиплексоры и т.д. 16.6. Проектирование сетей В этом разделе рассматриваются вопросы, связанные с логическим и физическим проектированием сетей среднего размера. Представленные здесь идеи подходят для не- скольких сотен узлов, но неприменимы ни для трех, ни для нескольких тысяч компью- теров, включенных в одну сеть. Также предполагается, что работа будет начата с нуля. Основной объем работ по проектированию сети состоит из определения: • типов сред передачи; • топологии и способов прокладки кабелей; • системы концентраторов, коммутаторов и маршрутизаторов. . Еще один ключевой вопрос проектирования сети связан с управлением перегрузкой. Например, файловые протоколы NFS и CIFS очень сильно загружают сеть, поэтому та- кие файловые системы нежелательно подключать по магистральному кабелю. Ниже анализируются аспекты, которые необходимо учитывать при проектировании сети. Структура сети и архитектура здания Структуру сети проще изменить, чем архитектуру здания, но обе они должны нор- мально сосуществовать. Если вам крупно повезло, т.е. представилась возможность про- ектировать сеть до постройки здания, будьте щедрым. К сожалению, в большинстве слу- чаев здание и отдел технического обслуживания компании на момент проектирования сети уже существуют и налагают жесткие ограничения на структуру сети. В готовых зданиях сеть должна адаптироваться к архитектуре, а не противостоять ей. В современных зданиях, помимо высоковольтной электропроводки, водо- и газопрово- дов, иногда имеются каналы для прокладки кабелей. Часто монтируются подвесные по- толки — настоящий подарок для тех, кто прокладывает сеть. Во многих университетских городках существуют туннели, которые облегчают создание сетей. Необходимо следить за целостностью брандмауэров10. При прокладке кабеля через брандмауэр отверстие должно соответствовать диаметру кабеля и заполняться негорю- чим веществом. Выбирая кабель, учитывайте наличие приточной вентиляции. Если узнают, что вы нарушили правила пожарной безопасности, вас могут оштрафовать и за- ставить устранить недостатки, даже если для этого придется проложить заново всю сеть. Логическая структура сети должна соответствовать физическим ограничениям зда- ний, в которых она будет функционировать. Приступая к проектированию, помните, что можно найти логически красивое решение, а затем вдруг обнаружить, что реализо- вать его физически сложно или вообще невозможно. 10 Речь идет о брандмауэрах в виде бетонных, кирпичных или огнеупорных стен, которые пре- пятствуют распространению огня по всему зданию. Значительно отличаясь от сетевых брандмауэ- ров, они не менее важны.
594 Часть II. Работа в сети Расширение сетей Прогнозировать потребности на десять лет вперед очень сложно, особенно в области вычислительной техники и сетей. Поэтому, проектируя сеть, всегда следует учитывать перспективы ее расширения и увеличения пропускной способности. Прокладывая ка- бель, особенно в труднодоступных местах, протягивайте в три-четыре раза больше пар, чем нужно. Помните: основная часть стоимости прокладки сети приходится на оплату труда, а не на материалы. Даже если волоконно-оптические линии не планируется использовать немедленно, разумно будет все же проложить немного оптического волокна, особенно если известно, что впоследствии протянуть его будет гораздо труднее. Прокладывайте и многомодовый, и одномодовый кабели. Как правило, нужным оказывается как раз тот кабель, который не проложен. Перегрузка Сеть — как цепь: ее качество определяется самым слабым или самым медленным звеном. Производительность Ethernet, как и многих других сетевых технологий, при уве- личении нагрузки падает. Активно эксплуатируемые коммутаторы, нестыкующиеся интерфейсы, низкоско- ростные каналы связи ~ все это может привести к перегрузке. Эффективный способ борьбы с ней заключается в локализации трафика путем создания подсетей и установки маршрутизаторов. Подсети можно использовать и для изоляции компьютеров, задей- ствованных в отдельных экспериментах. Трудно проводить эксперимент на нескольких компьютерах, если нет надежного способа изолировать их физически и логически от остальной части сети. Обслуживание и документирование Опыт показывает, что удобство обслуживания сети напрямую зависит от качества до- кументации на нее. Точная, полная, своевременно корректируемая документация абсо- лютно необходима. Кабели следует маркировать во всех точках подключения. Рекомендуем вкладывать \ копии местных монтажных схем в коммутационные шкафы, чтобы при всех изменения^ эти экземпляры можно было откорректировать на месте. Каждые несколько недель не- ’ обходимо переносить все корректировки в электронную базу данных. Стыки между крупными системами в виде коммутаторов или маршрутизаторов могут упростить отладку, поскольку позволяют изолировать части сети и отлаживать их по от- дельности. Полезно также разграничивать административные области. 16.7. Управление сетью Если необходимо обеспечить нормальную работу сети, одни функции управления следует централизовать, другие — распределить, а третьи — оставить на локальном уров- не. Требуется сформулировать и согласовать обоснованные “правила поведения добро- порядочных граждан”. Типичная крупномасштабная среда включает в себя: • магистральную сеть, соединяющую здания;
Глава 16. Сетевые аппаратные средства 595 • сети подразделений, подключенные к магистрали; • подсети рабочих групп в рамках подразделения; • соединения с внешним миром (например, с Интернетом или периферийными фи- лиалами). При проектировании и реализации сетей следует предусматривать централизованные контроль, ответственность, сопровождение и финансирование. Поскольку подразделе- ния, как правило, стремятся свести к минимуму собственные расходы, быстро растет число сетей с централизованной оплатой каждого соединения. Вот основные объекты централизованного управления: • структура сети, в том числе принципы использования подсетей, маршрутизаторов, коммутаторов и т.д.; • магистральный кабель, в том числе подключения к нему; • IP-адреса и имена компьютеров, доменные имена; • используемые протоколы (требуется обеспечить их взаимодействие); • правила доступа в Интернет. Имена доменов, IP-адреса и сетевые имена компьютеров в определенном смысле уже находятся под централизованным контролем таких организаций, как ARIN (American Registry for Internet Numbers) и ICANN, но координация использования этих элементов на локальном уровне также необходима. Центральный орган управления имеет общее представление о сети, ее структуру, производительности и перспективах роста. Он может позволить себе иметь собственное контрольное оборудование (и обслуживающий его персонал) и следить за нормальной работой магистральной сети. Центральный орган может настоять на правильном выборе структуры сети, даже если для этого придется заставить подразделение купить маршру- тизатор и создать подсеть для подключения к магистрали. Такое решение иногда необ- ходимо для того, чтобы новое соединение не навредило работе существующей сети. Если в сети работают разнородные компьютеры, операционные системы и протоко- лы, обязательно нужно иметь “высокоинтеллектуальный” маршрутизатор (например, компании Cisco), который будет служить шлюзом между сетями. 16.8. Рекомендуемые поставщики Занимаясь более 20 лет инсталляцией сетей по всему миру, мы не раз обжигались на продуктах, которые не соответствовали спецификациям, имели завышенную цену, неправильно указанные характеристики или как-то иначе не оправдывали ожидания. Ниже приведен список поставщиков, которым мы доверяем и услугами которых реко- мендуем пользоваться. Кабели и разъемные соединения АМР (подразделение Tyco) Anixter (800) 522-6752 (800) 264-9837 amp.com anixter.com Belden Cable Newark Electronics (800)235-3361 (800)463-9275 (765)983-5200 newark.com belden.com Black Box Corporation blackbox.com The Siemon Company (860) 945-4395 siemon.com
596 Часть II. Работа в сети Тестовые приборы Fluke JDSU- (800) 443-5853 (866) 228-3762 fluke.com jdsu.com Маршрутизаторы/коммутаторы Cisco Systems Juniper Network (415) 326-1941 (408) 745-2000 www.cisco.com juniper.com Siemon (800) 945-4395 siemon.com 16.9. Рекомендуемая литература • Barnett David, Groth David and Jim McBee. Cabling: The Complete Guide to Network Wiring (3rd edition). San Francisco: Sybex, 2004. • Seifert Rich. Gigabit Ethernet: Technology and Applications for High Speed LANs. Reading, MA: Addison-Wesley, 1998. • ANSI/TIA/EIA-568-A. Commercial Building Telecommunications Cabling Standard, и ANSI/TIA/EIA-606, Administration Standard for the Telecommunications Infrastructure of Commercial Buildings. Это стандарты телекоммуникационной промышленности для построения кабель- ных систем зданий. К сожалению, они доступны не бесплатно. Посетите веб-сайт www.tiaonline.org. • Spurgeon Charles. Guide to Ethernet', ethermanage. com/ethernet. 16.10. Упражнения 16.1. Сегодня для прокладки компьютерных сетей в офисных зданиях чаще всего ис- пользуется неэкранированная витая пара. Для поддержки таких сетей требует- ся определенное сочетание концентраторов и коммутаторов. Во многих случаях устройства обоих типов оказываются взаимозаменяемыми. Перечислите преиму- щества и недостатки этих устройств. 16.2. ★ Нарисуйте схему воображаемой сети, соединяющей компьютер вашей лаборато- рии с узлом Amazon.com. Покажите компоненты локальных, общегородских и гло- бальных сетей и перечислите технологии, применяемые на каждом уровне. Укажите, где могут использоваться концентраторы, коммутаторы и маршрутизаторы. 16.3. ★ Исследуйте протокол Temporal Key Integrity Protocol из семейства WPA2. Объясните его преимущества перед протоколом WEP и назовите атаки, которые он может предотвратить. 16.4. && ТТСР — средство измерения производительности протоколов TCP и UDP. Инсталлируйте пакет на двух компьютерах и замерьте производительность соеди- нения между ними. Что происходит с пропускной способностью сети при измене- нии размеров сетевых буферов? Как полученные результаты согласуются с теоре- тической пропускной способностью физической среды?
Глава 17 Система доменных имен К Интернету подключено огромное множество компьютеров. Как управлять ими, ес- ли они расположены в разных странах и принадлежат разным сетям и административ- ным группам? Этой цели служат два элемента глобальной сетевой инфраструктуры: си- стема доменных имен (Domain Name System, DNS), которая отслеживает информацию об именах и адресах компьютеров, и система маршрутизации в Интернете, контроли- рующая соединения между компьютерами. Система доменных имен предназначена для нескольких целей, но основная из них — преобразование имен компьютеров в IP-адреса и наоборот. Пользователям и програм- мам пользовательского уровня удобнее ссылаться на компьютеры по именам, но низко- уровневое сетевое программное обеспечение понимает только числовые адреса. Система DNS играет роль промежуточного связующего звена. Она также важна для маршрутиза- ции электронной почты и организации доступа к веб-серверам. Система DNS представляет собой распределенную базу данных. Термин “распределен- ная” означает, что сведения о компьютерах хранятся на серверах, которые автоматичес- ки вступают в контакт друг с другом, запрашивая данные и обмениваясь информацией. СЗ Информация о документах RFC изложена в разделе 14.1. Система DNS описана в ряде документов RFC, последний из которых имеет номер 108. Существует несколько реализаций этой системы, которые отличаются друг от дру- га по функциональным возможностям, целям и степени соответствия документам RFC. Доли рынка, занимаемые этими реализациями, приведены в табл. 17.1. В главе содержится общая информация о системе DNS и рутинных действиях систем- ного администратора, связанных с реализациями серверов имен BIND, NSD и Unbound. Приведенные примеры относятся к серверам BIND 9.7, NSD 3.2.4 и Unbbound 1.4.1.
598 Часть II. Работа в сети Таблица 17.1. Некоторые распространенные реализации системы DNS Название BIND ISC isc.org 80,3% Авторизация или кеширование Microsoft DNS Microsoft microsoft.com 15,4% Мириады уведомлений о статических IP-адресах djbdns6 Dan Bernstein tinydns.org 2,6% Не соответствует некоторым докумен- там RFC PowerDNS PowerDNS BV powerdns.com 0,7% Только авторизация NSD8 NLnet Labs nlnetlabs.nl <0,1% Только авторизация, очень быстрая Unbound NLnet Labs unbound.net - Только кеширование, быстрое а Доля рынка в соответствии с июльским обзором Internet Domain Survey 2009 года, размещенным на сайте ics.org. 6 Известна также под названием tinydns в качестве компонента пакета djbdns. 8 Задумывалась для корневых серверов и серверов домена верхнего уровня; в настоящее время использу- ется повсеместно. Может возникнуть вопрос, зачем вообще описывать здесь серверы NSD и Unbound, если их рыночная доля такая маленькая. На это есть три причины. • Для того чтобы развернуть действительно надежную среду DNS, необходимо, чтобы не все серверы работали на одном и том же программном обеспечении. Успешная атака на систему DNS вашего сайта отключит вас от Интернета. Раз- нообразие программного и аппаратного обеспечения, а также средств, обеспечи- вающих связность сети, является ключевым фактором выживания в Интернете. Добавьте к этому географическое расположение и опыт системного администрато- ра, и вы будете в прекрасной форме. • Серверы NSD и Undound работают намного быстрее, чем BIND. • И наконец, среди всех реализаций серверов имен только BIND и NSD/Unbound реализуют систему DNSSEC — криптографическое расширение системы DNS. В настоящее время многие сайты (возможно, большинство) не используют ни сер- вер BIND, ни сервер NSD/Unbound, предпочитая службу Active Directory компании Microsoft. Эта служба кратко описана в разделе 30.9. 17.1. Основные задачи системы DNS Система DNS определяет следующее: • иерархическое пространство имен компьютеров и IP-адресов; • таблицу имен и адресов компьютеров, реализованную в виде распределенной базы данных; • “распознаватель” — клиентскую библиотеку функций, осуществляющих запросы к базе данных DNS; • усовершенствованные средства маршрутизации и аутентификацию отправителей сообщений электронной почты; • механизм поиска служб в сети; • протокол обмена информацией об именах.
Глава 17. Система доменных имен 599 DNS — это клиент-серверная система. Серверы (называемые серверами имен) загру- жают данные из клиентских DNS-файлов в память и пользуются ими при ответах на запросы как от внутренних клиентов, так и от внешних компьютеров. Все компьютеры, подключенные к сети, должны быть клиентами системы DNS, но лишь некоторые из них обязаны быть серверами имен. Управление системой DNS В небольшой организации (несколько узлов в одной сети) можно запустить сервер на одном из компьютеров или попросить интернет-провайдера предоставить услуги DNS. Организация среднего размера с несколькими подсетями должна иметь несколько серверов DNS, чтобы сократить время выполнения запросов и повысить общую надеж- ность сети. Очень большая организация может разделить свой домен на поддомены и запустить в каждом из них несколько серверов. Прямое преобразование DNS связывает имя компьютера с IP-адресом. Обратное преобразование ставит в соответствие этому адресу имя компьютера. Прямые и обрат- ные преобразования по возможности должны осуществляться в одном месте. Некоторые провайдеры с удовольствием отдают контроль над прямым преобразованием, но отказы- ваются делать то же самое в отношении обратного преобразования. Подобное разделе- ние обязанностей ведет к проблемам синхронизации. В разделе 17.8 описан элегантный прием, позволяющий управлять делегированием даже крошечных фрагментов адресного пространства. Домены DNS должны обслуживаться как минимум двумя серверами, хотя рекомен- дуется использовать три сервера, расположенных в разных местах. Чаще всего один из этих серверов назначается главным (первичным), на котором хранится копия данных домена. Остальные серверы являются резервными (вторичными). Они загружают ин- формацию из главного сервера организации. Некоторые организации управляют только главным сервером, а серверы провайдера являются резервными. После того как система сконфигурирована, серверы провайдера автоматически загружают информацию из главного сервера организации. Изменения в конфигурации DNS отражаются на резервных серверах без вмешательства администра- торов любой из сторон. Кроме того, часто все службы DNS реализуют за пределами организации, полагаясь на разнообразие компаний, их надежность и географическое распределение. Не размещайте все серверы DNS в одной сети. Если по какой-то причине она ока- жется недоступной, пользователи других сетей не смогут работать. Распределите серверы DNS так, чтобы функционирование системы не зависело от единственного звена. При правильном конфигурировании DNS становится высоконадежной системой. 17.2. Как работает система DNS Каждый компьютер, пользующийся услугами службы DNS, является либо клиен- том этой системы, либо одновременно и клиентом, и сервером. Читатели, которые не планируют запускать серверы DNS, следующие несколько разделов могут пропустить, перейдя сразу к разделу 17.3. Отметим, однако, что приведенная информация позволит глубже понять принципы работы системы доменных имен.
600 Часть II. Работа в сети Записи о ресурсах Каждая организация поддерживает один или несколько фрагментов распределенной базы данных, лежащей в основе всемирной системы DNS. Ваш фрагмент данных со- стоит из текстовых файлов, содержащих записи о каждом компьютере вашей сети; эти записи называются “записями о ресурсах”. Каждая запись представляет собой отдель- ную строку, состоящую из имени (обычно имени компьютера), типа записи и некото- рых значений. Поле имени можно не указывать, если его значение совпадает с именем в предыдущей строке. Например, строки nubark IN А 63.173.189.1 IN MX 10 mailserver.atrust.com. в файле “прямого преобразования” (с именем atrust.com) и строка 1 IN PTR nubark.atrust.com. в файле “обратного преобразования” (с именем 63.173.189.rev) связывают сайт nubark.atrust.com с IP-адресом 63.173.189.1. Запись MX перенаправляет сообщение электронной почты, адресованное на эту машину, на компьютер mailserver. atrust. com. Записи о ресурсах — это универсальный язык системы DNS. Они не зависят от фай- лов конфигурации, управляющих операциями, которые выполняются на любой реали- зации данного сервера DNS. Все они являются фрагментами данных, циркулирующих внутри системы DNS, и кешируются в разных местах. Делегирование Все серверы имен считывают имена корневых серверов из локальных файлов конфи- гурации или содержат их в своем коде. Корневые серверы “знают” о доменах com, org, edu, f i, de и других доменах верхнего уровня. Эта цепочка продолжается дальше: сервер домена edu “знает” о домене colorado.edu, berkely.edu, сервер домена сот “знает” о домене admin. com и т.д. Каждая зона может делегировать полномочия по управлению своими поддоменами другим серверам. Рассмотрим реальный пример. Предположим, требуется узнать адрес узла vangogh. cs.berkeley.edu, находясь на узле lair.cs.colorado.edu. Компьютер lair про- сит локальный сервер имен, ns. cs. Colorado. edu, найти ответ на этот вопрос. После- дующие события представлены на рис. 17.1. 'Рекурсивные j' Рис. 17.1. Обработка запроса в DNS
Глава 17. Система доменных имен 601 Числа возле стрелок определяют порядок событий, а буквы — тип транзакции (за- прос, ответ или ссылка). Предполагается, что никакие из требуемых данных предвари- тельно не кешировались, за исключением имен и IP-адресов серверов корневого домена. Локальный сервер имен не “знает” адреса компьютера vangogh. Более того, ему ничего не известно о доменах cs.berkeley.edu, berkeley.edu и даже edu. Он “зна- ет” лишь некоторые серверы корневого домена, запрашивает корневой домен об узле vangogh. cs. berkeley. edu и получает ссылку на серверы в домене edu. Локальный сервер имен является рекурсивным. Если ответ на запрос содержит ссыл- ку на другой сервер, то локальный сервер повторно направляет запрос новому серверу. Он продолжает этот процесс, пока не найдет требуемый сервер. В нашем примере локальный сервер имен посылает запрос серверу домена edu (как всегда, запрашивая компьютер vangogh. cs. berkeley. edu) и получает ссылку на неза- висимые серверы домена berkeley. edu. Затем локальный сервер повторяет запрос, на- правляя его в домен berkeley. edu. Если сервер университета Беркли не содержит ответ в кеше, он вернет ссылку на домен cs.berkeley.edu. Сервер этого домена компетентен в отношении запрашиваемой информации и возвращает адрес компьютера vangogh. По окончании процедуры в кеше сервера ns . cs . Colorado. edu окажется адрес компьютера vangogh. В кеше будут также находиться списки серверов доменов edu, berkeley.edu и cs.berkeley.edu. Детали процедуры запроса можно выяснить с помощью утилит dig +trace или drill -Т.1 Кеширование и эффективность Кеширование повышает эффективность поиска: кешированный ответ выдается поч- ти мгновенно и обычно точен, так как адресно-именные соответствия меняются редко. Ответ хранится в течение периода времени, называемого TTL (time to live), продолжи- тельность которого задается владельцем искомой записи. Большинство запросов каса- ется локальных компьютеров и обслуживается быстро. Повышению эффективности не- вольно содействуют и сами пользователи, так как многие запросы повторяются. Обычно записи о ресурсах вашей организации должны использовать период TTL, продолжительность которого, как правило, лежит в диапазоне от одного часа до одно- го дня. Чем дольше период TTL, тем меньше трафик сети, потребляемый интернет- клиентами, получающими свежие копии записи. Если у вас есть специальная служба, загрузка которой сбалансирована между логи- ческими подсетями (этот процесс называется “балансированием загрузки глобального сервера”), вы можете потребовать, чтобы поставщик услуг, выполняющий балансиро- вание загрузки, выбрал более короткую продолжительность TTL, например десять се- кунд или одну минуту. (Короткий период TTL позволяет балансировщику загрузки бы- стро реагировать на бездействие серверов и атаки на основе отказа в обслуживании.) Система с короткими периодами TTL продолжает работать корректно, но ваши серверы имен должны работать в более интенсивном режиме. В примере, описанном выше, про- должительность периодов TTL была установлена так: на корневых серверах —- 42 дня, в домене edu — два дня, в домене berkeley. edu — два дня и один день — для сайта vangough.cs.berkeley.edu. Это разумные величины. Если вы планируете крупную перенумерацию, то можете сделать периоды TTL короче, чем раньше. 1 Утилиты dig и drill — это инструменты системы DNS; утилита dig входит в дистрибутив- ный набор сервера BIND, а утилита drill разработана группой NLnet Labs.
602 Часть II. Работа в сети Серверы DNS также реализуют негативное кеширование. Иначе говоря, они помнят, в каких ситуациях запрос остался без ответа, и не повторяют его, пока не истечет период TTL для негативного кеширования. Ответы при негативном кешировании сохраняются в следующих ситуациях. • Нет узла или домена, соответствующего запрашиваемому имени. • Данные запрашиваемого типа для данного узла не существуют. • Запрашиваемый сервер не отвечает. • Сервер недоступен из-за проблем в сети. Сервер BIND кеширует данные в двух первых ситуациях, а сервер Unbound — во всех четырех. Количество повторений негативного кеширования можно задавать в любой реализации. Неоднозначные ответы Сервер имен в ответ на запрос часто получает несколько записей. Например, при по- пытке узнать адрес сервера имен корневого домена можно получить список, содержа- щий все 13 корневых серверов. Большинство серверов имен возвращает ответы в слу- чайном порядке, выполняя примитивный вид балансирования загрузки. Можно достичь балансирования загрузки своих серверов, закрепив одно имя за не- сколькими IP-адресами (которые в реальности соответствуют разным компьютерам). WWW IN A 192.168.0.1 IN A 192.168.0.2 IN A 192.168.0.3 Интенсивно эксплуатируемые веб-серверы, такие как Yahoo! и Google, в действи- тельности не являются одним компьютером. Они просто известны под одним доменным именем в DNS. 17.3. DNS для нетерпеливых: подключение НОВОГО КОМПЬЮТЕРА Прежде чем погружаться в детали функционирования DNS, ответим на наиболее ча- сто задаваемые вопросы. • Как подключить новый компьютер к сети, где уже используется сервер имен? • Как указать в конфигурации, что новый компьютер является клиентом системы DNS? Ниже приводится алгоритм, в котором не определяются и не объясняются никакие термины и который, возможно, не точно соответствует правилам и процедурам систем- ного администрирования, принятым в вашей организации. Отнеситесь к нему с осторож- ностью и изучите документ RFC1912 Common DNS Operational and Configuration Errors. Добавление новой машины в систему DNS Если ваша сеть настроена на использование протокола DHCP (Dynamic Host Con- figuration Protocol), то вы можете вообще не выполнять никаких действий для конфигу- рирования системы DNS. При подключении нового компьютера сервер DHCP ин- формирует его о серверах DNS, которым он должен посылать запросы. Отображение
Глава 17. Система доменных имен 603 “имя-адрес” для использования компьютера во внешнем мире обычно задается при на- стройке конфигурации сервера DHCP, и оно автоматически вводится с помощью средств динамического обновления системы DNS. В сетях, не использующих протокол DHCP, для обновления конфигурации системы DNS необходимо выполнить следующий алгоритм, в ходе которого происходит копиро- вание и редактирование записей об аналогичном компьютере. Этап 1. Выберите для нового компьютера свободные сетевое имя и IP-адрес, согла- совав их с системным администратором или интернет-провайдером. Этап 2. Найдите похожий компьютер в той же подсети. Мы воспользуемся записями этого компьютера в качестве модели для новых записей. В нашем примере мы исполь- зуем в качестве модели компьютер с именем templatehost. example. com в подсети 208.77.188.0/24. Этап 3. Зарегистрируйтесь на компьютере, который является главным сервером имен. Если вы не знаете, какая машина является главным сервером, то для его идентифика- ции вы можете использовать команду dig (dig SOA имя_домена). (Если утилита dig не инсталлирована, можно использовать утилиту drill.) Этап 4а (для организаций, использующих серверы BIND). • Найдите файл конфигурации; как правило, это файл /etc/named. conf. • Найдите в инструкции options файла named, conf строку directory, где сооб- щается о местонахождении зонных файлов в системе (см. раздел 17.9). В этих фай- лах хранятся реальные имена и IP-адреса компьютеров. • Найдите в инструкциях zone имена файлов зон прямого и обратного преобразова- ний для сети, к которой принадлежит новый IP-адрес (см. раздел 17.9). • Проверьте по инструкциям zone, действительно ли данный сервер является глав- ным сервером домена (имеет тип master, а не slave или какой-то другой тип). Если это не так, вы зашли в другую систему! Инструкция в зоне прямого преоб- разования в файле /etc/named. conf должна выглядеть примерно следующим об- разом. zone "example.com” { type master; file "имя_ файла"; Инструкция в зоне обратного преобразования должна выглядеть примерно так. zone "188.77.208.in-addr.arpa'’ { type master; file "имя_файла"; zone "example.com" { type master; file "имя—файла"; Этап 46 (для организаций, использующих серверы NSD). • Найдите файл конфигурации сервера NSD /etc/nsd/nsd. conf. • Найдите инструкцию zone, соответствующую вашему домену в файле nsd. conf (каждая зона идентифицируется ключевым словом name). • Проверьте, действительно ли данный сервер является главным сервером домена! Инструкция в зоне, соответствующей вашему домену, будет содержать предложение
604 Часть II. Работа в сети provide-xfг. Если она содержит предложение request-xf г, то это вторичный сервер данной зоны и вы находитесь на неправильном компьютере. Инструкция в зоне прямого преобразования должна выглядеть примерно следующим образом. zone: name: example.com zonefile: /var/nsd/prinary/example.com; provide-xfr: ip-адрес tsig.key.name notify: ip-адрес NOKEY Инструкция в зоне обратного преобразования должна выглядеть примерно так. zone: name: 188.77.208.in-addr.arpa zonefile: /var/nsd/prinary/188.77.208.in-addr.arpa provide-xfr: ip-адрес tsig.key.name notify: ip-адрес NOKEY • Запишите имена файлов, указанных как аргументы после ключевого слова zonefile в зонах прямого и обратного преобразований. Этап 5. Перейдите в каталог файлов зон и отредактируйте файл зоны прямого пре- образования. Найдите записи, соответствующие компьютеру-прототипу. Они будут вы- глядеть примерно так. templatehost IN А 128.138.243.100 IN MX 10 mail-hub IN MX 20 templatehost Ваша версия может не содержать строк MX, которые используются для маршрутиза- ции почты. Кроме того, ваши зонные файлы могут не содержать спецификатор IN (по умолчанию) или использовать прописные буквы. Этап 6. Скопируйте эти записи и модифицируйте их должным образом для нового:^ компьютера. Записи зонного файла могут быть отсортированы по именам компьютеров, поэтому следуйте принятым соглашениям. , , Этап 7. Измените порядковый номер записи SOA, расположенной в начале файла (это первый из пяти числовых параметров записи). Порядковый номер может только во- зрастать. Прибавьте к нему единицу, если порядковые номера выбираются произвольно, или запишите в это поле текущую дату, если в системе используется такое соглашение2. Этап 8. Отредактируйте запись, соответствующую компьютеру-прототипу, чтобы она приняла следующий вид. 100 IN PTR templatehost.example.com. Скопируйте измененную запись. Обратите внимание на последнюю точку после име- ни компьютера; не забудьте о ней. Если в файле зоны обратного преобразования приводится не только последний байт IP-адреса узла, то числа нужно вводить в обратном порядке. Например, запись 100.188 IN PTR templatehost.my.domain. соответствует IP-адресу 208.77.188.100 (здесь зона обратного преобразования относится к домену 77.208 . in-addr .arpa, а не 188.77.208 . in-addr. arpa). Этап 9. Обновите порядковый номер в записи SOA в зоне обратного преобразования, как описано на этапе 7. 2 Соглашение о датах предусматривает двузначное количество изменений, например в течение дня вы можете сделать до 99 изменений.
Глава 17. Система доменных имен 605 Этап 10а. Если вы работаете с сервером BIND и ленитесь, то выполните команду ndc reload. Если сервер занят, вы можете перезагрузить только домены (или представления), которые вы изменили. $ sudo mdc reload зона_прямого_преобразования $ sudo mdc reload зона_обратного_преобразования Этап 106. Если вы используете сервер NSD, выполните команду nsdc reload, а за- тем nsdc restart. Этап 11. Проверьте конфигурацию с помощью команды dig (описана в разде- ле 17.15). Попробуйте также выполнить команды ping или traceroute, задав имя но- вого компьютера, даже если он еще не сконфигурирован. Сообщение “host unknown” (неизвестный узел) свидетельствует о наличии ошибки. Сообщение “host not responding” (узел не отвечает) означает, что все в порядке. Чаще всего системные администраторы совершают ошибки, забыв о следующем: • обновить порядковый номер (этапы 7 и 9); • перезапустить сервер имен (этап 10); • добавить точку в конец доменного имени в записи PTR в зоне обратного преоб- разования (этап 8). Настройка конфигурации клиента DNS У каждого компьютера, подключенного к сети, должен быть клиент, представляю- щий собой сервер имен. Конфигурация клиентской части системы DNS задается в фай- ле /etc/resolv.conf, в котором перечисляются DNS-серверы, которым можно посы- лать запросы, когда пользователь пытается преобразовать имя компьютера в 1Р-ад®ес (например, запрашивает веб-страницу, посылает сообщение по электронной почте или использует Интернет).3 Если ваш компьютер получает свой IP-адрес и сетевые параметры от DHCP-сервера, то файл /etc/resolv.conf должен заполняться автоматически. В противном случае его нужно редактировать вручную. Формат записей файла имеет следующий вид. search имя_домена ... option имя_опции nameserver IP-адрес Может быть указано от одного до трех серверов имен. Рассмотрим пример. search atrust.com booklab.atrust.com nameserver 63.173.189.1 ; nsl nameserver 174.129.219.225 ; ns2 Для файла resolv.conf никогда не вводилось понятие комментариев. Они поддер- живаются лишь в том смысле, что любой нераспознанный элемент файла игнорируется. Комментарии вполне безопасны в конце директивы name serve г, поскольку анализатор файла ищет лишь IP-адрес, игнорируя остальную часть строки. Тем не менее, в директи- ве search их лучше не использовать, так как она может содержать несколько аргументов. В строке search приведен список доменов, которые следует опрашивать, если имя компьютера определено не полностью. Например, когда пользователь вводит команду ssh coraline, то распознаватель дополняет имя первым доменом в списке (в рассмо- 3 В системе Windows клиентская часть системы DNS настраивается с помощью панели конфи- гурации протокола TCP/IP для каждой сетевой платы. Точное содержание этой процедуры зависит °т версии системы Windows.
606 Часть II. Работа в сети тренном выше примере — at rust. com), после чего ищет узел coral ine. a trust. com. Если это имя не найдено, делается попытка найти узел coraline .booklab. at rust. com. Количество доменов, которые можно задать в директиве search, зависит от спец- ифики распознавателя; большинство из них допускает от шести до восьми доменов, при этом предельное количество символов равно 256. Серверы имен, указанные в файле resolv. conf, должны разрешать вашему компью- теру посылать запросы и обязаны давать на них полные ответы (т.е. быть рекурсивны- ми), а не отсылать вас на другие серверы имен. Серверы имен опрашиваются по порядку. Если первый сервер отвечает на запрос, другие серверы игнорируются. Если возникает проблема, то по истечении времени, отведенного для ответа на запрос, он переадресует- ся следующему серверу. Все серверы опрашиваются по очереди, до четырех раз каждый. С каждой неудачей тайм-аут увеличивается. По умолчанию интервал тайм-аута задается равным пяти секундам, что для нетерпеливых пользователей кажется вечностью. Инструкция options может изменять интервал тайм-аута, количество попыток и поведение по умолчанию при выборе перечисленных серверов имен. Доступные опции этой инструкции зависят от реализации библиотеки распознавателя. Ниже описан пакет libbind для системы ISC. Эта информация относится ко всем системам, кроме HP- UX. Чаще всего имя ближайшего сервера указывается первым в строке nameservers, но если вы хотите сбалансировать загрузку между одинаково компетентными серверами, следует использовать опцию rotation. Например, инструкция options rotate timeout:2 attepmts:2 обращается к перечисленным серверам имен по очереди, ожидает ответа две секунды и запрашивает каждый сервер не более двух раз. Система HP-UX не полностью поддерживает инструкцию options, описан- ную выше. В этой системе продолжительность тайм-аута и количество попы- ток запроса задаются непосредственно в файле resolv. conf. retrans продолжительность_тайм-аута_в_миллисекундах retry количество_попыток Большинство распознавателей позволяют включать в список не более трех серверов; имен. Если указать больше, то “лишние” серверы будут по умолчанию проигнорирова-* ны. Правила, установленные по умолчанию, приведены в табл. 17.2. ' Таблица 17.2. Правила, установленные по умолчанию для файла /etc/resolv.conf Система Максимальное кол-во серверов имен 111 ' ' V- 111 U Максимальная длина поисковойстроки Тайм-аут, с. Попытки -Ц Linuxs 3 6 доменов, 256 символов 5 2 Solaris 3 6 доменов, 256 символов 5 2 HP-UX 3 6 доменов, 256 символов 5 4 AIX 3 6 доменов, 1024 символа 5 2 Если компьютер сам является сервером имен, то он должен быть указан первым в собственном файле resolv.conf. Если в файле не указан ни один сервер имен, то компьютер считается рабочей станцией. Файл resolv. conf также распознает директиву domain, представляющую собой альтернативу директиве search; она задает единственный домен, который должен до- бавляться к не полностью квалифицированным именам. Это устаревшая форма; мы
Глава 17. Система доменных имен 607 рекомендуем заменить директиву domain директивой search везде, где она встречает- ся. Эти директивы взаимно исключают друг друга, поэтому использовать можно только одну из них. Если вы невольно использовали обе эти директивы одновременно, то вы- полняться будет только последняя. Если файл /etc/resolv.conf отсутствует, то для того, чтобы решить, как распознать имя и извлечь из имени компьютера, которое должно быть пол- ностью квалифицированным, имя домена, заданное по умолчанию, система AIX использует файл /etc/netsvc. conf. Система AIX хранит образец файла resolv.conf в виде файла /usr/lpp/tcpip/samples/resolv.conf, кото- рый можно скопировать. Поскольку добавлять множество строк в текстовый файл довольно неудобно, в системе AIX предусмотрена команда namerslv, обеспечивающая интерфейс для добавления, удаления и изменения серверов имен в файле resolv.conf. Но это еще не все! Вы также можете использо- вать команды mknamsv, rmnamsv, chnamsv и Isnamsv в качестве интерфейсов высокого уровня для команды namerslv. (Разумеется, системный админи- стратор не должен разбираться во всех сложных интерфейсах, поэтому вам, вероятно, понадобится графический пользовательский интерфейс; попробуй- те выполнить команду smitty resolv.conf.) После того как файл /etc/resolv.conf будет сконфигурирован, система станет ис- пользовать в качестве сервера имен сервер DNS, поскольку этот сервер не был отклю- чен в файле, назначающем приоритеты источникам административных данных (/etc/ nsswitch. conf или /etc/netsvc. conf в системе AIX; см. раздел 19.5). После конфигурирования файла /etc/resolv.conf вы должны иметь возможность ссылаться на другие машины по именам, а не по IP-адресам. Попробуйте выполнить команду ping имя_компьютера. Если вы пытаетесь найти другой локальный компью- тер и команда просто зависает, попытайтесь сослаться на его IP-адрес. Если этот прием сработал, значит, в вашей конфигурации DNS есть проблема. Проверьте, правильно ли записаны IP-адреса серверов имен в файле /etc/resolv и позволяют ли серверы, на которые ссылаетесь, посылать запросы из вашей сети (см. раздел 17.9). Ответить на эти вопросы позволит утилита dig, выполненная на работающем компьютере. 17.4. Серверы имен Сервер имен выполняет несколько рутинных операций. • Отвечает на запросы об именах и IP-адресах компьютеров. • Посылает запросы локальным и удаленным компьютерам от имени своих пользо- вателей. • Кеширует ответы на запросы, для того чтобы ускорить ответы на них в следующий раз. • Пересылает данные между серверами имен, чтобы обеспечить их синхронизацию. Серверы имен работают с зонами, которые представляют собой домен без поддоменов. Часто термин “домен” употребляется как синоним термина “зона”, даже в этой книге. Серверы NSD/Unbound разделяют функции, обеспечивающие ответы на запросы о ваших узлах (компетенция сервера NSD), и функции, связанные с посылкой запросов ° Других доменах от имени ваших пользователей (компетенция сервера Unbound). Это Разумно.
608 Часть II. Работа в сети Серверы имен работают в нескольких разных режимах, поэтому дать их точное опре- деление нелегко. Ситуация усложняется еще и тем, что один и тот же сервер может вы- полнять неодинаковые функции в разных зонах. В табл. 17.3 перечислены прилагатель- ные, употребляемые при описании серверов имен. Таблица 17.3. Классификация серверов имен Типседора ? авторитетный (authoritative) Официальный представитель зоны главный (master) Основное хранилище данных зоны; берет информацию из дискового файла подчиненный (slave) Копирует данные с главного сервера усеченный (stub) Напоминает подчиненный сервер, но копирует данные только о серверах имен (записи NS) внутренний (distribution) Сервер, доступный только в пределах домена (также называется невидимым сервером) неавторитетныйа (nonauthoritative) Отвечает на запросы, пользуясь данными из кеша; не “знает”, являются ли эти данные корректными кеширующий (caching) Кеширует данные, полученные от предыдущих запросов; обычно не имеет локальных зон переадресующий (forwarder) Выполняет запросы от имени многих клиентов; формирует большой кеш рекурсивный (recursive) Осуществляет запросы от имени клиента до тех пор, пока не будет найден ответ нерекурсивный (nonrecursive) Отсылает клиента к другому серверу, если не может получить ответ на запрос а Строго говоря, атрибут “неавторитетный” относится к ответу на DNS-запрос, а не к самому серверу. Серверы имен систематизируются на основании источника данных (авторитетный, кеширующий, главный, подчиненный), типа хранимых данных (усеченный), пути рас- пространения запроса (переадресующий), типа выдаваемого ответа (рекурсивный, не* рекурсивный) и, наконец, доступности сервера (внутренний). В следующих подразделах конкретизируются наиболее важные из этих различий; об остальных различиях пойдет речь в других разделах главы. Авторитетные и кеширующие серверы Главный, подчиненный и кеширующий серверы различаются только двумя характе- ристиками: откуда поступают данные и авторитетен ли сервер для домена. Сервер BIND может относиться ко всем трем типам, сервер NCD — только к главному или подчинен- ному, а сервер Unbound — только к кеширующему. В каждой зоне есть один главный сервер имен.4 На нем хранится официальная копия данных зоны (в файле на диске). Системный администратор модифицирует информа- цию, касающуюся зоны, редактируя файлы главного сервера. Подчиненный сервер копирует свои данные с главного сервера посредством опера- ции, называемой передачей зоны (zone transfer). В зоне должен быть как минимум один подчиненный сервер. Усеченный сервер — особый вид подчиненного сервера, загружа- ющий с главного сервера только записи NS (описания серверов имен). О том, зачем соз- 4 Некоторые организации используют несколько главных серверов или вообще обходятся без них; мы описываем вариант, в котором существует один главный сервер.
Глава 17. Система доменных имен 609 дается такой сервер, пойдет речь в разделе 17.9. Один и тот же компьютер может быть главным сервером для одних зон и подчиненным — для других. Ш О передаче зоны рассказывается в разделе 17.12. Кеширующий сервер имен загружает адреса серверов корневого домена из конфигу- рационного файла и накапливает остальные данные, кешируя ответы на выдаваемые им запросы. Собственных данных у кеширующего сервера нет, и он не является авторитет- ным ни для одной зоны (за исключением, возможно, зоны локального компьютера). Гарантируется5, что авторитетный ответ сервера имен является точным; неавторитетт ный ответ может быть устаревшим. Тем не менее очень многие неавторитетные ответы оказываются совершенно корректными. Главные и подчиненные серверы авторитетны для своих зон, но не для кешированной информации о других доменах. По правде го- воря, даже авторитетные ответы могут быть неточными, если системный администратор изменил данные главного сервера (например, обновил порядковый номер зоны) и забыл передать их подчиненным серверам. Серверы имен должны находиться на надежных и безопасных компьютерах, имею- щих небольшое количество пользователей и подключенных к источнику бесперебойного питания. Требуется наличие хотя бы одного подчиненного сервера. В идеале подчинен- ных серверов имен должно быть минимум два, причем один из них — вне организации. Подчиненные серверы на местах должны быть включены в разные сети и в разные цепи электроснабжения. Если служба имен вдруг перестанет функционировать, пользователи не смогут нормально работать в сети. Кеширующие серверы неавторитетны, зато позволяют сократить объем DNS-трафика во внутренней сети и уменьшить время, затрачиваемое на выполнение DNS-запросов. В большинстве организаций DNS-запросы от настольных компьютеров обычно прохо- дят через кеширующий сервер. Более крупные организации должны использовать не- сколько кеширующих серверов. С точки зрения безопасности и общей надежности системы DNS желательно разде- лить функции, связанные с обслуживанием ваших авторитетных данных. Рекурсивные и нерекурсивные серверы Серверы имен бывают рекурсивными и нерекурсивными. Если у нерекурсивного сервера есть адрес, оставшийся в кеше от одного из предыдущих запросов, или он явля- ется авторитетным для домена, к которому относится запрашиваемое имя, то он даст со- ответствующий ответ. В противном случае он вернет отсылку на авторитетные серверы Другого домена, которые с большей вероятностью ответят на запрос. Клиенты нерекур- сивного сервера должны быть готовы принимать отсылки и обрабатывать их. У нерекурсивных серверов обычно есть веские причины не выполнять дополнительную работу. Например, все корневые серверы и серверы доменов верхнего уровня являются не- рекурсивными, поскольку им приходится обрабатывать десятки тысяч запросов в секунду. Рекурсивный сервер возвращает только реальные ответы или сообщения об ошибках. Он сам отслеживает отсылки, освобождая от этой обязанности клиента. Базовая проце- дура анализа запроса, по сути, остается неизменной. Из соображений безопасности, серверы имен организации, доступные извне, всегда Должны быть нерекурсивными. Рекурсивные серверы имен, которые видны извне, мо- гут стать объектом для атаки. 5 Здесь слово “гарантируется” означает, что ответ придет от базы данных, находящейся в па- мяти авторитетного сервера, а не от кеша случайного неавторитетного сервера.
610 Часть II. Работа в сети Библиотечные функции распознавания имен не понимают отсылок. Любой локаль- ный сервер имен, указанный в файле resolv. conf клиента, должен быть рекурсивным. При отслеживании отсылок возникает побочный эффект: в кеше сервера имен нака- пливается информация о промежуточных доменах. При работе в локальной сети от это- го обычно только польза, поскольку в последующих операциях поиска, инициируемых компьютерами этой сети, можно будет пользоваться результатами предыдущих запросов. С другой стороны, сервер домена верхнего уровня (такого, как сот или edu) не должен хранить информацию, запрашиваемую компьютером, который находится на несколько уровней ниже. Серверы имен генерируют отсылки на иерархической основе. Если сервер, к приме- ру, не сможет узнать адрес узла lair. cs. Colorado. edu, он выдаст отсылки к серверам доменов cs. Colorado. edu, Colorado. edu, edu или корневого домена. Отсылка долж- на включать адреса серверов того домена, на который она указывает, поэтому выбор до- мена не случаен: сервер должен ссылаться на домен, серверы которого ему известны. Как правило, возвращается отсылка на наиболее полный из известных доменов. В на- шем примере в первую очередь были бы выданы адреса серверов домена cs. Colorado. edu, при условии что они известны. Если этот домен неизвестен, но известен домен Colorado. edu, были бы выданы адреса его серверов имен, и т.д. Сервер имен предварительно наполняет свой кеш содержимым файла “подсказок”, в котором перечислены серверы корневого домена. Благодаря этому всегда можно сделать отсылку, даже если она гласит: “Спроси у корневого сервера”. 17.5. Пространство имен DNS Это пространство имен представляет собой дерево с двумя основными ветвями, соот- ветствующими прямым и обратным преобразованиям. Прямые преобразования ставят в соответствие именам компьютеров их IP-адреса, а обратные преобразования отобража- ют IP-адреса в имена компьютеров. Каждое полностью определенное имя компьютера (например, nubark. atrust. com) — это узел дерева на ветви прямых преобразований, а каждый IP-адрес — это узел дерева на ветви обратных преобразований. Уровни дерева разделяются точками; корнем дерева является точка. Полностью определенное имя компьютера можно рассматривать как некое обо- значение, в котором “самая важная часть” находится справа. Например, имя nubarк. atrust. com означает, что компьютер nubark находится в поддереве atrust, а поддере- во atrust — в поддереве com. С другой стороны, в IP-адресе “самая важная часть” на- ходится слева. Например, адрес 128.138.243.100 означает, что узел 100 находится в под- сети 243, которая является частью сети 128.138. Для того чтобы система DNS могла работать с данными обоих видов, ветвь IP-адре- сов в пространстве имен инвертируется, т.е. октеты IP-адресов записываются в обрат- ном порядке. Например, если узел “nubark. atrust. com. ” имеет адрес 63.173.189.1, то соответствующий узел на ветви прямых преобразований в дереве имеет имя “nubark. atrust. com. ”, а узел на ветви обратных преобразований имеет имя “1.189.173.63. in-addr. агра. ”6. Эти имена завершаются точкой, аналогично тому как полные имена файлов начинаются с косой черты. Полностью определенное доменное имя (FQDN — Fully Qualified Domain Name) — это полный путь к объекту в системе DNS, включая последнюю точку. Например, полно- 6 Часть имени in-addr. агра представляет собой фиксированный суффикс.
Глава 17. Система доменных имен 611 стью определенное имя узла nubark в домене atrust. com записывается как “nubark. at rust. com. ”. Домен (domain) — это поддерево дерева имен DNS. Например, домен atrust.com содержит узел atrust. com и все поддомены и дочерние узлы узла atrust. com. В про- тивоположность домену, зона — это домен без поддоменов, которые были делегированы другим серверам имен. Если домен atrust. com далее разделить на поддомены engineering, marketing и booklab, то он будет содержать четыре зоны: исходную зону atrust. com, а также зоны engineering.atrust.com, marketing.atrust.com и booklab.atrust.com. Зона atrust. com содержит все узлы, находящиеся в домене atrust. com, за исключе- нием узлов, относящихся к зонам engineering. atrust. com, marketing. atrust. com и booklab.atrust.com. Имена серверов ассоциируются с зонами, а не доменами. Проверив систему DNS, пользователь может выяснить, что заданное имя (например, booklab.atrust.com) идентифицирует поддомен, а не узел. Поддомены имеют записи серверов имен (NS), связанные с ними. Изначально имена доменов состояли из букв, чисел и косых черт, причем каждый компонент (метка) не мог содержать более 63 символов, а полностью определенное до- менное имя (FQDN) — более 256 символов. Имена FQDN не чувствительны к регистру, но обычно записываются с помощью строчных букв. Ограничения на доменные имена были ослаблены в документе RFC2181. Продолжающаяся интернационализация доменных имен оказывает влияние на эти правила. В результате ограничения на длину полностью определенных доменных имен были ослаблены. Кроме того, допускается использование символов, не принадлежащих латинскому алфавиту и представленных с помощью метода кодирования Рипу08^по- хожего на стандарт Unicode, но все же отличающегося от него деталями реализации. Существует два типа доменов верхнего уровня: национальные домены верхнего уров- ня (ccTLD — country code top-level domain) и общие домены верхнего уровня (gTLD — generic top level domain). Организация ICANN (International Corporation for Assigned Names and Numbers) управляет проектом регистрации имен в доменах gTLD, таких как com, net и огд, с помощью аккредитованных агентств. На момент написания книги у вас есть выбор из 1 000 регистраторов и 21 домен gTLD, в которых можно зарегистри- роваться. Точную информацию можно найти на сайте icann.org. В настоящее время корпорация ICANN работает наддааданием большого количества новых общих доменов верхнего уровня. Для регистрации имени в домене ccTLD, зайдите на веб-страницу организации IANA (Internet Assigned Numbers Authority) iana. org/cctld и найдите регистр соответствую- щей страны. Регистрация домена второго уровня Для того чтобы зарегистрировать домен второго уровня, необходимо подать заявку В администрацию соответствующего домена верхнего уровня. Для того чтобы заполнить бланки регистрации, необходимо назначить ответственного технического специалиста и ответственного администратора, а также выбрать хотя бы два компьютера, которые будут серверами домена. Кроме того, необходимо выбрать доменное имя, никем не за- нятое. Стоимость регистрации зависит от агентства, но в настоящее время она относи- тельно небольшая.
612 Часть II. Работа в сети Создание собственных поддоменов Процедура создания поддомена аналогична той, что используется при регистрации домена второго уровня, только центральная администрация теперь находится в пределах самой организации. Этот процесс предусматривает следующие этапы. • Выбор имени, уникального в пределах организации. • Назначение двух или более компьютеров серверами нового домена.7 • Согласование действий с администратором родительского домена. Прежде чем передавать полномочия, администратор родительского домена должен убедиться в том, что серверы имен дочернего домена сконфигурированы и работают правильно. В противном случае произойдет то, что называется некорректное делегирова- нием, и вы получите по электронной почте неприятное сообщение с требованием испра- вить ошибку (подробнее об этом рассказывается в разделе 17.15). 17.6. Разработка собственной среды DNS На разработку надежной и эффективной системы DNS для своего окружения влияет множество факторов: каков, например, размер вашей организации, используете ли вы частные IP-адреса в своей локальной сети в соответствии с документом RFC1918, про- токол DHCP и службу Active Directory, применяете ли вы маршрутизацию или коммута- цию своей внутренней сети, где расположен брандмауэр по отношению к вашим DNS- серверам. Полезно разделить эту проблему на три части. • Управление иерархией пространства имен: поддоменами, многократными уровня- ми и т.д. • Поставка авторитетных данных о вашей организации во внешний мир. • Преобразование имен для пользователей. Управление пространством имен Если ваша организация небольшая и независимая, использование поддоменов не яв- ляется ни необходимым, ни желательным, если ваше руководство не требует этого по каким-то причинам, не имеющим технической природы. С другой стороны, в организа- циях среднего размера с несколькими независимыми группами системного администри- рования поддомены могут уменьшить потребность во взаимодействии на уровне органи- зации. (Чаще всего поддомены выделяются по географическому или организационному принципу.) В крупной организации трудно обеспечивать уникальность имен и поэтому необходимы поддомены, возможно даже многоуровневые. Недавно в системе DNS были определены зонные записи (SPF и DKIM/ADSP), с по- мощью которых можно запрещать другим организациям штамповать почтовые сообще- ния, якобы исходящие из вашего домена. Для оптимального использования этой функ- циональной возможности, возможно, потребуется определить поддомен, ориентируясь на конфиденциальность информации, отправляемой по электронной почте. Более под- робно эта процедура описана в разделе 17.8. Создание поддоменов требует взаимодействия между системными администраторами, отвечающими за родительский и подчиненный домены. При организации и настройке ------------- W 7 С технической точки зрения, поскольку вы сами устанавливаете правила для своего поддо- мена, может быть один сервер или несколько.
Глава 17. Система доменных имен 613 поддомена следует запомнить, с кем вы должны вступить в контакт, если захотите доба- вить, изменить или удалить серверы. Убедитесь, что ваш брандмауэр не блокирует доступ к серверам поддомена, если вы хотите, чтобы поддомен был доступен для внешнего мира. Если вы используете поддомены для управления вашим пространством имен, раз в неделю запускайте утилиту doc (domain obscenity control — контроль корректности до- мена) с помощью программы cron, чтобы убедиться, что делегирование остается син- хронным и вы случайно не выполнили неправильного делегирования. Описание утили- ты doc и некоторых других инструментов, поддерживающих работоспособность системы DNS, изложено в разделе 17.13. Авторитетные серверы Спецификации системы DNS требуют, чтобы в каждом домене было, по крайней мере, два авторитетных сервера. Главный и подчиненный серверы являются авторитет- ными, а кеширующие серверы и заглушки — нет. В идеале организация имеет несколько авторитетных серверов, по одному на каждую отдельную сеть и цепь электропитания. Многие организации поддерживают работу внешних авторитетных серверов, которые часто располагаются у их интернет-провайдеров. Если ваш провайдер не предоставляет таких услуг, вы можете воспользоваться ими у провайдера DNS-службы или договорить- ся с местной фирмой (желательно не с конкурентом) или университетом. Несколько лет назад компания Microsoft попалась на нарушении правила, касаю- щегося разделения сетей. Все три их авторитетных сервера находились в одной и той же подсети, и когда маршрутизатор, соединяющий эту подсеть с Интернетом, дал сбой, серверы стали недоступны. Через два часа, по истечении срока действия записей в кеше, сайт microsoft. com и все его другие домены отключились от Интернета. Количество запросов к именам, связанным с компанией Microsoft, на корневых серверах достигло 25% общей нагрузки (10 тыс. запросов в секунду), хотя эта величина обычно равнялась 0,000001%. Решение проблемы заняло несколько дней. Когда страсти улеглись, компания Microsoft исправила маршрутизатор и передала свою службу DNS внешней организации. Авторитетные серверы поддерживают синхронизацию данных с помощью зонных пере- дач (zone transfers). Для аутентификации и управления переносом зон от главного сервера к подчиненным следует использовать ключи протокола TSIG (transaction signature — под- пись транзакции). Описание конфигурации протокола TSIG приводится в разделе 17.13. Иногда ответы, выдаваемые вашими авторитетными серверами по запросу, зависят от того, кто посылал запрос. Запрос, поступивший из внешнего мира, может иметь один ответ, а тот же самый запрос, поступивший изнутри организации, может иметь другой (более полный) ответ. Эта конфигурация называется “разделением DNS” (“split DNS”) и осуществляется на зонном уровне, а не на уровне сервера имен. Каждая версия зоны называется “представлением”, по аналогии с инструкцией view, с помощью которой задается ее конфигурация в конфигурационном файле сервера BIND. Для внешних пользователей данные имеют одно представление, а для внутрен- них — другое. Эта функциональная возможность широко используется для маскировки внутренних машин от шпионов и для гарантии того, что машины, использующие част- ные IP-адреса в соответствии с документом RFC1918, не раскрывают их в Интернете. Отладка представления представляет собой довольно сложную процедуру, но широкие возможности регистрации, существующие в сервере BIND, в сочетании с правильным использованием команды dig могут помочь. Некоторые подсказки приведены в раз- деле 17.15.
614 Часть II. Работа в сети Сервер NSD не поддерживает представления и разделение DNS. Однако вы можете имитировать эту функциональную возможность, запустив два экземпляра сервера NSD с разными конфигурациями. (Разумеется, вы можете это сделать и с сервером BIND.) Кеширующие серверы Рекурсивные кеширующие серверы отвечают на запросы локальных пользователей относительно сайтов, расположенных в Интернете. Каждый компьютер на вашем сайте должен иметь доступ к локальному кеширующему серверу. Некоторые организации используют иерархию, в которой одна или несколько ма- шин играют роль механизма продвижения данных, через который локальные кеширую- щие серверы подсети передают свои запросы. В связи с этим такие машины создают наполненный кеш, доступный для всего сайта. В зависимости от размера сайта, эти ма- шины могут быть независимыми или образовывать иерархию. Конфигурация механиз- мов продвижения данных в реализации BIND описана в разделе 17.9, а в реализации Unbound — в разделе 17.11. Если кеширующий сервер “падает”, то работа всех сетевых пользователей, являю- щихся основными клиентами этого сервера, практически останавливается.8 (И ваш те- лефон начинает разрываться от звонков.) Загрузите ваши кеширующие серверы имея по сценарию, в котором через несколько секунд после сбоя они перезагружаются. Рас- смотрим пример сценария для машины, применяющей программу named к нескольким доменам верхнего уровня (TLD). #!/bin/sh PATH=/usr/local/sbin:/usr/sbin:/sbin:$PATH export PATH trap "" 1 while :; do named -f -c /var/named/named.conf » /var/log/named 2>&1 < /dev/null logger "named restart" sleep 15 done exit Когда выполнение программы named завершается крахом, этот сценарий выводит на экран запись в системном журнале с командой logger, ждет 15 секунд (эта величина за- дается произвольно), а затем повторно запускает программу named. В инсталляционном пакете сервера BIND этот сценарий записан в каталоге contrib, хотя это не обязательно. В системе Solaris существует служба защиты SMF(cm. раздел 3.6). soiaris Требования к аппаратному обеспечению Серверы имен должны быть хорошо оснащенными по трем направлениям: централь- ный процессор, память и пропускная способность сети. Среди них центральный процес- сор, вероятно, в настоящее время является наименее важным фактором, но в будущем 8 Если в клиентском файле /etc/resolv/conf перечислено несколько серверов имен, то ме- ханизм разрешения должен переключиться на один из резервных серверов. Однако слишком часто в этом файле указывается только один сервер имен.
Глава 17. Система доменных имен 615 после полного развертывания набора спецификаций DNSSEC потребуется поддержи- вать возможность подписи зон и проверки их подлинности. По возможности исполь- зуйте специализированные машины в качестве загруженных серверов имен и отделяйте авторитетные серверы от рекурсивных. Загруженные серверы имен получают тысячи запросов в секунду, и, следовательно, им требуются несколько сетевых интерфейсов и сетевые соединения с высокой пропускной способностью. Трафик обычно состоит из огромного количества маленьких пакетов UDP. Рекурсивным серверам требуется достаточный объем памяти для кеширования всех ответов, которых ожидают пользователи. Для того чтобы определить, имеет ли сервер имен достаточный объем памяти, лучше всего запустить его и проследить за размером процесса сервера имен. В течение одной-двух недель эта величина сводится к стабиль- ному размеру, при котором старые записи кеша удаляются с той же скоростью, с кото- рой вставляются новые. В стабильном состоянии система не должна выполнять свопинг, а скорость подкачки страниц должна быть разумной. Если сервер имен функционирует на специализированном компьютере, то объем па- мяти должен быть вдвое больше, чем потребляет демон сервера имен за неделю. Объем использованной памяти демонстрируют команды top и vmstat; более подробная ин- формация приведена в разделе 29.4. Авторитетным серверам требуется довольно большой объем памяти для хранения всех данных, относительно которых они являются авторитетными. Большинство сай- тов может управлять этим процессом, но серверы для доменов верхнего уровня и сайтов DNS-хостинга могут потребовать огромный размер памяти или специальное программ- ное обеспечение, позволяющее хранить данные на диске. Вы можете управлять объемами ресурсов, используемых сервером имен, с помощью опций конфигурации. Список настроек для сервера BIND приведен в разделе 17.9, а для сервера NSD — в разделе 17.11. Безопасность Безопасности системы DNS посвящен раздел 17.13. Мы не собираемся повторять одно и то же и лишь напомним, что при использовании брандмауэра следует убедиться, что система DNS не эмитирует запросы, ответы на которые блокируются брандмауэром. Проверьте также, что ваши администраторы системы DNS взаимодействуют с админи- страторами по вопросам безопасности и администрацией сети. По умолчанию система DNS использует для запросов протокол UDP со случайными непривилегированными портами источников (>1023^ ответами являются пакеты UDP, адресованные тем же портам. При использований набора спецификаций DNSSEC и ин- тернационализированных имен доменов,‘ размеры ответов системы DNS могут превы- шать емкость пути, и поэтому они фрагментируются. Таким образом, ваш брандмауэр не должен блокировать фрагментированные пакеты UDP. Если запрос UDP завершился неудачей из-за фрагментации, то часто он посылается заново как запрос TCP, поэтому брандмауэр должен также пропускать ответы системы DNS по протоколу TCP. Итоги На рис. 17.2 показана архитектура, описанная в предыдущих абзацах. На этом рисунке продемонстрировано четкое разделение кеширующих серверов (слева) для пользователей и авторитетных серверов (справа) для данных. Обратите так- же внимание на подчиненный сервер, находящийся за пределами сайта, что считается очень желательным.
616 Часть II. Работа в сети Запросы изнутри Запросы извне Рис. 17.2. Архитектура сервера DNS Ш Информация об альтернативной адресации описана в разделе 14.4. Калифорнийский университет в Беркли (berkeley. edu) использует альтернативную IP-адресацию для репликации своих кеширующих серверов. Все клиенты контактиру- ют с одним и тем же набором серверов, а система маршрутизации (в данном случае — OSPF) направляет их на ближайший кеширующий сервер. Эта конфигурация порождает простую и логичную конфигурацию клиента и надежную среду DNS. 17.7. Что нового в системе DNS Одним из самых изящных нововведений в системе DNS является использование заг писей DNS для аутентификации и проверки целостности сообщений электронной по- чты. Эта система, получившая название DomainKeys Identified Mail (DKIM), позволя- ет выявлять фишинг (например, письма, которые якобы приходят из вашего банка и в которых вас просят “подтвердить” информацию о вашем банковском счете). Система DKIM позволяет также распознавать спамеров, подделывающих адреса отправителей. В системе DKIM сервер, являющийся источником исходящих сообщений электрон- ной почты, подписывает их с помощью закрытого криптографического ключа. Соответ- ствующий открытый ключ публикуется в виде ТХТ-записи DNS. Получатель сообщения электронной почты может проверить его целостность и происхождение, просмотрев (от- / крытый) ключ DKIM отправителя и сравнив его с подписями самого сообщения. Система DKIM не требует изменения программного обеспечения системы DNS, но она предполагает взаимодействие сервера, являющегося источником почтовых сообще- ний (для их подписи), и сервера, получающего эти сообщения (для проверки подписей). С точки зрения системы DNS для поддержки нового поддомена с именем domainkey требуется лишь изменить файлы конфигурации и данных. Кроме того, правила Author Domain Signing Practice (ADSP) позволяют сайту сооб- щать, подписывает ли он все, часть или вообще не подписывает исходящие сообщения электронной почты для каждой зоны DNS. Сайты-получатели могут использовать эту политику, чтобы решить, как поступать с неподписанными сообщениями, а также с со- общениями, подпись которых невозможно верифицировать. Например, банк, генерирующий несколько категорий сообщений электронной по- чты (например, маркетинговые письма, письма о состоянии счетов и инструкции по электронным платежам), может создавать поддомены для каждой функции и устанавли- вать для них разные политики. Получатели могут игнорировать отсутствие или несоот-
Глава 17. Система доменных имен 617 ветствие подписи оригиналу на рекламных письмах, но отклонять сообщения, которые должны иметь высокий уровень безопасности. Этот механизм напоминает систему Sender Policy Framework (SPF), определяющую способ, с помощью которого организации публикуют имена своих правильных почто- вых серверов в системе DNS, чтобы распознавать спамеров, желающих подделать адрес отправителя, и отклонять их письма. В списке новшеств мы указываем также сервер BIND 10, представляющий собой сле- дующее поколение программного обеспечения BIND, разрабатываемого консорциумом ISC (Internet System Consortium), поддерживающим сервер BIND, начиная с четвертой версии. Разработка сервера BIND 10 была оплачена спонсорами со всего мира, в основ- ном регистраторами доменов. Сервер BIND 10 по-прежнему представляет собой открытую реализацию системы DNS. Частично он основывается на версии BIND 9 и основное внимание уделяет по- вышению модульности, гибкости, интеграции, устойчивости и управляемости во время выполнения. Сервер BIND 9 и более ранние версии хранили базу данных DNS в памяти; сервер BIND 10 поддерживает работу нескольких систем хранения данных. Еще одна запла- нированная функциональная возможность сервера — это удобный пользовательский графический интерфейс API. Он облегчит заполнение зон и управление программным обеспечением. Подробная информация об этом приведена на сайте ics. org/bindlO. Некоторые изменения, которые были упомянуты в предыдущих изданиях книги, по- прежнему проходят стандартизацию, но еще не приняты. К ним относятся специ^гка- ция DNSSEC-bis (безопаснюсть), система IDN (интернациональные имена домейов) и протокол IPv6. Эти инициативы развиваются, но медленно. Мы включили их в послед- ние строки табл. 17.4. Таблица 17.4. Новые возможности в DNS и BIND Раздел 17.9 5001 NSID, идентификация имен серверов для серверов альтернативной адресации 17.8 5518,5016, 17.8 4871,4686 17.8 4470 17.8 4255 17.8 5198,4952,4690,4290, 4185,3492 14.10 4472,4339,4159,3901 Требования DKIM, подписи, подписи третьих лиц Практика подписания сообщений отправителями ADSP Система идентификации почтовых серверов SPF Слепки открытых ключей SSHFP, SSH Интернациональные доменные имена (в кодировке Punycode, в доме- нах верхнего уровня, в формате обмена) Протокол IPv6, оперативные вопросы, конфигурация узлов, использо- вание доменной зоны ip6.arpa, а не ip6.int для обратного преобразова- ния, текущие наилучшие практики 17.13 5155,5011,4641,4509, 4470,4033-5 Спецификация DNSSEC, аутентификация, записи о делегировании до- мена во время подписи сообщения (DS), практики эксплуатации, “точки доверия” (trust anchors), отказ в существовании (NXDOMAIN) Некоторые из этих предложений представляют собой огромные проекты, стандар- тизацию которых организация IETF еще не закончила. Рабочие группы, которые пишут стандарты, состоят из хороших специалистов, но недостаток “бдительных бойцов” при- водит к тому, что некоторые спецификации трудно или даже невозможно реализовать. Те- кущие выпуски серверов BIND, NSD и Unbound содержат большинство из этих новшеств.
618 Часть II. Работа в сети СЗ Протокол IPv6 более подробно описан в главе 14. Комментариев заслуживают две новые функциональные возможности: поддержка протокола IPv6 и спецификация DNSSEC. Протокол IPv6 увеличивает длину IP-адресов с 32 до 128 бит. Если он когда-нибудь будет полностью реализован, то окажет огромное влияние на Интернет. Серверы BIND, NSD и Unbound частично поддерживают прото- кол IPv6, который уже стандартизован, но вряд ли будет широко развернут в ближайшее время. По этой причине мы лишь кратко описываем протокол IPv6. В этой главе до- статочно дать общее представление об этом протоколе, но этого недостаточно для того, чтобы вы могли перевести ваш сайт на протокол IPv6 и настроить систему DNS на работу с ним. Стандарт DNSSEC добавляет в базу данных DNS и ее серверов данные об аутентифи- кации. Он использует открытый криптографический ключ для верификации источника и целостности данных DNS, а также заставляет систему DNS распространять ключи на- ряду с данными об узле. Организации, желающие развернуть зоны, подписанные в соответствии со специфи- кациями DNSSEC, столкнутся с проблемой самонастройки, пока корневой домен и до- мены верхнего уровня не будут подписаны, потому что модель доверия DNSSEC требу- ет, чтобы подписи образовывали цепочку, начинающуюся в корневом домене. Однако новая временная схема DLV (domain lookaside validation — опережающая проверка до- мена) позволяет находить и соединять друг с другом “островки доверия”, пока корневой домен и домены gTLD не реализуют спецификации DNSSEC полностью. Подробности описаны в разделе 17.13. Описание интернациональных имен доменов, позволяющих использовать неанглий- ские символы, сводится к способу, которым символы кодировки Unicode отображаются в символы кодировки ASCII. Это однозначное отображение, имеющее обратное отобра- жение, выполняет система Punycode, использующая алгоритм Bootstring. Детали описа- ны в документе RFC3492. Интернациональные имена доменов существенно сокращают максимальную длину (как покомпонентную, так и общую) имен DNS. Представление имен в кодировке Pubycode начинается со строки xf—, поэтому если вы увидите стран- ный запрос, начинающийся с этих четырех символов, то будете знать, что они означают. Каждая из этих возможностей (IPv6, DNSSEC и интернационализация) значительно повышает размер записей о данных в системе DNS. В результате система DNS может превысить размеры пакетов UDP и потребовать применения протокола EDNSO (Exten- ded DNS, версия 0), чтобы увеличить размер пакета с 512 байт (по умолчанию) до более крупной величины, например 4096 байт. В 2009 году статистические данные, накоплен- ные на корневом сервере К, свидетельствовали о том, что примерно 35% запросов не использовали протокол EDNS0 и получали усеченные или фрагментированные ответы от сайтов, использовавших более крупные пакеты.9 17.8. База данных DNS Зонные базы данных DNS — это множество текстовых файлов, поддерживаемых си- стемным администратором на главном сервере имен зоны. Эти текстовые файлы часто называются файлами зон. Они содержат записи двух типов: команды синтаксического анализатора (например, $ORIGIN и $TTL) и записи о ресурсах. Базе данных принадлежат 9 Текущие данные можно найти на странице k. root-servers .org/statistics/GLOBAL/ lonthly.
Глава 17. Система доменных имен 619 только записи о ресурсах, а команды синтаксического анализатора предназначены для того, чтобы упростить ввод записей. Ш Команды файла зоны стандартизованы в документах RFC 1035 и 2308. Команды в файлах зон Команды могут быть встроены в файлы зон, чтобы сделать их более читабельными и облегчить их сопровождение. Эти команды либо влияют на способ, с помощью которого синтаксический анализатор интерпретирует последующие записи, либо сами являются сокращением нескольких записей DNS. После того как файл зоны будет прочитан и ин- терпретирован, ни одна из этих команд не становится частью данных о зоне (по крайней мере, в их исходном виде). Три команды являются стандартными в системе DNS, а четвертая, $ GENERATE, от- носится только к серверу BIND. Пример использования команды $GENERATE приведен далее. Стандартные команды выглядят следующим образом. $ORIGIN имя_домена $INCLUDE имя_файла [источник] $TTL стандартное_время_существования Директивы должны начинаться в первой колонке и занимать отдельную строку. Файлы зон читаются и анализируются сверху вниз за один проход. Когда сервер имен читает файл зоны, он добавляет стандартное имя домена (“источник”) к любо- му имени, которое не полностью определено. По умолчанию источником служит до- мен, указанный в файле конфигурации сервера имен. Однако посредством директивы $ORIGIN можно задать или изменить источник в файле зоны. Использование относительных имен вместо полностью определенных позволяет сэ- кономить много времени на вводе данных и делает зонные файлы гораздо более удоб* ными для восприятий. Во многих организациях в зонные файлы включаются директивы $ INCLUDE* позво- ляющие разделять зонные базы данных на логические блоки или хранить ключи шиф- рования в отдельном файле с ограниченными правами доступа. Синтаксис директивы $ INCLUDE таков. $INCLUDE имя_файла [источник] Указанный файл включается в базу данных в том месте, где стоит эта директива. Если имя файла не является полностью определенным, оно интерпретируется относительна каталога, из которого был запущен сервер имен. Если задано значение параметра источник, то синтаксический анализатор действует так, будто чтению файла предшествовала директива $ORIGIN. Обратите внимание на то, что значение источник не возвращается к своему предыдущему значению после выпол- нения директивы $ INCLUDE. Возможно, вы захотите вернуться к предыдущему значению либо в конце включенного файла, либо в строке, следующей за директивой $ INCLUDE. Директива $ttl задает стандартное время существования последующих записей. Она должна стоять в первой строке файла зоны. По умолчанию время жизни измеряется в секундах, но можно задать и другие единицы измерения: часы (h), минуты (ш), дни (d) или недели (w). Например, все перечисленные ниже директивы $TTL 86400 $TTL 24h $TTL Id устанавливают значение $TTL равным одному дню.
620 Часть II. Работа в сети Записи о ресурсах С каждой зоной в иерархии DNS связан набор записей о ресурсах. Базовый формат этой записи имеет следующий вид. [имя] [ttl] [класс] тип данные Поля разделяются знаками табуляции или пробелами и могут содержать специаль- ные символы (табл. 17.5). Таблица 17.5. Специальные символы, используемые в записях о ресурсах _______1— ; Начало комментария 0 Имя текущей зоны () Разбивка данных на несколько строк *Метасимвола (только в поле имя) а Предупреждения, связанные с этим символом, см. ниже. Поле имя идентифицирует объект (обычно узел или домен), к которому относится запись. Если несколько последовательно расположенных записей ссылаются на один и тот же объект, то после первой записи поле имя можно опустить. Поле должно начи- наться в первой колонке, если она присутствует. Имя может быть относительным либо абсолютным. Абсолютные имена заканчива- ются точкой и полностью определены. На внутреннем уровне программное обеспечение работает с полными именами, добавляя имя текущего домена и точку ко всем именам, которые не заканчиваются точкой. Это позволяет укорачивать имена, но часто сопряже- но с ошибками. Например, в домене cs. Colorado. edu имя anchor интерпретируется как “anchor. cs. Colorado. edu. ”. Если же ввести имя anchor. cs. Colorado. edu, то отсутствие точки в конце также будет подразумевать сокращенное имя, к которому следует добавить стандартный домен, что в итоге даст имя “anchor. cs. Colorado. edu. cs. Colorado. edu. ”. Это очень распространенная ошибка. В поле ttl (time-to-live — время существования) задается время (в секундах), в тече- ние которого элемент данных может оставаться в кеше и при этом считаться достовер- ным. Это поле часто опускают, но оно обязательно на корневом сервере в файле под- сказок. Стандартное значение поля задается директивой $TTL, указываемой в первой строке файла зоны. СЗ Более подробная информация о службе NIS приведена в главе 19. Если время существования записей задать равным примерно неделе, то это приведет к значительному снижению сетевого трафика и нагрузки на DNS. Однако следует помнить о том, что после сохранения записи в кеше за пределами локальной сети ее уже нельзя при- нудительно сделать недостоверной. Поэтому, планируя серьезную реструктуризацию сети, сделайте значение $ttl достаточно низким (например, один час), чтобы записи, находя- щиеся во внешних кешах, быстро устарели, а новые параметры в течение часа вступили в действие. После завершения работы восстановите исходное значение этого параметра. Некоторые организации устанавливают небольшое время существования своих за- писей на серверах, имеющих выход в Интернет, для того чтобы в случае возникнове- ния проблем на этих серверах (сбоя сети, отказа аппаратного обеспечения или атаки на
Глава 17. Система доменных имен 621 основе отказа в обслуживании) администраторы могли отреагировать, изменив параме- тры отображения “имя-адрес”. Поскольку исходное время существования записей было незначительным, новые значения будут быстро распространены по сети. Например, имя google. com имеет параметр TTL, равный пяти минутам, а параметр TTL на серверам имен компании Google равен четырем дням (345 600 с). google.com 300 IN А 209.85.171.100 google.com 345600 IN NS nsl.google.com nsl.google.com 345600 IN А 216.239.32.10 Для выяснения этих данных мы использовали команду dig; для простоты вывод был сокращен. В поле класс задается тип сети. Распознаются следующие три значения. • IN — Интернет (по умолчанию). • HS — Hesiod (служба каталогов, локально используемая в некоторых организациях). • CH — ChaosNet (служжба, используемая на некоторых серверах имен для самои- дентификации). По умолчанию задается класс IN. Он часто явно указывается в файлах данных о зо- не, несмотря на то что по умолчанию его можно не задавать. Информационная служба Hesiod, разработанная Массачусетсским технологическим институтом, является над- стройкой пакета BIND. Параметр СН означает ChaosNet — почти исчезнувший сетевой протокол, ранее при- менявшийся на Lisp-машинах компании Symbolics. В настоящее время в пределах клас- са СН скрыто только два информационных элемента: номер версии программного обе- спечения сервера имен и имя узла, на котором запущен этот сервер. Эти данные можно извлечь с помощью команд dig или drill (см. раздел 17.9). Администраторы и хакеры используют номера версий программного обеспечения серверов имен для обновления информации, а администраторы используют имя узла для отладки серверов имен, реплицированных в ходе альтернативной маршрутизации (anycast routing). Раскрытие этой информации посредством класса СН сначала было представлено в пакете BIND, а потом эта возможность была осуществлена во всех реа- лизациях системы DNS. Существуют различные типы DNS-записей, из которых широко используются менее десяти. В стандарте IPv6 было добавлено еще несколько типов. Записи о ресурсах раз- биваются на четыре группы. • Зонные записи определяют домены и их серверы имен. • Базовые записи связывают имена с адресами и обеспечивают маршрутизацию электронной почты.10 • Аутентификационные записи предоставляют информацию, касающуюся аутенти- фикации и сигнатур. • Вспомогательные записи содержат дополнительную информацию о компьютерах и доменах. Содержимое поля данные зависит от типа записи. Запрос DNS о конкретном домене и типе записи получает в ответ все соответствующие ему записи о ресурсах, извлеченные из файла зоны (табл. 17.6). 10 Записи о маршрутизации почты MX относятся как к категории зонных записей, так и к кате- гории базовых записей, поскольку они могут относиться как ко всей зоне, так и к отдельным узлам.
622 Часть II. Работа в сети Таблица 17.6. Записи базы данных DNS Тип Имя ф з SOA Start Of Authority Определение DNS-зоны X X NS Name Server Определение серверов имен зоны, делегирование полномочий поддо- СО менам А IPv4 Address Преобразование имени в адрес IPv4 ф 3 АААА IPv6 Address Преобразование имени в адрес IPv6; ранее считалась устаревшей, но аз О в настоящее время возрождается со L0 PTR Pointer Преобразование адреса в имя мх Mail Exchanger Управляет маршрутизацией почты DS Delegation Signer Хеширует подписанный ключ дочерней зоны О DNSKET Public Key Открытый ключ для имени DNS LU СО СО NSEC Next Secure Используется вместе со спецификацией DNSSEC для генерации отказов Z Q NSEC33 Next Secure v3 Используется вместе со спецификацией DNSSEC для генерации отказов S RRSIG Signature Множество подписанных аутентифицированных записей о ресурсах о о X DLV Lookaside Некорневая точка доверия для спецификации DNSSEC со с: SSHFP SSH Fingerprint SSH-ключ узла, позволяющий верификацию с помощью DNS со ф |П SPF Sender Policy Идентифицирует почтовые серверы, запрещает подделки DKIM Domain Keys Проверяет отправителя сообщения электронной почты и целостность сообщения 6 § CNAME Canonical Name Дополнительные имена (псевдонимы) узла S о с: i SRV Services Местонахождение известных служб в пределах домена о СО « TXT Text Комментарии или нестандартная информация 6 а Оригинальная система NSEC позволяет хакерам использовать команду dig для перебора всех зонных за- писей. В системе NSEC3 этот недостаток устранен за счет усложнения вычислений; в настоящее время используются обе системы. 6 Записи TXT все шире используются для того, чтобы не ожидать одобрения организацией IETF новых типов записей. Например, записи SPF и DKIM были впервые реализованы именно как записи TXT. Есть и другие типы записей, которые либо устарели, либо являются эксперименталь- ными, либо не нашли широкого применения. Полный их список приведен в докумен- тации. Большинство записей поддерживается вручную (путем редактирования тексто- вых файлов), но защищенные записи о ресурсах требуют криптографической обработки и поэтому управляются с помощью программного обеспечения. Эти записи описаны в подразделе, посвященном спецификации DNSSEC, в разделе 17.13. Порядок записей о ресурсах почти произволен, но по традиции запись SOA должна идти первой. Последующие записи Moiyr располагаться в любом порядке, но обычно сразу же после записи SOA следуют записи NS. Записи по каждому узлу, как правило, группиру- ются. Вообще, принято упорядочивать записи по полю имя, хотя некоторые организации упорядочивают их по IP-адресам, чтобы было легче идентифицировать неиспользуемые адреса. Зонные файлы на подчиненных серверах не поддерживаются вручную. Они запи- сываются программным обеспечением сервера имен; порядок записей скрыт. Подробно описывая все типы записей о ресурсах в следующих разделах, мы в ка- честве примера рассмотрим записи из базы данных домена atrust.com.. Поскольку домен по умолчанию — at rust. com., то имя узла bark в действительности означает bark.atrust.com.
Глава 17. Система доменных имен 623 Ш Более подробная информация о документах RFC приведена в разделе 14.1. Формат и интерпретация каждого типа записей о ресурсах описаны организацией IETF в ряде документов RFC. В следующих разделах укажем конкретные документы RFC, относящиеся к каждой записи (вместе с годом их выпуска), в специальных примечаниях. Запись SOA Запись SOA (Start of Authority — начало полномочий) обозначает начало зоны — груп- пы записей о ресурсах, расположенных в одной точке пространства имен DNS. Это® узел дерева DNS называют также точкой передачи полномочий. Как мы увидим ниже, домен DNS обычно охватывает минимум две зоны: для прямого преобразования имен компьютеров в IP-адреса и обратного преобразования. Часть дерева DNS, которая слу- жит целям прямого преобразования, упорядочена по именам, а ветвь обратного преоб- разования — по IP-адресам. CQ Записи SOA определены в документе RFC1035 (1987). Для каждой зоны создается только одна запись SOA. Запись SOA содержит имя зоны, контактный адрес администрации зоны, порядковый номер и различные параметры об- новления данных. Комментарии начинаются с точки с запятой. Рассмотрим следующий пример. ; Начало зоны для домена atrust.com atrust.com IN SOA nsl.atrust.com. hostmaster.atrust.com. ( 2009070200 ; Порядковый номер 10800 ; Refresh (3 часа) 1200 ; Retry (20 минут) 360000 ; Expire (больше 40 дней) 3600) ; Minimum (1 час) Поле имя записи SOA (в нашем примере atrust. com.) часто содержит символ @, обо- значающий сокращенное имя текущей зоны. Текущее имя задается в инструкции zone файла named.conf или в элементе name зонного файла nsd. conf. Оно может быть из- менено в зонном файле посредством директивы синтаксического анализатора $ORIGIN. В показанном фрагменте нет поля ttl. Класс зоцы— IN (Интернет), тип записи — SOA, а остальные элементы образуют поле данное. Числовые параметры в скобках представляют собой продолжительность временных интервалов и часто записываются В одной строке с комментариями. Имя nsl. atrust. com. указывает на главный сервер имен этой зоны.11 Имя hostmaster. cs . Colorado. edu. определяет адрес электронной почты для контактов с администратором домена. Адрес дан в формате “пользователь .узел. ” (а не пользователь&узел). Если необходимо отправить сообщение администратору, просто замените первую точку символом @ и уберите точку, стоящую в конце. Вместо реального регистрационного имени часто используется псевдоним, например admin или hostmaster. Дело в том, что на должность администратора может заступить другой человек. В таком случае проще поменять одну запись в файле aliases (описывается в разделе 20.5), чем выискивать все упоминания старого адреса в зонных файлах. Круглые скобки позволяют разбить запись SOA на несколько строк. 11 На самом деле в записи SOA может быть указан любой сервер имен зоны, если вы не ис- пользуете динамическую систему DNS. В этом случае запись SOA должна содержать имя главного сервера.
624 Часть II. Работа в сети Первый числовой параметр — это порядковый номер конфигурации зоны. С его помощью подчиненные серверы определяют, когда следует загружать новые данные. Порядковым номером может быть любое 32-разрядное целое число, причем оно должно увеличиваться при каждом изменении зонного файла. Во многих организациях в этом номере зашифровывается дата последней модификации файла. Например, значение 2009070200 указывает на первое изменение в зонном файле, сделанное 2 июля 2009 года. Порядковые номера могут не быть последовательными, но должны монотонно воз- растать. Если случайно задать на главном сервере очень большое число и передать его подчиненным серверам, то исправить порядковый номер на главном сервере не удастся. Подчиненные серверы запрашивают новые данные только в том случае, когда порядко- вый номер записи SOA главного сервера больше, чем у них. Существует два способа решения этой проблемы. • Можно воспользоваться особенностями последовательного пространства, из кото- рого выбираются порядковые номера. Суть в том, что к имеющемуся номеру до- бавляется “магическое” число (231), заставляющее подчиненные серверы обновить свои данные, после чего устанавливается требуемый номер. Этот прием описыва- ется в книге Albitz, Paul and Cricket Liu, DNS and BIND и в документе RFC 1982. • Более хитроумный и утомительный способ — изменить порядковый номер на главном сервере, удалить процессы на подчиненных серверах вместе с их резерв- ными базами данных, а затем перезапустить серверы. При отсутствии кеша под- чиненные серверы повторно загрузят базы данных с главного сервера. Этот метод трудно реализовать, если, следуя полезным советам, вы распределили подчинен- ные серверы по географическому признаку, особенно если на этих подчиненных серверах нет системных администраторов. Часто пользователи делают одну и ту же ошибку: меняют файлы данных, забывая при этом исправить порядковый номер. “В наказание” сервер имен откажется распро- странить внесенные изменения на подчиненные серверы. Следующие четыре элемента записи SOA — значения интервалов времени (по умол- чанию в секундах), определяющих, как долго данные могут находиться в кеше в раз- личных точках глобальной базы данных DNS. Можно поменять единицы измерения, воспользовавшись суффиксами m (минуты), h (часы), d (дни) и w (недели). Например, выражение lh30m означает “1 час 30 минут”. Выбор интервала времени требует компро- мисса между эффективностью (использование старого значения дешевле выборки ново- го) и точностью (новые значения более точные). Эти четыре поля называются refresh, update, expire и minimum. Первый элемент задает периодичность обновления данных. Он показывает, как часто подчиненные серверы должны связываться с главным сервером и проверять, не поме- нялся ли порядковый номер конфигурации зоны. Если зонная база данных изменилась (порядковый номер главного сервера стал больше, чем у подчиненного сервера), подчи- ненные серверы должны обновить свои копии базы данных. Общепринятые значения для этого интервала — от одного до шести часов (3600—21600 секунд). Вместо того чтобы пассивно ждать истечения периода обновления, современные серверы BIND (всегда) и NSD (иногда) самостоятельно уведомляют свои подчиненные серверы об изменениях зон. Уведомление об обновлении может быть потеряно из-за пе- регруженности сети, поэтому значение параметра refresh должно быть разумным. Если подчиненный сервер пытается узнать порядковый номер у главного сервера, а тот не отвечает, то через некоторое время будет сделана повторная попытка. Как показывает опыт, нормальное значение для второго элемента — от 20 до 60 минут (1200—3600 секунд).
Глава 17. Система доменных имен 625 Если главный сервер длительное время отключен, то подчиненные серверы будут безуспешно пытаться обновить свои данные. По истечении определенного времени все подчиненные серверы должны “решить”, что главный сервер не включится никогда и его данные наверняка устарели. Параметр expire определяет, как долго подчиненные серверы будут обслуживать домен в отсутствие главного сервера. Система должна со- хранить работоспособность, даже если главный сервер не работает неделю, поэтому третьему элементу следует присваивать большое значение. Мы рекомендуем выбирать интервал от недели до месяца. Четвертый параметр minimum в записи SOA определяет время существования в кеше отрицательных ответов. Время существования положительных ответов (т.е. собственно записей) устанавливается директивой $TTL в начале зонного файла. Как свидетельствует практика, значение $TTL должно быть от нескольких часов до нескольких дней, а мини- мальное время существования отрицательных ответов — один-два часа (но не более трех). Значения параметров $TTL, expire и minimum в конечном итоге вынуждают всех пользователей DNS удалять старые данные. Изначально система доменных имен осно- вывалась на том, что информация об узлах относительно стабильна и меняется нечасто. Однако с появлением протокола DHCP и портативных компьютеров все изменилось. Теперь разработчики серверов имен отчаянно пытаются угнаться за временем, внедряя механизмы инкрементных зонных передач и динамических обновлений, которые будут описаны позднее. Концепция синхронизации была описана в этой главе ранее. Записи NS Записи NS (name server — сервер имен) идентифицируют серверы имен, которые ав- торитетны для зоны (т.е. все главные и подчиненные серверы), а также делегируют пол- номочия по управлению поддоменами другим организациям. Обычно эти записи следу- ют сразу после записи SOA. Ш Записи NS определены в документе RFC1035 (1987). Эти записи имеют следующий формат. зона [ttl] [IN] NS имя_узла Рассмотрим пример. NS nsl.atrust.com. NS ns2.atrust.com. booklab NS ubuntu.booklab.atrust.com. NS nsl.atrust.com. Первые две строки определяют серверы имен для домена atrust. com. Здесь пара- метр пате не указан, потому что он совпадает с полем пате записи SOA, которая пред- шествует этим записям; поэтому поле пате оставлено пустым. Параметр class также не Указан, потому что по умолчанию он равен IN и его не обязательно задавать явно. Третья и четвертая строки делегируют поддомен с именем booklab. atrust. com. серверам имен ubuntu .booklab и nsl. Эти записи на самом деле являются частью под- домена booklab, но они должны также появляться в родительской зоне atrust. com, чтобы делегирование было возможным. Аналогично записи NS для домена atrust. com хранятся в файле зоны . сот, чтобы определить поддомен atrust. com и идентифициро- вать его серверы. Серверы домена . сот отсылают запросы об узлах в домене atrust. com серверам, перечисленным в записях NS для домена atrust. com внутри домена . сот. Ш Подробнее о делегировании рассказывается далее.
626 Часть II. Работа в сети Список серверов имен, расположенных в родительской зоне, должен содержать ак- туальную информацию, если это возможно. Несуществующие серверы, перечисленные в родительской зоне, замедляют работу службы имен, хотя клиенты в конце концов все равно отправляются на один из функционирующих серверов. Если ни один из серверов, перечисленных в родительской зоне, не существует в дочерней зоне, возникает так на- зываемое некорректное делегирование (см. раздел 17.15). Дополнительные серверы в дочерней зоне допускаются, поскольку хотя бы один из дочерних серверов имеет запись NS в родительской зоне. Проверьте делегирование с по- мощью команд dig или drill, чтобы убедиться, что оно определяет корректный набор серверов (см. раздел 17.15). Записи А Записи A (address — адрес) являются основной частью базы данных DNS. Они обе- спечивают перевод имен компьютеров в IP-адреса (ранее эта информация хранилась в файле /etc/hosts). Для каждого из сетевых интерфейсов компьютера должна суще- ствовать одна запись А. Она имеет следующий формат. имя_узла [ttl] [IN] А IP-адрес Рассмотрим пример. nsl IN А 63.173.189.1 В этом примере поле имя_узла не завершается точкой, поэтому сервер имен до- бавляет домен, заданный по умолчанию, и образует полностью определенное имя “nsl. atrust. com. ”. Эта запись связывает данное имя с IP-адресом 63.173.189.1. Записи PTR Записи PTR обеспечивают обратный перевод IP-адресов в доменные имена. Как указывалось ранее, записи обратного отображения существуют в домене in-addr. arpa и именуются байтами IP-адреса, следующими в обратном порядке. Например, зона для подсети 189 в данном примере имеет имя 189.174.63. in-addr. arpa. Общий формат записи PTR таков. адрес [ttl] IN PTR имя_узла Например, запись PTR в зоне 189.173.63.in-addr.arpa, соответствующая приведенной выше записи А для узла nsl, будет иметь следующий вид. 1 IN PTR nsl.atrust.com. Имя 1 не заканчивается точкой и потому является относительным. Вопрос: относи- тельно чего? Не относительно домена atrust. com., потому что, для того чтобы эта за- пись была точной, домен по умолчанию должен называться 189.173.63. in-addr. arpa. Этого можно добиться, поместив записи PTR для каждой подсети в отдельный файл. Домен, связанный по умолчанию с этим файлом, задан в файле конфигурации сервера имен. Другой способ выполнить обратное преобразование — включить в файл зоны за- писи вида 1.189 IN PTR nsl.atrust.com. с доменом по умолчанию 173.63. in-addr. arpa. В некоторых организациях все запи- си обратного преобразования помещаются в один файл, а подсеть задается посредством директивы $ORIGIN. Обратите внимание на то, что имя узла nsl. atrust. com должно заканчиваться точкой, иначе к нему будет добавлена строка 173.63. in-addr. arpa.
глава 17. Система доменных имен 627 Поскольку atrust. com и 189.173.63. in-addr.агра — разные области простран- ства имен DNS, они составляют две отдельные зоны. У каждой зоны должна быть своя запись SOA и свои записи о ресурсах. Помимо определения зоны in-addr. агра, для каждой реальной сети нужно также задать зону, которая охватывала бы интерфейс об- ратной связи (127.0.0.0), по крайней мере при работе с сервером BIND. Пример по- казан в разделе 17.10. Описанные привязки прекрасно работают, когда маски подсетей проходят по границе байтов. Но как выполнять обратные преобразования для подсети вида 63.173.189.0/26, где последний байт может находиться в одной из четырех подсетей: 0-63, 64-127, 128-191 и 192-255? В документе RFC2317 описан остроумный прием, основанный на применении записей CNAME; подробнее об этом речь пойдет ниже. Обратные преобразования, выполняемые записями PTR, используются всеми про- граммами, которые аутентифицируют входящий сетевой трафик. Например, демон sshd может допускать12 удаленную регистрацию без пароля, если исходный узел указан по имени в пользовательском файле **/. shosts. Когда узел-адресат получает запрос на установление соединения, он “знает” узел-отправитель только по IP-адресу. Пользуясь услугами DNS, он преобразует IP-адрес в имя, которое сравнивается с содержимым соответствующего файла. Программы netstat, tcpd, sendmail, sshd, syslogd, X Win- dows и f tpd получают имена компьютеров из IP-адресов с помощью механизма об- ратного преобразования. Важно, чтобы записи А соответствовали записям PTR. Несовпадение и отсутствие последних приводит к ошибкам аутентификации, в результате чего система замедляет работу. Это само по себе неприятно, но еще хуже то, что появляется почва для атак типа на основе отказа от обслуживания, которые направлены на любое приложение, требую- щее соответствия записям А при обратном преобразовании. Записи MX Записи MX (mail exchanger — обмен почтой) используются системой электронной почты для более эффективной маршрутизации почтовых сообщений. Запись MX подме- няет адресата сообщения, в большинстве случаев направляя сообщение концентратору электронной почты на сервере получателя, а не прямо на его рабочую станцию. Ш Записи MX определены в документе RFC1035 (1987). Запись MX имеет следующий формат. ИМЯ [ttl] [IN] MX приоритет узел ... Записи, приведенные ниже, направляют почту, предназначенную для получателя user@server. atrust. com, на машину mail. server. atrust. com, если она включена и доступна. somehost IN MX 10 piper mailserver.atrust.com. IN MX 20 mail-relay3.atrust.com. Сначала опрашиваются узлы с низким приоритетом: наиболее высокий приори- тет — о, наиболее низкий — 65535. (Может показаться, что конфигурация, описанная в примере, не слишком надежна, поскольку оба почтовых сервера расположены в до- мене atrust. com. Однако эти два сервера расположены в разных подсетях и находятся в разных местах.) 12 Но на самом деле, по соображениям безопасности, он этого делать не должен.
628 Часть II. Работа в сети Записи MX полезны во многих ситуациях: • если в системе есть центральный концентратор почты; • если вы хотите фильтровать почту от спама и вирусов перед ее доставкой; • если узел-адресат выключен; • если адресат не подключен к Интернету; • если администратор локальной сети лучше знает, куда следует рассылать сообще- ния (т.е. всегда). Каждый узел, известный во внешнем мире, должен иметь записи MX. Они необхо- димы другим сущностям в системе DNS. Например, узлы, которые никогда не получали или не должны получать электронную почту (скажем, сетевые принтеры), должны иметь записи MX. Сам домен должен иметь запись MX, указывающую на концентратор почты, так чтобы почта, посылаемая на адрес user@domain, приходила туда, куда ее адресовал отправитель. (Однако обратите внимание на то, что в этой конфигурации все машины, существующие в домене, должны иметь уникальные пользовательские имена.) Компьютер, принимающий почту для другого узла, должен настроить свою програм- му пересылки соответствующим образом. Как задать такую конфигурацию для програм- мы sendmail и почтовых серверов Postfix, показано в разделах 20.10 и 20.15 соответ- ственно. В базе данных DNS иногда можно встретить метазаписи MX. * IN MX 10 mailserver.atrust.com. На первый взгляд кажется, что такая запись позволяет избежать многократного ввода данных и является стандартной для всех узлов. Однако метасимвол интерпретируется совсем не так, как можно ожидать. Он соответствует полю имени, которое еще не было указано в явном виде в других записях о ресурсах. Следовательно, нельзя использовать звездочку с целью задания стандартного значе-» ния для всех своих компьютеров. С ее помощью можно задать стандартные имена для “чужих” компьютеров. В результате на концентратор будет поступать масса почтовых сообщений, тут же отвергаемых по той причине, что имя узла, обозначенное звездоч- кой, не принадлежит домену. Поэтому необходимо избегать применения метасимвола в записях MX. Записи CNAME Записи CNAME (canonical паше — каноническое имя) позволяют назначать узлу дополнительные мнемонические имена. Псевдонимы широко применяются для закре- пления за компьютером какой-либо функции либо просто для сокращения его имени. Реальное имя иногда называют каноническим. Приведем несколько примеров. ftp IN CNAME anchor kb IN CNAME kibblesnbits Ш Записи CNAME определены в документе RFC1035 (1987). Запись CNAME имеет следующий формат. псевдоним [ttl] [IN] CNAME имя_узла Обнаружив запись CNAME, программное обеспечение системы DNS перестает по- сылать запросы по мнемоническому имени и переключается на реальное имя. Если у
Глава 17. Система доменных имен 629 компьютера есть запись CNAME, то другие записи для узла (A, MX, NS и др.) должны ссылаться на его реальное, а не мнемоническое имя.13 Длина цепочки записей CNAME не должна составлять больше восьми элементов. Цепочка — это когда одна запись CNAME ссылается на другую, а та — на третью и т.д. Последним, восьмым, элементом должно быть реальное имя узла. При использовании записей CNAME запись PTR должна ссылаться на реальное имя, а не псевдоним. Для того чтобы избежать использования записей CNAME, можно опубликовать за- писи А как для реальных имен, так и для псевдонимов. Эта конфигурация работает немного быстрее, поскольку в ней отсутствует дополнительный уровень косвенной адресации. Специальное применение записей CNAME С помощью записей CNAME можно организовать поддержку зон обратного преоб- разования для сетей, где маски подсетей не проходят по границе байтов. До того как протокол CIDR получил широкое распространение, такая организация подсетей не применялась или по крайней мере “неправильные” подсети существовали в рамках одной организации, поэтому управлять зонами обратного преобразования было неслож- но. Например, если сеть 128.138 класса В разделить на группу подсетей класса С, то каждая подсеть займет строго оговоренное место в домене in-addr. arpa. В частности, зоной обратного преобразования для подсети 243 будет 243.138.128. in-addr. arpa. CQ Протокол CIDR описан в разделе 14.4. Но что произойдет, если подсеть 243 разделить еще, допустим, на четыре подсе^/^26? Если все они находятся в пределах одной организации, то это — не проблема? йни по- прежнему описываются в одном файле, содержащем все их записи PTR. Однако может случиться так, что подсеть 243 принадлежит интернет-провайдеру, который делегирует подсети /26 разным клиентам. В этом случае требуется более сложное решение. Провай- дер должен либо управлять записями зон обратного преобразования на стороне каждого клиента, либо найти способ разделить третий байт IP-адреса (в рассматриваемом приме- ре — 243) на четыре разных элемента, каждый из которых делегируется независимо. Когда административная граница проходит не по границе байтов, приходится быть из- воротливым. Нужно также тесно взаимодействовать с администрацией домена, находяще- гося выше или ниже в иерархии. Трюк заключается в следующем: для каждого возможно- го адреса узла в зоне in-addr. arpa следует добавить запись CNAME, которая переводит операцию поиска в зону, управляемую владельцем соответствующей подсети. Подобная схема приводит к образованию громоздких зонных файлов в родительском домене, но она же позволяет передавать полномочия реальным пользователям каждой подсети. Рассмотрим описываемый процесс подробнее. Родительская организация (в нашем случае — провайдер) создает для каждого возможного IP-адреса записи CNAME со спе- циальным искусственным компонентом (отделяется точкой), представляющим подсеть. Например, для первого из четырех блоков адресов подсети /26 дополнительный компо- нент будет называться “0-63”, для второго — “64-127” и т.д. Вот как это выглядит. $ORIGIN 243.138.128.in-addr.arpa. 1 IN CNAME 1.0-63 2 IN CNAME 2.0-63 13 Это правило, касающееся записей CNAME, явным образом ослаблено в спецификациях DNSSEC, которые добавили цифровые подписи к каждому набору записей о ресурсах DNS.
630 Часть II. Работа в сети 63 64 65 IN IN IN CNAME CNAME CNAME 63.0-63 64.64-127 65.65-127 Для того чтобы передать управление адресами 0-63 зоны обратного преобразования клиенту, за которым закреплена эта подсеть, нужно добавить следующие записи NS. 0-63 IN NS nsl.customerl.com. 0-63 IN NS ns2.customerl.com. На узле customerl. com будет находиться зонный файл, содержащий привязки для зоны обратного преобразования 0-63.243.138.128. in-addr. агра. 1 IN PTR hostl.customerl.com. 2 IN PTR host2.customerl.com. Добавив дополнительный компонент, мы создали новую точку передачи полномочий. Когда, например, кто-то ищет доменное имя, соответствующее адресу 128.138.243.1, запись CNAME в точке 1.243.138.128. in-addr.агра перенаправит поиск в точку 1.0-63.243.138.128. in-addr. агра, а этим именем уже управляет реальный клиент. Клиентские зонные файлы не содержат ничего лишнего: со всеми конфигурацион- ными записями приходится иметь дело провайдеру. Ситуация усложняется, если клиент сам является провайдером и дальше делит свое адресное пространство. Клиент 1 может , сам быть интернет-провайдером, желающим разделить свои адреса. Однако непреодо- лимых препятствий не существует: в BIND поддерживаются цепочки записей CNAME длиной до восьми элементов, а поскольку в байте, как известно, восемь битов, превы- шения допустимого предела не произойдет. Различные документы RFC не одобряют, но и не запрещают применять такие цепочки. К негативным последствиям можно отнести то, что скорость распознавания имен замедляется, так как распознаватель должен прой- ти по каждому звену цепочки, послав соответствующее число запросов серверу. Когда схема стала получать распространение, набор команд сервера BIND попол- нился директивой $ GENERATE, которая упрощает создание записей о ресурсах в роди- тельской зоне. Например, чтобы сгенерировать все необходимые записи для первой подсети, доста- точно следующих строк. $ORIGIN 243.138.128.in-addr.агра. $GENERATE 0-63 $ CNAME $.0-63 0-63 in NS nsl.customerl.com. 0-63 in NS ns2.customerl.com. Метасимвол $ в директиве $ GENERATE является счетчиком цикла и приводит к соз- данию 64 различных записей CNAME. Остальные три подсети /26 обрабатываются ана- логично. Записи SRV Эти записи определяют местонахождение служб в пределах домена. Например, бла- годаря записи SRV можно запросить удаленный домен и узнать имя его FTP-сервера. Раньше в подобной ситуации приходилось действовать наугад в надежде на то, что адми- нистратор удаленного домена, следуя традиционной практике, добавил запись CNAME для имени “ftp” в базу данных DNS. Ш Записи SRV определены в документе RFC2782 (2000).
Глава 17. Система доменных имен 631 Гораздо разумнее применять для этих целей записи SRV. С их помощью администра- торам намного удобнее менять адреса служб и контролировать их использование. Од- нако требуется, чтобы сами клиенты знали, как найти и проанализировать записи SRV, поэтому эффект от их применения пока не столь ощутим. Записи SRV напоминают обобщенные записи MX с дополнительными полями, ко- торые позволяют администратору DNS управлять внешними соединениями и распреде- лять нагрузку на сервер. Формат записей выглядит следующим образом. служба. протокол. имя [ttl] [IN] SRV приоритет вес порт сервер Аргумент служба представляет собой имя службы, определенное в базе данных IANA (Internet Assigned Numbers Authority — Агентство по выделению имен и уникальных па- раметров протоколов Интернета). Получить доступ к этой базе данных можно по адресу iana. org/numbers. htm. Аргумент протокол должен быть равен tcp либо udp. Аргумент имя — это домен, на который ссылается запись SRV. Аргумент приоритет имеет тот же смысл, что и в записи MX. Аргумент вес используется для распределения нагрузки меж- ду несколькими серверами, порт — это номер порта, на котором выполняется служба, а сервер — имя сервера, предоставляющего данную услугу. Для того чтобы избежать повтор- ного обращения, в ответ на запрос к записи SRV обычно возвращается запись А сервера. Если вес равен 0, то специального распределения нагрузки не требуется. Имя серве- ра, равное ‘означает, что служба на данном узле недоступна. Ниже показан пример из документа RFC2052, адаптированный для домена atrust. com. -ftp.tcp SRV 0 0 21 ftp-server.atrust.com. ; одна четверть соединений обслуживается старым компьютером, ; а три четверти - новым _ssh.tcp SRV О 1 22 old-slow-box.atrust.com. SRV О 3 22 new-fast-box.atrust.com. ; основной сервер доступен через порт 80, ; а резервный — через порт 8000 на новом компьютере _http.tcp SRV 0 0 80 www-server.atrust.com. SRV 10 0 8000 new-fast-box.atrust.com. ; в адресной строке можно указывать как http://www.atrust.com, ; так и http://atrust.com _http.tcp.www SRV 0 0 80 www-server.atrust.com. SRV 10 0 8000 new-fast-box.atrust.com. ; все остальные службы блокированы *•_tcp SRV ООО udp SRV ООО В этом примере демонстрируется использование аргументов вес (служба SSH) и приоритет (служба HTTP). Задействованы оба сервера SSH, причем нагрузка между ними распределяется в соответствии с производительностью серверов. Все остальные службы заблокированы, включая службы для протоколов TCP и UDP. Однако тот факт, что эти службы не доступны в системе DNS, не означает, что они на самом деле не вы- полняются, просто вы не можете найти их с помощью системы DNS. Серверы MS Exchanges используют записи SRV для того, чтобы помочь клиентам приложения Outlook найти их и автоматически задать конфигурацию функции Outlook Anywhere.
632 Часть II. Работа в сети Записи TXT Эти записи добавляют в базу данных DNS произвольный текст. Например, в нашей базе данных имеется следующая запись, идентифицирующая организацию. IN TXT "Applied Trust Engineering, Boulder, CO, USA" Эта запись стоит непосредственно после записей SOA и NS зоны atrust. com, на- следуя от них поле имя, Ш Записи TXT определены в документе RFC1035 (1987). Запись TXT имеет такой формат. имя [ttl] [IN] TXT информация ... Все информационные элементы должны быть заключены в кавычки. Это может быть как одна, так и несколько строк, каждая из которых взята в кавычки. Будьте вниматель- ны: одна пропущенная закрывающая кавычка может привести к разрушению базы дан- ных DNS, поскольку все последующие записи, вплоть до очередной кавычки, загадоч- ным образом исчезнут. Как и у других записей о ресурсах, у записей TXT нет внутреннего порядка, поэтому серверы возвращают их в произвольном порядке. Для того чтобы закодировать длинные элементы, такие как адреса, следует использовать длинные строки, а не набор несколь- ких записей ТХТ. Поскольку записи ТХТ не имеют конкретного формата, их иногда используют для те- стирования новых типов записей в системе DNS без изменения самой системы DNS. На- пример, записи SPF (см. далее) сначала были реализованы как записи ТХТ. В настоящее время уже созданы специальные типы записей, поэтому использование их вариантов в виде записей ТХТ не рекомендуется, но многие организации по-прежнему делают это. Записи ресурсов IPv6 IPv6 — новая версия протокола IP. Процесс принятия спецификации длится уже бо- лее 15 лет, он описан в более чем 250 документах RFC, но до сих пор не завершен.14 Сво- им появлением протокол IPv6 обязан острой потребности в дополнительных IP-адресах. Ш Записи IPv6 описаны в документе RFC1886 (1995). Однако решения этой проблемы, считавшиеся временными (протокол CIDR, си- стема NAT и строгий административный контроль над адресным пространством), ока- зались столь успешными, что массовый переход к стандарту IPv6 вряд ли произойдет в скором будущем. Принятие протокола IPv6 в настоящее время стимулируется Азией, где адреса протокола IPv4 распределены более экономно. Ш Стандарт IPv6 подробно описан в главе 14. Записи IPv6 в системе DNS полностью отделены от протокола транспорта, исполь- зуемого для их доставки. Публикация записей IPv6 в ваших зонах DNS не означает, что вы должны отвечать на запросы к ним по протоколу IPv6. Около половины запросов к корневому серверу имен К (k. root-servers .net) — запросы к записям А протокола IPv4, а одна четверть — это запросы к записям АААА по протоколу IPv6. Однако 99% всех фактических запросов используют транспорт по протоколу IPv4. 14 Тони Ли (Toni Li), активный член сообщества IETF, описал протокол IPv6 так: “слишком мало, слишком рано”.
Глава 17. Система доменных имен 633 Прямые записи IPv6 — АААА Формат записи АААА имеет следующий вид. имя_узла [ttl] [IN] АААА IP-адрес Рассмотрим пример. f.roo-servers.net. IN АААА 2001:500:2f::f Каждый фрагмент адреса, отделенный двоеточием, состоит из четырех шестнадцате- ричных цифр (ведущие нули обычно опускают). Если несколько фрагментов включают в себя одни нули, они заменяются двумя двоеточиями. В адресе может быть не более одного такого сокращения. Обратные записи IPv6 — PTR В протоколе IPv6 информация обратного преобразования, соответствующая адресу АААА, представляет собой запись PTR в домене верхнего уровня in-addr. агра, а зоны прямого преобразования — в других ветвях дерева доменов (например, в доменах “сот” или “edu”). В “полубайтовом” формате адрес, указанный в записи АААА, инвертируется путем разложения каждого адресного фрагмента на четыре шестнадцатеричные цифры и за- писи их в обратном порядке с добавлением суффикса ip6. агра. Например, следующая запись PTR соответствует показанной выше записи АААА для узла anchor. f.0.0.0.0.0.0.0.0.0.0.0.0.0.0.0.0.0.0.0.f.2.0.0.0.0.5.0.1.0.0.2.ip6.агра PTR f.roo-servers.net (Для того чтобы эта строка поместилась на странице, она была сокращена.) К сожй.* лению, они не очень удобны для работы системных администраторов, которые долж^ их писать и читать. Разумеется, в ваших реальных зонных файлах DNS задачу можЙЬ существенно упростить, воспользовавшись директивой $ORIGIN. Записи SPF Записи SPF предназначены для идентификации сообщений электронной почты с под- деланными заголовками From, которые часто используются для рассылки спама или фи- шинга. Если сайт, получивший сообщение, определяет, что его заголовки подделаны, он может удалить его, профильтровать или пометить, перед тем как передать получателю. Эта функциональная возможность впервые была реализована с помощью записей TXT, но в настоящее время уже существует специальный тип записей SPF, использующий тот же самый синтаксис, что и записи ТХТ. Сайты могут использовать записи SPF, TXT, обе версии или ни одну из них. Ш Записи SPF определены в документах RFC4406 и RFC4408 (2006). К сожалению, существует два конкурирующих способа использования записей SPF: система Sender ID компании Microsoft и альтернативная. Рабочая группа консорциума IETF не достигла консенсуса относительно наилучшего использования записей SPF, поэтому оба подхода были опубликованы в документах RFC в качестве эксперимен- тальных. Основное различие между ними заключается в том, где выполняются проверки адреса отправителя: на конверте или в заголовке. Обе спецификации записей SPF имеют существенный недостаток: пересылаемые со- общения электронной почты не проходят проверку, потому что получатель сравнивает за-
634 Часть II. Работа в сети пись SPF отправителя с IP-адресом пользователя, осуществляющего пересылку. По этой причине следует быть осторожным при удалении сообщений, не прошедших проверку. Здесь мы описываем часть синтаксиса и семантики записей SPF в соответствии в до- кументом RFC4408. Полная спецификация является чрезмерно гибкой и содержит ма- кросы, а также директивы переадресации и включения, предоставляя пользователям десятки возможностей для формирования собственных правил. Мы сосредоточим вни- мание на простом и эффективном подмножестве этих возможностей.' Запись SPF содержит IP-адреса серверов, создавших легитимное в пределах зоны со- общение электронной почты. Например, команда dig gmail. com spf15 возвращает следующую запись. gmail.com 300 IN SPF "v=spfl redirect=_spf.google.com” Эта запись SPF перенаправляет клиентов на поддомен spf домена google. com. Запрос dig_spf. google. com spf возвращает следующий ответ. _spf.google.com 300 IN SPF "v=spfl ip4:216.239.32.0/19 ip4:64.233.260.0/19 ip4:66.249.80.0/20 ip4:72.14.192.0/18 ip4:209.85.128.0/17 ip4:66.102.0.0/20 ip4:74.125.0.0/16 ip4:64.18.0.0/20 ip4:207.126.144.0/20 ?all" Вместо перечисления конкретных узлов, эта запись SPF содержит IP-номера сетей почтовых серверов компании Google. Эти строки представляют собой одну длинную за- пись SPF, которая разделена на строки для того, чтобы она поместилась на странице. Длина строки записи SPF не должна превышать 255 байт, поэтому если в нее не- обходимо ввести больше 255 символов, то следует использовать несколько пар кавычек. Такие строки конкатенируются без дополнительных пробелов. Желательно, чтобы об- щая длина строки не превышала 450 байт, чтобы ответы на запросы могли поместиться в отдельном UDP-пакете, размер которого составляет 512 байт. Рассмотрим нашу запись SPF более подробно. • Выражение v=spf 1 означает, что запись соответствует версии 1 протокола SPF, опи- санной в документе RFC4408. Выражение v=spf 2.0 означало бы, что запись соот- ветствует системе Sender ID компании Microsoft, описанной в документе RFC4406. • Дескрипторы ip 4 означают, что за ним следует обычный IP-номер сети или адрес узла. Запись может содержать несколько фраз с дескрипторами ip 4, как в данной примере. • Выражение ?а11 означает “сделано” по отношению к функции проверки, интер- претирующей запись. Сложность языка SPF обескураживает. Остальные дескрипторы позволяют перечне^ лять имена узлов, записи MX, записи PTR, адреса IPv6 и многое другое. Некоторые из них требуют, чтобы сервер DNS выполнил повторный просмотр, поэтому, несмотря на дополнительное удобство и гибкость, они менее эффективны, чем дескриптор ip4. Если вы хотите пофантазировать о своих записях SPF, посмотрите на примеры, приведенные в конце документа RFC4408. Рассмотрим еще один пример записи SPF, полученной при выполнении команды dig sendmail.com txt. 15 Компания Google и другие организации реализуют свои собственные записи SPF на основе записей ТХТ, потому что тип записей SF является новым и лишь недавно стал поддерживаться программным обеспечением популярных серверов имен. Однако заглядывая в будущее, мы полу- чили образовательную лицензию на программное обеспечение и демонстрируем записи SPF, а не ТХТ. На самом деле команда dig работает с записями ТХТ, а не SPF.
Глава 17. Система доменных имен 635 sendmail.com IN TXT "v=spfl ip4:209.246.26.40 ip4:209.246.26.41 ip4:63.211.143.38 ip4:209.246.26.36 ip4:209.246.26.39 ip4:209.246.26.24 ip4:209.246.26.25 ip4:209.246.26.10 ip4:209.246.26.53 ip4:72.32.154.224/27 ptr:constantcontact.com ~all" Эта запись содержит полные IP-адреса серверов, а не сетей. В конце списка 1Р-ад- ресов приведена фраза ptr:, позволяющая серверу constantcontact. com послать по- чтовое сообщение, отправителем которого подразумевался сервер sendmail. com. Эта фраза может вступить в силу, только если сервер const ant contact. com имеет соответ- ствующую запись PTR. В настоящее время это условие не выполняется. Во время на- писания книги запись PTR отправляла нас обратно на сервер www. constantcontact. com, а не на сервер constantcontact. com. Следовательно, либо получатель сообщений электронной почты не проверял запись PTR достаточно строго, либо запись SPF имеет небольшую ошибку. Согласно результатам обзорного исследования (sendmail.org/dkim/survey), око- ло тысячи банков США и тысяча компаний, входящих в список журнала Fortune, со- общили, что записи SPF поддерживались более чем 90% сайтов, а формат Sender ID — 1-2%. Некоторые почтовые серверы (например, Gmail) выводят на экран ярко-красную полосу поперек сообщения, которое не прошло проверку SPF и может быть элементом фишинга. Почтовые агенты sendmail, Postfix и exim поддерживают обработку записей SPF, а программа Microsoft Exchange поддерживает систему Sender ID. Более подробная ин- формация о записях SPF приведена в разделе 20.5. Записи DKIM и ADSP Аббревиатура DKIM (DomainKeys Identified Mail) представляет собой систему, ре- зультатом которой является слияние двух систем: DomainKeys от компании Yahoo! и Identified Internet Mail от компании Cisco, обеспечивающих подпись сообщений элек- тронной почты. Получатель сообщения может аутентифицировать его отправителя (под- линность) и гарантировать его целостность (отсутствие постороннего вмешательства). Ш Записи DKIM определены в документах RFC487 (2007) и RFC5617 (2009). Спецификации DKIM являются результатом большой работы, поэтому, например, списки рассылки и внешние сообщения электронной почты реализуются правильно. Еще одной целью проекта была легкость реализации этой спецификации. Она не требует ни- каких изменений со стороны пользователей или узлов. Здесь мы рассмотрим лишь те аспекты спецификации DKIM, которые связаны с системой DNS. Особенности специ- фикации DKIM, связанные с электронной почтой, будут рассмотрены в разделе 20.15. Записи о ресурсах DKIM пока не стандартизованы так, как это сделано для записей типа DNS. Вместо этого используется особый формат записей TXT. Этот формат состоит из имени записи DNS, сформированной путем конкатенирования “селектора” и строки „domainkey. В записи хранится открытый ключ DKIM для организации. Может суще- ствовать несколько селекторов, поэтому эти ключи легко продлить и отменить. Сайт, использующий подписи DKIM, вычисляет их с помощью специальных полей заголовка и тела сообщения, содержащего закрытый ключ DKIM. Он помещает подпись в отправляемое сообщение в виде поля заголовка, называемого DKIM-Signature. Соответствующий открытый ключ доступен в зоне DNS сайта-отправителя в виде записи TXT, связанной с именем селектор._domainkey.домен. Сайт-получатель по- ручает системе DNS найти ключ и использует его для проверки корректности подписи
636 Часть II. Работа в сети в сообщении. Успешная верификация подписи удостоверяет подлинность сообщения и гарантирует, что оно поступило из предусмотренного домена отправления и по пути не было изменено. Рассмотрим пример строки заголовка подписи DKIM-Signature из подписанного со- общения. DKIM-Signature: v=l; a=rsa-sha256; c=relaxed/relaxed; d=gmail.com; s=gamma; h=domainkey-s ignature:mime-version;received:reply-to:date:message-id: subject:from:to:content-type; bh=2 4HfUvt1A04 JxRNBmg94pN6ZJUPdqSbkOdZppou4 sl=; b=UtYWupx/Udqi7Sdln0h5zIDKq7R/Gg+HwYBxM0LcshlwhqrHhyHylea3So8 EnMXJEYI3jyzj3VNGGemOAOSUqHlMmdlSLdp7AvxptYOVfLgYGM9ID4uw B014a7ZJuoiVHJmsEA/ExK48rvql0ZJY+AgRdDpbx6/56phSfVJt+a+A= Разные дескрипторы, используемые в этой подписи, обясняются в табл. 17.7 Таблица 17.7. Дескрипторы в заголовке подписи сообщений электронной почты DKIM-Signature Раздел RFC '- ’ V 1 Номер версии; должен быть равным 1 а rsa-sha256 Алгоритм шифрования: rsa-shal или rsa-sha256 с relaxed/relaxed Алгоритм каноникализации:а simple или relaxed d gmail.com Домен отправителя S gamma Селектор или имя ключа h domain Поля заголовка для включения в подпись заголовка bh 24HfUvtl... Криптографический хеш тела сообщения b UtYWupx... Криптографическая подпись всего сообщения а Этот алгоритм определяет, как изменяются заголовок и тело перед шифрованием. Дескриптор селектора s=gamma сообщает имя открытого ключа, а дескриптор d= за- дает родительский домен. Для того чтобы получить открытый ключ, следует применить команду dig к записи TXT для псевдо-узла gamma ._domainkey. gmail. com. gamma._domainkey.gmail.com. 300 IN TXT "k=rsa\; t=y\; p=MIGfMAOGCSqGSIb3DQEBAQUAA4GNADCBiQKBgQDIhyR3oItOy22ZOaBrI Ve9m/iME3RqOJeasANSpg2YTHTYV+Xtp4xwf5gTjCmHQEMOsOqYuOFYiNQP QogJ2t0Mfx9zNu06rfRBDjiIU9tpx2T+NGlWZ8qhbiLo5By8apJavLyqTLavyPSrv sxOB3YzC63T4Age2CDqZYA+OwSMWQIDAQAB" Это слишком запутанная запись, чтобы самостоятельно записывать ее в свои зонные файлы. К счастью, в нашем распоряжении есть возможность копирования и вставки. Дескриптор к= идентифицирует тип ключа; единственное значение этого дескриптора равно rsa. Флаг t=y означает, что вы уже выполнили проверку по спецификации DKIM и сайты-получатели должны быть снисходительны, если ваша подпись не будет верифи- цирована. Дескриптор р= представляет собой сам открытый ключ. Перед точкой с за- пятой должна стоять обратная косая черта, поскольку в файлах данных DNA с точки с запятой начинаются комментарии. Запись ТХТ в системе DKIM часто содержит дескриптор версии v=DKlMl. Как и все записи ТХТ, она должна быть заключена в двойные кавычки.
Глава 17. Система доменных имен 637 Для того чтобы сгенерировать пару ключей RSA в соответствующем формате для ва- ших зонных файлов, следует использовать следующие команды openssl, генерирующие закрытый ключ и извлекающие из него соответствующий открытый ключ. $ openssl genrsa -out rsa.private 1024 $ openssl rsa -in rsa.private -out rsa.public -pubout -outform PEM Затем необходимо вырезать открытый ключ из файла rsa.public и вставить его в дескриптор р= вашей текстовой записи. Он не должен содержать ни пробелов, ни сим- волов перехода на новую строку, поэтому при копировании и вставке следует быть осто- рожным и не добавлять дополнительных символов. В качестве селектора можно выбрать любое имя. В приведенном выше примере сегмент _domainkey.gmail.com имени gamma_ domainkey. gmail. com на самом деле не является именем подзоны домена gmail. com с точки зрения системы DNS. Это можно подтвердить путем поиска зонных серверов имен (dig_domainkey.gmail.com ns), которые должны существовать, если имеется собственная делегированная подзона. Приведенный ниже пример, касающийся сайта yahoo. com, реализует _domainkey как собственный поддомен. Документ RFC5617 определяет запись ТХТ, которую можно спрятать в специаль- ном поддомене, чтобы задать свои собственные правила, касающиеся подписания со- общений. Эта запись недавно была стандартизована (2009) и называется ADSP (Author Domain Signing Policy). Специальным поддоменом является домен adsp . domainkey. домен. Внутри записи ТХТ содержится выражение dkim=, которое объявляет правила под- писания сообщений на сайте. Оно может принимать следующие возможные значения. • all — для доменов, подписывающих все исходящие сообщения электронной почты; • unknown — для доменов, которые могут подписывать некоторые сообщения элек- тронной почты; • discardable — для доменов, подписывающих все сообщения электронной по- чты и рекомендующих получателям игнорировать сообщения, подписи которых не прошли верификацию. Например, дескриптор discardable может использоваться банком, который посы- лает клиенту конфиденциальную информацию о его счете из поддомена, созданного для этой цели. Если бы пользователь выполнил инструкции, содержащиеся в сообщении с поддельной подписью, это имело бы катастрофические последствия, поэтому лучше всего не принимать такие сообщения и не доставлять их адресату. Текстовая запись ADSP также может содержать выражение t=y, если вы желаете про- сто протестировать спецификацию DKIM и на самом деле не хотите, чтобы получатели слишком серьезно относились к вашей подписи. В ходе разработки системы ADSP, до появления документа RFC5617, доменная тек- стовая запись ADSP хранилась в другом поддомене (_domainkey. domain^ без префикса _adsp) и имела немного другой синтаксис. Выражение о=~ означает, что домен под- писывает некоторые сообщения электронной почты, а о=--что он подписывает все сообщения. Поскольку в этих двух соглашениях используются разные поддомены, они могут со- существовать. На момент написания книги доминировала исходная форма. Если вы серьезно относитесь к тому, чтобы получатели тщательно рассматривали вашу подпись, то, вероятно, лучше всего использовать оба соглашения на протяжении следующих не- скольких лет, пока один из них не будет приведен в соответствие документу RFC5617.
638 Часть II. Работа в сети Рассмотрим еще один пример. Сайт Gmail не имеет записи ADSP, а сайт Yahoo! имеет. domainkey.yahoo.com. 7200 IN TXT "t=y\; о=~\; n=http://antispam.yahoo.com/domainkeys Выражение n= представляет собой комментарий, который предоставляет пользова- телю дополнительную информацию о том, как сайт Yahoo! использует записи DKIM.16 Некоторые сайты вместо этого включают адрес сообщения электронной почты (без сим- вола @). Рассмотрим текстовую запись DKIM для ключа (селектора) S1024. sl024._domainkey.yahoo.com. 86400 IN TXT "k=rsa\; t=y\; p=MIGfMA0GCSqGSIb3DQEBAQUAA4GNADCBiQKBgQDrEee0Ri4Juz+QfiWYui /E9UGSXau/2P8LjnTD8V4Unn+2FAZVGE3kL23bzeoULYv4PeleB3gfm” ”JiDJOKU3Ns5L4KJAUUHjFwDebtONP+sBKOVKeTATL2Yr/S3bT/xhy+lxtj4Rkd V7fVxTn56Lb4udUnwuxK4V5b5PdOKj/+XcwIDAQAB\; n=A 1024 bit key\;" Здесь, как и раньше, выражение п= является комментарием, но на этот раз о самом ключе. Все записи DKIM, представленные в этом разделе, были записями TXT, но в конце концов они обязательно превратятся в записи специального типа DKIM, хотя и будут иметь тот же самый формат. Тем временем сайты могут использовать оба типа записей, чтобы решить проблемы перехода. Реализация спецификации DKIM в вашей почтовой системе рассматривается в гла- ве 20. Записи о ресурсах SSHFP Оболочка безопасности SSH позволяет обеспечить безопасность дистанционного входа в систему в незащищенной сети. Эта программа использует две схемы аутенти- фикации: для самого узла и для пользователя, осуществляющего дистанционный вход. К сожалению, пользователи обычно слепо доверяют ключам узла, полученным от про- граммы ssh. Запись DNS типа SSHFP позволяет программе ssh автоматически прове- рить ключ узла, гарантируя, что пользователь будет соединен с требуемой машиной, а не с посторонним компьютером. СЗ Записи SSHFP определены в документе RFC4255 (2006). Для того чтобы уменьшить размер пакета, записи SSHFP не хранят полные копии от- крытых ключей узла. Вместо этого они содержат дайджест (т.е. криптографический хеш) этих ключей. Их синтаксис выглядит следующим образом. пате [ttl][IN] SSHFP algorithm# fingerprint_algorithm# fingerprint Параметр algorithm# идентифицирует криптосистему открытого ключа, используе- мую для генерирования ключа данного узла. На самом деле этот алгоритм не принимает участия в процессе верификации; он просто сравнивается с ключом, предоставленным удаленным узлом, чтобы убедиться в том, что обе стороны имеют в виду один и тот же вид ключа. Система RSA — это алгоритм 1, a DSA — алгоритм 2. Параметр fingerprint — это хеш, подлежащий сравнению, а параметр fingerprint_algorithm# задает способ, которым обрабатывается ключ, предостав- ленный удаленным узлом для создания хеша, подлежащего сравнению. В настоящее 16 Правда, данный URL в настоящее время переадресовывает пользователей на страницу sourceforge.net, посвященную системе DomainKeys, которая представляет собой практически устаревший стандарт.
Глава 17. Система доменных имен 639 время определен только один алгоритм (SHA-1), поэтому содержание этого поля всегда равно 1. Рассмотрим пример, приведенный в документе RFC4255. host.example SSHFP 2 1 1235456789abcdef67890123456789abcdef67890 Программа SSH обычно создает пары ключей узла RSA и DSS; как правило, они хра- нятся в каталоге /etc/ssh с именами вроде ssh_host_rsa_key .pub и ssh_hostjdsfc key .pub. На стороне пользователя программа SSH хранит принятые открытые ключи узла в файле . ssh/known_hosts в домашнем каталоге пользователя. Вы можете извлечь ключи узла из этого каталога, чтобы создать свои собственные записи о ресурсах типа SSHFP. Последние версии программы ssh-keygen могут гене- рировать записи DNS SSHFP с флагами -г и -д. Кроме того, в системах Linux и UNIX (freshports. org/dns/sshfp) существует команда sshfp, которая конвертирует ключи в отпечатки и создает необходимые записи DNS. Ш Более подробная информация о записях SSHFP приведена в разделе 22.10. Вы можете попросить программу OpenSSH использовать записи SSHFP для установ- ки опции VerifyHostKeyDNA, равной “yes”. Программа SSH поддерживает несколько методов аутентификации и верификации. Поскольку записи SSHFP пока используются не очень широко, их не стоит делать единственно возможным вариантом. Сначала по- пробуйте использовать запись SSHFP, и если это не получится, позвольте пользователю подтвердить ключ узла вручную, как это делалось до появления записей SSHFP. Более подробно конфигурация программы SSH описывается в разделе 22.10. Подобно записям SPF и DKIM, система SSHFP в той или иной степени подразуме- вает, что вы используете спецификации DNSSEC и поэтому записи DNS заслуживают доверия. Возможно, в данный момент это и не соответствует действительности, но спец- ификации DNSSEC постепенно получают признание и в конце концов будут реализова- ны. Их описание можно найти в разделе 17.13. Записи о ресурсах DNSSEC В настоящее время со спецификациями DNSSEC ассоциируются шесть типов запи- сей. Записи типов DS, DVL и DNSKEY предназначены для хранения разнообразных ключей и их отпечатков. Записи RRSIG содержат подписи других записей в зоне (по су- ществу, наборов записей). И наконец, записи типов NSEC и NSEC3 позволяют серверам DNS подписывать несуществующие записи, обеспечивая криптографическую безопас- ность при отрицательных ответах на запросы. Эти шесть записей отличаются от большин- ства других записей тем, что они генерируются программами, а не набираются вручную. Спецификации DNSSEC представляют собой большую тему, заслуживающую отдель- ного изучения, поэтому мы обсудим записи DNSSEC и их использование в разделе 17.13. Связующие записи: связи между зонами Каждая зона имеет свой набор файлов, серверов имен и клиентов. Но зоны должны быть связаны друг с другом, чтобы образовывать иерархии: зона booklab. atrust. com — это часть зоны atrust. com, и мы должны иметь определенную связь между ними, обе- спечиваемую средствами системы DNS. Поскольку ссылки DNS направлены только от родительских доменов к дочерним, серверу имен не обязательно знать все о доменах (точнее, о зонах), расположенных выше в иерархии. Однако серверы дочернего домена должны знать IP-адреса серверов
640 Часть II. Работа в сети имен для всех своих поддоменов. Фактически родительской зоне известны только сер- веры имен, на которые можно сослаться в ответ на внешние запросы. В терминах системы DNS это значит, что родительская зона должна содержать запи- си NS для каждой делегированной зоны. Поскольку записи NS содержат имена узлов, а не их IP-адреса, родительский сервер также должен иметь способ преобразования имен узлов либо с помощью обычных запросов DNS (если при этом не возникает замкнутый круг), либо сохраняя копии соответствующих записей А. Существует два способа, с помощью которых можно удовлетворить эти требования: непосредственно включить нужные записи или использовать зоны-заглушки. В первом методе вы просто включаете требуемые записи NS и А в родительскую зону. Например, файл зоны atrust. com может содержать следующие записи. ; информация о поддомене booklab IN NS nsl.atrust.com. IN NS ubuntu.booklab.atrust.com. IN NS ns.cs.Colorado.edu. testlab IN NS nsl.atrust.com. IN NS ns.testlab.atrust.com. ; связующие записи ubuntu.booklab IN А 63.173.189.194 ns.testlab IN A 63.173.189.17 “Внешние” записи А называются связующими (glue records), поскольку на самом де- ле они не принадлежат этой зоне. Они только воспроизводятся здесь, чтобы обеспечить связь с новым доменом в дереве имен. Пропуск или неправильное воспроизведение свя- зующей записи делает ваше пространство имен недоступным, и пользователи, пытаю- щиеся обратиться к ней, получат сообщение об ошибке “host unknown”. Довольно часто пользователи ошибочно включают связующие записи для имен уз- лов, которые этого не требуют. В приведенном выше примере зона nsl. atrust. com яв- ляется частью зоны atrust. com, и ее записи А хранятся где-то в файле. Адрес ns. cs. Colorado. edu в этом связующем разделе не требуется, поскольку его можно определить с помощью обычного запроса DNS. Запись А в этой зоне, на первый взгляд, не нужна, но позднее она может устареть и стать неправильной, если адрес ns. cs. Colorado. edu изменится. Рекомендуется включать записи А только для узлов, которые находятся в те* кущем домене или в любом из его поддоменов. Серверы BIND и NSD игнорируют не* нужные связующие записи, причем сервер BIND распознает их наличие как ошибку. Описанная выше схема представляет собой стандартный способ связывания зон, но он требует, чтобы дочерняя зона поддерживала контакт с родительской и сообщала ей о любых изменениях иди дополнениях, касающихся своих серверов имен. Поскольку родительские и дочерние зоны часто функционируют на разных сайтах, обновление ин- формации может превратиться в утомительное занятие, требующее координации между организациями, разделенными административными границами. Вследствие этого в ре- альном мире этот вид координации применяется редко. Второй способ поддержки связей основан на использовании тупиковых зон. Тупи- ковая зона, по существу, представляет собой подчиненную зону, но она содержит толь- ко записи NS и соответствующие записи А ее серверов имен. Аналогично подчиненной зоне тупиковая зона обновляется автоматически и таким образом исключает необхо- димость обмена информацией между администраторами родительской и дочерних зон.
Глава 17. Система доменных имен 641 Следует помнить, что тупиковые зоны должны конфигурироваться идентично глав- ному и подчиненному серверам родительской зоны. Возможно, проще всего было бы поддерживать контакт с родительской зоной и проверять ее конфигурацию несколько раз в году (особенно если она является локальной). Для того чтобы увидеть, какие серверы родительского домена в настоящее время яв- ляются доступными, можно использовать команду dig. Сначала надо выполнить команду $ dig родитель с кий-домен ns и определить серверы имен в своем родительском домене. Затем следует выбрать один из них и выполнить команду $ dig @имя_сервера .родительский_домен дочерний_домен ns для просмотра списка публичных серверов имен. Тупиковые зоны оказываются очень полезными, когда ваша внутренняя сеть использует пространство частных IP-адресов, определенных в документе RFC 1918, и вам необходимо поддерживать синхронное деле- гирование в соответствии с документом RFC1918. Мы осветили большинство вопросов, касающихся системы Domain Name System в целом и ее базы данных в частности. В следующем разделе опишем детали конфйгу- рации, характерные для реализации сервера BIND. Реализация сервера NSD/Unbound будет описана в разделе 17.11. 1 7.9. Программное обеспечение системы BIND BIND (Berkeley Internet Domain Name System) — это созданное консорциумом ISC открытое программное обеспечение, реализующее протокол DNS для операционных си- стем Linux, UNIX, Mac OS и Windows. Существует три основные версии пакета BIND: BIND 4, BIND 8 и BIND 9. Система BIND 10 в настоящее время еще разрабатывается консорциумом ISC. В этой книге мы рассмотрим только пакет BIND 9. Определение версии Довольно часто поставщикам не приходит в голову явно указать, какую версию па- кета они реализовали в своей системе, поэтому приходится изощряться, чтобы точно выяснить, с каким именно программным обеспечением мы имеем дело. Иногда номер версии можно определить с помощью хитроумного запроса на основе утилиты dig, ко- торая является частью пакета BIND. Команда $ dig @сервер version.bind txt chaos возвращает номер версии, содержащийся в конфигурационном файле пакета BIND. Сначала определим имя сервера имен для исследуемого домена $ dig домен ns и затем выполним запрос version.bind. Например, вот как эта команда работает с сайтом is с. org. $ dig @ns-ext.isc.org version.bind txtx chaos version.bind. 0 CH TXT "9.5.1" Однако она не работает с сайтом cs. Colorado. edu.
642 Часть II. Работа в сети $ dig @mroe.cs.Colorado.edu version.bind txt chaos version.bind. 0 CH TXT "wouldn't you like to know..."17 Некоторые организации так конфигурируют систему BIND, чтобы замаскировать номер версии, исходя из того, что это как бы обеспечивает определенную степень “без- опасности, обеспечиваемой неясностью”. Мы не одобряем этого, но иногда таким об- разом можно отразить атаки взломщиков-дилетантов. Более подробно этот вопрос об- суждается немного ниже. Этот запрос работает и с другим программным обеспечением DNS. Например, запрос $ dig @k.root-servers.net version.bind txt chaos version.bind. 0 CH TXT "NSD 2.3.7" показывает, что на корневом сервере имен К выполняется система NSD. Другой фрагмент информации в классе CHAOS идентифицирует имя запрашиваемо- го сервера. Однако если вы только что послали серверу запрос, значит, вы должны знать его имя, не так ли? На самом деле некоторые очень загруженные серверы (например, корневые серверы имен) представляют собой множество машин, распределенных по земному шару и объединенных одним именем сервера и IP-адресом. Эта схема репли- кации называется “альтернативной маршрутизацией” (“antcast routing”). Система марш- рутизации находит по вашему запросу “ближайший” экземпляр. Если вы — системный администратор, пытающийся решить проблему, то может оказаться важным идентифи- цировать сервер, к которому вы получили доступ. Например, можно выполнить такие команды. $ dig @k.root-servers.net hostname.bind txt chaos hostname.bind. 0 CH TXT "k2.nap.k.ripe.net" ИЛИ $ dig @k.root-servers.net id.server txt chaos id.server. 0 CH TXT "k2.nap.k.ripe.net" Сообщество IETF пытается стандартизовать эти странные имена класса CHAOS в формах, которые не зависели бы от реализации version. server или id. server, но только форма id. server прошла всю процедуру до конца. Форма version. server су- ществует в виде черновика и никогда не была описана документом RFC. Система NSD использует все четыре формы, а пакет BIND — только три одобренные. Ш Более подробная информация о стандарте syslog изложена в главе 11. В качестве системного администратора вы можете запустить сервер имен (named или nsd) с флагом -f, чтобы он напечатал номер своей версии в стандартном виде, и выйти. В системе Linux вы можете запросить у своего менеджера пакетов номер инсталлирован- ной версии. Кроме того, вы обычно можете узнать номер версии системы BIND, загля- нув в файлы регистрации в каталоге /var/log или их эквивалент. Сервер имен системы BIND регистрирует свой номер версии в системе syslog при загрузке. Команда grep в системе BIND выводит на экран примерно такие строки. Jul 13 07:19:55 nubark named[757]: starting BIND 9.5.0-P2 -u named Если эти попытки не принесли результаты, следует помнить, что номер версии ко- манды dig обычно совпадает с номером версии сервера named, причем утилита dig ча- сто устанавливается даже тогда, когда сервер named не инсталлирован. Первая строка вывода утилиты dig содержит номер версии в качестве комментария. 17 Цифра 0 в ответе представляет собой значение TTL. Один из наших рецензентов сообщил, что однажды видел такой ответ на этот запрос: “Name is Bind, James Bind!”
Глава 17. Система доменных имен 643 Версии системы BIND, содержащейся в наших эталонных операционных системах, перечислены в табл. 17.8. Безопаснее всего использовать текущую версию. Таблица 17.8. Версии системы BIND, поставляемой с нашими эталонными операционными системами -г.Датавылуск^р^^^ ~isc - 9.6.1-P3 Январь 2010 Ubuntu 9.04 9.6.1-P2 Март 2009 SUSE 10.2 9.4.2 Ноябрь 2007 RHEL 5.3 9.3.4-P1 Июль 2007 Solaris 5.10 9.3.4-P1 Июль 2007 OpenSolaris 2009.06 9.6.1-P1 Июль 2009 HP-UX 11 9.3.2 Декабрь 2005 AIX 6.1 8.3.3+ или 9.2.1 Январь 2004 • Операционная система AIX поставляется с исполняемыми файлами пакетов BIND 8 и BIND 9, которые называются named8 и named9 соответственно. При поставке обобщенная форма named связывается с файлом oamed8. Символ + в номере версии обозначает сокращение “+Fox_fo_CERT_till_07_15_04”. Большинство поставщиков вносят исправления, касающиеся безопасности, в старые версии вместо обновления последней версии, поступившей от консорциума ISC, поэ- тому номера версий могут вводить в заблуждение. Легко убедиться, что многие версии являются довольно старыми, поэтому первейшей задачей системного администратора DNS является обновление программного обеспечения. Компоненты системы BIND В пакет BIND входит четыре основных компонента: • демон сервера имен named, отвечающий на запросы; • библиотечные функции, контактирующие с серверами распределенной базы дан- ных DNS от имени пользователей; • утилиты nslookup, dig и host, позволяющие выполнять DNS-запросы из ко- мандной строки; • программа rndc для дистанционного управления демоном named. Главнейшей задачей системного администратора, работающего с пакетом BIND, яв- ляется упорядочение многочисленных опций и функциональных возможностей, предо- ставляемых пакетом BIND, а также выбор наиболее подходящих для текущей ситуации. Файлы конфигурации Полная конфигурация демона named включает его конфигурационный файл, фай- лы данных зоны, содержащие адресные привязки для каждого узла, и файл подсказок Для корневого сервера имен. Авторитетные серверы должны иметь файл конфигурации и файлы данных зоны для каждой зоны, относительно которых они являются главными серверами. Кеширующие серверы должны иметь файл конфигурации и файл подсказок Для корневого сервера имен. Файл конфигурации демона named имеет специфический
644 Часть II. Работа в сети формат; все остальные файлы представляют собой коллекции отдельных записей дан- ных DNS, рассмотренных в разделе 17.8. В конфигурационном файле named, conf демона named задается роль узла (главный, подчиненный, тупиковый или только кеширующий) и определяется способ, которым он должен получать копию записей о данных каждой зоны, которую он обслуживает. Здесь же приводятся всевозможные параметры — как глобальные, связанные с работой самого демона named, так и локальные, связанные с серверами и зонами и относящиеся только к части трафика DNS. Файл конфигурации состоит из набора инструкций, каждая из которых оканчивается точкой с запятой и описывается в последующих разделах книги. К сожалению, формат файла довольно “хрупкий”: достаточно одной пропущенной точки с запятой, чтобы все перестало работать. К счастью, в пакете BIND имеются удобные средства проверки синтаксиса конфи- гурационного файла (named-checkconf) и зонных файлов (named-check zone). Эти утилиты ищут не только синтаксические ошибки, но и очевидные пропуски. Например, утилита named-checkzone выдаст предупреждение, если в файл не включена директива $TTL. Но в каждой бочке меда есть ложка дегтя. Например, не выявляются пропущен- ные связующие записи (см. раздел 17.8), хотя их отсутствие приводит к повышению на- грузки на корневые серверы и серверы организационных доменов gTLD. Комментарии допускаются везде, где могут стоять пробелы. Поддерживаются ком- ментарии в стиле языков С, C++ и командного интерпретатора, но лучше выбрать один стиль и придерживаться только его. /* Это комментарий, который может занимать несколько строк. */ // Весь текст до конца строки является комментарием. # Весь текст до конца строки является комментарием. Каждая инструкция начинается с ключевого слова, определяющего ее тип. Может при- сутствовать несколько инструкций одного типа, за исключением options и logging. От- дельные инструкции, а также их части могут отсутствовать; в этом случае будут приняты установки по умолчанию. Список поддерживаемых инструкций приведен в табл. 17.9. Таблица 17.9. Инструкции, используемые в файле named.conf options acl key trusted-keys server masters logging Подключает внешний файл Задает глобальные параметры конфигурации сервера имен, а также установ- ки по умолчанию Формирует списки управления доступом Определяет параметры аутентификации Задает заранее установленные ключи шифрования Задает параметры сервера Определяет список главных серверов для тупиковых и подчиненных зон Устанавливает категории журнальных сообщений и каналы их распространения statistics-channels Выводит текущую статистику в виде XML-файла Определяет зону записей о ресурсах Определяет, как утилита ndc будет управлять сервером имен named Определяет представление данных зоны Конфигурирует сервер имен named в качестве упрощенного распознавателя controls view Iwres
Глава 17. Система доменных имен 645 Прежде чем приступать к описанию этих инструкций и их использования для кон- фигурирования демона имен named, необходимо рассказать о специальной структуре данных, используемой во многих инструкциях, — список соответствия адресов (address match list). Этот список является обобщением понятия IP-адреса и может включать: • IP-адрес, либо v4, либо v6 (например, 199.165.145.4); • адрес сети с маской CIDR18 (например, 199.165/16); • имя ранее определенного списка управления доступом (задается с помощью ин- струкции acl); • криптографический ключ аутентификации; • оператор отрицания !. Списки соответствия адресов используются в качестве аргументов инструкций и оп- ций. Приведем ряд примеров. { ! 1.2.3.13; 1.2.3/24; }; { 128.138/16; 198.11.16/24; 204.228.69/24; 127.0.0.1; }; В первом списке из числа адресов исключается узел 1.2.3.13, но разрешаются другие адреса в сети 1.2.3.0/24. Во втором списке указаны сети, закрепленные за университетом штата Колорадо. Фигурные скобки и завершающая точка с запятой не являются частью списка; они относятся к инструкции, в которой содержится список. Когда IP-адрес или адрес сети проверяется на соответствие списку, содержимое спи- ска просматривается по очереди до тех пор, пока не будет найдено совпадение. Порядок элементов списка важен, так как ищется первое совпадение. Например, если в первом из показанных выше списков поменять элементы местами, результат не будет достигнут, поскольку адрес 1.2.3.13 удовлетворит первому условию (сетевому адресу 1.2.3.0/24) и второе условие никогда не будет проверяться. Перейдем к изучению инструкций! Некоторые из них лаконичны и ясны, а для опи- сания других может потребоваться отдельная глава. Инструкция include Когда конфигурационный файл становится слишком большим, можно разбить его на части, поместив их в отдельные файлы. Дополнительные компоненты подключаются к файлу named, conf посредством инструкции include. include "путь"; Если указан относительный путь, то он добавляется к имени каталога, заданному в параметре directory. Очень часто инструкцию include применяют для подключения файлов, содержащих криптографические ключи, которые должны быть недоступными для посторонних. Для того чтобы не запрещать доступ ко всему файлу named.conf, ключи хранят в отдельных файлах, которые может читать лишь демон named. Эти фай- лы затем включаются в файл named.conf. Многие организации размещают инструкции zone в отдельных файлах, а затем с по- мощью инструкции include объединяют их. Это позволяет отделить части конфигура- ции, являющиеся относительно статичными, от частей, подвергающихся частым изме- нениям. 18 Сетевые маски CIDR описываются в разделе 14.4.
646 Часть II. Работа в сети Инструкция options Эта инструкция задает глобальные параметры конфигурации, часть из которых впо- следствии может быть переопределена для конкретных зон или серверов. Общий формат инструкции имеет следующий вид. options { параметр; параметр; }; Если в файле named.conf нет инструкции options, принимаются значения по умолчанию. В пакете BIND существует много параметров, даже слишком много. В версии 9.7 их более 150, что очень затрудняет их изучение. Полный список параметров можно найти в документации. К сожалению, ходят слухи, что разработчики пакета BIND подумывают о том, чтобы удалить часть параметров, которые оказались неудачными или больше не нужны. Это будет ударом для организаций, которые все же используют такие параметры и нуждаются в них. Ниже будут описаны лишь те параметры, которые рекомендуется за- давать. (Мы опросили разработчиков пакета BIND и учли их мнения и советы.) Для более полного изучения параметров рекомендуем обратиться к одной из посвя- щенных системе DNS и пакету BIND книг, упомянутых в конце главы. Кроме того, сове- туем обратиться к документации, сопровождающей пакет BIND. Все параметры, вклю- чая их синтаксис и значения по умолчанию, описаны в документе ARM, находящемся в каталоге doc и входящем в дистрибутивный набор пакета. Кроме того, полный список параметров содержится в файле doc/misc/options. • По мере изложения будем сопровождать описание параметров краткими коммента- риями. Значения по умолчанию указываются в квадратных скобках после самого пара- метра. В большинстве случаев значения по умолчанию вполне приемлемы. Сами пара- метры перечисляются без определенного порядка. Ш Местоположение файлов directory "путь*1; [каталог запуска сервера] key-directory "путь"; [совпадает с параметром directory] Инструкция directory задает каталог, в который должен перейти демон named. Ког- да в конфигурационном файле встречаются относительные пути к файлам, они интерпре- тируются относительно этого каталога. Параметр путь должен быть абсолютным. В этот каталог помещаются все выходные файлы (отладочные, статистические данные и т.д.). Параметр key-directory определяет место хранения криптографического ключа. Он не должен быть доступен для посторонних. Мы рекомендуем хранить все конфигурационные файлы пакета BIND (кроме named. conf и resolv. conf) в подкаталоге каталога /var (или любого другого катало- га, где содержатся конфигурационные файлы других программ). Мы предпочитаем ката- логи /var/named или /var/domain. Ш Идентификация сервера имен version "строка" [реальный номер версии сервера] hostname "строка" [реальное имя сервера] server-id "строка" [реальный номер версии сервера]
Глава 17. Система доменных имен 647 Строка version идентифицирует версию программного обеспечения сервера имен, а строка hostname — сам сервер, как и строка server-id. Эти параметры позволяют скрывать истинные значения. Каждый из них позволяет записывать данные записи ТХТ в класс CHAOS, где любопытные хакеры могут найти их с помощью команды dig. Мы не советуем скрывать эти значения. С их помощью удобно запрашивать серверы имен и выяснять номера их версий, например, если вам необходимо узнать, установил ли ваш поставщик текущую версию или не надо ли установить новейшую версию всех серверов. Если все же приходится прятать номер версии, то, по крайней мере, введите строку, которая неявно сообщала бы вашему системному администратору информацию о версии. (Именно для этого предназначена новая запись о ресурсах NSID.) Данные, хранящиеся в этой текстовой записи, представляют собой строку, смысл которой поня- тен только вашему системному администратору, но не постороннему человеку. Параметры hostname и server-id были включены относительно недавно и пред- назначены для дублирования экземпляров корневого и общих доменов верхнего уровня при альтернативной маршрутизации. CQ Синхронизация зон notify yes | master-only | explicit | no; [yes] also-notify 1д_адреса_серверов; [пусто] allow-notify список_соответствующих_адресов; [пусто] Параметры notify и also notify применяются только к главным серверам, а па- раметр allow-notify — только к подчиненным. В ранних версиях сервер BIND синхронизировал файлы зон между главным и под- чиненным серверами только по истечении тайм-аута для обновления, заданного в зон- ных записях SOA. В настоящее время главный сервер named автоматически уведомляет подчиненные серверы при перезагрузке соответствующей зонной базы данных, если па- раметр notify равен yes. В ответ на полученное уведомление подчиненные серверы связываются с главным сервером, чтобы проверить, изменились ли файлы, и обновляют свои копии данных. Параметр notify может устанавливаться как на глобальном уровне, так и на уровне отдельных зон. Это позволяет быстрее обновлять зонные файлы при внесении измене- ний. По умолчанию каждый авторитетный сервер посылает обновления всем другим ав- торитетным серверам (такой способ Роль Викси (Paul Vixie) назвал “разбрызгиванием”). Если параметр notify установлен равным master-only, то “разговорчивость” сервера ограничена и уведомления посылаются только подчиненным серверам зон, по*отноше- нию к которым данный сервер является главным. Если параметр notify установлен равным explicit, то демон named уведомляет только серверы, указанные в разделе also-notify. Ш Более подробно тупиковые зоны обсуждаются в подразделе “Инструкция zone”. Демон named выясняет, какие компьютеры являются подчиненными серверами зоны, просматривая записи NS этой зоны. При наличии параметра also-notify будут так- же уведомляться дополнительные серверы, которые не зарегистрированы посредством записей NS. Подобный прием используется, если в организации имеются внутренние серверы. В списке also-notify не нужно указывать тупиковые серверы: их интересуют только записи NS, поэтому они могут участвовать в обычном цикле обновления. В списке also-notify должны присутствовать только IP-адреса и, возможно, пор- ты. Для серверов с несколькими интерфейсами дополнительные параметры задают IP- адреса и порты, предназначенные для исходящих уведомлений. Уведомления желатель-
648 Часть II. Работа в сети но также отключать для зон обратного преобразования узла localhost, поскольку они никогда не изменяются. Раздел also-notifу следует использовать только в том случае, когда вы хотите, чтобы вторичные серверы уведомлял сервер имен, а не главный сервер. recursion yes | no; [yes] allow-recursion { список_соответствия_адресов }; [все узлы] Параметр recursion указывает на то, должен ли демон named обрабатывать запро- сы пользователей рекурсивно. Этот параметр можно задать для авторитетного сервера своей зоны, но мы не рекомендуем это делать. Лучше всего разделить авторитетные и кеширующие серверы. Если сервер имен должен быть рекурсивным, то установите параметр recursive равным yes и включите раздел allow-recursion, чтобы демон named мог отличать за- просы, исходящие из вашей организации, от удаленных запросов. Демон named будет действовать рекурсивно для пользователей вашей организации и нерекурсивно — для всех остальных. Если ваш сервер имен рекурсивно обрабатывает все запросы, то он на- зывается открытым распознавателем (open resolver) и может стать рефлектором для не- которого вида атак (см. документ RFC5358). Ш Использование кеширующей памяти Если ваш сервер имеет ограниченный объем памяти, то иногда необходимо исполь- зовать параметры recursive-clients и max-cache-size. Параметр recursive- clients управляет многочисленными рекурсивными процессами поиска, которые сервер выполняет одновременно. Каждый из них требует около 20 двоичных Кбайт па- мяти. Параметр max-cache-size ограничивает объем памяти сервера, который будет использоваться для кеширования ответов на запросы. Если объем кеша увеличивается слищком сильно, то демон named удаляет записи до истечения их периода TTL, чтобы предотвратить превышение лимита. Ш Использование 1Р-порта use-v4-udp-ports [ use-v6-udp-ports [ avoid-v4-udp-ports avoid-v6-udp-ports range начало конец] range начало конец] [ список_портов ] ; [ список_ портов ]; [range 1024 65535] [range 1024 65535] [пусто] [пусто] query-source-v4 v4-адрес [ порт ]; [любой] #ВНИМАНИЕ, не используйте port query-source-v6 ve-адрес [ порт ] ; [любой] #ВНИМАНИЕ, не используйте port Порты источника стали играть важную роль в системе DNS после обнаружения ошибки протокола DNS, выявленной Дэном Камински (Dan Kaminsky). Этот недоста- ток допускает атаку кеша DNS, когда серверы имен используют предсказуемые порты источника и идентификаторы запросов. Параметры use- и avoid- для портов UDP в сочетании с изменениями программного обеспечения демона named смягчили послед- ствия таких атак. Не используйте параметр query-address для того, чтобы задать фик- сированный порт источника для запросов DNS, иначе вы не сможете воспользоваться “защитой Каминского”, которая предусматривает использование большого количества случайных портов. Значения, задаваемые по умолчанию для параметров use-v*-udp-ports, не требуют изменений. Если ваш брандмауэр блокирует некоторые порты из заданного диапазона (например, порт 2049 для файловой системы SunPRC), то может возникнуть небольшая проблема. Когда ваш сервер имен посылает запрос, используя в качестве источника один
Глава 17. Система доменных имен 649 из заблокированных портов, брандмауэр блокирует ответ и сервер имен в конце концов прекращает ожидание и посылает запрос снова. Это не фатально, но раздражает. Во избежание этого следует использовать параметр avoid-v*-udp-ports, застав- ляющий систему BIND избегать заблокированных портов. Любые порты UDP с круп- ными номерами, заблокированные вашим брандмауэром, должны быть включены в этот список.19 Если вы обновляете свой брандмауэр в ответ на опасную атаку, то не забудьте обновить список портов тоже. Параметры query-source позволяют указывать IP-адреса, предназначенные для ис- ходящих запросов. Например, может возникнуть необходимость использовать конкрет- ный IP-адрес, чтобы пройти через брандмауэр или отличить внутреннее представление от внешнего. Запросы исходят из случайно выбранных портов с крупными номерами, а ответы возвращаются обратно через те же самые порты. Следовательно, ваш брандмауэр дол- жен быть подготовлен к приему UDP-пакетов, поступающих на порты с крупными но- мерами. Некоторые системные администраторы используют специальный номер порта источника, который можно указать брандмауэру, чтобы он распознавал его и принимал UDP-пакеты только через этот порт. Однако эта конфигурация больше не являетсй без- опасной из-за дефекта протокола DNS, обнаруженного Камински. Если вы используете параметр query-source, то укажите только IP-адрес, с которо- го хотите посылать запросы; не указывайте номер порта. CQ Использование переадресации forwarders { 1р_адрес; 2.р_адрес; ... }; [пустой список] forward only | first; [first] Вместо того чтобы каждый сервер имен выполнял собственные внешние запросы, можно сделать один или несколько серверов переадресующими. В такой конфигурации обычный сервер просматривает в своем кеше записи, для которых он авторитетен, и, если не находит ответ, посылает запрос переадресующему серверу. Последний создает кеш, ко- торым пользуются все остальные серверы. Назначение происходит неявно — в файле кон- фигурации сервера нет никакой информации о том, что он является переадресующим. В параметре forwarders приводится список IP-адресов компьютеров, являющих- ся переадресующими серверами. Они опрашиваются по очереди. При использовании переадресующего сервера традиционная процедура поиска домена, которая начинается с корневого сервера, а затем продолжается по цепочке отсылок, нарушается, поэтому нужно внимательно следить за тем, чтобы не возникало циклов переадресации. Сервер, для которого установлен атрибут forward only, опрашивает переадресующие серверы и кеширует их ответы самостоятельно. Если переадресующий сервер не ответит, запрос потерпит неудачу. Сервер с атрибутом forward first связывается с переадресу- ющими серверами, но при необходимости может обработать запрос самостоятельно. Поскольку у параметра forwarders нет значения по умолчанию, переадресация происходит только в том случае, когда она задана явно. Включать переадресацию можно либо глобально, либо в пределах отдельных зон. Ш Разрешения allow-query { список_соответствия_адресов }; [все узлы] allow-query-cache { список_соответствия_адресов }; [все узлы] 19 Некоторые брандмауэры запоминают состояние и могут распознавать ответ системы DNS на запрос, посланный секунду назад. Таким серверам не требуется помощь, обеспечиваемая параме- трами avoid-v*-udp-ports.
650 Часть IL Работа в сети allow-transfer { список_соответствия_адресов }; [все узлы] allow-update { список_соответствия_адресов }; [нет] blackhole { список_соответствия_адресов }; [нет] Эти параметры позволяют указать, какие узлы (или сети) могут обращаться к серве- ру имен и запрашивать пересылку зонных баз данных, а также динамически обновлять зоны. Списки соответствия адресов представляют собой слабый способ обеспечения безопасности и уязвимы для подделки IP-адресов, поэтому полагаться на них рискован- но. Вероятно, не составит никакого труда заставить ваш сервер ответить на DNS-запрос, но следует избегать использования параметров allow update и allow transfer; вме- сто них следует использовать криптографические ключи. В списке blackhole перечислены серверы, которые никогда не “удостоятся внима- ния” демона named: он не будет принимать от них запросы и обращаться к ним за от- ветом. 03 Размеры пакетов edns-udp-size номер; [4096] max-udp-size номер; [4096] Все компьютеры в Интернете должны иметь возможность заново собирать фрагмен- тированные UDP-пакеты, размер которых составляет 512 байт и меньше. Эти консер- вативные требования имели смысл в 1980-х годах, но в настоящее время такой размер смехотворно мал. Современные маршрутизаторы и брандмауэры могут обрабатывать на- много более крупные пакеты, но достаточно всего одного неправильного звена в цепоч- ке IP-адресов, чтобы прервать весь путь. Поскольку система DNS использует для запросов пакеты UDP, а ответы часто превы- шают 512 байт, ее администраторы иногда опасаются утери крупных UDP-пакетов. Если большой по размеру пакет был фрагментирован, а ваш брандмауэр пропускает только первый фрагмент, то получатель получит усеченный ответ и повторно пошлет запрос по протоколу TCP. Протокол TCP связан с намного более крупными затратами ресурсов, в то же время загруженные серверы в корневом узле и серверы TLD не должны увеличи- вать трафик по протоколу TCP из-за того, что у кого-то вышел из строя брандмауэр. Параметр edns-udp-size задает размер буфера для повторной сборки, который сервер имен сообщает посредством протокола EDNS0, представляющего собой расши- ренный вариант протокола DNS. Параметр max-udp-size задает максимальный раз- мер пакета, который сервер может реально посылать. Оба размера измеряются в байтах. Разумным диапазоном является 512-4096 байт. Оба значения по умолчанию равны 4096 байт. Это позволяет использовать новые функциональные возможности, предоставляемые спецификациями DNSSEC. Однако некоторые (неисправные) брандмауэры не допускают UDP-пакеты, размер которых превышает 512 байт, а другие брандмауэры настроены так, чтобы блокировать все, кро- ме первого пакета фрагментированного UDP-ответа. Единственным выходом из такой ситуации является ремонт брандмауэров. Для того чтобы понять, какой размер пакета подходит для вашей организации, по- пробуйте выполнить команду dig rs. dns-oarc. net txt и посмотрите на ответ. Более подробно эта тема освещена в разделе 17.13, где речь идет о размере ответов, которые посылает сервер DNS-OARS. Если эта утилита показывает, что размер ответа невелик, то проблема, вероятно, заключается в брандмауэрах, которые следует исправить. В качестве временного решения можно попытаться установить параметр max-udp- size равным значению, которое возвращает сервер DNS-OASR. Эта установка позволя- ет демону named внедрять свои ответы в пакеты, которые могут остаться нефрагментиро-
Глава 17. Система доменных имен 651 ванными. Параметр edns-udp-size также следует установить равным этому значению, чтобы ваши пакеты могли проходить в обоих направлениях. После исправления бранд- мауэров не забудьте восстановить прежние значения параметров — 4096 байт! Не прибегайте к этим мерам, если не уверены, что проблема с размерами пакетов действительно существует, поскольку они также ограничивают размер пакета, переда- ваемого вдоль путей, которые на самом деле могли бы пропустить 4096 байт. Ш Управление спецификациями DNSSEC dbssec-enable yes | no; [yes] dbssec-validation yes | no; [yes] dbssec-lookaside домен trust-anchor домен; [".’’, '’dlv.isc.org'’] dnssec-must-be-secure домен yes | no; [none] Эти параметры конфигурируют поддержку спецификаций DNSSEC. Обсуждение спе- цификаций DNSSEC и подробное описание их настроек приведены в разделе 17.13. Параметр dsnsec-enable на авторитетном сервере должен быть включен. Для ре- курсивных серверов должны быть включены параметры dnssec-enable и dnssec- validation, а также указана точка доверия с помощью инструкции trusted-key. Если в домене нет точки доверия, то программное обеспечение попытается найти ее с помощью параметра dnssec-lookaside, обойдя проблему, которая возникает с роди- тельским доменом, не использующим спецификаций DNSSEC. По умолчанию параметры dnssec-enable и dnssec-validation включены. Это приводит к таким последствиям. • Авторитетный сервер подписанной зоны с включенным битом DNSSEC, отвечая на запрос, возвращает ответ, содержащий требуемые записи о ресурсах и их подписи. • Авторитетный сервер подписанной зоны с выключенным битом DNSSEC, отвечая на запрос, возвращает ответ, содержащий только требуемые записи о ресурсах, как это делалось до появления спецификаций DNSSEC. • Авторитетный сервер неподписанной зоны возвращает ответ, содержащий только требуемые записи о ресурсах; подписи в него не включаются. • Рекурсивный сервер посылает запросы от имени пользователей с включенным би- том DNSSEC. • Рекурсивный сервер проверяет подписи, включенные в подписанные ответы, пре- жде чем возвращать данные пользователю. Параметрами в разделе dnssec-lookaside являются два домена. Например, значе- ния по умолчанию эквивалентны следующей строке конфигурации. dnssec-lookaside ” . ’’ trust-anchor "div.isc.org”; Эта конфигурация сообщает серверам имен, пытающимся установить цепочку дове- рия, что они должны соединиться с узлом div. isc. org , если не могут получить ин- формацию о безопасном делегировании от корневого узла дерева имен DNS. Как только корневые домены и домены верхнего уровня станут подписанными и будут обслуживать- ся с помощью протокола DNSSEC, ассоциативная проверка (lookaside validation) станет ненужна. Обсуждение преимуществ и недостатков структуры DLV (DNSSEC Lookaside Validation) и последствий ее применения можно найти в разделе 17.13. Элемент конфигурации dnssec-must-be-secure позволяет указать, что вы будете принимать только безопасные ответы от конкретных доменов или, наоборот, вам все Равно и вы согласны принимать небезопасные ответы. Например, вы можете задать зна- чения yes для домена important-stuff .mybank. com и no — для домена marketing.
652 Часть II. Работа в сети mybank.com. Домен, о котором идет речь, должен быть упомянут в разделе trusted- keys или зарегистрирован DLV-сервером. Ш Статистика zone-statistics yes | по [по] Этот элемент конфигурации заставляет демона named накапливать статистические данные как о зонах, так и в целом. Более подробно вопросы накапливания статистиче- ских данных и их отображения обсуждаются в разделе 17.15. 03 Настройка производительности clients-per-query целое_число; [10] ♦Количество клиентов, ♦ожидающих один и тот же запрос max-clients-per-query целое_число; [100] ♦Максимально допустимое количество ♦клиентов до отказа сервера datasize целое_число [не ограничено] ♦Максимальное количество памяти, ♦которое может использовать сервер files целое_число [неограничено] ♦Максимальное количество ♦одновременно открытых файлов lame-ttl целое_число; [lOmin] ♦Период времени до кеширования ♦сбойного сервера max-acashe-size целое_число [] ♦Размер кеша для дополнительных ♦данных max-cashe-size целое_число [] ♦Максимальный размер памяти ♦для кешированных ответов max-cashe-ttl целое_число [lweek] ♦Максимальный период TTL для ♦кеширования позитивных данных max-journal-size целое_число [] ♦Максимальный размер файла ♦для журнала трансакций max-ncashe-ttl целое_число [] ♦Максимальный период TTL для ♦кеширования негативных данных tcp-clients целое_число; [100] ♦Максимально допустимое количество ♦ТСР-клиентов Этот длинный список элементов конфигурации можно использовать для настрой- ки демона named, чтобы он хорошо работал на вашем аппаратном обеспечении. Мы не описываем их подробно, но если у вас возникнут проблемы с производительностью, сначала следует попробовать устранить их с помощью этих настроек. Итак, мы завершаем обзор параметров! Перейдем к остальным инструкциям. Инструкция acl Список управления доступом — это просто именованный список соответствия адресов. acl имя_списка { список_ со ответствия_адресов }; Заданное имя можно указывать везде, где требуется список соответствия адресов. Инструкция acl должна быть самой первой в файле named, conf, так что не пытай- тесь ставить ее среди других объявлений. Файл named.conf читается за один проход, поэтому списки управления доступом должны быть определены до того, как на них встретится ссылка. Существует четыре стандартных списка: • any — соответствует всем узлам; • localnets — всем узлам локальной сети;
Глава 17. Система доменных имен 653 • localhost — самому компьютеру; • попе — не соответствует ни одному узлу. Сети, входящие в группу local nets, определяются адресами интерфейсов компью- тера с учетом сетевых масок. Инструкция key (TSIG) Рассматриваемая инструкция определяет именованный ключ шифрования (т.е. па- роль), используемый для аутентификации соединения между двумя серверами, напри- мер между главным и подчиненным серверами при передаче зоны или между сервером и процессом rdns, который им управляет. Подробнее о механизмах аутентификации, используемых в пакете BIND, речь пойдет в разделе 17.13. Здесь же мы лишь вкратце опишем суть процесса. Для создания ключа нужно указать как алгоритм шифрования, так и совместный се- кретный ключ, который представлен в виде строки, закодированной в формате Base64 (см. раздел 17.13). key идентификатор— ключа { algorithm строка; secret строка; }; Как и в случае списков управления доступом, идентификатор ключа должен быть определен в файле named, conf с помощью инструкции key до того, как встретится ссылка на ключ. Для того чтобы связать ключ с конкретным сервером, включите иден- тификатор ключа в список keys соответствующей инструкции server. Ключ использу- ется как для проверки запросов, поступающих от сервера, так и для подписи ответов на эти запросы. Секретная информация, принадлежащая группе лиц, не должна храниться в файле, доступном для внешнего мира. Для включения его в файл named, conf следует исполь- зовать инструкцию include. Инструкция trusted-keys С теоретической точки зрения родительские зоны DNSSEC аутентифицируют от- крытые ключи своих дочерних зон, позволяя создавать цепочки аутентифицированных подписей вплоть до корня системы DNS. На практике корневой домен и домены верх- него уровня еще не поддерживают спецификации DNSSEC, поэтому необходим другой метод проверки открытых ключей зон. Инструкция trusted-keys является довольно грубым способом сообщить демону named, что правильным открытым ключом зоны XXX.com является YYY, обойдя тем са- мым механизм DNSSEC, предназначенный для получения и верификации зонных клю- чей. Такое объявление иногда называют “точкой доверия” (“trust anchor”). Разумеется, зона XXX.com должна быть достаточно важной для вашей организации, чтобы уделить ей особое внимание, и вы должны иметь безопасный, внеполосный спо- соб определения правильного значения ее ключа. Нет волшебных способов получить правильный ключ; администратор внешней зоны должен прочитать его вам по телефону или послать как-то иначе. Для этой цели часто используется безопасная с точки зрения протокола HTTPS веб-страница. При изменении ключа этот процесс придется повто- рить с самого начала.
654 Часть II. Работа в сети Формат инструкции trusted-keys имеет следующий вид. trusted-keys { домен флаги протокол алгоритм ключ; домен флаги протокол алгоритм ключ; Каждая строка представляет точку доверия для конкретного домена. Атрибуты флаги, протокол и алгоритм являются неотрицательными целыми числами. Атрибут ключ — это строка, закодированная в формате Base64. Инструкция trusted-keys используется в тех случаях, когда зона имеет цифровую подпись, а ее родительская зона — нет, поэтому нельзя быть уверенным в том, что от- крытый ключ, получаемый от DNS-сервера, действительно надежен. Подробнее о технологии DNSSEC рассказывается в разделе 17.13. Инструкция server Демон named способен общаться с серверами, которые не используют последнюю версию пакета BIND или просто неправильно сконфигурированы. Инструкция server сообщает демону характеристики удаленных серверов. Она может заменять стандартные значения параметров конкретного сервера, хотя это не обязательно, пока вы не захотите сконфигурировать ключи для передачи зоны. server ip-адрес { bogus yes I no; [no] provide-ixfr yes | no; [yes] request-ixfr yes | no; [yes] keys {идентификатор_ключа; идентификатор_ключа; ...}; [нет] transfer-source ip-адрес [ближайший интерфейс] transfer-source-v6 ipv6-адрес [ближайший интерфейс] }; Посредством инструкции server можно переопределять значения глобальных конфи- гурационных параметров, относящихся к серверам. Просто укажите нужные параметры и их новые значения. Мы показали не все параметры инструкции server, а только самые необходимые. Полный список параметров можно найти в документации пакета BIND. Если для сервера задан атрибут bogus, демон named не посылает ему запросы. Этот । атрибут следует устанавливать для серверов, которые работают неправильно. Параметр bogus отличается от глобального атрибута blackhole тем, что подавляет только внеш- ние запросы. В отличие от него, атрибут blackhole полностью исключает все формы взаимодействия с перечисленными серверами. Сервер версии, являющийся главным сервером динамически обновляемой зоны, вы- полняет инкрементные зонные передачи, если атрибут provide-ixfr равен yes. Точно так же подчиненный сервер запрашивает инкрементные зонные передачи от главного сервера, если атрибут request-ixfr равен yes. Динамическая система DNS обсужда- ется в разделе 17.12. В списке keys задаются идентификаторы ключей, которые ранее были определены в инструкции key для использования в сигнатурах транзакций TSIG (о них рассказывает- ся в разделе 17.13). К любому запросу, посылаемому удаленному серверу, будет добавлена сигнатура, зашифрованная посредством этого ключа. Запросы, поступающие от удален- ного сервера, могут не иметь цифровой подписи, но если она есть, то будет проверена.
Глава 17. Система доменных имен 655 Атрибут transfer-source определяет IPv4- и 1Ру6-адреса интерфейса (и, возможно порта), которые следует использовать в качестве адреса источника (порта) для запросов на передачу зоны. Эти атрибуты необходимы только тогда, когда система имеет несколь- ко интерфейсов и IP-адрес удаленного сервера указан в списке allow-transfer. Инструкция masters Эта инструкция позволяет задавать имена одного или нескольких главных серверов, указывая их IP-адреса и криптографические ключи. Затем это имя можно использовать в разделе masters инструкций zone вместо повторения IP-адресов и ключей. CQ В каких случаях главных серверов бывает несколько? Ответ см. через несколько страниц. Инструкция masters удобна, когда несколько подчиненных или тупиковых зон по- лучают данные от одного и того же удаленного сервера. Если адреса и криптографиче- ские ключи удаленного сервера изменились, вы можете обновить инструкцию masters, которая их задает, а не изменять многочисленные инструкции zone. Синтаксис этой инструкции выглядит следующим образом. masters имя [ ip-адрес [port ip-порт] [key ключ]; ...] Инструкция logging Демон named в настоящее время заслуживает награды “За наиболее конфигурируе- мую подсистему журнальной регистрации на Земле”. Система Syslog предоставляет про- граммистам контроль над приоритетами сообщений, а системным администраторам — контроль над местом хранения этих сообщений. Но в рамках заданного приоритета администратор не может указать: “Это сообщение меня интересует, а это — нет”. В си- стему BIND были добавлены категории, позволяющие классифицировать сообщения по типам, и каналы, расширяющие возможности в плане хранения сообщений. Категории назначаются программистом, а каналы — администратором. Поскольку вопросы журнальной регистрации лежат несколько в стороне от нашего повествования (особенно если учесть объем материала), мы рассмотрим их позднее. Инструкция statistics Эта инструкция statistics-channels позволяет соединиться с выполняемым де- моном named с помощью браузера и просмотреть статистические показатели, которые на нем собраны. Поскольку статистические показатели сервера имен могут быть кон- фиденциальными, следует ограничить доступ к этим данным, открыв их только для до- веренных узлов вашей собственной организации. Синтаксис этой инструкции выглядит следующим образом. statistics-channels { inet (ip-адрес | *) port порт# allow { список_соответствия_адресов } ; } В файл конфигурации можно включить несколько последовательностей inet-port- allow. По умолчанию IP-адреса заданы значением any, а порт — значением 80 (обыч- ное значение для порта HTTP). Для использования каналов сбора статистики демон named следует компилировать с помощью программы libxml2.
656 Часть II. Работа в сети Инструкция zone Это “сердце” файла named, conf, которое сообщает демону named о зонах, для ко- торых он авторитетен, и задает параметры управления каждой зоной. Инструкция zone также используется для предварительной загрузки “подсказок” с корневого сервера (“подсказки” — это имена и адреса корневых серверов, участвующих в инициализации DNS-поиска). Точный формат инструкции zone зависит от роли, которую демон named должен иг- рать в отношении этой зоны. Возможными типами зоны являются master, slave, hint, forward, stub и delegation-only. Мы не будем рассматривать зоны типов stub (ис- пользуется только в системе BIND) и delegation-only (применяется для прекращения использования записей с шаблонными символами в зонах верхнего уровня при извеще- нии служб регистратора). Остальные типы зон описаны в последующих разделах. Многие из рассмотренных ранее глобальных параметров могут быть частью инструк- ции zone, т.е. переопределять глобальные установки. Мы не будем повторно упоминать о них, за исключением тех параметров, которые наиболее часто используются. Конфигурирование главного сервера зоны Ниже показан формат инструкции zone для зоны, в которой демон named является главным сервером имен. zone "имя_домена" { type master; file "путь"; }; Доменное имя в спецификации зоны всегда дается в двойных кавычках. Зонная база данных хранится на диске в текстовом файле, доступном для редакти- рования. Поскольку нет соглашения об именовании этого файла, в объявлении зоны должна присутствовать директива file. Зонный файл представляет собой набор записей о DNS-pecypcax; их формат описан в разделе 17.8. В инструкции zone часто задается также ряд других серверных атрибутов. allow-query { список_соответствия_адресов }; [все узлы] allow-transfer { список_соответствия_адресов }; [все узлы] allow-update { список_соответствия_адресов }; [попе] zone-statistics yes I по; [по] Параметры, связанные с управлением доступом, не являются обязательными, но мы рекомендуем их использовать. Они содержат либо IP-адрес, либо криптографический ключ TSIG. Как правило, криптографический ключ является более безопасным. Если для зоны поддерживаются динамические обновления, в параметре allow-update дол- жен содержаться список узлов, от которых разрешено принимать данные. Динамические обновления применимы только в отношении главных зон; параметр allow-update не может присутствовать в объявлении подчиненной зоны. Убедитесь, что в списке указа- ны лишь локальные компьютеры (например, DHCP-серверы), а не весь Интернет20. Параметр zone-statistics заставляет демон named отслеживать статистику запро- сов/ответов, например точное число и общий процент отсылок, рекурсивных и ошибоч- ных запросов. Конкретные примеры приведены в разделе 17.15. 20 Необходима также входная фильтрация на брандмауэре (см. раздел 22.11), а еще лучше ис- пользовать технологию аутентификации TSIG.
Глава 17. Система доменных имен 657 При наличии столь большого числа зонных параметров (есть еще порядка сорока, о которых мы не рассказали) конфигурация зоны кажется довольно сложной. На самом деле допускается объявление главной зоны, состоящее только из пути к зонному файлу. В BIND 4 больше ничего нельзя задать. Ниже показан пример, взятый из документации и слегка модифицированный нами. zone "example.com'’ { type master; file "forward/example.com"; allow-query { any; }; allow-transfer { my-slaves; }; }; Имя my-slaves относится к списку управления доступом, определенному ранее. Конфигурирование подчиненного сервера зоны Формат инструкции zone для подчиненного сервера будет почти таким же, как и в случае главного сервера. zone "имя_домена" { type slave; file "путь"; masters { 1р_адрес [port ip_nopT] [key имя_ключа]; ... }; [нет] allow-query { список_соответствия_адресов }; [все узлы] }; Подчиненные серверы обычно хранят полную копию зонной базы данных. Директи- ва file задает имя локального файла, в котором сохраняется реплицированная база данных. Получив новую копию данных зоны, сервер сохраняет ее в этом файле. В слу- чае сбоя и перезагрузки сервера файл можно просто прочитать с диска, а не пересылать по сети. Редактировать файл реплицированной базы данных не нужно, так как он управля- ется демоном named. Тем не менее имеет смысл просмотреть его, если есть подозрение, что в базу данных главного сервера закралась ошибка. Файл подчиненной зоны создает- ся уже после того, как демон named интерпретировал исходные данные зоны и раскрыл все относительные имена. Когда в файле присутствуют имена наподобие 128.138.243.151.cs.colorado.edu. anchor.cs.Colorado.edu.cs.Colorado.edu. можно быть уверенным в том, что где-то пропущена завершающая точка. В списке masters перечислены IP-адреса компьютеров, с которых может быть за- гружена зонная база данных. Она также может содержать имя списка главных серверов, определенных предыдущей инструкцией masters. Ранее мы говорили, что только один компьютер может быть главным сервером зоны, так почему же разрешается список, состоящий из нескольких адресов? Во-первых, у главного компьютера может быть несколько сетевых интерфейсов и, соответственно, несколько IP-адресов. Когда один из интерфейсов становится недоступным (проблемы с сетью или маршрутизацией), остаются в резерве другие интерфейсы. Следовательно, рекомендуется указывать все топологически различные адреса главного сервера. Во-вторых, демону named в действительности все равно, откуда поступают данные зоны. Он так же легко загружает базу данных с подчиненного сервера, как и с главного. Этой особенностью демона можно воспользоваться для того, чтобы сделать подчинен- ный сервер, с которым легко устанавливается связь, резервной копией главного серве-
658 Часть II. Работа в сети ра. В любом случае IP-адреса проверяются по очереди до тех пор, пока не будет найден работающий сервер. Теоретически можно даже создать иерархию серверов, в которой главный сервер обслуживает несколько серверов второго уровня, а те, в свою очередь, обслуживают множество серверов третьего уровня. Советуем в директиве masters указывать только адреса главного сервера. Задание корневых “подсказок” Инструкция zone типа hint сообщает демону named местонахождение файла, из которого он может загрузить имена и адреса корневых серверов имен, чтобы предвари- тельно заполнить свой кеш. zone { type hint; file "путь"; }; “Подсказки” — это набор DNS-записей, в которых перечислены серверы корневого домена (“.”). Они нужны для того, чтобы демон named знал, откуда начинать поиск до- менов. Не имея “подсказок”, демон знал бы только о тех доменах, которые сам обслу- живает, а также об их поддоменах. Когда демон named начинает работу, он повторно загружает подсказки с одного из корневых серверов. Следовательно, все будет в порядке, если файл подсказок содержит хотя бы одну запись с правильным и доступным корневым сервером. Для резервирова- ния подсказки о корневом сервере также компилируются в демон named. Файл “подсказок” чаще всего называется root. cache. В нем содержатся результаты , ответов, которые можно получить, запросив у корневого сервера список серверов имен; в домене “. На самом деле вы можете сгенерировать файл подсказок, выполнив ути- литу dig. Рассмотрим пример. $ dig @f.root-servers.net . ns > root.cache Обратите внимание на точку. Если сервер f. root-servers. net не отвечает, вы мо- жете выполнить запрос, не указывая конкретный сервер. $ dig . ns > root.cache Результат будет аналогичный. Однако вы получите список корневых серверов от кеша локального сервера имен, а не от авторитетного сервера. Это должно быть удоб- но — даже если вы не перезагружали или перезапускали сервер имен год или два, он пе- риодически обновляет свои записи о корневых серверах по истечении их периода TTL. Задание зоны переадресации Зона типа forward переопределяет глобальные параметры переадресации демона named (сначала опрашиваем корневой сервер, а потом следуем по цепочке отсылок) для конкретного домена. zone "имя_домена" { type forward forward only | first; forwarders { 1р_адрес; 1р_адрес; ...} }; Создавать такую зону имеет смысл, если у организации имеется деловой партнер и нужно направлять трафик непосредственно его серверам имен в обход стандартного
Глава 17. Система доменных имен 659 пути распространения запросов. Благодаря этому можно получить доступ к серверам имен, которые невидимы внешнему миру. Инструкция controls для команды rdnc Инструкция controls определяет, каким образом команда rndc будет управлять ра- ботой демона named. Эта команда может запускать и останавливать демон, выводить от- чет о его состоянии, переводить демон в режим отладки и т.д. Будучи сетевой утилитой, она требует должной конфигурации, чтобы злоумышленники не могли через Интернет влиять на работу сервера имен. Формат инструкции controls имеет следующий вид. controls { inet 1р_адрес port 1р_порт allow { список_соответствия_адресов } keys {список_ключей} } В BIND также разрешается указывать порт, но если параметр ports опущен, по умолчанию принимается порт 953. Удаленное управление сервером имен кажется одновременно и удобной, и опасной процедурой. Аутентификация необходима, причем ключи, указанные в списке соответ- ствия адресов, игнорируются, а используются только те ключи, которые перечислены в списке keys. В системе BIND существует команда rndc-conf gen, позволяющая сгенерировать ключ аутентификации, используемый в диалоге между командой rndc и демоном named. Это можно сделать двумя способами. Первый способ — заставить обе стороны загрузить ключ из общего конфигурационного файла (/etc/rndc.key) или поместить ключ в два разных файла (/etc/rndc. conf для rndc и /etc/named. conf для named). Второй спо- соб сложнее, но он необходим, если демон named и команда rndc запускаются на раз- ных компьютерах. Команда rndc-confgen -а задает ключи для доступа к локальному узлу При отсутствии инструкции controls в список соответствия адресов заносится адрес интерфейса обратной связи, а ключ ищется в файле /etc/rndc. conf. Поскольку аутентификация в этой версии пакета обязательна, команда rndc не сможет управлять работой демона named без ключа. Это кажется чрезмерным требованием, но подумайте вот о чем: даже если команда rndc работает только на узле localhost (127.0.0.1) и его адрес заблокирован для внешнего мира на брандмауэре, вы все равно выдаете всем ло- кальным пользователям определенный кредит доверия, подразумевая, что они не будут делать ничего противозаконного с сервером имен. В то же время любой из них может подключиться с помощью утилиты telnet к управляющему порту и ввести “stop”. Ниже показаны результаты работы команды rndc-confgen, генерирующей 256-раз- рядный ключ (размер ключа объясняется тем, что он позволяет уместить результаты на странице!). Обычно вывод команды направляется не на экран, а в файл /etc/rndc. conf. Комментарии в нижней части включают строки, которые необходимо добавить в файл named, conf, чтобы демон named и команда rndc могли взаимодействовать. % ./rndc-confgen -Ь 256 # Start of rndc.conf key "rndc-key" { algorithm hmac-md5; secret "orZuz5amkUnEp52zlHxD6cd5hACldOGsG/elP/dv2lY=";
660 Часть II. Работа в сети options { default-key "rndc-key"; default-server 127.0.0.1; default-port 953; }; # End of rndc.conf # Use with the following in named.conf, adjusting the allow list # as needed: # key "rndc-key" { # algorithm hmac-md5; # secret ”orZuz5amkUnEp52zlHxD6cd5hACldOGsG/elP/dv2lY=”; # I; # # controls { # inet 127.0.0.1 port 953 # allow { 127.0.0.1; } keys { "rndc-key”; }; # }; # End of named.conf Расщепление DNS и инструкция view Во многих организациях требуется, чтобы внутреннее представление сети отлича- лось от представления этой сети с точки зрения пользователей Интернета. Например,? внутренние пользователи могут видеть все компьютеры зоны и лишь несколько разре-J шенных внешних серверов. Или другой вариант: внутреннее и внешнее представления одинаковы по охвату узлов, однако внутренним пользователям предоставляются допол- ; нительные (либо отличающиеся) записи. В частности, записи MX, предназначенные доий маршрутизации электронной почты, за пределами домена ссылаются на почтовый кон- : центратор, а внутри домена — на отдельные рабочие станции. Ш О частных адресных областях рассказывалось в разделе 14.4. ; Расщепленная конфигурация DNS особенно удобна организациям, которые во вну- тренних сетях применяют IP-адреса из частного диапазона (RFC1918). Например, за- ; прос об имени узла с IP-адресом 10.0.0.1 не может быть обработан глобальной системой^ доменных имен, но он вполне допустим в контексте локальной сети. Среди запросов,} поступающих на корневые серверы имен, 4-5% либо имеют исходный IP-адрес из част-) ного диапазона, либо ссылаются на такой адрес. Ни на один из этих запросов нельзя ответить. Запросы обоих типов являются следствием неправильной конфигурации либо пакета BIND, либо “доменов” Microsoft. Инструкция view содержит список адресов, определяющий, кто из клиентов имеет доступ к данному представлению, а также ряд параметров, применимых ко всем зонам в представлении, и, наконец, определения самих зон. Синтаксис инструкции имеет сле- дующий вид. view имя_представления { match-clients { список_соответствия_адресов }; [все узлы] match-destinations { список_соответствия_адресов }; [все узлы] match-recursive-only yes | по; [по] параметр—Представления; инструкция^one; . . . }
Глава 17. Система доменных имен SS Инструкция view всегда содержит атрибут match-clients, который фильтрует IP- адреса источников, указанные в пакете запроса, и обычно используется для обслужива- ния внутренних и внешних представлений данных DNS, принадлежащих организации. Для более качественного контроля можно также фильтровать адреса пунктов назначе- ния и требовать рекурсивные запросы. Атрибут match-destinations просматривает адреса назначения в пакете запроса и является полезным в компьютерах с нескольки- ми интерфейсами, когда вы хотите обрабатывать разные данные DNS в зависимости от интерфейса, из которого поступил запрос. Атрибут match-recursive-only требует, чтобы запросы были рекурсивными, а также высылались разрешенными клиентами. Итеративные запросы позволяют просмотреть кеш сайта; этот атрибут предотвращает такие ситуации. Представления просматриваются по порядку, поэтому инструкции view с самыми большими ограничениями доступа должны идти впереди. Зоны в разных представлени- ях могут иметь одинаковые имена. Представления налагают ограничение на структуру файла named.conf: если они присутствуют, все инструкции zone должны находиться в контексте представлений. Ниже приводится взятый из документации к BIND 9 пример, имитирующий разде- ление пространства DNS-имен на внутреннее и внешнее. В обоих представлениях зада- ется одна и та же зона, но с разной базой данных. view ’’internal" { match-clients { наши_сети; }; recursion yes; zone "example.com" { type master; file "example-internal.db"; // только внутренние сети // только для внутренних клиентов // полное представление зоны view "external" { match-clients { any; }; recursion no; zone "example.com" { type master; file ’’example-external.db"; // допускаются любые запросы // рекурсия запрещена // только "общедоступные" узлы Если поменять порядок представлений, никто не сможет получить доступ к внутрен- нему представлению. Адреса внутренних узлов пройдут проверку на соответствие усло- вию any в предложении match-clients внешнего представления до того, как начнет проверяться внутреннее представление. Второй пример представления DNS, который будет рассмотрен ниже, демонстрирует еще один вид представлений. 17.10. Примеры конфигурации системы BIND После подробного знакомства с файлом named, conf настало время рассмотреть ряд готовых примеров. В следующих подразделах мы опишем три типичные конфигурации: • зона локального узла;
662 Часть II. Работа в сети • сервер небольшой компании, занимающейся вопросами безопасности и приме- няющей расщепленную конфигурацию DNS; • эксперты: сайт isc.org консорциума Internet System Consortium. Зона локального узла Адрес 127.0.0.1 относится к самому локальному узлу и должен быть преобразован в имя “localhost. ”21 Одни организации преобразовывают адрес в имя “localhost. локальный^домен”, а другие делают и то, и другое. Соответствующий адрес в протоколе IPv6 равен ::1. Если вы забыли задать конфигурацию зоны локального узла, то ваша организация может прекратить посылать запросы корневым серверам на получение информации о локальном узле. Корневые серверы получают так много таких запросов, что операторы предлагают просто добавить обобщенное отображение между локальным узлом и адре- сом 127.0.0.1. на корневом уровне. По данным о корневом сервере К, в Европе в январе 2010 года (k. root-servers. org/statistics) запрос домена “local” занимает четвер- тое место по распространенности, отставая лишь от сот, агра и net. Это огромное ко- личество бесполезных запросов (1500 в секунду), которые посылаются занятым серве- рам имен. Другими необычными именами в популярной категории “фиктивные домены TLD” являются lan, home, localdomain и domain. Прямое преобразование имени локального узла можно определить в файле зоны прямого преобразования (forward zone) для домена (с помощью соответствующей ин- струкции $ORIGIN) или в своем собственном файле. Каждый сервер, даже кеширующий^ обычно является главным для своего собственного обратного домена локального узла. Ниже приведено несколько строк из файла named, conf, описывающих конфигура- цию локального узла. zone '’localhost" { // зона прямого преобразования локального узла type master; file "localhost"; allow-update { none; }; }; zone "0.0.127.in-addr.агра" { // зона обратного преобразования * II локального узла type master; file "127.0.0"; ч allow-update { none; }; < }; Соответствующий файл прямой зоны localhost содержит следующие строки. $TTL 30d ; localhost. @ IN SOA localhost, postmaster.localhost. ( 1998050801 ;регистрационный номер 3600 ;тайм-аут обновления 1800 ;тайм-аут повторения 604800 ;срок действия 3600 ) ;минимум 21 На самом деле к локальному узлу относится весь класс сетей А 127/8, но большинство ис- пользует просто адрес 127.0.0.1.
Глава 17. Система доменных имен 665 NS localhost. А 127.0.0.1 Обратный файл 127.0.0 имеет следующий вид. $TTL 30d ; 0.0.127.in-addr. агра @ IN SOA localhost, postmaster.localhost. ( 1998050801 ;регистрационный номер 3600 ;тайм-аут обновления 1800 ;тайм-аут повторения 604800 ;срок действия 3600 ) ;минимальный тайм-аут NS local host. 1 PTR localhost. Отображение для адреса локального узла (127.0.0.1) никогда не изменяется, поэто- му тайм-ауты могут быть большими. Обратите внимание на регистрационный номер , который кодирует дату; данный файл последний раз изменялся в 1998 году. Кроме того, обратите внимание на то, что для домена локального узла указан только главный сервер имен. Символ @ здесь означает “0.0.127. in-addr. агра. ”. Небольшая компания, предоставляющая консалтинговые услуги в области безопасности Наш следующий пример посвящен небольшой компании, специализирующейся на предоставлении консультаций по компьютерной безопасности. На ее сервере Red Hat Enterprise Linux установлен пакет BIND 9 и применяется расщепленная конфигурация DNS, в которой внутренние и внешние пользователи получают разную информацию. В компании используются адреса из частного диапазона. Запросы, касающиеся этих адресов, не должны выходить в Интернет и засорять глобальную систему доменных имен. Ниже приведен соответствующий файл named.conf, слегка переформатирован- ный и снабженный комментариями. options { directory "/var/domain"; version ”root@atrust.com"; allow-transfer {82.165.230.84; 71.33.249.193; 127.0.0.1;}; listen-on { 192.168.2.10; 192.168.2.1; 127.0.0.1; 192.168.2.12;} }; include "atrust.key"; // файл с режимом доступа 600, содержащий // определение ключа "atkey" controls { inet 127.0.0.1 allow { 127.0.0.1; } keys { atkey; }; }; view "internal" { // внутреннее представление match-clients { 192.168.1.0/24; 192.168.2.0/24; }; recursion yes; include "infrustructure.zones"; // Корневые подсказки, прямое и обратное // преобразование адреса локального узла
664 Часть II. Работа в сети zone "atrust.com" { // Внутренняя зона // прямого преобразования // узла localhost type master; file internal/atrust.com"; }; zone "1.168.192.in-addr.arpa" { // внутренняя зона // обратного преобразования type master; file "internal/192.168.1.rev"; allow-update { none; }; }; ... // Тут пропущено много других зон include "internal/trademark.zones"! // atrust.net, atrust.org и другие // подчиненные серверы }; // конец внутреннего представления view "world" { // внешнее представление match-clients { any; }; recursion no; । zone "atrust.com" { 11 внешняя зона прямого преобразования: type master; file "world/atrust.com"; a;;ow-update { none; }; , }; I zone "189.172.63.in-addr.arpa" { // внешняя зона // обратного преобразования type master; ’ file "world/63.173.189.rev"; ; allow-update { none; }; \ }; include "world/trademark.zones"; // atrust.net, atrust.org и другие // подчиненные серверы zone "admin.com" { // Главные зоны только // во внешнем представлении type master; file "worls/admin.com"; allow-update [ none; ] ; }; ... // Тут пропущено много главных и // подчиненных зон // конец внешнего представления Файл atrust .key содержит определение ключа “atkey”. key "atkey" { algorithm hmac-md5; secret "совместный секретный ключ”; }; Конфигурационный файл infrastructure. zones содержит корневые подсказки и файлы локального узла, а файл trademark. zones — варианты имени atrust. com как
глава 17. Система доменных имен 665 в разных доменах верхнего уровня (net, org, us, info и т.д.), так и с разным написани- ем (appliedtrust. com и т.д.). Зонные файлы определяют два разных представления (внутреннее и внешнее) и тип сервера (главный или подчиненный). Это отображается в соглашении об именах файлов зон. Во внутреннем представлении данный сервер является рекурсивным. Это представ- ление содержит все локальные узлы, многие из которых используют частные адреса. Во внешнем представлении этот сервер не является рекурсивным. Это представление со- держит только выбранные узлы домена atrust. com и внешние зоны, для которых они обеспечивают DNS-услуги главных или подчиненных серверов. Ниже приведены фрагменты файлов internal/atrust.com и world/atrust. сот. Сначала рассмотрим файл internal. ; файл atrust.com - внутренний файл $TTL 86400 $0RIGIN com. atrust 3600 SOA nsl.atrust.com. trent.atrust.com. ( 2001110500 10800 1200 3600000 3600 3600 NS NSl.atrust.com. 3600 NS NS2.artust.com. 3600 MX 10 mailserver.atrust.com. 3600 A 66.77.22.161 $0RIGIN atrust. nsl .com. A 192.168.2.1 ns2 A 66.77.122.161 WWW A 66.77.122.161 mailserver A 192.168.2.11 exchange A 192.168.1.100 secure A 66.77.122.161 Здесь использованы частные адреса RFC1918. Кроме того, обратите внимание на то, что, вместо записей CNAME, для определения имен локального узла эта организация использует несколько записей А. Эта схема работает быстрее, поскольку она не учиты- вает результат проверки записи CNAME в дополнительном запросе. Записи PTR долж- ны ссылаться только на одно из многих имен, которые отображаются в один и тот же IP-адрес. Эта организация также делегирует поддомены для своих DHCP-сетей, нашей лаборатории и своей Microsoft-инфраструктуры (это во фрагментах не показано). Рассмотрим текст внешнего представления той же зоны atrust.com из файла world/atrust. com. ; файл atrust.com - внешний файл $TTL 57600 $ORIGIN atrust.com. 3600 SOA nsl. .atrust.com. trent.atrust.com. ( 2010030400 10800 1200 3600000 3600 3600 NS NS1.atrust.com. 3600 NS NS2.atrusr.com. 3600 MX 10 mailserver.atrust.com. 3600 A 66.77.122.161 nsl A 206.168.198.209 ns2 A 66.77.122.161 WWW A 69.77.122.161
666 Часть II. Работа в сети mailserver secure А 206.168.198.209 А 66.77.122.161 ; обратные преобразования exteriorl IN A 206.168.198.209 209.198.168.206 IN PTR exteriorl.atrust.com exterior2 IN A 206.168.198.213 213.198.168.206 IN PTR exterior2.atrust.com Как и во внутреннем преобразовании, имена реализованы с помощью записей А. Очень немногие узлы на самом деле видны во внешнем представлении, хотя из этих фрагментов это не следует. Обратите внимание на то, что компьютеры, которые видны в обоих представлениях (например, nsl. atrust. com), во внутреннем представлении имеют частные адреса RFC1918, а во внешнем — реальные IP-адреса. Параметр TTL в зонных файлах по умолчанию установлен равным 16 часам (57 600 се- кунд). В то же время для большинства записей зонных файлов значение TTL не назна- чается явно. Загадочные записи PTR в конце файла внешнего представления позволяют провай- деру компании atrust. com делегировать ей полномочия по управлению обратными преобразованиями в очень маленьких областях адресного пространства. Это делается с помощью записей CNAME на узле провайдера. Подробнее о специальном примене- нии записей CNAME рассказывается в разделе 17.8. Консорциум The Internet Systems Consortium (isc.org) Консорциум ISC — создатель и распространитель системы BIND, а также оператор корневого сервера Е. Он также владеет сервером TLD, обслуживающим многие домены верхнего уровня. Именно поэтому мы называем его экспертом! Ниже приведены фрагменты конфигурационных файлов. Обратите внимание на то, что они используют оба протокола IPv4 и IPv6. Кроме того, они используют шифро- вание TSIG для аутентификации главного и подчиненного серверов при передаче зон. Параметры transfer-source гарантируют, что IP-адреса источника для исходящей зоны передачи соответствуют требованиям спецификаций, установленных инструкция- ми allow-transfers на главном сервере. Файл named, conf имеет следующее содержание. // TLD-сервер имен организации isc.org options { directory "/var/named"; datasize 1000M; listen-on { 204.152.184.64; }; listen-on-v6 { 2001:4f8:0:2::13; }; recursion no; transfer-source 204.152.184.64; transfer-source-v6 2001:4f8:0:2::13; }; // ключ rndc key rndc_key { algorithm hmac-md5; secret ”<secret>";
Глава 17. Система доменных имен // Ключ TSIG для сервера имен ns-ext key ns-ext { algorithm hmac-md5; secret "<secret>"; }; server 204.152.188.234 { keys { ns-ext; }; }; controls { inet 204.152.184.64 allow { any; } keys { rndc_key; }; }; include "inf/named.zones"; // Корневой, локальный, 127.0.0.1, ::1 include "master.zones"; // Управляемые зоны include "slave.zones"; // Подчиненные зоны Инструкции include позволяют сохранить файл named.conf коротким и аккурат- ным. Если вы обслуживаете много зон, постарайтесь разбить свою конфигурацию на небольшие части, похожие на эти. И, что еще более важно, организуйте иерархию ва- ших файлов так, чтобы в ней не было каталога, содержащего тысячу зонных файлов. Современные файловые системы эффективно обрабатывают многочисленные каталоги, но управление этими файлами может быть очень утомительным. Рассмотрим содержимое файла master. zones. zone "isc.org" { type master; file "master/isc.org"; allow-update { none; }; allow-transfer { none; }; }; zone "sfo2.isc.org" { type master; file "master/sfo2.isc.org"; allow-update { none; }; allow-transfer { none; }; }; // Остальные зоны пропущены Содержимое файла slaves.zones выглядит так. zone "vix.com" { type slave; file "secondary/vix.com"; masters { 204.152.188.234; }; }; zone "cix.net" { type slave; file "secondary/cix.net"; masters { 204.152.188.234; }; }; Параметр allow-transfer, заданный в файле master. zones равным none, озна- чает, что консорциум ISC использует несколько главных серверов — какой-то из них должен реализовать передачу зоны подчиненным серверам.
668 Часть II. Работа в сети 17.11. Программное обеспечение NSD/Unbound Завершив рассмотрение системы BIND, перейдем к описанию альтернативной реа- лизации сервера DNS, обладающей, наряду с высокой производительностью, еще рядом прекрасных свойств. Система NSD (Name Server Daemon) была разработана организа- цией NLnet Labs в 2003 году. Изначально цель проекта заключалась в том, чтобы раз- работать альтернативную реализацию сервера, независимую от системы BIND, которую можно было бы использовать на корневых серверах, обеспечивая более высокую устой- чивость корневой зоны за счет разнообразия программного обеспечения. В настоящее время систему NSD используют три корневых сервера и несколько доменов верхнего уровня, но вам не обязательно управлять корневым сервером или доменом TLD, чтобы оценить надежность, производительность и простоту этой реализации. Ядро пакета NSD образуют две программы: zonec (прекомпилятор зонных файлов, преобразующий текстовые зонные файлы системы DNS в базу данных) и nsd (собствен- но демон сервера имен). Сервер NSD заранее вычисляет и индексирует все возможные ответы на корректные запросы, которые он может получить, поэтому, в отличие от си- стемы BIND, создающей эти ответы на лету, система NSD уже имеет эти ответы в ис- ходящем пакете в единственном экземпляре, хранящемся в памяти, что делает ее по- разительно быстрой. Unbound — рекурсивный сервер DNS, дополняющий систему NSD. Он был разрабо- тан на языке С организацией NLnet Labs на основе реализации, выполненной на языке Java компаниями VeriSign, Nominet, Kirei и EP.NET. Сочетание систем NSD и Unbound создает гибкую, высокопроизводительную и безопасную DNS-службу, подходящую для большинства организаций. Компоненты, разработанные организацией NLnet Labs, не такие зрелые, как система BIND, и не имеют так много “прибамбасов”, но для боль- шинства сайтов они могут стать прекрасным решением. Библиотека стандартных программ Idns, упрощающая написание инструментов для программного обеспечения DNS, также доступна для использования в дистрибутивных пакетах NSD и Unbound. Она содержит каталог примеров: несколько инструментов пред- назначены, в основном, для спецификаций DNSSEC, в частности программа для созда- ния подписи DNSSEC и утилита drill, предназначенная для отладки и аналогичная ути- лите dig из пакета BIND. Все эти программы можно загрузить с сайта nlnetlabs.nl..' Организация NLnet Labs также создала инструмент под названием Autotrust, обеспечи-^ вающий управление ключом RFC5011 и продление его срока действия. Эта программа^ интегрирована в систему Unbound, однако мы ее описывать не будем. S Код DNSSEC в системе NSD/Unbound более надежен и лучше протестирован, че>$ аналогичный код в системе BIND. Кроме того, он быстрее работает. Например, системам Unbound примерно в пять раз быстрее, чем система BIND, проверяет подписи DNSSEC,^ Тем не менее в некоторых аспектах, особенно что касается документации и дополни-; тельных функциональных возможностей, система BIND по-прежнему занимает лиди- рующие позиции. Для того чтобы обеспечить действительно устойчивую систему DNS, лучше запустить оба сервера! Инсталляция и конфигурирование системы NSD Вначале создайте пользователя с именем nsd в системе, в которой будет выполняться сервер имен nsd. Затем зарегистрируйте его как nsd, загрузите пакеты NSD/Unbound (в настоящее время их три: NSD, Unbound и отдельная библиотека Idns) и распакуйте
Глава 17. Система доменных имен 669 их. Для того чтобы инсталлировать демон nsd, следуйте инструкциям, написанным в файле doc/README. $ ./configure $ make $ sudo make install В табл. 17.10 перечислены каталоги, в которые система NSD инсталлируется по умолчанию. Таблица 17.10. Каталоги для инсталляции системы NSD 7^' Выполняемые файлы Пример файла конфигурации Справочные страницы Текстовые зонные файлы Скомпилированные зонные файлы Файлы PID /usr/local/sbin /etc/nsd /usr/local/share /etc/nsd /var/db/nsd /var/run Иногда размещать зонные файлы в каталоге etc довольно неудобно, особенно если зона большая. В таком случае следует выбрать другое место, например каталог /usr /local или /var. Если вас не устраивает выбор системы NSD, предусмотренный по умолчанию, вы можете использовать команду configure; сборочный файл можно про- читать без проблем. Результаты, возвращаемые командой configure, записываются в файл config.log в каталоге инсталляции, поэтому при необходимости его можно проанализировать. Пакет NSD инсталлирует семь программ. • nsd — демон сервера имен • nsdc — сценарий, управляющий демоном nsd, посылая ему сигналы • zonec — преобразовывает текстовые зонные файлы в файлы базы данных • nsd-notify — посылает уведомления (исключен) • nsd-xf er — получает передачи зоны (исключен) • nsd-checkconf — проверяет синтаксис файла nsd. conf • nsd-patch — отражает постепенные обновления базы данных в зонных файлах Фундаментальные отличия от системы BIND Если вы использовали систему BIND, то кое-что в системе NSD сначала покажется вам странным. Например, в ней нет файлов корневых подсказок и нет необходимости включать зоны локальных узлов. Кроме того, система NSD не поддерживает представ- ления, поэтому если ваша организация публикует разные варианты данных DNS внутри и вне, то вам придется вернуться к системе BIND или использовать несколько экзем- пляров демона nsd. Динамические обновления также не поддерживаются. Поскольку nsd — это сервер, который может быть только авторитетным, многие возможности си- стемы BIND для него недоступны. Система BIND считывает зонные файлы и хранит их в памяти; система NSD заранее компилирует зонные файлы в формат базы данных и использует для ее хранения и па- мять, и диск.
670 Часть II. Работа в сети Язык описания конфигурации демона nsd проще, чем в системе BIND. В нем нет точек с запятой, которые можно забыть, нет фигурных скобок для объединения групп и есть только три инструкции верхнего уровня: server, zone и key. Комментарии отме- чаются символом #. Параметры каждой из трех инструкций имеют следующий вид. атрибут: значение Инструкция server может существовать только в одном экземпляре. Она задает гло- бальные параметры. Инструкция zone перечисляет параметры зон, а инструкция key определяет криптографические ключи, необходимые для взаимодействия между глав- ным и подчиненными серверами, а также для управления демоном nsd. Пробелы отде- ляют атрибуты от значений. Значения можно взять в кавычки, но это необязательно. Как и система BIND, демон nsd обобщает IP-адреса, но несколько иначе, чем си- стема BIND, использующая список соответствий адресов. Этот список в системе NSD называется ip-spec и может выглядеть следующим образом. • Обычный IP-адрес (IPv4 или IPv6). • Подсеть в системе обозначений CIDR, например 1.2.3.0/24. • Подсеть с явной маской, например 1.2.3.4&255.255.255.0. • Диапазон IP-адресов, например 1/2/3/4-1.2.3.25. В каждой из этих форм пробелы не допускаются.. Еще одним основным отличием является использование значений ключа для ау- тентификации передачи зон и уведомлений. В системе BIND ключ ассоциируется с 1Р^ адресом, и сообщения, поступающие из этого адреса и на этот адрес, подписываются И проверяются с помощью этого ключа. В системе NSD принята более точная классифи^ кация ключей, и демон nsd может использовать один ключ для уведомлений, другой для передачи обновлений зоны, а третий — для получения этих обновлений. Полезно? Ну, как сказать... Семантика команды notify демона nsd аналогична разделу notify explicit в си- стеме BIND: уведомление отправляется только серверам, которые включены в список^ (По умолчанию система BIND уведомляет все серверы имен, указанные в зонном файле целевого домена.) Демон nsd предпочитает осмысленное описание поведения по умолчанию с по- мощью конфигурации. Например, спецификации DNSSEC включаются по умолчаний для подписанных зон и выключаются для неподписанных. По умолчанию демон nsd прослушивает сокеты как по протоколу IPv4, так и по протоколу IPv6. Регистрация либо включена, либо выключена и не предусматривает бесчисленное количество ка- тегорий и градаций, как это принято в парадигме BIND. Для взаимодействия межд$ серверами (передачи зон, уведомлений и т.д.) демон nsd использует протокол TSIG. Краткое описание различий между системами BIND и NSD, а также пример кон* фигурации содержатся в файле doc/NSD-FOR-BIND-USERS. Справочная страница для файла конфигурации nsd. conf и файл doc/README также содержат примеры, но, к со- жалению, они не согласованы друг с другом.22 Пример конфигурации системы NSD Мы приобрели несколько образовательных лицензий и объединили три примера и: дистрибутивов и добавили собственные комментарии, чтобы читатели могли получил 22 Для того чтобы открыть справочную страницу, не инсталлируя ее, следует выполнить коман ду groff -man -Т ascii имя-файла-справочной-страницы | less.
Глава 17. Система доменных имен 671 представление о конфигурации системы NSD еще до того, как мы приступим к деталь- ному разбору разных параметров. Рассмотрим демон nsd, сконфигурированный для главного сервера домена atmst.com и подчиненного сервера домена admin.com. server: username: nsd # Пользователь nsd должен быть запущен # после выполнения операции chroot database: /var/db/nsd/nsd.db # Заранее скомпилированный # файл базы данных logfile: /var/log/nsd.log # Системный журнал, по умолчанию # направляется в потоки stderr и syslog pidfile: /var/run/nsd.pid # Идентификатор процесса nsd key: name: tsig.atrust.com. # Ключ для передачи зоны atrust..сот algorithm: hmac-md5 secret: "здесь содержится пароль, зашифрованный по методу base64" zone: name: atrust.com # Имя зоны zonefile: /var/nsd/primary/atrust.сот provide-xfr: 1.2.3.4 tsig.atrust.com. # Адрес подчиненного сервера # зоны atrust.com notify: 1.2.3.4 tsig.atrust.com # и ключ для уведомления или # xfr-файлов. provide-xfr: 1.2.30.40 tsig.atrust.com. # Адрес другого подчиненного # сервера notify: 1.2.30.40 tsig.atrust.com # и ключ для уведомления или # xfr-файлов. key: пате: tsig.admin.com. # Ключ для получения данных от # admin.com подчиненным сервером algorithm: hmac-md5 secret: "здесь содержится пароль, зашифрованный по методу base64" zone: name: admin.com # Зона, по отношению к которой # данный сервер является # подчиненным zonefile: "/var/nsd/secondary/admin.com.signed" allow-notify: 5.6.7.8 NOKEY # Ее главная зона request-xfr: 5.6.7.8 tsig.admin.com. # и ключ для xfr-файлов В этом примере файла nsd.conf описана конфигурация сервера, который является главным для зоны atrast.com и осуществляет уведомление и передачу зоны двум под- чиненным серверам, имеющим IP-адреса 1.2.3.4 и 1.2.30.40. Для аутентификации двух подчиненных серверов при передаче зон и уведомлении этот сервер использует ключ TSIG с именем tsig.atrust.com. (Вы можете и, возможно, даже обязаны использовать для каждого подчиненного сервера отдельный ключ.) Этот сервер также является подчиненным сервером для зоны admin. com, главный сервер которой имеет IP-адрес 5.6.7.8. Мы можем получать уведомления об изменении Данных зоны без ключа, но при передаче зоны обязаны использовать ключ tsig.admin.com. Главные зоны имеют разделы provide-xfr, а подчиненные — раздел request-xfr. После инсталлирования демона nsd и оформления файла конфигурации, для про- верки синтаксиса файлов конфигурации следует применить команду nsd-checkconf. Его отчеты об ошибках довольно лаконичны, например “error: syntax error” и номер строки. Исправив ошибки, выявленные командой nsd-checkconf, выполните ее еще
672 Часть II. Работа в сети раз и повторяйте этот процесс, пока команда nsd-checkconf не перестанет выдавать сообщения об ошибках. Определения ключа NSD Раздел key определяет именной ключ, который можно использовать для последую- щего доступа к параметрам управления. Каждый ключ имеет три атрибута: имя, алгоритм и разделенный секрет (т.е. пароль). Посмотрим, как разместить определение ключа или, по крайней мере, его разделенный секрет в файлах, доступ к которым ограничен. Для их импорта в файл nsd.conf можем использовать инструкцию include. Достаточно про- сто поместить в файл строку include: имя_файла в то место, куда мы хотим вставить текст из файла с именем имя_файла. Ш Определения ключа Синтаксис инструкции key выглядит следующим образом. name: имя_ключа algorithm: название_алгоритма secret: пароль в кодировке base64 Допускается несколько инструкций key. Поле name идентифицирует ключ. Выбирайте имена, идентифицирующие зону и серверы, участвующие в обменах секретной информацией. Можно использовать алго- ритмы hmac-md5, hmac-shal или hmac-sha256. Можно также сгенерировать ключи TSIG с помощью команды Idns-keygen, несмотря на то что на самом деле она предна- значена для генерирования пар закрытых и открытых ключей DNSSEC. Для получения списка алгоритмов можно выполнить команду Idns-keygen -a list. Рассмотрим пример использования алгоритма hmac-shal. $ Idns-keygen -a hmac-shal example.com Эта команда создает файл с именем Kexample. com. +158+12345. key, содержащий ключ TSIG. Достаточно просто вырезать и скопировать секретную часть в вашу специ- фйкацию ключа. Число 158 в имени файла означает алгоритм hmac-shal. Для алгорит- ма hmac-md5 зарезервировано число 157, а для алгоритма hmac-sha256 — 159. Число 12345 — это просто заполнитель для случайного пятизначного дескриптора ключа. При использовании нескольких ключей эти дескрипторы помогают правильно с ними обхо- диться. Глобальные параметры конфигурации NSD Параметры NSD подразделяются на две группы: глобальные параметры сервера и зонные параметры, которые можно применить к любой зоне, обслуживаемой конкрет- ным экземпляром демона nsd. Некоторые параметры можно заменять с помощью фла- гов командной строки при запуске демона nsd. Параметры сервера обычно имеют разумные значения, установленные по умолчанию, и требуют внимания, только если ваша структура каталогов отличается от стандартной или вы хотите сделать нечто необычное. Ниже мы приводим значения по умолчанию в квадратных скобках. Как и для параметров системы BIND, мы добавили примечания, описывающие каждую группу параметров, чтобы в них было легче разобраться. 03 Включение файла include: имя_файла
Глава 17. Система доменных имен 673 Директива include: может находиться в любом месте файла конфигурации. Файл с именем имя_файла считывается в файл конфигурации, и его содержимое заменяет ди- рективу. [все 1Р_адреса] [по] [по] [53] CQ IP-адреса и порт ip-address: 1р_адрес ip4-only: yes | по ip6-only: yes | по port: номер_порта По умолчанию система NSD связывает порт 53 со всеми сетевыми интерфейсами как по протоколу IPv4, так и по протоколу IPv6. При перечислении адресов с помощью ди- рективы ip-address: демон nsd обходит таблицы маршрутизации ядра и гарантирует, что на запрос к одному из IP-адресов не будет выдан ответ от другого IP-адреса; этого требуют многие процедуры разрешения имен. Если ваш компьютер Имеет только один сетевой интерфейс, то этот параметр бесполезен. Параметры ip4-only и ip6-only ограничивают демон nsd определенным протоколом, а параметр port устанавливает се- тевой порт, прослушивающий входящие запросы. CQ Идентификаторы Как правило, эти параметры не используются, потому что их значения по умолча- нию подобраны очень удачно. identity: строка [имя_узла] hide-version: yes | по [по] Эта пара параметров определяет, сообщать ли демону nsd правду о его версии и име- ни узла в ответ на запросы для имен классов CHAOS id. server и version. server. Как указывалось выше, мы рекомендуем не изменять эти значения. CQ Протоколирование, статистические показатели logfile: имя_файла verbosity: уровень debug-mode: yes | по statistics: #сек [stderr и stdlog] [0] [по] [0] # без статистических показателей Протоколирование по умолчанию осуществляется в стандартном потоке ошибок и системном журнале (функциональная возможность демона), причем объем протоколи- рования определяется параметром verbosity. Диапазон возможных значений варьиру- ется от 0 до 5; большие значения означают, что следует регистрировать больше данных. Параметр logfile направляет протокольные сообщения в файл, а не в стандартный си- стемный журнал. Если задан параметр debug-mode, то демон nsd не создает дополнительные копии самого себя и остается присоединенным к вашему терминалу, так что вы можете видеть сообщения, посланные в стандартный поток ошибок. Если вы хотите накапливать статистические показатели, то установите параметр #сек равным количеству секунд между сбросами информации. Статистические пока- затели похожи на другие протокольные сообщения, поэтому они направляются в файл регистрации или системный журнал, если не задан другой конкретный файл. Лучше все- го иногда просматривать статистические данные, чтобы убедиться в том, что интервал между сбросами информации выбран правильно и вы не перегружаете диски информа- цией, которую никто никогда не увидит. S3 Имена файлов
674 Часть II. Работа в сети database: difffile: xfrdfile: pid-file: zonesdir: имя_файла имя_файла имя_файла имя_файла каталог [/var/db/nsd/nsd.db] [/var/db/nsd/ifxr.db] [/var/db/nsd/xfrd.state] [/зависит от ОС, обычно /var/run/nsd.pid] [/etc/nsd] Скомпилированные зонные файлы и информация о передаче зоны обычно хранятся в каталоге /var/db/nsd; эта установка изменяется очень редко. Файл PID должен нахо- диться там, куда ваша операционная система записывает остальные файлы PID, обычно в каталоге /var/run. По умолчанию зонные файлы, редактируемые людьми, находятся в каталоге /etc/nsd, что кажется неудачным решением. Посмотрим, как переместить эти файлы в подкаталоги каталога /var, например в каталог /var/nsd/zones. Ш Настройка tcp-count: целое_число [0] server-count: целое_число [1] xfrd-reload-timeout: #сек [10] Параметр tcp-count ограничивает количество одновременных TCP-соединений, ко- торые сервер может использовать для передачи зоны. Если вы увидите сообщение “xfrd: max number of ТС connections (10) reached” в системном журнале, значит, вы превысили максимально допустимое значение. Если это происходит часто, вы должны увеличить этот предел. Параметр server-count задает количество запускаемых экземпляров демона nsd. При работе на многопроцессорных компьютерах у системного администратора может возникнуть желание увеличить это значение. Параметр xfrd-reload-timeout регу- лирует перезагрузку после передачи зоны, задавая количество секунд, которое должно пройти после предыдущей загрузки прежде, чем можно будет выполнить новую. Ш Безопасность username: регистрационное_имя [nsd] chroot: каталог [нет] Демон nsd должен запускаться как корневой процесс, чтобы открыть привилегиро- ванный сокет (порт 53), но потом он может потерять привилегии и вернуться на уровень обычного пользователя, поскольку все файлы, которые ему нужны, принадлежать дан- ному пользователю. Следовательно, демон nsd должен иметь учетную запись. Для того чтобы повысить безопасность, мы можем также запустить демон nsd в вир- туальном окружении, используя команду chroot, поскольку зонные файлы, файлы баз данных, файлы xfrdfile, difffile и PID, а также сокет системного журнала (или ре- гистрационный файл) доступны через виртуальный каталог. Зонные параметры конфигурации NSD В отличие от глобальных параметров, зонные параметры обычно требуют опреде- ленного конфигурирования, особенно это относится к спискам управления доступом (ACL — access control list). Ш Определения зон name: имя_зоны zonefile: имя_файла Зона определяется своим именем и файлом записей о ресурсах. Ш Главные ACL-серверы
Глава 17. Система доменных имен 675 notify: ip-адрес ( имя-ключа | NOKEY )23 provide-xfr: ip-спецификация ( имя-ключа | NOKEY | BLOCKED) Главный сервер для зоны уведомляет свои подчиненные серверы об обновлении зоны. Затем, по запросам подчиненных серверов, он инициирует передачу зоны для пересылки модифицированных данных. Следовательно, зона, по отношению к кото- рой сервер является главным, должна быть указана в списках notify и provide-xfr. Значения этих параметров обычно совпадают. Если не указан параметр NOKEY, то уве- домления подписываются ключом, указанным в списке как имя_ключа. Следует помнить, что, в отличие от демона named, демон nsd не уведомляет подчи- ненные серверы зоны автоматически. Вы должны явно указать их в списках notify и provide-xfr. Эти директивы могут повторяться. Ш Подчиненные ACL-серверы allow-notify: ip-адрес ( имя-ключа | NOKEY | BLOCKED)24 request-xfr: [ AXFR | UDP] ip-адреса ( имя-ключа | NOKEY) Подчиненный сервер зоны должен явно разрешить главному серверу посылать уве- домления. Любые сообщения, полученные от серверов, не перечисленных в списке allow-notify (или помеченных как BLOCKED), игнорируются. Раздел request-xfr создает запрос подчиненного сервера на передачу зоны от главного сервера по указанному в списке ip-adpecy с помощью заданного ключа с име- нем имя_ключа. Если аргумент AXFR включен, то запрашиваться будут только AXFR- передачи (т.е. передачи всей зоны, в отличие от постепенных изменений). Аргумент udp указывает, что запрос на передачу зоны должен быть послан с помощью UDP- транспорта, а не протокола TCP, заданного по умолчанию. Лучше всего все же исполь- зовать протокол TCP. Ш IP-адрес источника outgouing-interface: ip-адрес Эти списки управляют IP-адресами, используемыми подчиненными серверами для запроса на передачу зоны или главным сервером для посылки уведомлений. Эти адре- са должны совпадать, иначе говоря, раздел управления доступом в конфигурации зоны главного сервера должен содержать те же адреса, что и соответствующий раздел в кон- фигурации зоны подчиненного сервера. Запуск демона nsd Задав конфигурацию демона nsd, запустите программу nsd-checkconf, чтобы убе- диться, что в вашем файле конфигурации nsd. conf нет синтаксических ошибок. Затем поместите ваши зонные файлы в соответствующий каталог (заданный в файле nsd. conf) и используйте управляющий сценарий nsdc, чтобы скомпилировать их в файлы базы данных. В заключение запустите сервер имен с помощью сценария nsdc. $ sudo nsdc rebuild $ sudo dsdc start Проверьте сервер имен с помощью команд dig или drill. Если результаты вас удовлетворяют, добавьте в последовательность загрузки вашей операционной системы команду nsdc start, а в ее последовательность завершения работы — команду nsdc 23 Здесь и в следующей строке скобки использованы лишь для того, чтобы показать группиро- вание; на самом деле их использовать не надо. 24 См. предыдущую сноску.
676 Часть II. Работа в сети stop. Вы можете также настроить файл-расписание для службы Сгоп, чтобы раз в день выполнять команду ns cd patch для обновления текстовых зонных файлов на основе файлов базы данных. Инсталляция и конфигурирование сервера Unbound Unbound — это рекурсивный, кеширующий DNS-сервер имен, выполняющий авто- ризацию. Его разработчиком является та же самая организация, которая создала сервер NDS (NLnet Labs). Сначала он был предназначен для систем UNIX и Linux, но в настоя- щее время доступен и для системы Windows. Для того чтобы инсталлировать его, создайте нового пользователя с именем “unbound”, зарегистрируйте его как пользователя и загрузите дистрибутивный пакет с адреса unbound.net. Сервер Unbound требует наличия библиотек Idns и OpenSSL и может использовать библиотеку libevent (monkey.org/~provos/libevent), если она доступна. Как и сервер NSD, сервер Unbound сначала должен запускаться как кор- невой, а затем возвращаться на уровень пользователя со специальной учетной записью. Для того чтобы создать сервер Unbound, следует выполнить следующие команды. $ ./configure $ make $ sudo make install Сервер Unbound сопровождается обширным пакетом тестов, которые можно запу- стить командой make test. Дистрибутивный пакет инсталлирует следующие выполняе- мые файлы. • unbound — рекурсивный сервер имен. • unbound-checkconf — инструмент для проверки синтаксиса файла unbound, conf. • unbound-control, unbound-control-setup - инструменты для удаленного управления безопасностью. • unbound-host — простой инструмент для запросов. Команда unbound-host не является такой же многословной, как команды dig и drill. В табл. 17.11 перечислены каталоги, в которые размещаются компоненты системы Unbound. Таблица 17.11. Каталоги для инсталляции системы Unbound : ' -1’ '-..у-.-. 1 " IL 1 1 Выполняемые файлы Библиотеки Файл конфигурации Справочные страницы Механизм виртуализации Файлы PID /usr/local/sbin /usr/local/lib /etc/local/etc/unbound/unbound.conf /usr/local/share /usr/local/etc/unbound /usr/local/etc/unbound Файл конфигурации сервера unbound под названием unbound, conf похож на файл конфигурации сервера nsd. Его синтаксис выглядит следующим образом. атрибут-, значение
Глава 17. Система доменных имен 677 Комментарии начинаются символом # и продолжаются до конца строки. Для провер- ки корректности файла конфигурации можно выполнить команду unbiund-checkconf. Рассмотрим простой пример файла unbound, conf, адаптированный по сравнению со справочной страницей и содержащий несколько дополнительных комментариев. server: directory: "/var/unbound/etc" username: unbound chroot: "/var/unbound" pidfile: "/var/run/unbound.pid" root-hints: "root.cache" interface: 0.0.0.0 # interface: ::0 # access-control: 10.0.0.0/8 allow # access-control: 2001:DB8::/64 allow # # # # Прослушивает все интерфейсы IPv4 и все интерфейсы IPv6 Локальные частные сети Локальные сети IPv6 В этом примере сервер прослушивает все интерфейсы и допускает все запросы» по- ступающие от локальных 1Ру6-сетей и немаршрутизированных частных сетей 10. Он ре- гистрируется в системном журнале с помощью функциональных возможностей демона (по умолчанию) и запускается в виртуальном окружении, созданном командой chroot от имени пользователя unbound. Поскольку сервер unbound является рекурсивным, он имеет много параметров. Их количество (больше 70) составляет примерно половину количества параметров серве- ра BIND (больше 150). Мы опишем лишь некоторые из них. Полный обзор параме- тров можно найти в справочной системе и в документации, расположенной на сайте unbound.net. Язык конфигурации сервера unbound предусматривает четыре директивы высшего уровня: server, remote-control, stub-zone и forward-zone.25 Глобальные параме- тры находятся в разделе server. Рассмотрим наиболее важные из них. Ш Местоположение directory: каталог [/usr/local/etc/unbound] pidfile: имя_файла [/usr/local/etc/unbound/unbound.pid] root-hints: имя_файла [нет] Параметр directory задает рабочий каталог сервера: по умолчанию сервер unbound устанавливается в каталог /usr/local/etc, но многие организации предпочитают ката- лог /var. Файлы PID по умолчанию записываются в рабочий каталог сервера unbound, но их можно поместить и в более традиционные места, например в каталог /var/run. Корневые подсказки встраиваются в код сервера unbound, поэтому файл подсказок не нужен. Однако его можно создать, если вы хотите, поскольку адреса, записанные в коде, в конце концов могут устареть. Если вы хотите иногда получать свежие копии сер- вера, используйте команду dig . ns. Если же вы страдаете паранойей, попытайтесь вы- полнить команду dig@a. root-server. net . ns, чтобы получить авторитетную копию. Ш Протоколирование use-syslog: yes | no [yes] logfile: имя_файла [нет] log-time-ascii: yes I по [по] verbosity: уровень [1] 25 Он напоминает язык сценариев Python.
678 Часть II. Работа в сети Протокольная информация может поступать либо в системный журнал, либо в файл. Это зависит от параметров use-syslog и logfile. Если вы хотите знать обычное вре- мя, а не время UNIX (т.е. количество секунд, прошедших после 1 января 1970 года), включите параметр log-time-ascii. Параметр verbosity определяет объем протоко- лирования (детали описаны в разделе 17.15). Ш Статистические показатели statistics-interval: секунд [0, т.е. отключена] statistics-cumulative: yes | по [по] extended-statistics: yes | по [по] Накопление статистических данных по умолчанию отключено, потому что они за- медляют работу сервера имен. Если вы включите этот режим, установив ненулевое зна- чение параметра statistics-interval, то статистические данные будут записываться в протокольный файл (или системный журнал) через указанные промежутки времени. По умолчанию счетчики статистических показателей каждый раз при их записи в файл обнуляются; для того чтобы этого не происходило, используйте параметр statistics- cumulative. Установив параметр extended-statistics равным yes, вы сгенерируете больше данных, чем сможете записать в файл с помощью команды unbound-control. EQ Более подробная информация об утилитах Cacti и RRDTool приведена в разделе 21.12. Каталог дистрибутивов contrib содержит надстройки, которые соединяют утилиты Cacti или Munin с работающим сервером имен и выводят графическую информацию о статистических данных с помощью утилиты RRDTool. Подробности можно найти на сайте unbound.net. EQ Разрешение запросов access-control: блок_сети действие [разрешает любой локальный узел] Параметр access-control — это ключ для конфигурации сервера имен в рекур- сивном режиме по отношению к своим собственным пользователям, но не для ос- тальных пользователей. Для того чтобы разрешить несколько интерфейсов, следует использовать несколько разделов allow-control. Параметр действие может прини- мать четыре значения: • deny — блокирует все запросы от указанных сети или узла; • refuse — блокирует запросы и посылает обратно сообщение REFUSED; • allow — отвечает на запросы, поступившие от клиентов, требующих рекурсивной обработки; • allow-snoop — отвечает на запросы от рекурсивных и итеративных клиентов. Действие refuse более точно соответствует спецификации системы DNS, чем дей- ствие deny, потому что клиенты предполагают, что запросы, не получившие ответа, были потеряны в сети, а не отклонены по решению администратора. Действие allow применяется к обычным клиентам системы DNS. Параметр allow-snoop позволяет отвечать не только на итеративные, но и на ре- курсивные запросы. Его можно использовать для того, чтобы исследовать содержимое кеша сервера, поскольку итеративный запрос достигает цели, только если ответ уже на- ходится в кеше. Параметр allow-snoop можно также использовать для злонамеренных действий, поэтому на узлах системного администратора его следует ограничивать. EQ Безопасность
Глава 17. Система доменных имен 679 chroot: каталог [/usr/local/etc/unbound] username: имя [unbound] Параметр username задает непривилегированного пользователя, под именем кото- рого должен запускаться сервер unbound, после завершения процесса загрузки. Директива chroot заставляет сервер unbound выполняться в виртуальном окруже- нии. Для того чтобы убедиться, что серверу unbound доступно все, что ему нужно из его виртуального окружения, приходится преодолеть несколько препятствий, но в послед- них версиях код стал намного проще. Код очень аккуратно отображает глобальные пути в виртуальное окружение, создан- ное командой chroot (chrooted jail). Большинство путей можно задать в виде абсолют- ных глобальных путей, абсолютных путей в виртуальном каталоге или относительных путей по отношению к рабочему каталогу. Сервер unbound при необходимости выпол- няет соответствующее преобразование. Отметим несколько важных моментов, касающихся запуска сервера unbound в вирту- альной среде. Считывание файла конфигурации, разумеется, предшествует выполнению команды chroot, поэтому файл конфигурации, заданный командной строкой сервера unbound, должен быть задан глобальным путем. Файл PID, содержащий ключ unbound- control, и сокет системного журнала остаются за пределами виртуального каталога, по- скольку они открываются до того, как сервер unbound выполнит команду chroot. Сервер unbound считывает псевдоустройство /dev/random до выполнения команды chroot, но мы рекомендуем оставить его открытым и после выполнения этой команды. Дело в том, что сервер unbound может обратиться к нему позднее, чтобы получить дру- гие случайные данные. Если сервер unbound не может открыть псевдоустройство /dev/ random, он использует источник случайных чисел, заданный по умолчанию, и регистри- рует предупреждение. ДВ системе Linux можно сделать псевдоустройство /dev/random доступным в виртуальной среде, выполнив следующую манипуляцию (предполагается, что файл /var/unbound находится в виртуальном каталоге). linux$ sudo mount -bind -n /dev/random /var/unbound/dev/random Ш Идентификаторы Следующие параметры определяют, сообщать ли серверу unbound правду о номере своей версии и имени узла при запросе имен CHAOS id. server и version. server. hide-identity: yes | no [no] identity: строка [имя_узла] hide-version: yes | no [no] version: строка [версия сервера имен] Как указывалось в начале раздела, мы рекомендуем не скрывать эти значения. Ш IP-адреса interface: ip-адрес [локальныи_узел] outgoing-port-avoid: число или диапазон [нет] Сервер unbound имеет несколько параметров, управляющих интерфейсами, кото- рые он прослушивает в ожидании запросов, и номерами портов, используемых для по- лучения и отправки запросов. Для большинства организаций настройки по умолчанию вполне приемлемы и не уязвимы для атак на кеш, изобретенных Камински. Однако па- раметры interface и outgoing-port-avoid должны конфигурироваться явно.
680 Часть II. Работа в сети Параметр interface задает интерфейсы, которые сервер unbound прослушивает в ожидании запросов. Его необходимо задавать явно, поскольку по умолчанию задан ло- кальный узел, что вполне удовлетворительно, если сервер unbound выполняется на каж- дой машине, но неприемлемо, если в каждой подсети или на каждом сайте должен быть один сервер имен. Добавьте инструкцию interface для каждого интерфейса, которому клиенты могут послать запрос. Необходимо также задать конфигурацию outgoing-port-avoid, чтобы исключить все порты, блокируемые вашим брандмауэром и используемые другой программой. Сервер unbound уже исключил порты, номера которых меньше 1024, и порты, назна- ченные организацией IANA. Ш Спецификации DNSSEC module-config: имена_модулей [нет] trust-anchor-file: имя_файла [нет] trust-anchor: запись_о_ресурсах [нет] trusted-keys-file: имя_файла [нет] dlv-anchor-file: имя_файла [нет] dlv-anchor: записъ_о_ресурсах [нет] Все эти параметры относятся к процессу развертывания спецификаций DNSSEC; они позволяют задать точки доверия, указав файлы, в которых они находятся, или поме- стив запись о ресурсах непосредственно в значение параметра. Допускается только одна выделенная точка доверия DLV. Установив параметр module-config равным validator iterator, можно вклю- чить проверку спецификаций DNSSEC. Это значение должно сопровождаться точками доверия, которые должны быть либо явно сконфигурированы, либо выделены. Более подробно спецификации DNSSEC обсуждаются в разделе 17.13. CQ Подписи val-* <разное> [параметры подписи, приемлемые по умолчанию] Ряд параметров val-* регламентирует процесс проверки подписи подписанных зон. На процесс проверки могут влиять разные факторы (например, максимально допус- тимое отклонение временных показателей). Значения, установленные по умолчанию, вполне приемлемы, если вы не хотите заняться отладкой процесса развертывания спец- ификаций DNSSEC. Задав параметр val-log-level равным 1, можно отключить про- верку системного журнала, что при отладке бывает полезным. Ш Настройка Сервер unbound имеет несколько параметров, позволяющих настраивать его работу. Одним из самых важных является параметр num-threads, который должен быть рав- ным количеству ядер, доступных серверу (т.е. количеству ядер на один процессор, умно- женному на количество процессоров). Значения параметров настроек, заданные по умолчанию, вполне подходят для боль- шинства организаций. Мы не будем их перечислять, поскольку читатели могут обра- титься к справочной странице для файла unbound, conf и интернет-странице unbound, net. В конце справочной страницы есть полезный пример, демонстрирующий настрой- ку производительности компьютера с небольшим объемом памяти. Ш Частные адреса private-address: 1р_адрес_или_подсеть [нет] private-domain: имя_домена [нет]
Глава 17. Система доменных имен 681 Инструкция private-address блокирует указанные в списке IP-адреса, не позволяя отправлять им ответы на запросы. Обычно она используется в сочетании с простран- ством частных IP-адресов RFC1918 (см. раздел 14.4), чтобы не допустить их разглаше- ние в Интернете. Это типичное поведение внешних организаций, но если вы на самом деле используете частные адреса RFC1918 внутри организации, то, вероятно, не захо- тите блокировать свои собственные внутренние адреса. Инструкция private-domain разрешает этот конфликт, позволяя указанному домену и всем его поддоменам иметь частные адреса. Следующий набор параметров конфигурации относится к инструкции remote- control, управляющей взаимодействием между программами unbound и unbound- control. Это взаимодействие управляется самоподписанными сертификатами SSL/TLS в формате Х.509, установленными программой unbound-control-setup. Эта инструк- ция имеет всего несколько параметров, поэтому мы перечислим их всех. CQ Управление работой программы unbound control-enable: yes | no control-interface: ip-адрес control-port: порт server-key-file: файл_закрытого_ключа server-cert-file: файл_сертификата_реш control-key-file: файл_закрытого_ключа control-cert-file: файл_сертификата_рет [no] [локальный узел (127.0.0.1 и ::1)] [953] [unbound_server.key] [unbound_server .pern] [unbound_control.key] [unbound_control.pem] Управлять программой unbound можно из любой точки Интернета. Для того чтобы настроить аутентификацию, запустите программу unbound-control, чтобы создать со- ответствующие файлы сертификатов, установите параметр control-enable равным yes и параметр control-interface равным адресу интерфейса, который сервер будет прослушивать в ожидании команд. Для того чтобы разрешить все интерфейсы, можно использовать адрес 0.0.0.0 (и : : 0). По умолчанию требуется, чтобы контроллер был зарегистрирован на том же компьютере, что и программа unbound. Вероятно, это самый безопасный вариант. Ш Тупиковые зоны stub-zone: name: имя_домена [нет] stub-host: имя_узла [нет] stub-addr: 1р_адрес[@порт] [нет] Раздел stub-zone позволяет направлять запросы на конкретный домен, адресуя их авторитетному серверу, назначенному вами, а не разрешать их с помощью обычного иерархического поиска, начиная с корня. Например, вы можете пожелать, чтобы ваши пользователи видели закрытое представление вашей локальной сети, содержащее боль- ше узлов, чем демонстрируют запросы DNS, поступающие извне. Имя “stub zone” (“ту- пиковая зона”) является неудачным и не имеет отношения к тупиковым зонам, исполь- зуемым в сервере BIND. Для реализации этой конфигурации следует запустить авторитетный сервер, который будет обслуживать локальную версию зоны, на другом узле (или на том же самом узле, но на другом порту). Затем следует указать программе unbound этот сервер, используя параметры инструкции stub-zone. Вы можете задать либо имя_узла сервера (параметр stub-host), либо его IP-адрес (параметр stub-addr). Вы можете также указать порт, который по умолчанию имеет номер 53. Использование адреса защищает вас от заци-
682 Часть II. Работа в сети кливания в ситуациях, когда программа unbound не может найти имя, не имея доступ к целевой зоне. Можно использовать сколько угодно зон. £□ Переадресация forward-zone: name: имя_домена [нет] forward-host: имя_сервера [нет] forward-addr: ±р_адрес [нет] Параметр forward-zone позволяет серверу unbound переадресовывать все запросы (или некоторые из них, в зависимости от значения параметра name) на другой сервер, для того чтобы помочь этому серверу создать более крупный кеш. Переадресация вы- полняется, только если сервер unbound не может ответить на запрос, используя свой собственный кеш. Общая информация о переадресации и причинах ее использования приведена в разделе 17.6. 17.12. Обновление файлов зон Когда в домен вносится изменение (например, добавляется или удаляется компью- тер), следует обновить файлы данных на главном сервере. Кроме того, необходимо увели- чить порядковый номер в записи SOA для этой зоны. В заключение вы должны заставить программное обеспечение принять изменения. Последний этап зависит от программно- го обеспечения. • Сервер BIND. Выполните команду rndc reload, чтобы демон named принял из- менения. Вы можете также прекратить работу демона named и запустить его снова, но если ваш сервер является одновременно авторитетным по отношению к вашей зоне и рекурсивным по отношению к вашим пользователям, то эта операция ан- нулирует кешированные данные, полученные от других доменов. • Сервер NSD. Выполните команду nsdc rebuild, а затем команду nsdc reload. Сервер nsd не выполняет кеширование, поэтому никаких побочных эффектов от перезагрузки не будет. Обновленные данные немедленно передаются подчиненным серверам главных серве- ров BIND, поскольку параметр notify включен по умолчанию. При работе с сервером NSD необходимо конфигурировать списки управления доступом в разделе notify. Если же по какой-то причине он отключен, подчиненным серверам придется дождаться, пока истечет период обновления, установленный в записи SOA зоны (обычно один час). Если параметр notify отключен, можно выполнить на каждом подчиненном серве- ре BIND команду ndc reload, которая заставит демон связаться с главным сервером, убедиться в том, что зонная база данных изменена, и запросить ее пересылку. Соответ- ствующая команда сервера NSD — nsd reload. При изменении имени или IP-адреса компьютера не забывайте модифицировать зоны как прямого, так и обратного преобразований. Игнорирование последних может привести к появлению скрытых ошибок: часть команд будет работать, а часть — нет. Если изменить файлы данных, но не обновить порядковый номер в записи SOA, то изменения вступят в силу только на главном сервере (после перезагрузки), но не на под- чиненных. Не следует редактировать файлы данных, относящиеся к подчиненным серверам. Эти файлы ведет сам демон named, и системные администраторы не должны вмеши-
Глава 17. Система доменных имен 683 ваться в его работу. Лучше просматривать файлы данных сервера BIND, не делая в них никаких изменений. Сервер NSD ведет базы данных, которые невозможно проверить непосредственно. Однако по умолчанию изменения записываются в текстовые зонные файлы командой nsd-patch. Документом RFC2136 разрешается менять зонные базы данных сервера BIND про- граммным путем. Эта возможность, называемая динамическим обновлением, необхо- дима для протоколов автоматического конфигурирования, например DHCP. О том, как работает этот механизм, речь пойдет чуть ниже. Передача зоны Серверы DNS синхронизируются посредством механизма передачи зоны. Передача зоны может включать в себя всю зону (такая передача называется AXFR) или только по- следние изменения (такая передача именуется IXFR). По умолчанию передача зоны осу- ществляется по протоколу TCP через порт 53. Сервер BIND регистрирует соответству- ющую информацию в системном журнале с пометкой “xfer-in” или “xfer-out”. Сервер NSD включает ее в обычный протокольный поток. В процессе передачи зоны подчиненный сервер запрашивает информацию от главно- го сервера и создает резервную копию данных о зоне на диске. Если данные на главном сервере не изменились, что определяется по порядковым номерам (не по реальным дан- ным), то обновления не выполняются и резервные файлы просто фиксируются. (Иначе говоря, их время изменения устанавливается равным текущему времени.) И отправляющий, и получающий серверы способны отвечать на запросы при пере- даче зоны. Подчиненный сервер начинает использовать новые данные только после за- вершения передачи. Если зона очень большая (например, сот) или обновляется динамически (о чем пой- дет речь в следующем подразделе), то объем изменений обычно мал в сравнении с раз- мером зоны. При передаче IXFR пересылаются только изменения (когда размер изме- нений начинает превышать размер зоны, включается режим обычной передачи AXFR). Механизм IXFR напоминает программу patch: старая база данных сравнивается и син- хронизируется с новой. В системе BIND передача IXFR задается по умолчанию, а демон named, предна- значенный для ведения журнала транзакций, — именем имя_зоны. jnl. В инструкции server любого сервера, которому нужны такие передачи, можно задать параметры provide-ixf г и request-ixf г. Параметр proyide-ixfг включает и отключает службу IXFR для зон, по отношению к которым сервер является главным. Параметр request* ixf г включает и отключает службу IXFR для зон, по отношению к которым сервер яв- ляется подчиненным. provide-ixfr yes ; # В инструкции сервера BIND request-ixfr yes ; # В инструкции сервера BIND Механизм IXFR может работать и с зонами, редактируемыми вручную. Для того чтобы включить этот режим, следует включить параметр ixfr-from-difference. Механизм IXFR требует, чтобы зонные файлы были упорядочены в каноническом по- рядке. За это отвечает демон named, но при этом затрачивается определенная память сервера и ресурсы центрального процессора. Механизм IFXR компенсирует эти затраты за счет уменьшения сетевого трафика. При запросе передачи зоны подчиненные серверы NSD используют передачу IXFR, но если все главные серверы поддерживают передачу AXFR, то подчиненные серверы
684 Часть II. Работа в сети переключаются именно на этот режим. Поскольку данные в системе NSD хранятся в виде скомпилированных файлов базы.данных, упорядочение файлов для передачи IXFR не требуется. Если передача была прервана, то сервер NSD сохраняет состояние демона передачи зоны в файле, заданном атрибутом xf rdf ile. Перезагрузкой после выполнения передач IXFR можно управлять с помощью атри- бута xfrd-reload-timeout. По умолчанию он равен 10 секундам, так что изменения IXFR успевают в определенной степени сгруппироваться. В системе BIND запрос IXFR к серверу, который не поддерживает его автоматиче- ски, заменяется стандартной передачей зоны AXFR. В системе NSD эту замену можно запретить, установив атрибут allow-axfr-f allback равным no. Обе системы прилагают много сил для того, чтобы при сбое сервера во время пере- дачи зоны информация не была повреждена. динамические обновления в системе BIND Система DNS основана на предположении, что соответствие между именами и адресами относительно стабильно и меняется нечасто. Но это правило постоянно на- рушается, если в организации используется протокол DHCP и при подключении к сети компьютеру динамически назначается IP-адрес. Существует два классических решения этой проблемы: добавить обобщенные записи в базу данных DNS или непрерывно ре- дактировать DNS-файлы. В большинстве случаев ни одно из решений не является удо- влетворительным. Первое решение должно быть знакомо каждому, кто имеет коммутируемый выход в Интернет. Конфигурация DNS в этом случае выглядит примерно следующим образом. dhcp-hostl.domain. IN А 192.168.0.1 dhcp-host2.domain. IN A 192.168.0.2 Это простое решение, но оно означает, что указанные имена постоянно связаны с IP- адресами и, следовательно, компьютер, получающий новый адрес, меняет имя. В такой среде трудно соблюдать требования безопасности и вести журнальную регистрацию. Механизм динамических обновлений, появившийся в последних версиях BIND, предлагает альтернативное решение. Он позволяет демону DHCP уведомлять сервер BIND о сделанных адресных назначениях, обновляя, таким образом, содержимое базы данных DNS “на лету”. Динамические изменения могут добавлять, удалять и модифици- ровать запросы о ресурсах. Если динамические изменения дозволены, демон named ведет журнал динамических изменений (имя_зоны. jnl), который может оказаться полезным при сбое сервера. Демон named восстанавливает состояние зоны, сохраненное в памяти, считывая исходные зонные файлы и воспроизводя изменения на основе журнала. После того как зона была динамически обновлена, ее уже нельзя редактировать вруч- ную. Необходимо сначала остановить сервер BIND с помощью команд ndc f reez зона или ndc freez зона класс представление. Эти команды синхронизируют журналь- ный файл с файлом главной зоны на диске, а затем удаляют журнал. После этого можно отредактировать зонный файл вручную. К сожалению, исходное форматирование файла пропадет (он будет иметь вид файла, который ведется демоном named на подчиненных серверах). При “заморозке” зоны попытки динамического обновления отменяются. Для того чтобы загрузить зонный файл с диска и все-таки выполнить динамическое обновление, следует использовать команду rdns thaw с теми же аргументами, которые были указа- ны при “заморозке” зоны.
Глава 17. Система доменных имен 685 Утилита nsupdate, входящая в дистрибутив BIND 9, позволяет осуществлять ди- намические обновления из командной строки. Утилита работает в пакетном режиме, принимая команды, вводимые с клавиатуры, или читая их из файла. Пустая строка или команда send являются признаком завершения обновления и пересылают изменения на сервер. Две пустые строки означают конец входного потока. В командном языке предусмотрена примитивная инструкция if, позволяющая формулировать условия вида “если имя неизвестно в DNS, добавить его”. Искомое имя (или набор записей о ресур- сах) может существовать либо отсутствовать. Ниже показан простейший сценарий nsupdate, который заносит в базу данных ин- формацию о новом узле, а также псевдоним существующего узла, при условии что этот псевдоним нигде не используется. Угловые скобки создаются программой nsupdate и не являются частью командного сценария. % nsupdate > update add newhost.cs.colorado.edu 86400 А 128.138.243.16 > prereq nxdomain gypsy.cs.colorado.edu > update add gypsy.cs.colorado.edu CNAME evi-laptop.cs.colorado.edu Динамические обновления — очень опасная возможность. Они потенциально спо- собны предоставить право неконтролируемой записи важных системных данных. Не пытайтесь контролировать доступ на основании IP-адресов: их легко подделать. Лучше воспользоваться системой аутентификации TSIG с совместным секретным ключом. На- пример, в системе BIND 9 поддерживается команда % nsupdate -к каталог_ключа:файл_ключа ИЛИ % nsupdate -к каталог_ключа:секретныи_ключ Поскольку пароль задается в командной строке в виде -у, его может увидеть тот, кто запустит команду w или ps в правильный момент. По этой причине более предпочти- тельной является форма -к. Подробнее технология TSIG описана в разделе 17.13. Динамические обновления зоны разрешаются в файле named, conf посредством па- раметра allow-update или update-policy. Параметр allow-update предоставляет право обновления любых записей клиентам, чьи IP-адреса и ключи шифрования указа- ны в списке. Параметр update-policy появился в BIND 9 и позволяет точнее управ- лять обновлениями на основании имен узлов и типов записей. Он требует использовать механизмы аутентификации. Оба параметра являются зонными. С помощью параметра update-policy можно разрешить клиентам обновлять свои записи А и PTR, но не SOA, NS или KEY. Можно также позволить узлу обновлять толь- ко свои записи. Имена допускается задавать явно, в виде поддоменов, с метасимвола- ми или с помощью ключевого слова self, которое задает правила доступа компьюте- ра к собственным записям. Записи о ресурсах идентифицируются по классу или типу. Синтаксис параметра update-policy выглядит следующим образом. update-policy { grant | deny } сущность имя_типа имя [типы] ; Здесь сущность — это имя криптографического ключа, необходимого для авториза- ции обновлений. Имя_типа имеет четыре значения: name, subdomain, wildcard или self. Имя — это обновляемая зона, а типа — типы записей о ресурсах, которые можно обновить. Если типы не указаны, то могут обновляться записи всех типов, кроме SOA, NS, RRSIG и NSEC или NSEC3. Рассмотрим пример. update-policy { grant dhcp-key subdomain dhcp.cs.colorado.edu A } ;
686 Часть II. Работа в сети В такой конфигурации любому, у кого есть ключ dhcp-key, разрешается обновлять адресные записи в поддомене dhcp. cs. Colorado. edu. Эта директива должна появиться в файле named.conf в инструкции zone домена dhcp. cs. Colorado. edu. Потребуется также инструкция key, содержащая определение ключа dhcp-key. Приведенный ниже фрагмент файла named. conf факультета компьютерных наук университета Колорадо (Computer Science Department at the University of Colorado) ис- пользует инструкцию update-policy для того, чтобы позволить студентам, находя- щимся в классе системного администратора, обновлять свои поддомены, не касаясь при этом остального окружения системы DNS. // saclass.net zone "saclass.net” { type master; file "saclass/saclass.net"; update-policy { grant feanor_mroe. subdomain saclass.net.; grant mojo_mroe. subdomain saclass.net.; grant dawdle_mroe. subdomain saclass.net.; grant pirate_mroe. subdomain saclass.net.; }; 17.13. Вопросы безопасности DNS появилась как совершенно открытая система, но в процессе развития она ста- новилась все более защищенной, приобретая необходимые средства защиты. По умол- чанию каждый, у кого есть доступ в Интернет, может исследовать чужой домен отдель- ными запросами с помощью таких команд, как dig, host или nslookup. В некоторых случаях можно получить образ всей базы данных DNS. Для устранения этих недостатков в последние версии пакета BIND были введены различные средства управления доступом, основанные на проверке адресов или крипто- графической аутентификации. В табл. 17.12 перечислены элементы подсистемы безопас- ности, которые настраиваются в файлах named.conf, nsd.conf или unbound, conf. Таблица 17.12. Средства защиты в файле named.conf (Параметр Инструкции Что определяет BIND acl Разные Списки управления доступом allow-query options, zone Кто может посылать запросы зоне или серверу allow-recursion options Кто может посылать рекурсивные запросы allow-transfer options, zone Кто может запрашивать зонные передачи allow-update zone Кто может выполнять динамические обновления blackhole options Какие серверы нужно полностью игнорировать bogus server Какие серверы никогда нельзя опрашивать update-policy zone Какие обновления разрешены
Глава 17. Система доменных имен 687 Окончание табл, 17,12 Параметр Инструкций . Что определяет ’ " "" NSD/Unbound access-control server Кто может посылать запросы (Unbound) allow-notify Подчиненная зона Кто может посылать уведомления (NSD) chroot server Корневой каталог notify Главная зона Подчиненные серверы, которые должны получать уве- домление (NSD) provide-xfr Главная зона Получатели при передаче зон (NSD) request-xfr Подчиненная зона Провайдеры передачи зон (NSD) username server Пользователь, который должен работать в виртуаль- ном окружении chroot Для того чтобы минимизировать риск, все три сервера имен могут запускаться в вир- туальном окружении chroot под непривилегированным идентификатором; сервер имен unbound делает это по умолчанию. Все они могут использовать подпись транзакции, для того чтобы управлять взаимодействием между главными и подчиненными серве- рами (BIND и NSD), а также между серверами имен и их управляющими программами (BIND и Unbound). Кроме того, все они полностью поддерживают протокол DNSSEC. Эти вопросы рассмотрим в следующих разделах. Еще раз о списках управления доступом в сервере BIND Список управления доступом — это именованный список соответствия адресов, который может служить аргументом различных директив, в частности allow-query, allow-transfer и blackhole. Синтаксис списков был рассмотрен ранее. Кроме того, списки управления доступом могут способствовать укреплению безопасности QNS- серверов. В каждой организации должен существовать хотя бы один список для недоступных адресов и один — для локальных. Рассмотрим пример. acl bogusnets { 0.0.0.0/8; 1.0.0.0/8; 2.0.0.0/8; 169.254.0.0/16; // список недоступных и фиктивных сетей // адреса по умолчанию // зарезервированные адреса // зарезервированные адреса // канально-локальные делегируемые адреса // тестовые адреса, наподобие example.com // пространство групповых адресов // частное адресное пространство (RFC1918)26 // частное адресное пространство (RFC1918) // частное адресное пространство (RFC1918) }; 192.0.2.0/24; 224.0.0.0/3; 10.0.0.0/8; 172.16.0.0/8; 192.168.0.0/16; acl cunets { 128.138.0.0/16; // список сетей университета штата Колорадо // основная кампусная сеть 198.11.16.0/24; 204.228.69.0/24; 26 Не делайте частные адреса недоступными, если они используются для конфигурирования внутренних DNS-серверов!
688 Часть II. Работа в сети Далее нужно в глобальном разделе options конфигурационного файла разместить следующие директивы. allow-recursion { cunets; }; blackhole { bogusnets; }; Желательно также ограничить зонные передачи только легитимными подчиненными серверами. Это достигается с помощью следующих списков. acl ourslaves { 128.138.242.1; // сервер anchor }; acl measurements { 198.32.4.0/24; // проект Билла Маннинга, адрес v4 2001:478:6:::/48; // проект Билла Маннинга, адрес v6 }; Собственно ограничение реализуется такой строкой. allow-transfer { ourslaves; measurements; }; Передачи разрешены только нашим подчиненным серверам, а также компьютерам глобального исследовательского проекта, который посвящен определению размеров сети Интернет и процента неправильно сконфигурированных серверов. Подобное огра- ничение лишает остальных пользователей возможности получать дамп всей базы данных с помощью команды dig. Разумеется, нужно по-прежнему защищать сеть на более низком уровне с помощью списков управления доступом на маршрутизаторе и стандартных средств защиты на каждом узле. Если такой возможности нет, ограничьте трафик DNS-пакетов шлюзовым компьютером, который находится под постоянным административным контролем. Открытые распознаватели Открытый распознаватель — это рекурсивный кеширующий сервер имен, получаю- щий запросы от любого пользователя Интернета и отвечающий на них. Открытые рас- познаватели опасны. Внешние пользователи могут потреблять ваши ресурсы без вашего разрешения или ведома, и если они делают это со злым умыслом, кеш вашего распозна- вателя может выйти из строя. Что еще хуже, открытые распознаватели иногда используются злоумышленниками для усиления распределенной атаки на основе отказа в обслуживании. Атакующие по- сылают запрос на ваш распознаватель, указывая фальшивый адрес источника, который является объектом атаки. Ваш распознаватель послушно отвечает на эти запросы и по- сылает огромный пакет жертве. Жертва не посылала запросы, но она обязана выполнить маршрутизацию и обработать сетевой трафик. Умножьте объем пакета на количество распознавателей, и вы осознаете реальную опасность, грозящую жертве. Статистика свидетельствует о том, что от 75 до 80% кеширующих серверов имен в настоящее время являются открытыми распознавателями! Сайт dns .measurement- factory . сот/tools может помочь вам проверить ваш сайт. Зайдите на него, выберите команду “open resolver test” и наберите IP-адрес вашего сервера имен. Вы можете также проверить все серверы имен вашей сети или все серверы вашей организации, используя идентификаторы whois.
Глава 17. Система доменных имен 689 Для того чтобы ваши кеширующие серверы имен отвечали на запросы только ло- кальных пользователей, используйте список управления доступом в файлах named, conf и unbound.conf. Работа в виртуальном окружении chroot Если хакеры взломают ваш сервер, то они смогут получить доступ к системе под видом законного пользователя. Для того чтобы уменьшить опасность, возникающую в этой ситуации, вы можете запустить сервер в виртуальном окружении chroot либо под видом непривилегированного пользователя, либо сделать и то, и другое одновременно. Для демона named флаг команды -t задает каталог виртуального окружения chroot, а флаг -и указывает идентификатор пользователя, под которым работает демон named. Рассмотрим пример. $ sudo named -u 53 Эта команда запускает демон named как корневой процесс, но после того как демон named закончит рутинные операции в роли корневого процесса, он потеряет привиле- гии и запустится под идентификатором 53. Для серверов nsd и unbound того же эффекта можно добиться с помощью опций username и chroot команды server в файле конфигурации. Эти опции также мож- но указать в командной строке сервера nsd с теми же самыми флагами, что и в пакете BIND,----и и -t соответственно. Многие организации не используют флаги -и и -t, но если объявлена тревога, они должны реагировать быстрее, чем хакеры. Виртуальное окружение chroot не может быть пустым каталогом, поскольку оно должно содержать все файлы, необходимые серверу имен для нормальной работы, — /dev/null, /dev/random, зонные файлы, файлы конфигурации, ключи, файлы си- стемного журнала и доменного сокета UNIX, /var и др. Для того чтобы настроить их, требуется выполнить довольно большую работу. Вызов системы chroot осуществляется после загрузки библиотек, поэтому копировать общие библиотеки в виртуальное окру- жение не обязательно. Безопасные межсерверные взаимодействия посредством технологий TSIG и TKEY Пока спецификация DNSSEC (описана в следующем подразделе) находилась на стадии принятия, группа IETF разработала более простой механизм, названный TSIG (RFC2845). Он позволял организовать безопасное взаимодействие серверов благодаря использованию сигнатур транзакций. Контроль доступа, основанный на таких сигнату- рах, надежнее контроля на основе исходных IP-адресов. Сигнатура транзакции аутенти- фицирует пару “отправитель/получатель” и позволяет проверить, изменились ли данные в процессе передачи. В технологии TSIG применяется симметричная схема шифрования, т.е. ключ шиф- рования совпадает с ключом дешифрования. Такой ключ называется совместным се- кретным ключом (shared secret). Спецификация TSIG допускает использование несколь- ких методов шифрования. В пакете BIND реализованы методы MD5, SHA-1, SHA-224 и SHA-256. Сервер NSD реализует те же методы, за исключением метода SHA-224. Для каждой пары серверов, между которыми организуется защищенный канал связи, должен создаваться свой ключ.
690 Часть II. Работа в сети Спецификация TSIG гораздо менее затратная в вычислительном плане, чем шифро- вание с открытым ключом, но она подходит только для локальной сети, где число пар взаимодействующих серверов невелико. На глобальную сеть эта спецификация не рас- пространяется. Настройка технологии TSIG для сервера BIND Утилита dnssec-keygen, являющаяся частью пакета BIND, генерирует ключ для пары серверов. Рассмотрим, например, следующую команду. $ dnssec-keygen -a HMAC-MD5 -Ь 128 -n HOST master-slavel Флаг -Ь 128 означает, что утилита dnssec-keygen должна создать 128-разрядный ключ. В данном случае мы используем 128-разрядный ключ только лишь для того, что- бы он поместился на странице. В реальной жизни следует использовать более длинный ключ; максимально допустимая длина ключа равна 512. Данная команда создает два файла: Kmaster-slavel .+157+09068 .private и Kmaster-slavel. +157+09068.key, где 157 — код алгоритма HMAC-MD5, а 09068 — случайное число, используемое в качестве идентификатора ключа на случай, если у одной пары серверов есть несколько ключей.27 Оба файла содержат один и тот же ключ, но в разных форматах. Файл .private вы- глядит примерно так. Private-key-format: vl.2 Algorithm: 157 (HMAC_MD5) Key: jxopbeb+aPc71Mm2vc9R9g== Содержимое файла . key будет таким. master-slavel. IN KEY 512 3 157 jxopbeb+aPc71Mm2vc9R9g== Обратите внимание на то, что утилита dnssec-keygen добавила точки в конец име- ни каждого ключа в обоих именах файлов и внутри файла . key. Это объясняется тем, что когда утилита dnssec-keygen использует ключи DNSSEC, добавляемые в зонные файлы, имена этих ключей должны быть полностью определены именами доменов и, следовательно, должны заканчиваться точкой. Таким образом, нам нужны два инстру- мента: один для совместных секретных ключей, а второй — для пар открытых ключей. Вообще-то, файл . key на самом деле не нужен: он создается потому, что утилита dnssec-keygen имеет двойное назначение. Просто удалите его. Число 512 в записи KEY означает не длину ключа, а флаг, идентифицирующий запись как запись о главном ключе DNS. После всех этих сложностей вы могли быть разочарованы тем, что сгенерированный ключ представляет собой просто длинное случайное число. Этот ключ можно было бы сгенерировать вручную, записав строку в кодировке ASCII, длина которой делится на четыре, и считать, что вы применили 64-разрядное кодирование, или использовать ути- литу mmencode для того, чтобы зашифровать случайную строку. Способ, которым вы ко- дируете ключ, не имеет значения; он просто должен существовать на обеих машинах. Ш Команда scp является частью пакета SSH. Скопируйте ключ из файла .private на оба сервера с помощью команды scp или просто скопируйте и вставьте его. Не используйте утилиты telnet и ftp для копирова- ния ключа: даже внутренние сети могут быть небезопасными. 27 Это число выглядит случайным, но на самом деле оно представляет собой хешированное значение ключа TSIG.
Глава 17. Система доменных имен 691 Ключ должен быть записан в файлах named. conf на обоих компьютерах. В связи с тем, что эти файлы — общедоступны, а ключ — нет, поместите ключ в отдельный файл, который будет подставляться в файл named. conf. Файл ключа должен иметь уро- вень доступа, равный 600, и принадлежать пользователю демона named. Например, можно создать файл master-slavel. tsig и включить в него следующий фрагмент. key master-slavel { algorithm hmac-md5 ; secret "сгенерированный_ключп ; }; В файл named, conf, ближе к началу, нужно добавить такую строку. include "master-slavel.tsig”; На данном этапе лишь определен ключ. Для того чтобы его можно было использо- вать для подписи и проверки обновлений, нужно посредством инструкции server и ди- рективы keys заставить каждый сервер идентифицировать другую сторону. Например, в инструкцию zone на главном сервере можно включить строку allow-transfer { key master-slavel. ; }; а в файл named.conf подчиненного сервера — строку server 1Р-адрес-главного_сервера { keys [ master-slavel ; } ; } ; Имя ключа в нашем примере носит общий характер. Если вы используете ключи TSIG для многих зон, то, возможно, захотите включить в имя ключа имя зоны, чтобы все стало ясно. Для того чтобы протестировать конфигурацию системы TSIG, выполните утилиту named-checkconf и проверьте синтаксис. Затем с помощью команды dig попытайтесь выполнить передачу зоны (dig@master axfr) от сервера slavel и какой-нибудь другой машины. Первая попытка должна оказаться успешной, а вторая должна завершиться сбоем и сообщением об ошибке “Transfer failed”. Для того чтобы убедиться, что все в по- рядке, удалите раздел allow-transfer и попытайтесь выполнить команду dig снова. На этот раз обе попытки должны завершиться успехом. (Не забудьте вернуть в файл раз- дел allow-transfer!) И наконец, увеличьте порядковый номер зоны на главном сер- вере, выполните команду rndc reload и просмотрите системный журнал на подчинен- ном сервере, чтобы убедиться, что изменения приняты и передача зоны произошла. Если вы впервые используете подписи транзакций, запускайте демона named на первом уровне отладки (режимы отладки будут описаны позднее), пока сообщения об ошибках не исчезнут. В ранних версиях пакета BIND сервер не понимал подписанных сообщений и сообщал об ошибках, что иногда приводило к ошибочной передаче зоны. Ш Протокол NTP описан в разделе 9.5 При использовании ключей TSIG и подписей транзакций между главным и подчи- ненным серверами, необходимо синхронизировать часы на обоих серверах по протоколу NTP. Если часы слишком сильно расходятся (более чем на пять минут), то верификация подписи не будет выполнена. Эту проблему иногда очень сложно распознать. TSIG — это механизм сервера BIND, позволяющий двум узлам автоматически ге- нерировать совместный секретный ключ, не прибегая к телефонным звонкам или се- кретному копированию для распространения ключа. Он использует алгоритм обмена ключами Диффи-Хеллмана (Diffie-Hellman key exchange algorithm), в котором на каждой стороне генерируется случайное число, над ним выполняются определенные математи-
692 Часть II. Работа в сети ческие операции, а результат посылается другой стороне. Затем каждая сторона объеди- няет свое и полученное числа по определенному математическому правилу и получает один и тот же ключ. Злоумышленник может перехватить сообщение, но он не сможет выполнить над ним требуемые математические операции.28 Серверы компании Microsoft используют нестандартный вариант механизма TSIG, который называется GSS-TSIG. В нем для обмена ключами используется технология TKEY. Если вам нужно, чтобы сервер компании Microsoft взаимодействовал с сервером BIND, используйте опции tkey-domain и tkey-gssapi-credential. Другой механизм для подписи трансакций между серверами или службами динами- ческого обновления и главным сервером называется SIG(O). Он использует криптогра- фию, основанную на открытых ключах. Детали этой технологии описаны в документах RFC2535 и RFC2931. Механизм TSIG на сервере NSD Для того чтобы сгенерировать ключи TSIG для списка управления доступом на сер- вере NSD, можно использовать утилиту Idns-keygen из каталога examples в дистрибу- тивном пакете Idns. Подробности описаны немного ниже. Сервер NSD не поддержива- ет ключи SIG(O) и обмен ключами TKEY по алгоритму Диффи-Хеллмана. Технология DNSSEC DNSSEC — это набор расширений DNS, позволяющих аутентифицировать ис- точник данных зоны и проверить их целостность, используя шифрование с открытым ключом. Таким образом, DNSSEC позволяет DNS-клиентам задавать вопросы вида “Действительно ли данные зоны поступили от владельца зоны?” и “Те ли это данные, которые послал владелец?”. Технология DNSSEC реализует три разных механизма: • распределение ключей посредством записей KEY, хранящихся в зонных файлах; • проверка подлинности серверов и данных; • проверка целостности данных. Здесь формируется цепочка доверия: корневые серверы предоставляют подтверждаю- щую информацию для доменов верхнего уровня, те — для доменов второго уровня и т.д. По крайней мере, так это задумывалось. В начале 2010 года и корневой, и большинство доменов верхнего уровня оставались без подписей. Корпорация ICAAN и Министерство торговли США стали делать определенные шаги в направлении внедрения подписей в корневом домене, но пока все ограничива- ется обещаниями. Возможно, это произойдет в средине 2010 года.29 Со своей стороны, по-видимому, доменный регистратор VerySign не собирается подписывать зоны . сот и .net.30 Эти зоны уже слишком велики, а их подписанные версии будут еще больше и потребуют дополнительного серверного обеспечения. Более того, сертификаты Х.509 компании \feriSign обеспечивают значительную долю ее прибыли, а технология DNSSEC 28 Математическую основу этого алгоритма образует задача дискретного логарифмирования, особенность которой состоит в том, что в модулярной арифметике возвести число в степень до- вольно просто, а вычислить логарифм по этой степени практически невозможно. 29 Подписание корневой зоны состоялось 15 июля 2010 года .— Примеч. ред. 30 В конце 2010 года доменный регистратор Verisign сообщил о поддержке технологии DNSSEC для доменной зоны . net.
Глава 17. Система доменных имен 693 может заменить эти сертификаты для определенных приложений. Тем не менее компа- ния VerySign обещала подписать зону . сот в 2011 году, синхронизировав этот процесс с переговорами о своем контракте с корпорацией ICAAN, который должен быть заключен в 2012 году. К счастью, концепция точек доверия позволяет развернуть процесс легализации тех- нологии DNSSEC и расширить защищенные области в дереве DNS еще до внедрения подписанных корневых доменов и доменов верхнего уровня. В системах шифрования с открытым ключом используются два ключа: один шифрует (подписывает) сообщение, а другой дешифрует (проверяет) его. Публикуемые данные подписываются секретным “личным” ключом. Любой может проверить правильность цифровой подписи с помощью соответствующего “открытого” ключа, который свобод- но распространяется. Если открытый ключ позволил правильно расшифровать зонный файл, значит, зона была зашифрована искомым личным ключом. Суть в том, чтобы убе- диться в подлинности открытого ключа, используемого для проверки. Такие системы шифрования позволяют одной из сторон поставить свою “подпись” на открытом ключе, передаваемом другой стороне, гарантируя легитимность ключа. Отсюда термин “цепоч- ка доверия”. Данные, составляющие зону, слишком велики для шифрования с открытым ключом; процесс шифрования получится слишком медленным. Вместе с тем данные сами по себе не секретны, поэтому они просто пропускаются через функцию хеширования (к при- меру, вычисляется контрольная сумма MD5), а результат подписывается (шифруется) секретным ключом зоны. Полученный зашифрованный хеш-код называется цифровой под- писью или сигнатурой зоны. Цифровые подписи обычно добавляются к данным, подлин- ность которых они удостоверяют в виде записей RRSIG в подписанном зонном файле. Для проверки сигнатуры ее нужно дешифровать открытым ключом подписавшей стороны, “прогнать” данные через тот же алгоритм хеширования и сравнить вычислен- ный хеш-код с расшифрованным. В случае совпадения подписавшее лицо считается ау- тентифицированным, а данные — целостными. В технологии DNSSEC каждая зона имеет открытые и секретные ключи. Фактически она имеет два набора ключей: пара ключей для подписи зоны и пара ключей для под- писи ключа. Секретным ключом подписи зоны подписывается каждый набор ресурсов (т.е. каждый набор записей одного типа, относящихся к одному узлу). Открытый ключ подписи зоны используется для проверки сигнатур и включается в зонную базу данных в виде записи DNSKEY. Родительские зоны содержат записи DS, представляющие собой хешированный ва- риант записей DNSKEY для самоподписывающихся ключей подписи ключей (self-signed key-signing keys). Сервер имен проверяет аутентичность записи DNSKEY дочерней зоны, сравнивая ее с подписью родительской зоны. Для проверки аутентичности ключа ро- дительской зоны сервер имен проверяет родительскую зону родительской зоны и так далее, пока не вернется в корневую зону. Открытый ключ корневой зоны должен быть открыто опубликован и включен в файлы “подсказок” корневой зоны. В соответствии со спецификациями DNSSEC, если зона имеет несколько ключей, каждый из них должен применяться при проверке данных. Это требование объясняется тем, что ключи могут быть изменены без прерывания работы службы DNS. Если рекур- сивный сервер имен, использующий технологию DNSSEC, посылает запрос неподпи- санной зоне, то поступающий неподписанный ответ считается корректным. Проблема возникает лишь тогда, когда срок действия подписи истек или родительская и дочерняя зоны не согласовали текущий ключ DNSKEY дочерней зоны.
694 Часть II. Работа в сети Прежде чем погрузиться в механизм генерирования ключей и подписания зон, не- обходимо иметь краткое представление о реальном состоянии технологии DNSSEC и ее влиянии на системных администраторов. Ее можно развернуть уже сейчас, но остается нерешенным множество проблем. К преимуществам технологии DNSSEC можно отне- сти следующее. • Текущие версии программного обеспечения серверов DNS (как named, так и nsd/ unbound) уже готовы. Существуют инструменты для подписания зон и верифика- ции подписей. • Совсем скоро будут созданы подписанные зоны. В начале 2010 года домены . gov, . org и некоторые домены ccTLD (преимущественно в Европе) уже были подпи- саны. (Швеция первой подписала домен TLD.) Корневой домен был подписан в 2010 году, а другие домены gTLD были подписаны позднее. Правительство США потребовало, чтобы все сайты в домене . gov также были подписаны. • Стандарты IETF кажутся функциональными и работоспособными. Однако остается две проблемы: распределение ключей и размер пакетов. Пока корневой домен и домены TLD не подписаны, цепочка доверия часто обрыва- ется. Сайты, требующие, чтобы их зоны были подписаны, должны найти другие способы опубликовать свои ключи. Схема динамической проверки (lookaside validation scheme), описанная Сэмом Уейлером (Sam Weiler) из компании Sparta в документах RFC4431 и RFC5074, предоставляет удобный способ решения этой проблемы, основанный на при- влечении к проверке ключей сайтов посторонних организаций, таких как ISC. Это удоб- ное временное решение, которое также имеет изъян. Организация ICS используется для запуска критически важных серверов (в частности, она контролирует работу корневого сервера F), но иногда происходят сбои. Кроме того, существует проблема, связанная с возможным нарушением конфиденциальности со стороны посредника, знающего все сайты, которые посещают пользователи. (Разумеется, это относится ко всем операторам корневых серверов.) Другой паллиатив заключается в использовании так называемых промежуточных репозитариев точек доверия (ITAR — Interim Trust Anchor Repository). Этот механизм описан на сайте itar. iana. org. Надежные ключи имеют большую длину, и некоторые сайты предпочитают распро- странять некоторые из них. Это приводит к увеличению размера пакетов. Спецификации DNSSEC требуют использования технологии EDNS0, представляющей собой расши- ренный протокол DNS, поддерживающий пакеты UDP, размер которых превышает 512 байт. Однако их поддерживают не все реализации; эти реализации не могут исполь- зовать технологию DNSSEC. Даже на серверах, поддерживающих технологию EDNS0, предельный размер пакета, передаваемого через линию связи между двумя серверами, может оказаться меньше, чем размер огромного подписанного пакета, оснащенного ключами. Если пакет слишком велик, то на уровне IP теоретически его можно разбить на фрагменты, но проблема все равно остается. Некоторые реализации протокола ТС/IP фрагментируют пакеты TCP, но не UDP. Некоторые брандмауэры не могут сохранить состояние, чтобы затем правиль- но восстановить пакеты UDP. Кроме того, некоторые брандмауэры передают на порт 53 UDP-пакеты, размер которых превышает 512 байт. Ой! Если ответ UDP искажен или не проходит через линию связи, то клиент переключается на протокол TCP, имеющий свои собственные проблемы, связанные с производительностью.
Глава 17. Система доменных имен 695 Укажем еще несколько проблем. • Россия отказывается использовать алгоритм RSA, а ведь он является единствен- ным алгоритмом, который необходим для реализации серверов имен, поддержи- вающих протокол DNSSEC. Россия стандартизировала алгоритм GOST, представ- ляющий собой алгоритм симметричного шифрования, схема которого напоминает алгоритм DES.31 • Китай и некоторые другие страны имеют свои собственные корневой, .сот- и .net-серверы, что приводит к расщеплению дерева имен DNS. Как технология DNSSEC будет работать с расщепленным деревом имен? • Стандарт RFC5011, предложенный для автоматического обновления точек дове- рия DNSSEC, резко увеличивает затраты на обработку ключей за счет добавления ключей к пользовательским наборам записей о ресурсах DNSKEY. Это расшире- ние может исчерпать память и кажется плохой идеей. Кроме того, иногда при ис- пользовании схемы RFC5011 ключи сайта оказываются аннулированными, даже если эти ключи все еще необходимы для верификации кешированных данных. • Дистрибутивные пакеты системы Linux поставляются вместе со списком ключей, необходимых для начала работы. Это кажется нам неудачной идеей, поскольку эти ключи со временем неизбежно устареют и станут неправильными. Ваша система DNS будет медленно деградировать, а вы не будете знать почему. (Списки ключей сами по себе не всегда плохи. Например, их можно использовать на веб-сайтах RIPE и IANA для перекрестной проверки ключей, полученных по системе DNS, пока корневой домен и домены TLDs не будут подписаны.) • Иногда нам необходим хорошо известный узел (аналог www для веб-серверов), который можно было бы использовать для публикации открытых ключей в ожи- дании, пока будет подписана вершина дерева DNS — ключ.имя-домена или что-то в этом роде. Системные администраторы должны начать думать о подписании своих доменов и установке одного или двух новых серверов. Мы рекомендуем разворачивать протокол DNSSEC уже сейчас, но сначала тщательно осуществить этот процесс на тестовой сети и лишь затем переходить к масштабу предприятия. Развертывание протокола DNSSEC можно выполнить в виде двух независимых этапов. • Подпишите ваши зоны и предоставляйте подписанные данные клиентам, поддер- живающим протокол DNSSEC. • Проверяйте ответы на запросы ваших пользователей. Испытайте удобный инструмент SecSpider, разработанный в университете UCLA (University of California, Los Angeles) и размещенный на сайте secspider. cs . ucla. edu. Он зондирует вашу установку протокола DNSSEC с нескольких узлов Земного шара, чтобы убедиться, что ваши ключи доступны и крупные пакеты, содержащие эти ключи, могут достичь этих узлов. (Именно благодаря инструменту SecSpider была вы- явлена проблема, связанная с предельно допустимым размером пакета, передаваемым по линии связи при использовании протокола DNSSEC.) Программа SecSpider также 31 Протокол GOST является надежным (насколько нам известно) и использует намного более короткую длину ключа, чем другие алгоритмы. Поскольку он является алгоритмом симметричного шифрования и не относится к системам с открытым ключом, он может заменить протокол TSIG, но не может использоваться для реализации технологии DNSSEC. Предложения разрешить ис- пользование алгоритма GOST блокируются организацией IETF.
696 Часть II. Работа в сети идентифицирует неправильные конфигурации протокола DNSSEC. Это может оказать- ся полезным для сбора данных студентами, пишущими дипломные работы. Вы можете также получить копии открытых ключей других подписанных зон с веб-сайта SecSpider (secspider.cs.ucla.edu/trust-anchors.conf). Центр DNS-OARC (DNS Operations, Analysis, and Research Center) реализовал те- стовый сервер для проверки размеров ответов. С помощью утилиты dig на этот сервер можно послать запрос, чтобы выяснить, насколько большой ответный пакет UDP может пройти по линии связи между этим сервером и вашим сайтом. Рассмотрим следующий пример. $ dig +short rs.dns-oarc.net txt rst.xl014.rs.dns-oarc.net. rst.xl202.X1014.rs.dns-oarc.net. rst.x.1382.xl202.X1014.rs.dns-oarc.net. ”63.231.83.113 DNS reply size limit is at least 1382 bytes" "63.231.83.113 sent EDNS buffer size 4096" Этот пример свидетельствует о том, что по линии связи могут пройти ответы DNS, размер которых не превышает 1382 байт, несмотря на то что объявленный размер буфе- ра составляет 4096 байт. В данном случае проблема, вероятно, заключается в том, что брандмауэр не допускает фрагментирование пакетов UDP. Другие общепринятые размеры пакетов: 486, если сервер не поддерживает протокол EDNSO и ограничивает размер пакетов UDP 512 байт, и 4023 — если можно полностью использовать буфер размером 4096 байт. Если передать команде dig аргумент @ server, то можно увидеть ограничения, наложенные на размер пакетов, которые могут прохо- дить по линии связи между машиной DNS-OARC и данным сервером. Более подробную информацию можно найти на сайте dns-oarc. net/oarc/services/replysizetest. Если вы планируете реализовать протокол DNSSEC, а программа SecSpider или сер- вер DNS-OARC свидетельствуют о проблемах с размерами пакетов, возможно, настало время поговорить со специалистами, управляющими брандмауэром, и устранить про- блемы перед развертыванием протокола DNSSEC. Правила протокола DNSSEC Прежде чем приступать к развертыванию протокола DNSSEC, следует усвоить не- ’ сколько правил и процедур или хотя бы подумать о них. Рассмотрим примеры. • Ключи какого размера вы будете использовать? Более длинные ключи являются более надежными, но они увеличивают размеры пакетов. • Как часто будете изменять ключи, если никаких нарушений правил безопасности не происходит? • Как будете распространять свои открытые ключи? Как сайты, нуждающиеся в ва- ших ключах, будут проверять их аутентичность? Мы предлагаем завести специальный журнал, в который вы будете записывать дан- ные о каждом сгенерированном ключе; об аппаратном и программном обеспечении, ис- пользуемом для этого; о дескрипторе, присвоенном ключу; о версии программного ге- нератора ключей; использованном алгоритме; длине ключа; и сроке действия подписи. Если впоследствии криптографический алгоритм окажется скомпрометированным, вы сможете проверить свой журнал и выяснить, не подвергаетесь ли вы опасости.
Глава 17. Система доменных имен 697 Записи о ресурсах DNSSEC Протокол DNSSEC использует шесть типов записей о ресурсах, кратко описанные в разделе 17.8, — DS, DLV, DNSKEY, RRSIG, NSEC и NSEC3. Сначала мы опишем их в целом, а затем очертим их использование в процессе подписания зоны. Каждая из этих записей создается инструментами протокола DNSSEC, а не вводится в зонный файл с помощью текстового редактора. Запись DS (Designated Signer) возникает только в дочерней зоне и означает, что под- зона является безопасной (подписанной). Она также идентифицирует ключ, использу- емый дочерней зоной для подписания своего собственного набора записей о ресурсах KEY. Запись DS содержит идентификатор ключа (пятизначное число), криптографиче- ский алгоритм, тип дайджеста (digest type) и дайджест записи об открытом ключе, раз- решенном (или использованном) для подписи записи о ключе дочерней зоны. Если ваша родительская зона не подписана, вы можете установить точку доверия в организации ISC, используя запись DLV (domain lookaside validation) в том же самом формате. Рассмотрим пример точки доверия и соответствующей записи.32 example.com. IN DS 682 5 1 1 2898DCF9F7AD20DBCE159E7... example.com.dlv.isc.org. IN DLV 582 5 1 12898DCF9F7AD20DBCE159E7... Изменение существующих ключей в родительской и дочерней зонах является слож- ной проблемой и требует сотрудничества и взаимодействия между родительской и до- черней зонами. Для решения этой проблемы создаются записи DS, используются от- дельные ключи для подписи ключей и зон, а также применяются пары многократных ключей. Ключи, содержащиеся в записи о ресурсах DNSKEY, могут быть либо ключами для подписания ключа (key-signing key — KSK) или ключами для подписания зоны (zone- signing key — ZSK). Для различия между ними используется новый флаг под названием SEP (“secure entry point” — “точка безопасного входа”). Пятнадцатый бит поля флагов устанавливается равным единице для ключа KSK и 0 — для ключа ZSK. Это соглашение делает поле флагов нечетным числом для ключа KSK и четным для ключей ZSK, если интерпретировать его как десятичное число. В настоящее время эти значения равны 257 и 256 соответственно. Для обеспечения удобного перехода от одного ключа к другому можно генерировать многократные ключи. Дочерняя зона может изменить свои ключи подписания зоны, не сообщая об этом родительской зоне. Она должна согласовывать с родительской зоной только изменение ключа для подписания ключей. Когда ключ изменяется, и старый, и новый ключи на определенном отрезке времени считаются действующими. Как только срок действия кешированных значений в Интернете истечет, старый ключ будет счи- таться отмененным. Запись RRSIG — это подпись набора записей о ресурсах (т.е. набора всех записей одного и того же типа и с одним и тем же именем внутри зоны). Записи RRSIG генери- руются программным обеспечением, предназначенным для подписания зоны, и добав- ляются в подписанную версию зонного файла. Запись RRSIG содержит много информации. • Тип записей о ресурсах, входящих в подписываемый набор. • Алгоритм, используемый для подписания и закодированный небольшим числом. 32 В этом разделе 64-разрядные хеши и ключи были усечены, чтобы сэкономить пространство и лучше проиллюстрировать структуру записей.
698 Часть II. Работа в сети • Количество меток (фрагментов, разделенных точками) в поле имени. • Значение TTL для подписываемого набора записей. • Срок действия подписи (в формате ггггммддччсссс). • Время подписания набора записей (также в формате ггггммддччсссс). • Идентификатор ключа (пятизначный номер). • Имя подписавшего (имя домена). • Сама цифровая подпись (64-разрядная). Рассмотрим пример. RRSIG NS 5 2 57600 20090919182841 ( 20090820182841 23301 example.com. pMKZ76waPVTb!guEQNUojNVlVewHau4p...==) При подписании зоны также генерируются записи NSEC или NSEC3. В отличие от подписанных наборов записей, они сертифицируют интервалы между именами наборов записей и тем самым позволяют подписывать ответ типа “нет такого домена” или “нет такого набора записей о ресурсах”. Например, сервер может ответить на запрос записей А с именем bork. atrust. com, послав запись NSEC, подтверждающую отсутствие лю- бых записей А между именами bork. atrust. com и borrelia. atrust. com. К сожалению, включение в записи NSEC конечных точек позволяет обойти зону и выяснить все ее действующие узлы. В версии NSEC3 этот недостаток был устранен пу- тем включения в запись хешированных имен конечных точек, а не самих имен. Правда, это было сделано за счет более интенсивных вычислений: чем выше безопасность, тем ниже производительность. В настоящее время используются как записи NSEC, так и за- писи NSEC3, и вы должны будете сделать выбор между ними при генерировании своих ключей и подписании своих зон. Если защита от блуждания по зоне не является критически важной для вашей орга- низации, мы рекомендуем пока использовать запись NSEC. Только последние версии серверов BIND (9.6 и далее) и NSD (3.1 и далее) понимают записи NSEC3. Настройка протокола DNSSEC Поскольку сервер NSD является единственным авторитетным сервером имен, толь- ко он должен осуществлять обработку подписанных данных для клиентов, поддерживаю- щих протокол DNSSEC. При этом нет необходимости явно включать протокол DNSSEC. Если зона подписана, сервер NSD использует протокол DNSSEC автоматически. Сервер BIND является более сложным. Текущие версии BIND не содержат в дистри- бутивном наборе пакет OpenSSL, поэтому, если вы хотите использовать протокол DNSSEC, то должны получить либо заранее настроенный пакет, включающий поддержку протокола DNSSEC, либо библиотеки SSL непосредственно с сайта openssl. org. Если вы используете вторую возможность, то нужно перекомпилировать сервер BIND, чтобы включить криптографическую поддержку (с помощью опции —with-openssl коман- ды . /configure). Если вы не сделаете этого, то команда dnssec-keygen сообщит об ошибке. Однако она по-прежнему будет генерировать ключи TSIG, поскольку для этого не требуется пакет OpenSSL. Если версия пакета OpenSSL слишком стара и уязвима для известных угроз, то сервер BIND откроет красивую страницу с предупреждением. Использование подписанных зон связано с двумя разными рабочими потоками: один из них создает ключи и подписывает зоны, а второй обслуживает содержимое этих подписанных зон. Эти функции не обязательно реализовывать на одном и том же
Глава 17. Система доменных имен 699 компьютере. На самом деле лучше изолировать закрытые ключи и процесс подписания зоны, сильно загружающий центральный процессор, на компьютере, который не до- ступен из Интернета. (Разумеется, компьютер, обрабатывающий данные, должен быть виден из Интернета.) На первом этапе настройки протокола DNSSEC следует организовать зонные файлы так, чтобы все файлы данных для зоны находились в одном каталоге. Это необходимо для правильной работы инструментов, управляющих зонами по протоколу DNSSEC. Затем следует включить протокол DNSSEC на своих серверах с помощью опиций файла named. conf. options { dnssec-enable yes; } (для авторитетного сервера) и options { dnssec-enable yes; dns-validation yes; } (для рекурсивных серверов). Опция dnssec-enable приказывает вашему авторитет- ному серверу включать подписи наборов записей DNSSEC в свои ответы на запросы, поступающие от серверов имен, работающих по протоколу DNSSEC. Опция dnssec- validation заставляет демона named проверять легитимность подписей, которые он получает в ответ от других серверов. Генерирование пар ключей Необходимо сгенерировать две пары ключей для каждой зоны, которую хотите под- писать, — для подписания зоны (ZSK) и для подписания ключей (KSK). Каждая пара состоит из открытого и закрытого ключей. Закрытый ключ KSK подписывает ключ ZSK и создает безопасную точку входа для зоны. Закрытый ключ ZSK подписывает записи о ресурсах зоны. Открытые ключи затем публикуются, чтобы позволить другим сайтам проверить ваши подписи. Команды сервера BIND $ dnssec-keygen -a RSASHA1 -Ь 1024 -n ZONE exanple.com Kexample.com.+005+23301 $ dnssec-keygen -a RSASHA1 -Ь 2048 -n ZONE -f KSK exanple.com Kexample.com.+005+00682 и команды сервера NSD $ Idns-keygen -a RSASHA1 -Ь 1024 exanple.com Kexample.com.+005+23301 $ Idns-keygen -a RSASHA1 -Ь 2048 -к exanple.com Kexample.com.+005+00682 генерируют для сайта Kexample. com пару 1024-битовых ключей ZSK, использующую алгоритмы RSA и SHA-1, а также соответствующую пару 2048-битовых ключей KSK.33 Серьезная проблема, связанная с ограничением на предельный размер пакета UDP, вы- нуждает отдавать предпочтение коротким ключам для подписания зоны и часто их ме- нять. Для повышения уровня безопасности можно использовать более длинные ключи 33 2048 бит — это, конечно, излишество; многие сайты используют 1500 бит и меньше.
700 Часть II. Работа в сети для подписания ключей. Ключи генерируются недолго: одна-две минуты для коротких ключей и полчаса и более — для длинных ключей на медленных устаревших ноутбуках. Оба генератора ключей печатают в стандартном потоке вывода базовое имя файла для сгенерированного ключа. В нашем примере example. com — это имя ключа, 005 — идентификатор набора алгоритмов RSA/SHA-1, а 23301 и 00682 — хешированные значения, которые называются идентификаторами ключей, слепками ключей или де- скрипторами ключей.34 При каждом запуске генератор ключей в пакете BIND создает два файла (.key и .private), а генератор ключей на сервере NDS — три файла (.key, .private и .ds). Kexaxnple. com+005+23301. key Kexaxnple.com+005+23301.private Kexaxnple. com+005+23301 .ds Kexaxnple. com+005+00682. key Kexaxnple. com+005+00682 .private Kexaxnple. com+005+00682 .ds # Открытый ключ для подписи зоны # Закрытый ключ для подписи зоны # Запись DS для ключа ZSK (только NSD) # Открытый ключ для подписи ключа # Закрытый ключ для подписи ключа # Запись DS для ключа KSK (только NSD) Существует несколько алгоритмов шифрования, каждый из которых имеет свой диа- пазон длин ключей. Для того чтобы увидеть список доступных алгоритмов, можно вы- полнить команду dnssek-keygen без аргументов или команду Idns-keygen -a list. Как сервер BIND, так и сервер NSD могут использовать ключи, сгенерированные дру- гим программным обеспечением. В зависимости от версии вашего программного обеспечения, имена некоторых до- ступных алгоритмов могут содержать имя NSEC3 в качестве префикса или окончания. Если вы хотите использовать записи NSEC3, а не NSEC для подписания отрицатель- ных ответов, должны сгенерировать №ЕСЗ-совместимые ключи одним из NSEC3- совместимых алгоритмов; подробности можно найти на справочных страницах, посвя- щенных командам Idns-signzone или dnssec-keygen. Каждый файл .key содержит по одной записи о ресурсах DNSSEC для сайта example. com. Например, ниже приведен открытый ключ для подписания зоны, усечен- ный по ширине страницы. Его можно назвать ключом ZSK, потому что поле файлов равно 256, а не 257, как для ключей KSK. example.com IN DNSKEY 256 3 5 AwEAAex7tHe60w5va8sPpnRe4RX8MgI... Эти открытые ключи должны быть вставлены в зонные файлы с помощью дирек- тивы $ INCLUDE или другим способом либо в конец, либо сразу после записи SOA. Для того чтобы скопировать ключи в зонный файл, можно добавить их с помощью команды cat35 и вставить с помощью текстового редактора. Файлы .ds, созданные генератором ключей Idns-keygen на сервере NSD, содержа! записи DS. Если протокол DNSSEC развернут полностью, то файл, соответствующий ключам KSK, должен храниться в родительской зоне. Запись DS может генерироваться на основе записи о ресурсах DNSKEY, соответствующей ключам KSK. Некоторые под- писанные зоны требуют наличия именно таких записей, вместо или в дополнение к за- писи DNSKEY для ключей KSK. Запись DS может выглядеть следующим образом. 34 Для того чтобы сравнивать процессы на серверах BIND и NSD было проще, мы поступили некорректно и сделали слепки ключей одинаковыми. В реальном мире каждый ключ должен иметь отдельный слепок. 35 Используйте команды наподобие cat Kexmaple. сот+*. key»z one file. Операция » означает добавление ключа в файл zonefile,а не его замену, как операция >.
Глава 17. Система доменных имен 701 example.com 3600 IN DS 23301 1 1 5bd844108f8d8fea341b3bc2f2135e... example.com 3600 IN DS 00682 1 1 Odbf80886b7168633ff8273255de09... В идеале, закрытая часть любой пары ключей должна храниться в компьютере, от- ключенном от сети, или хотя бы в компьютере, недоступном из Интернета. Для дина- мически обновляемых зон это требование практически невыполнимо, а для ключей, предназначенных для подписания зон, еще и непрактично. Тем не менее для ключей, предназначенных для подписания других ключей, это требование абсолютно разумно, поскольку эти ключи имеют долгий срок действия. Подумайте о скрытом главном сер- вере, недоступном извне для ключей ZSK. Распечатайте закрытый ключ KSK или напи- шите его на флешке, а затем спрячьте в сейфе, пока он не потребуется в следующий раз. “Заперев” новые закрытые ключи, целесообразно записать информацию о новых ключах в системный файл ключей. При этом не обязательно записывать туда сами клю- чи. Достаточно записать их идентификаторы, алгоритмы, дату, назначение и т.д. По умолчанию срок действия подписи ограничен одним месяцем для записей RRSIG (ZSK-подписи наборов записей о ресурсах) и тремя месяцами для записей DNSSIG (KSK-подписи ключей ZSK). В настоящее время рекомендуется использовать 1024-бито- вые ключи ZSK от трех месяцев до одного года, а 1280-битовые ключи KSK — от одно- го до двух лет.36 Поскольку рекомендуемые сроки действия ключей дольше, чем сроки, установленные для них по умолчанию, эти параметры необходимо указывать явно при подписании или периодическом переподписании зон, даже если сами ключи не изме- нились. Подписание зоны Итак, теперь, когда у вас есть ключи, вы можете подписывать зоны с помощью ко- манд dnssec-signzone (сервер BIND) или Idns-signzone (сервер NDS), добавляю- щих записи RRSIG и NSEC или NSEC3 в каждый набор записей о ресурсах. Эти коман- ды считывают оригинальный зонный файл и создают отдельную подписанную копию с именем зонный_файл.signed. Синтаксис команды dnssec-signzone для сервера BIND имеет следующий вид. dnssec-signzone [-о имя_зоны] [-N increment] [-к KSK-файл] зонный_файл [ZSK-файл] Здесь параметр имя_зоны по умолчанию равен параметру зонный_файл, а поля ключей по умолчанию совпадают с именами файлов, созданных командой dnssec-keygfen, как описано выше. Если вы называете свои зонные файлы по именам зон и сохраняете имена ориги- нальных файлов ключей, то команда упрощается. dnssec-signzone [-N increment] зонный_файл Флаг -N increment автоматически увеличивает порядковый номер в записи SOA, так что забыть его невозможно. Кроме того, можно указать значение unixtime, что- бы установить порядковый номер равным текущему времени UNIX (количеству секунд, прошедших с 1 января 1970 года), или значение keep, чтобы предотвратить изменение оригинального порядкового номера командой dnssec-keygen. Порядковый номер уве- личивается в файле подписанной зоны, но не в оригинальном файле зоны. Рассмотрим пример, в котором используются сгенерированные ранее ключи. 36 Рекомендации разных организаций, касающиеся длин криптографических ключей, приведе- ны на веб-сайте keylength. com.
702 Часть II. Работа в сети $ sudo dnssec-signzone -о exaxnple.com -increment -к Kexample.com+005+00682 example.com Kexample.com+005+23301 Подписанный файл упорядочивается в алфавитном порядке и содержит записи DNSKEY, добавленные вручную, а также записи RRSIG и NSEC, сгенерированные в ходе подписания. Порядковый номер зоны увеличен. Если вы сгенерировали свои ключи с помощью алгоритма NSEC3RSASHA1, то долж- ны подписать зону так, как показано выше, но указав флаг -3 salt. Перечислим другие полезные опции команды dnssec-signzone. • -g — генерирование записи (записей) DS, которая должна быть включена в роди- тельскую зону; • -1 — генерирование записи (записей) DLV, которая используется, если родитель- ская зона не подписана; • -s начальный-момент — установка момента времени, с которого подписи счита- ются действительными; • -е конечный_момент — установка момента времени, после которого подписи счи- таются недействительными; • -t — вывод статистических показателей. Данные о сроках действия подписей можно выразить в виде абсолютного времени в формате ггггммддччммсс или относительного времени, считая от текущего момента, в формате +N, где N — количество секунд. По умолчанию период действия подписи изме- няется от одного часа в прошлое до 30 дней в будущее. Рассмотрим пример, в котором мы указываем, что подписи должны быть действительными до окончания календарного 2010 года. $ dnssec-signzone -N increment -е 20101231235959 example.com На сервере NSD синтаксис подписания зоны выглядит следующим образом. Idns-signzone [-о имя_зони} имя_зоны ключ [ключ ...] Вы можете просто указать оба ключа и разрешить команде Idns-signzone самой выяснить, какой из них является ключом KSK, а какой — ключом ZDK. Рассмотрим пример. $ sudo Idns-signzone example.com Kexample.com.+005+00682 Kexample.com.+005+23301 Как и с командой dnssec-signzone, вы можете установить предельный срок дей- ствия подписей, используя флаг -е ггггммдд, Для генерирования записей NSEC3 вместо записей NSEC для подписания пробелов, используется флаг-n -s salt. Размеры файлов подписанных зон от четырех до десяти раз больше, чем размеры файлов исходных зон, и все попытки навести логический порядок напрасны. Строка на- подобие mail-relay А 63.173.189.2 превращается в несколько следующих строк. mail-relay.example.com. 57600 А 63.173.189.2 57600 RRSIG А 5 3 57600 20090722234636 ( 20090622234636 23301 example.com. Y7s9jDWYuuXvozeU7zGRdFCl+rzU8cLiwoev Ol2TGfLlbhsRgJfkpEYFVRUB7kKVRNguEYwk d21RSkDJ9QzRQ+w==)
Глава 17. Система доменных имен 703 3600 NSEC mail-relay2.example.com. A RRSIG NSEC 3600 RRSIG NSEC 5 3 3600 20090722234636 ( 20090722234636 23301 example.com. WNsN84hF0notymRxZRIZypqWzLIPBZAUJ77R HPOhLfBDoqmZYw== ) С практической точки зрения файл подписанной зоны больше нельзя назвать понят- ным для человека и его невозможно отредактировать вручную из-за записей RRSIG и NSEC или NSEC3. Этот файл не содержит ни одного фрагмента, который пользователь мог бы изменить вручную! За исключением записей DNSSEC, каждый набор записей о ресурсах (ресурсных за- писей с одинаковым типом и именем) получает одну подпись от ключа ZSK. Записи о ресурсах DNSSEC подписываются как ключом ZSK, так и ключом KSK, поэтому они содержат две записи RRS1G. Тем не менее 64-разрядное представление подписи закан- чивается несколькими знаками равенства, потому что длина записи должны быть крат- ной четырем. Для того чтобы последующие примеры стали яснее, предположим, что зонный файл называется так же, как и зона, причем зонные файлы и ключевые файлы располагают- ся в одном и том же каталоге. В реальной жизни действительно целесообразно задавать файлы ключей явно, особенно если вы часто меняете ключи и должны быть уверены, что команды используют правильные ключи. Как только ваша зона подписана, остается лишь указать ваш сервер имен в подписан- ных версиях зонных файлов. Если вы используете сервер BIND, поищите инструкцию zone, соответствующую каждой зоне в файле named.conf, и измените параметр file с example. com на example. com. signed. Для сервера NSD соответствующий файл кон- фигурации называется nsd. conf, и вы должны найти в нем строки zonefiles. В заключение перезапустите демон сервера имен, заставив его прочитать снова свой файл конфигурации. Для сервера BIND следует выполнить команды sudo rndc reconfig и sudo rndc flush, а для сервера NSD — команды sudo nsdc rebuild И sudo nsdc restart. Теперь мы обслуживаем подписанную зону DNSSEC! Для того чтобы внести изме- нения, вы можете отредактировать либо исходный неподписанный зонный файл, либо подписанный зонный файл, а затем переподписать зону. Редактирование подписанной зоны иногда оказывается чрезвычайно сложной задачей, но это проще, чем повторное подписание всей зоны. Удалите записи RRSIG, соответствующие всем изменяемым за- писям. Для того чтобы избежать путаницы между версиями, вероятно, следует внести идентичные изменения в неподписанную зону. При передаче подписанной зоны в качестве аргумента команде dnssec-signzone или Idns-signzone все неподписанные записи подписываются, а подписи всех за- писей, срок действия которых подходит к концу, обновляются. Выражение “срок дей- ствия подходит к концу” означает, что прошло три четверти периода действия подписи. Повторное подписание, как правило, приводит к изменениям, поэтому следует изме- нить порядковый номер зоны вручную или автоматически с помощью сервера BIND, используя раздел -N increment в командной строке dnssec-signzone. Это все, что касается локальной части конфигурации протокола DNSSEC. Осталось только решить трудную проблему: соединить наш безопасный “DNS-островок” с дру- гими надежными и подписанными частями иерархии DNS. Мы должны либо передать наши записи DS в подписанную родительскую зону, либо использовать динамическую проверку доменов. Решение этих задач описывается в следующем разделе.
704 Часть II. Работа в сети Цепочка доверия в протоколе DNSSEC Продолжим наш пример, связанный с настройкой протокола DNSSEC. Сайт example. com теперь подписан, и его серверы имен поддерживают протокол DNSSEC. Это значит, что при отправке запросов они используют протокол EDNS0, расширенный протокол DNS, а в DNS-заголовке пакета устанавливают опцию, включающую прото- кол DNS. Отвечая на запросы, которые приходят с такой комбинацией установленных битов, они включают в свой ответ подписанные данные. Клиент, получающий подписанные запросы, может оценить корректность ответа, проверив его подпись с помощью соответствующего открытого ключа. Однако он по- лучает свой ключ из своей собственной зонной записи DNSKEY, что, если вдуматься, довольно подозрительно. Что может помешать постороннему лицу предоставить ложные записи и ложный публичный ключ, чтобы пройти проверку? Есть несколько вариантов ответа на этот вопрос. Ваш сайт должен реализовать хотя бы один из них. В противном случае вся ваша работа по настройке протокола DNSSEC пойдет насмарку. Каноническое решение заключается в том, чтобы передать вашей родительской зоне запись DS, которую она должна включить в свой зонный файл. Запись DS, приходящая из родительской зоны, сертифицируется родительским закрытым ключом. Если клиент доверяет своей родительской зоне, он должен верить в то, что запись DS родительской зоны правильно отражает открытый ключ вашей зоны. В свою очередь, родительская зона сертифицируется своей родительской зоной и так вплоть до корня. После развертывания протокола DNSSEC в полном масштабе един- ственным ключом, который вы должны будете знать заранее, будет открытый ключ, ис- пользуемый для подписи корня. Этот ключ может находиться в файле подсказок корня и использоваться во всем процессе функционирования системы DNS. Если вам повезло и ваша родительская зона подписана, просто передайте ее адми- нистратору свою запись DS и запись DNSKEY, предназначенную для подписи ключей и использованную для подписи записи DS.37 Флаг -д команды dnssec-signzone в пакете BIND генерирует файлы dsset-domain и keyset-domain, которые можно безопасно передать родительской зоне, чтобы она добавила их в свой зонный файл. Аналогично команда Idns-keygen генерирует требуемую DS-запись в файле .ds и запись DNSKEY в файле . key во время генерирования ключей. Помните, что вы должны опубликовать свою запись DNSKEY в своей зоне до того, как родительская зона инсталлирует соот- ветствующую запись DS. Если ваша родительская зона не подписана, необходимо как-то иначе доказать внеш- нему миру, что открытый ключ, опубликованный в вашей системе DNS, действительно принадлежит вам. Это можно сделать тремя разными способами. • Опубликуйте свой открытый ключ с помощью одного или нескольких репозита- риев доверительных точек (trusted anchor repository — TAR); например, с помощью репозитория SecSpider. Для того чтобы использовать ключи TAR на своих серве- рах, получите список ключей от репозитариев SecSpider, ITAR (поддерживается организацией IANA и содержит только домены TLD) или RIPE-NCC (содержит только свои собственные зоны, в основном европейские домены TLD и реверсные зоны). Поместите эти ключи в раздел trusted-keys в конфигурационном файле своего сервера имен. 37 Как узнать, подписана ли родительская зона? Выполните команду dig + dnssec или drill -D.
Глава 17. Система доменных имен 705 • Используйте сервер динамической проверки доменов, например сервер, поддер- живаемый консорциумом ISC (Internet Systems Consortium). По существу, этот сервер делает сайт isc. org вашим приемным DNS-родителем. Это легко и про- сто; см. isc. org/ops/dlv. Существуют и другие серверы DLV, но поскольку ис- пользовать можно только один из них, а сервер консорциума ISC очень хорошо продуман и превосходно работает, предпочесть следует именно его. • Используйте демон Vantages (vantage-points. org), который взаимодействует со своими копиями, принадлежащими друзьям, которым вы доверяете, формируя тем самым социальную сеть демонов. Эти демоны могут получать ключи от других сайтов в Интернете совершенно независимо друг от друга и сравнивать их, чтобы определить, являются ли они аутентичными. Решение, связанное с использованием серверов DLV, мы опишем более подробно в следующем разделе. Однако помните, что все три способа, перечисленные выше, явля- ются временными решениями, которые предназначены для того, чтобы облегчить раз- вертывание протокола DNSSEC. Если ваша родительская зона уже подписана, о них можно даже не упоминать. Просто передайте вашей родительской зоне свою запись DS. Сервер DLV: динамическая проверка доменов Кеширующий сервер, поддерживающий протокол DNSSEC и получающий подпи- санный ответ на запрос, сначала проверяет, совпадает ли подпись записи с открытым ключом домена, заданным его записью DNSSEC. Затем клиент пытается проверить сам ключ, просматривая родительскую зону в поисках записи DS. Если запись DS недоступ- на, клиент ищет запись DLV в исходном домене; эта запись переадресовывает его на сайт div. isc. org или другой сервер DLV, который действует как родитель зоны. Как только клиент получит запись DLV от сайта div. isc. org, он сможет проверить всю цепочку доверия. Следовательно, настройка службы DLV для вашей зоны сводится к ге- нерированию правильных записей DLV и размещению их в правильных местах. Запись DLV на самом деле представляет собой замаскированную запись DS. Типы этих записей отличаются, но тела совпадают. Поле имя в записи также изменяется, что- бы поместить запись в зоне провайдера службы DLV. Например, имя example. com мо- жет стать example.com.div.isc.org. В пакете BIND команда dnssec-signzone -1 (строчная буква L) генерирует запись DLV. $ sudo dnssec-signzone -1 dlv.isc.org example.com Эта команда повторно подписывает зону и создает файл с именем divset-example, com, содержащий запись DLV, предназначенную для зоны провайдера DLV. Пользователи серверов NSD/Unbound должны генерировать записи DLV самостоя- тельно. Скопируйте файл .ds, созданный во время генерирования ключа KSK и изме- нения типа записи с DS на DLV. Затем измените поле имя. Например, измените запись example.com 3600 IN DS 25069 1 1 Odbf80886b716863de09... на example.com.div.isc.org 3600 IN DLV 25069 1 1 Odbf80886b716863de09... Внесенные изменения выделены полужирным шрифтом. Собрав запись DLV и файлы ключей, использованных для подписания вашей зоны, зайдите на веб-страницу div. isc.org и выполните инструкции, благодаря которым сервер isc.org станет вашим DLV-сервером. Консорциум ISC заставит вас проходить
706 Часть II. Работа в сети несколько этапов проверки, чтобы убедиться, что вы действительно владеете своим доменом, имеете право им управлять и безопасно предоставили его открытый ключ. Однако это не сложная процедура. Консорциум ISC вставит несколько строк в раздел trusted-keys вашего файла named. conf. trusted-keys { dlv.isc.com 257 3 5 "хешированная информация о ключе"; dlv.isc.com 257 3 5 "хешированная информация о другом ключе"; } Пользователи сервера BIND тоже добавляют одну строку в раздел option файла named. conf. dnssec-lookaside "." trusted-anchor "dlv.isc.org" Пользователи сервера NSD должны добавить запись DLV в зону и заново подписать зону. Для того чтобы подключить проверку с помощью записи DLV и сервера unbound, получите KSK-запись DNSKEY с веб-сайта div. isc.org или сайта SecSpider и про- верьте их подписи. (Программа SecSpider проверяет согласованность ключей, получен- ных из разных мест.) Не следует просто применять команду dig к ключу. Это небезопас- но, пока протокол DNSSEC не развернут в полном масштабе. Поместите ключ в файл, находящийся в рабочем каталоге сервера unbound, например в каталоге dlv.isc.org. key, и добавьте строку dlv-anchor-file: "div.isc.org.key" в раздел server файла unbound. conf. Смена ключей DNSSEC Для протокола DNSSEC смена ключей всегда была трудной задачей. Его исходные спецификации были, по существу, изменены, для того чтобы решить проблемы, связан- ные с обеспечением взаимодействия между родительской и дочерней зонами для созда- ния, изменения или удаления ключей. Новые спецификации называются DNSSEC-bis. Смена ключей ZSK представляет собой относительно несложную задачу и не преду^ сматривает наличия родительской зоны или какой-либо точки доверия. Единственный “скользким” местом является расписание. Ключи имеют определенный срок действия", поэтому их замену необходимо производить до истечения этого срока. Однако ключи имеют период TTL, определенный в зонном файле. Для иллюстрации предположим, что период TTL равен одному дню и что ключи на следующей неделе еще будут действовать. Придется выполнить следующие действия. • Сгенерировать новый ключ ZSK. • Включить его в зонный файл. • Подписать или заново подписать зону с помощью ключа KSK или старого ключа ZSK. • Попросить сервер имен перезагрузить зону; теперь в ней будет действовать новый ключ. • Подождать 24 часа (период TTL); теперь все могут использовать как старый ключ, так и новый. • Подписать зону снова с помощью ключа KSK и нового ключа ZSK.
Глава 17. Система доменных имен 707 • Попросить сервер имен перезагрузить зону. • Подождать 24 часа; теперь все имеют новую зону. • Удалить старый ключ ZSK, например, при следующем изменении зоны. Эта схема называется предварительной публикацией (prepublishing). Совершенно очевидно, что до того, пока все будут использовать новый ключ, приходится запускать этот процесс как минимум дважды после истечения двух периодов TTL. Эти периоды ожидания гарантируют, что любой сайт с кешированными значениями всегда будет иметь кешированный ключ, соответствующий этим кешированным данным. Еще одной переменной, которая влияет на этот процесс, является время, которое по- требуется вашему самому слабому подчиненному серверу для обновления своей копии в вашей зоне после получения уведомления от главного сервера. По этой причине не следует ждать до последней минуты, чтобы начать процесс смены ключей или повторно- го подписания зон, срок действия подписей которых истек. Просроченные подписи не- действительны, поэтому сайты, проверяющие подписи DNSSEC, не смогут выполнить поиск для вашего домена. Механизм смены ключей KSK называется двойным подписанием (double signing) и также довольно прост. Однако вам придется переслать вашу новую запись DS роди- тельской зоне или послать запись DLV своему “суррогатному родителю”. Убедитесь, что родительская зона или репозиторий точек доверия вас признали, прежде чем переклю- читься на новый ключ. Процесс смены ключей KSK состоит из следующих этапов. • Создать новый ключ KSK. • Включить его в зонный файл. • Подписать зону и новым, и старым ключами KSK и ZSK. • Попросить сервер имен перезагрузить зону. • Подождать 24 часа (период TTL); теперь у всех есть новый ключ. • Уведомить все точки доверия о новом значении KSK. • После подтверждения удалить старую запись KSK из зоны. • Заново подписать зону новыми ключами KSK и ZSK. Инструменты DNSSEC Кроме комплектов инструментов, входящих в дистрибутивные наборы пакетов BIND и NSD/Unbound, есть еще четыре комплекта инструментов для развертывания прото- кола DNSSEC и тестирования существующих настроек: Idns, Sparta, RIPE и Vantages. По крайней мере, еще два комплекта инструментов находятся на этапе разработки: OpenDNSSEC (opendnssec.org) и DNSSHIM. Инструмент OpenDNSSEC должен устранить всю путаницу и сложность, автоматически возникающую при использовании протокола DNSSEC, что звучит обнадеживающе. Инструмент DNSSHIM — это реали- зация авторитетного сервера DNS с автоматической конфигурацией подчиненных сер- веров и программами для работы по протоколу DNSSEC, написанными на языках Java и Python. Инструменты Idns, nlnetlabs.nl/projects/ldns По словам сотрудников компании NLnet Labs, Idns — это библиотека программ для разработки инструментов DNS, включающая примеры, демонстрирующие использова- ние этой библиотеки. Эти инструменты перечислены ниже вместе с кратким описани-
708 Часть II. Работа в сети ем каждого из них. Все они находятся в каталоге examples, за исключением утилиты drill, имеющей свой собственный каталог в дистрибутивном пакете. Команды сопро- вождаются справочными страницами. Файл README, относящийся к верхнему уровню иерархии каталогов, содержит очень краткие инструкции по инсталляции. • Idns-keygen генерирует пары ключей TSIG и DNSSEC. • Idns-signzone подписывает зонный файл с записью NSEC или NSEC3. • Idns-verify-zone проверяет состояние записей RRSIG, NSEC или NSEC3. • ldns-key2ds преобразовывает запись DNSSEC в запись DS. • Idns-rrsig распечатывает в удобном для чтения виде даты истечения сроков дей- ствия ключей из записей RRSIG. • ldns-nsec3-hash распечатывает запись NSEC для заданного имени в хеширо- ванном виде. • 1 dns-revoke устанавливает флаг отмены для ключа RR в протоколе DNSSEC (см. документ RFC54011). • Idns-chaos показывает идентификатор сервера имен, хранящийся в классе CHAOS. • Idns-keyfetcher извлекает открытые ключи DNSSEC для зон. • Idns-read-zone читает зону и распечатывает ее в разных форматах. • Idns-update посылает пакет динамического обновления. • Idns-walk совершает обход зоны, используя записи NSEC протокола DNSSEC. • Idns-zsplit разбивает зону на фрагменты, чтобы подписывать их параллельно. • Idns-zcat объединяет зонные файлы, разбитые утилитой Idns-zsplit на фраг- менты. • Idns-compare-zones демонстрирует разницу между двумя зонными файлами. • Idns-notify проверяет обновления подчиненных серверов зон. • Idns-dpa анализирует пакеты DNS с помощью файлов слежения tcpduxnp. Многие из этих инструментов очень просты и выполняют только одну рутинную операцию для системы DNS. Они были написаны в качестве примеров использования библиотеки Idns и демонстрируют, насколько простым становится код, когда библиоте- ка берет всю тяжелую работу на себя. Инструменты Sparta, dnssec-tools.org Комплект инструментов Sparta создан на основе инструментов сервера BIND, пред- назначенных для поддержки протокола DNSSEC, и включает в себя следующие команды. • zonesigner генерирует ключи и подписи зон. • donuts анализирует зонные файлы в поисках ошибок и несоответствий. • donutsd выполняет команду donuts через определенные интервалы времени И предупреждает о проблемах. • rollerd, rollctl и rollinit осуществляют автоматическую смену ключей, ис- пользуя схему предварительной публикации для ключей ZSK и метод двойного подписания для ключей KSK. • trustman управляет точками доверия и включает реализацию смены ключей RFC5011.
Глава 17. Система доменных имен 709 • dnspktflow отслеживает поток пакетов DNS в последовательности запросов и от- ветов, перехваченных командой tcpdump, и создает диаграмму. • mapper отображает зонные файлы, демонстрируя защищенные и незащищенные фрагменты. • validate — инструмент для проверки подписи из командной строки. Веб-сайт содержит хорошую документацию и учебные пособия для всех этих инстру- ментов. Исходный код доступен для загрузки и защищен лицензией BSD. Компания Sparta поддерживает библиотеки DNSSEC, написанные на языке Perl и распространяемые в сети CPAN (Comprehensive Perl Archive Network). Кроме того, она распространяет “заплатки” для нескольких популярных пакетов программного обеспе- чения (включая Firefox, Thunderbild, Postfix, sendmail, libSPF и OpenSSH), чтобы обе- спечить их более полную совместимость с протоколом DNSSEC. Инструменты RIPE, rlpe.net Инструменты компании RIPE функционируют как внешний компонент инструмен- тов пакета BIND, предназначенных для поддержки протокола DNSSEC, и основное внимание уделяют вопросам управления. Их подробные сообщения, при выполнении и упаковке многих аргументов и команд, имеют более понятную форму. Инструменты Vantages, vantage-polnts.org Vantages — это каркас для распределенного мониторинга, база которого находится в университете штата Колорадо (Colorado State University). В настоящее время он сосре- доточен на операционных вопросах, связанных с протоколом DNSSEC. Инструменты Vantages могут помочь при развертывании протокола DNSSEC. Главным продуктом проекта является инструмент vantaged, демон, собирающий записи DNSSEC и сравнивающий их значения с аналогичными записями, полученны- ми от других демонов vantaged, находящихся в Интернете. Если множество демонов vantaged дают один и тот же ответ, то ключ считается правильным. Для того чтобы достичь этого результата обманным путем, злоумышленник должен был бы заставить все сайты, выполняющие программное обеспечение Vantage, дать неправильный ответ. Демон vantaged собирает ключи от источников DNS, НТТ и HTTPS и классифицирует их по четырем состояниям: подтвержденный, временный, неизвестный и конфликтный. Он добавляет подтвержденные ключи в раздел trusted-keys в файле named, conf. Инструменты Vantages имеют несколько дополнительных функций. • d-sync — отслеживает согласованность ключей в записях DS между родительской и дочерней зонами, что особенно полезно при смене ключей. • dnsfunnel определяет максимальную пропускную способность линии связи меж- ду вами и любым другим сайтом. Он напоминает инструмент traceroute. • dnskey-grab получает ключи DNSKEY для зоны от ее авторитетных серверов. Отладка протокола DNSSEC Протокол DNSSEC был разработан для того, чтобы обеспечить взаимодействие меж- ду подписанными и неподписанными зонами, а также между серверами имен, поддер- живающими протокол DNSSEC и игнорирующими его. Следовательно, возможно по- степенное развертывание протокола, что часто и происходит, хотя и не всегда.
710 Часть II. Работа в сети DNSSEC — это распределенная система с многочисленными изменчивыми частями. Все проблемы порождают авторитетные серверы, распознаватели клиентов и линии свя- зей между ними. Проблема, которая кажется локальной, может отразиться на удаленном пользователе, поэтому такие инструменты, как SecSpider и Vantages, отслеживающие распределенное состояние системы, могут оказаться очень полезными. Эти инструмен- ты, а также утилиты, перечисленные выше, и регистрационные файлы вашего сервера имен являются основными орудиями отладки. Сначала убедитесь, что вы записали категорию регистрации по протоколу DNSSEC из файла named, conf в файл на локальном компьютере. Полезно отделить все сообще- ния, связанные с протоколом DNSSEC, чтобы не записывать в этот файл никаких дру- гих категорий регистрации. Рассмотрим пример регистрационной спецификации для демона named. channel dnssec-log { file "/var/log/named/dnssec.log" versions 4 size 10m ; print-time yes ; print-category yes ; print-severity yes ; severity debug 3; } category dnasec { dnssec-log;} В пакете BIND следует установить уровень отладки равным 3 или выше, чтобы уви- деть этапы проверки, выполняемые рекурсивным сервером BIND при попытках прове- рить подпись. Этому уровню регистрации соответствует две страницы регистрационной информации для одной проверяемой подписи. Если вы отслеживаете работу загружен- ного сервера, то регистрационная информация от нескольких запросов будет переме- жаться другими данными. Разбираться в этой путанице — очень сложная и утомитель- ная задача. Для серверов NSD и Unbound следует установить уровень детальности сообщений в их конфигурационных файлах выше, чем заданный по умолчанию (0 и 1 соответствен- но). Для сервера Unbound достаточно настроить уровень детальности сообщений “на лету” с помощью команды verbosity уровень в команде unbound-control. Подобно серверу BIND, уровень отладки на сервере Unbound должен быть установлен равным 3, чтобы продемонстрировать этапы проверки подписи. Если все работает хорошо, установите параметр val-log-level на сервере Unbound равным 1, чтобы распечатывать сообщения об ошибках для каждой неправильной под- писи в виде одной строки. Этот уровень детальности поможет вам найти сайты, вызы- вающие проблемы. Затем вы можете отследить причины проблем для каждой подпи- си с помощью либо команды drill, либо команды unbound-host -v -d (иди даже -dddd, чтобы получить больше отладочной информации). При этом командам drill и unbound-host необходимо передать релевантные открытые ключи. Команда drill имеет два особенно полезных флага: -т — для отслеживания цепоч- ки доверия от корня до указанного узла и -S — для отслеживания подписей от указанного узла обратно к корню. Рассмотрим практический пример вывода, полученного от коман- ды drill -S, позаимствованный из документа DNSSEC HOWTO компании NLnet Labs. $ drill -s -k ksk.keyfile exanple.net SOA DNSSEC Trust tree: example.net (SOA) I--example.net. (DNSKEY keytag: 17000) I---example.net. (DNSKEY keytag: 49656)
Глава 17. Система доменных имен 711 I---example.net. (DS keytag: 49656) I—net. (DNSKEY KEYTAG: 62972) . |--net. (DNSKEY KEYTAG: 13467) I—net. (DS KEYTAG: 13467) I---. (DNSKEY KEYTAG: 63380) I--net. (DNSKEY KEYTAG: 63276) ;; Chase successful Если сервер имен, выполняющий проверку, не может проверить подпись, он возвра- щает сигнал SERVFAIL. Проблема может заключаться в неправильной конфигурации одной из зон, входящих в цепочку доверия, в фальшивых данных, поступивших от злоу- мышленника, или в настройке самого рекурсивного сервера, выполняющего проверку. Попробуйте выполнить команду drill и отследить подписи вдоль цепочки доверия, чтобы обнаружить источник проблемы. Если все подписи окажутся верифицированны- ми, то попытайтесь послать запрос проблемному сайту с помощью команды dig, а затем dig +cd. (Флаг cd отключает проверку подписей.) Примените их к каждой зоне, входя- щей в цепочку доверия, чтобы выяснить, в чем проблема. Вы можете перемещаться по цепочке доверия как вверх, так и вниз. Чаще всего причиной ошибки становятся уста- ревшие точки доверия или просроченные подписи. 17.14. Microsoft и DNS Многие годы консорциум ISC и группа разработчиков сервера BIND стремились обе- спечить взаимодействие с инструментами DNS, разработанными компанией Microsoft и ее службой Active Directory. Компанию Microsoft обвиняли в преднамеренном отклоне- нии от стандартов и отказе от документирования используемых ею расширений прото- колов. Однако оказалось, что компания Microsoft на самом деле не пыталась избежать совместимости; ее специалисты просто были несколько некомпетентными и работали с неправильным программным обеспечением (их собственным кодировщиком ASN.1 и синтаксическим анализатором), которое искажало пакеты настолько, что сервер BIND просто не мог в них разобраться. Теперь все в порядке. Ошибки исправлены, и сервер BIND совместно с компанией Microsoft следуют протоколу IETF и могут взаимодей- ствовать. Это хорошие новости. Плохая новость заключается в том, что служба Active Directory тесно интегрирована с протоколами Kerberos и LDAP и следует своими собственными извилистыми путями (которые похожи друг на друга!) Замена любого из фрагментов, например центра рас- пределения ключей Kerberos, на совместимую реализацию с открытым исходным кодом обречена на неудачу. Сервер BIND может выполнять аутентификацию с помощью служ- бы Active Directory, используя протокол GSS-TSIG, но авторизация остается практиче- ски невозможной, потому что служба Active Directory хранит всю информацию в базе данных LDAP. Советы, касающиеся обеспечения взаимодействия со службой Active Directory, мож- но найти в главе 30. 17.15. Тестирование и отладка Серверы BIND и NSD/Unbound предоставляют три основных инструмента для от- ладки: журнальная регистрация, управляющая программа и инструмент запросов их ко- мандной строки. Наиболее глубоко разработанными, но и наиболее сложными являются инструменты сервера BIND.
712 Часть II. Работа в сети Журнальная регистрация в пакете BIND Ш Система Syslog описывается в главе 11. Возможности подсистемы журнальной регистрации демона named действительно впечатляют. Сервер BIND использует систему Syslog для записи сообщений об ошиб- ках и аномалиях. В новейших версиях концепция журнальной регистрации обобщена: добавлен еще один уровень переадресации и поддерживается направление сообщений непосредственно в файлы. Прежде чем переходить к деталям, приведем мини-словарь терминов, связанных с журнальной регистрацией в пакете BIND (табл. 17.13). Таблица 17.13. Лексикон пакета BIND IjBpMHH : Ул//-/ //., л: Канал Место, куда направляются сообщения, — система Syslog, файл или устройство /dev/nullа Категория Класс сообщений, генерируемых демоном named, например сообщения о динамических об- новлениях или об ответах на запросы Модуль Имя исходного модуля, который сгенерировал сообщение Средство Название средства системы Syslog; за DNS не закреплено собственное средство, но можно выбрать любое стандартное Важность Степень важности сообщения об ошибке а /dev/nall/ — псевдоустройство, отбрасывающее все входящую информацию. Подсистема журнальной регистрации конфигурируется при помощи инструкции logging в файле named, conf. Сначала определяются каналы — возможные пункты до- ставки сообщений. Затем для различных категорий сообщений задаются каналы, куда они будут поступать. При формировании сообщения ему назначаются категория, модуль и уровень важно- сти. После этого оно рассылается по всем связанным с категорией и модулем каналам. В каждом канале имеется фильтр, определяющий, сообщения какого уровня важности можно пропускать. Каналы, ведущие в систему Syslog, подвергаются дополнительной фильтрации в соответствии с правилами, установленными в файле /etc/syslog.conf. Общий вид инструкции logging таков. logging { определение_канала определение_канала category имя_категории { имя_канала имя_канала }; }; Каналы Аргумент определение_канала выглядит по-разному, в зависимости от того, ведет ли он к файлу или к системе Syslog. Для каждого канала необходимо выбрать либо тип file, либо тип syslog; совмещать их канал не может.
Глава 17. Система доменных имен 713 channel имя_канала { file путь [versions число_версий | unlimited] [size размер]; syslog средство; severity важность; print-category yes | no; print-severity yes | no; print-time yes | no; }; Для файлового канала аргумент число_версий сообщает о том, сколько резервных копий файла нужно хранить. Аргумент размер задает предельно допустимый размер файла (например, 2048, 100k, 20m, 15g, unlimited, default), по достижении кото- рого произойдет автоматическая ротация. К примеру, если файловый канал называется mylog, то в процессе ротации появятся версии mylog.0, mylog. 1 и т.д. Для каналов системы Syslog задается имя средства, указываемое при регистрации со- общений. Это может быть любое стандартное средство, но на практике единственным разумным выбором являются средства daemon и localO—1оса17. Ш Список средств системы Syslog приводился в главе 11. Остальные разделы в определении канала являются необязательными. Аргумент важность может принимать следующие значения (в порядке уменьшения приоритета): critical, error, warning, notice, info и debug (здесь может добавляться номер уровня, например severity debug 3). Значение dynamic соответствует текущему уров- ню отладки сервера. Параметры print устанавливают или отменяют вывод различных префиксов сооб- щений. Система Syslog вставляет перед каждым сообщением метку времени, а также имя узла, но не уровень важности или категорию. Существует также параметр, позволяющий отображать имя исходного файла (модуля), сгенерировавшего сообщение. Параметр print-time рекомендуется включать только для файловых каналов, поскольку в Syslog произойдет ненужное дублирование информации. В табл. 17.14 перечислены четыре канала, которые определены по умолчанию. В боль- шинстве случаев создавать новые каналы не требуется. Таблица 17.14. Стандартные каналы журнальной регистрации пакета BIND Имя канала default_syslog Направляет сообщения уровня info и выше в систему Syslog от имени средства daemon default_debug Направляет сообщения в файл named.run; уровень важности устанавливается рав- ным dynamic default_stderr Направляет сообщения в стандартный канал ошибок демона named с уровнем важ- ности info null Отбрасывает все сообщения Категории В момент создания программы категории определяются программистом. Они орга- низовывают сообщения по темам или функциональным возможностям, а не по важно- сти. В табл. 17.15 приведен текущий список категорий сообщений.
714 Часть II. Работа в сети Таблица 17.15. Категории сообщений пакета BIND Категория Чтоохватывав^'*, client Клиентские запросы config Ошибки анализа и обработки конфигурационного файла database Сообщения об операциях с базой данных default Категории, для которых не был явно назначен канал delegation-only Запросы, посланные в NXDOMAIN зонами, выполняющими только делегирование dispatch Диспетчеризация входящих пакетов среди модулей сервера dnssec Сообщения протокола DNSSEC edns-disabled Информация о серверах, вышедших из строя general Неклассифицированные сообщения lame-servers Сообщения о серверах, которые, как предполагается, обслуживают зону, но на самом деле это не така network Сетевые операции notify Сообщения об изменениях зон queries Короткое сообщение для каждого (!) запроса, принимаемого сервером resolver Операции преобразования имен, например рекурсивный поиск, выполняемый от имени клиента security Принятые или непринятые запросы unmatched Запросы, которые демон named не может классифицировать (неправильный класс, нет представления) update Сообщения о динамических обновлениях update-security Одобрение или отклонение запросов на обновление xfer-in Сообщения о зонных передачах, принимаемых сервером xfer-out Сообщения о зонных передачах, отправляемых сервером a Это может быть как родительская, так и дочерняя зона. Журнал запросов Стандартный вид инструкции logging таков. logging { category default { default_syslog; default_debug; }; }; После внесения существенных изменений в систему BIND необходимо просматри- вать журнальные файлы; возможно, стоит также повышать уровень отладки. После того как демон named вернется в стабильное состояние, настройте систему так, чтобы реги- стрировались только важные сообщения. Журнал запросов — источник весьма полезной информации. На его основании мож- но проверить, работают ли директивы allow, узнать, кто посылает вам запросы, иден- тифицировать неправильно сконфигурированных клиентов и т.д. Для того чтобы включить режим регистрации запросов, назначьте категории queries какой-нибудь канал. Регистрация в системе Syslog менее эффективна, чем непосред- ственно в файле, поэтому при регистрации каждого запроса создайте файловый канал, связанный с локальным диском. Зарезервируйте для журнала достаточно дискового про-
Глава 17. Система доменных имен 715 странства и будьте готовы отключить регистрацию, когда накопится достаточный объем данных (команда rndc querylog включает и отключает регистрацию запросов). Иногда отладка представления является довольно сложной задачей, но, к счастью, представление, соответствующее конкретному запросу, можно занести в журнал вместе с запросом. Ниже перечислены наиболее часто регистрируемые сообщения. • Неправильно сконфигурированный сервер (“Lame server resolving ххх”). Если подобное сообщение поступает от одной из внутренних зон, значит, в конфигурации систе- мы имеется ошибка. Если же в сообщении говорится о какой-то зоне в Интернете, то можно не беспокоиться: это “чужая” ошибка. Сообщения второго вида вполне можно отбрасывать, направляя их в канал null. • Отклонение запроса (“...query (cache) ххх denied”). Причиной этого сообщения мо- жет быть неправильная конфигурация удаленного сайта, нарушение правил или ситуация, в которой некто делегировал вам зону, но вы ее не конфигурировали. • Просроченное время при распознавании: отключение EDNS (too many timeouts resol- ving ххх: disabling EDNS). Это сообщение может возникнуть вследствие отказа брандмауэра, не пропускающего пакеты UDP, размер которых превышает 512 байт, и не допускающего фрагментирование. Кроме того, оно может свидетельствовать о проблемах на конкретном узле. Следует убедиться, что проблема не связана с ва- шим брандмауэром, и рассмотреть возможность переадресации этих сообщений в нулевой канал. • Неожиданное распознавание RCODE (SERVFAIL) (unexpected RCODE (SEVFAIL) resolving ххх). Это сообщение может быть признаком атаки или, что более вероят- но, сигналом о том, что кто-то постоянно посылает запросы к неправильно скон- фигурированной зоне. • Неправильная отсылка (“Bad referral”). Это сообщение свидетельствует о непра- вильном взаимодействии серверов имен зоны. • Неавторитетен (“Not authoritative for”). Подчиненный сервер не может получить авторитетные данные о зоне. Возможно, у него хранится неправильный адрес главного сервера или же тот не смог загрузить зону. • Зона отклонена (“Zone rejected”). Демон named отказался загружать зонный файл, поскольку тот содержит ошибки. • Не найдены записи NS (“No NS RR for”). В зонном файле после записи SOA не найдены записи NS. Возможно, они отсутствуют либо не начинаются с табуляции или какого-нибудь другого пробельного символа. Во втором случае они не при- соединяются к зоне и, следовательно, интерпретируются неправильно. • Не задано стандартное значение TTL (“No default TTL set”). Желательно задавать стандартное значение TTL посредством директивы $TTL, располагаемой в начале зонного файла. Ошибка свидетельствует о том, что такая директива отсутствует. В версии BIND 9 наличие этой директивы обязательно. • Нет корневых серверов имен для класса (“No root nameservers for class”). Демону named не удается найти корневые серверы имен. Следует проверить файл корне- вых “подсказок” и подключение сервера к Интернету. • Адрес уже используется (“Address already in use”). Порт, который нужен для работы демона named, занят другим процессом, возможно, другой копией демона. Если
716 Часть II. Работа в сети демон отсутствует в списке выполняющихся процессов, то, очевидно, он перед этим аварийно завершил свою работу и оставил открытым управляющий сокет утилиты rndc, который нужно найти и удалить. Хороший способ устранить про- блему — остановить процесс с помощью утилиты rdnc и перезапустить процесс named. • % sudo rdnc stop • % sudo /usr/sbin/named . .. • Обновление запрещено (“Denied update from...”). Имела место попытка динамиче- ского обновления зоны, которая была отвергнута вследствие установки al low- update или update-policy для зоны в файле named.conf. Это очень рас- пространенное сообщение об ошибке, которая часто вызывается неправильной конфигурацией системы Windows. Пример конфигурации журнала запросов в пакете BIND Приведенный ниже фрагмент взят из файла named, conf одного из загруженных сер- веров имен TLD и представляет собой полную конфигурацию журнала запросов. logging channel default_log { # Default channel, to a file file "log/named.log" versions 3 size 10m; print-time yes; print-category yes; print-severity yes; severity info; }; channel xfer-log { # Zone transfers channel, to a file file "log/xfer.log" versions 3 size 10m; print-time yes; print-category yes; print-severity yes; severity info; }; channel dnssec-log { # DNSSEC channel, to a file file "log/dnssec.log" versions 3 size 10m; severity debug 1; print-severity yes; print-time yes; }; category default { default_log; defaula_debug; } category dnssec { dnssec-log; } category xfer-in { xfer-log; } category xfer-out { xfer-log; } category notify { xfer-log; } }; Уровни отладки в пакете BIND Уровни отладки демона named обозначаются целыми числами от 0 до 100. Чем выше число, тем больше текста содержит выходная информация. Уровень 0 выключает отлад- ку. Уровни 1 и 2 отлично подходят для отладки конфигурационного файла и базы дан- ных. Уровни выше 4 предназначены для разработчиков кода демона.
Глава 17. Система доменных имен 717 Отладку можно включить из командной строки, запуская демон named с флагом -d. Например, команда # sudo named -d2 запускает демон named на уровне отладки 2. По умолчанию отладочная информация за- писывается в файл named, run, находящийся в каталоге запуска демона. Этот файл рас- тет очень быстро, поэтому во время отладки будьте внимательны. Отладку можно также включать в процессе работы демона named с помощью ко- манды rndc trace, которая увеличивает уровень отладки на единицу. Команда rndc notrace выключает режим отладки. Кроме того, можно создать канал регистрации со- общений, в определение которого входит строка следующего вида. severity debug 3 Эта строка обеспечивает направление в канал всех отладочных сообщений вплоть до уровня 3. Другие директивы в определении канала указывают на то, куда в конечном итоге попадут сообщения. Чем выше уровень важности, тем больше информации реги- стрируется. Просматривая журнальные файлы и отладочные сообщения, можно заметить, как часто делаются ошибки в конфигурации DNS. Забыв поставить точку в конце имени, можно спровоцировать угрожающий рост трафика DNS. Помните: точка нужна в конце каждого полностью определенного имени домена. Журнальная регистрация в пакетах NSD и Unbound Журнальная регистрация в пакетах NSD и Unbound проста по сравнению с пакетом BIND. В соответствии с файлом doc.README, “пакет NSD не выполняет никакой жур- нальной регистрации”. На самом деле это означает, что пакет NSD не выполняет ника- кой регистрации трафика DNS и мониторинга, тем не менее, он регистрирует важные события, происходящие с программным обеспечением, в системе Syslog. По умолчанию журнальные сообщения выводятся в стандартный поток сообщений об ошибках и в систему Syslog с помощью вспомогательного демона. Однако если атри- бут logfile в инструкции server установлен равным unbound, conf или nsd. conf, то сообщения выводятся в указанный файл. Объем регистрируемых данных (помимо ошибок, которые учитываются всегда) управляется уровнем детализации, который можно задать в файле конфигурации. При работе с демоном unbound уровень детализации можно задать в командной строке. Этот параметр изменяется от 0 до 5; по умолчанию он равен 0 для демона nsd и 1 - для де- мона unbound. Иногда трудно понять, какой уровень детализации следует выбрать для демона nsd. Они классифицируются примерно так. • Уровень 3 — “ошибка” • Уровень 4 — “предупреждение” • Уровень 5 — “замечание” • Уровень 6 — “информация” Описание уровней детализации для демона unbound приведено на справочной стра- нице файла конфигурации. • Уровень 1 — не регистрируется никакая информация, кроме ошибок • Уровень 2 — операционная информация
718 Часть II. Работа в сети • Уровень 3 — детальная операционная информация • Уровень 4 — информация о запросах • Уровень 5 — информация об алгоритмах • Уровень 6 — информация о кеше и идентификации клиента Для того чтобы включить режим отладки, можно вызвать демона nsd с параметром -d. В этом режиме демон nsd получает высокий приоритет, не разветвляется и не прекра- щает работу. Это эквивалентно установке параметра debug-mode: yes в разделе server в файле nds .conf. Если перекомпилировать демона nsd с параметром DEBUG, соот- ветствующим конкретному уровню отладки, то можно получить еще больше отладочной информации, но она по большей части требуется только разработчикам. Демон unbound тоже имеет флаг -d, чтобы включить режим отладки. Уровнем де- тализации можно управлять с помощью параметра -v; чтобы получить еще больше ин- формации, попробуйте комбинацию -v -v. Регистрация отладочной информации за- дается отдельно от детализации регистрационной информации в файле конфигурации. Можно установить дополнительные уровни регистрации, чтобы облегчить процесс про- верки подписи DNSSEC. Управляющие программы сервера имен Все три сервера имен поставляются с управляющими программами: программа nsdc управляет демоном nsd, программа rndc — демоном named, а программа unbound- control — демоном unbound. Программа nsdc работает только на локальном компью- тере, а программы rndc и unbound-control могут работать в Интернете, если их соот- ветствующим образом настроить. Программа rndc использует сетевой сокет для взаимодействия с демоном named и систему аутентификации TSIG для безопасности; программа unbound-control исполь- зует протокол SSL/TLS, а программа nsdc — сигналы. Использование программы rndc в пакете BIND Опции программы rndc перечислены в табл. 17.16. Если напечатать имя програм- мы rndc без аргументов, то она выведет на экран список доступных команд и их крат- кое описание. В предыдущих версиях программы rndc использовались сигналы, как и в программе nsdc. Однако количество доступных команд “перевалило” за 25, поэтому разработчики пакета BIND отказались от использования сигналов. Команды, приводя- щие к созданию файлов, размещают их в каталоге, заданном в файле named.conf как начальный каталог демона named. Таблица 17.16. Команды программы rndc а Команда Назначение dumpdb flush [представление] flushname имя [представление] freeze зона [класс [представление]] thaw зона [класс [представление]] halt Записывает образ базы данных DNS в файл named.dump.db Очищает все кеши или кеши, заданные представлением Удаляет имя из кеша сервера Приостанавливает обновления динамической зоны Возобновляет обновления динамической зоны Останавливает демон named без обработки отложенных об- новлений
Глава 17. Система доменных имен 719 Окончание табл. 17.16 ^Команда Назначение z’i"' ~ querylog Переключает режим трассировки входящих запросов notify зона [класс [представление]] Повторно посылает зоне уведомления notrace Отключает режим отладки reconfig Повторно загружает конфигурационный файл и все новые зоны recursing Записывает текущие рекурсивные запросы в файл named, recursing refresh зона [класс [представление]] Поддерживает расписания для зоны reload Повторно загружает файл named.conf и зонные файлы reload зона [класс [представление]] Повторно загружает только указанную зону или представление restart6 Повторно запускает сервер retransfer зона [класс [представление]] Повторно копирует данные для зоны из главного сервера stats Записывает статистическую информацию в файл named.stats status Отображает на экране текущий статус выполнения демона named stop Сохраняет отложенные обновления и останавливает демон named trace Увеличивает уровень отладки на единицу trace приращение Увеличивает уровень отладки на приращение validation новое.состояние Включает/отключает проверку DNS на лету а Аргумент класс означает то же, что и в случае записей о ресурсах; для Интернета он обычно равен IN. 6 Эта команда еще не реализована в пакете BIND 9 (9.7.0), но разработчики обещают скоро ее реализовать (должно быть, это трудно). Команда rndc reload заставляет демон named заново прочитать конфигурацион- ный файл и повторно загрузить зонные файлы. Команду reload зона удобно приме- нять на интенсивно эксплуатируемом сервере, когда изменению подвергается только одна зона, а остальные трогать не нужно. Кроме того, можно задать параметры класс и представление, чтобы загрузить только указанное представление зонных данных. Обратите внимание на то, что команды rndc reload недостаточно, чтобы доба- вить совершенно новую зону; для этого требуется, чтобы демон named прочитал файл named, conf и новый зонный файл. Для новых зон следует использовать команду rdnc reconfig, которая заново прочитывает файл конфигурации и загружает любую новую зону, не трогая существующие. Команда rdns freeze останавливает динамические обновления и согласовывает журнал динамических обновлений с зонными файлами. После замораживания зоны зонные данные можно редактировать вручную. Поскольку зона заморожена, динамиче- ское обновление происходить не будет. Завершив редактирование, выполните команду rdnc thaw зона, чтобы принимать динамические обновления снова. Команда rndc dumpdb заставляет демон named записать образ своей базы данных в файл named_dump. db. Этот файл очень большой и содержит не только локальные дан- ные, но и данные, накопленные в кеше сервера имен. Версии демона named и программы rndc должны совпадать, иначе будет выдано со- общение о несовпадении версий протокола. Обычно они устанавливаются на один и тот
720 Часть II. Работа в сети же компьютер, и расхождение версий может вызвать проблемы, если демон named пен пытается управлять другим компьютером. I Использование программы nsdc в пакете NSD Управляющая программа nsdc пакета NSD представляет собой оболочку, использую- щую сигналы для управления поведением демона nsd и утилиты zonec, которая прила- гается к предкомпилятору зоны. Поскольку программа nsdc должна выполняться на той же машине, что и демон nsd, ключи не нужны. Как следует из табл. 17.17, программа nsdc имеет меньше команд, чем программа rndc. При выполнении программа nsdc считывает конфигурационный файл nsd. config и использует утилиту nsd-checkconf для проверки синтаксических ошибок. Таблица 17.17. Команды программы nsdc ' -Lj- -п-v t- •• •• - . "> ' vt P '> . start Запускает сервер nsd stop Останавливает сервер nsd (посылает сигнал SIGTERM) reload Повторно загружает базу данных скомпилированной зоны rebuild Повторно создает зонную базу данных с помощью утилиты zonec restart Повторно запускает сервер nsd, т.е. останавливает его, а затем запускает running Проверяет, запущен ли сервер nsd; если все в порядке, никакой информации не выводит update Пытается обновить все подчиненные зоны notify Посылает уведомления всем подчиненным серверам patch Объединяет изменения, связанные с передачей зоны (в базе данных), в зонном файле (текстовом) Использование программы unbound-control Программа unbound-control посылает сообщения серверу имен unbound посред- ством протокола безопасности транспортного уровня TLS (бывшего SSL), который ис- пользует ключ и сертификат для каждого конечного пользователя. Эти ключи конфи- гурируются в разделе remote-control файла конфигурации unbound, conf. Для того чтобы управлять поведением сервера, можно использовать более 20 команд. Вместо пе- речисления всех возможных команд, мы отправляем читателей на справочную страницу программы unbound-control, на которой она подробно описана. Среди этих 20 команд есть обычные команды для запуска, остановки и повторного чтения, но некоторые опции осуществляют очень тонкое управление кешем и локаль- ными зонными данными, которые должны конфигурироваться. Такие опции, как переа- дресовка (forwarding), могут конфигурироваться или модифицироваться на лету. Сбор статистических данных Каждый сервер имен ведет статистику запросов с той или иной степенью детализа- ции. Некоторые опции можно конфигурировать, например можно указать, какие данные регистрировать, где их записывать, как часто обновлять и т.д. Новый статистический ка- нал в пакете BIND является более гибким механизмом. Сервер NSD позиционируется как надежный и быстрый сервер, статистические данные для которого должна собирать другая программа, пока сервер NSD выполняет свою основную работу. Сервер unbound занимает промежуточную позицию.
Глава 17. Система доменных имен 721 Серверы BIND и unbound могут посылать свои статистические данные другим программам для презентации и визуализации. Сервер BIND использует инструкцию statistics-channels и язык XML. Сервер unbound применяет надстройки для ката- лога contrib, обеспечивающие связь с системами мониторинга Munin или Cacti. Демон named накапливает итоговую информацию, которую он может сохранять в файле named, stats в рабочем каталоге демона named в ожидании команды от програм- мы rndc. $ sudo rndc stats Рассмотрим небольшой фрагмент вывода с сервера в домене vix. com. Большая часть информации была отброшена; в файле показаны 20 групп данных, мы приводим лишь две из них. +++ Statistics Dump +++ (1248150900) ++ Incoming Queries ++ 2650862 A 9105 NS 404378 SOA 85744 PTR 246258 MX 3208092 TXT ++ Name Server Statistics ++ 10028960 IPv4 requests received 388015 IPv6 requests received 5890639 requests with EDNS(0) received 92403 TCP requests received 4363730 queries resulted in successful answer 766435 queries resulted in nxrrset 599672 queries resulted in NXDOMAIN Эти статистические данные демонстрируют соотношение успешных и безуспешных проверок и классифицируют разные виды ошибок. Данный сервер получил 10 млн за- просов, большинство из которых имели типы АААА (адрес по протоколу IPv6) и ТХТ (возможно, запросы на записи SF или DKIM). Записи свидетельствуют о довольно ак- тивной деятельности злоумышленников на этом сервере (например, о запросах на неав- торизованную передачу зоны). Вероятно, необычно большое количество запросов типа АААА и ТХТ является частью этой активности — чаще всего запрашивались записи А. Если демон named компилируется с библиотекой XML, то инструкция statistics- channels в файле named, conf устанавливает статистический работающий в реальном времени канал, который пользователь может просматривать с помощью веб-браузера. Отладка с помощью команды dig Команды nslookup, dig, host и drill позволяют в режиме командной строки по- сылать запросы базе данных DNS. Первые три команды входят в дистрибутив BIND, а команда drill — в дистрибутив Unbound/ldns. Команды nslookup и host простые и выдают ясные результаты, но для того чтобы выяснить все детали, необходимы коман- ды dig и drill. Команда drill лучше прослеживает цепочки подписей по протоколу DNSSEC. Имя команды drill обыгрывает имя dig (domain information groper — сред-
722 Часть II. Работа в сети ство сбора информации о доменах)38, подсказывая, что благодаря этой команде можно! получить еще больше информации от системы DNS, чем с помощью команды dig. | По умолчанию команды dig и drill посылают запросы серверам имен, сконфигу-* рированным в файле /etc/resolv.conf. Аргумент @сервер_имен адресует команду конкретному серверу имен. Способность посылать запросы конкретному серверу по- зволяет гарантировать, что любые изменения, вносимые в зону, будут распространены среди подчиненных серверов и во внешнем мире. Это свойство особенно полезно, если вы используете представления (расщепляете DNS) и должны проверять, правильно ли они сконфигурированы. Если указать тип записи, то команды dig и drill будут выполнять запрос толь- ко к этим записям. Псевдотип ANY действует немного неожиданно: вместо того чтобы вернуть все данные, ассоциированные с указанным именем, он возвращает все кеши- рованные данные, связанные с ним. Итак, чтобы получить все записи, необходимо за- дать команду dig домен US, за которой следует выражение dig @nsl. домен. домен ANY. (Авторитетные данные в этом контексте рассматриваются как кешированные.) Команда dig имеет более 50 опций, а команда drill — около половины этого коли- чества. Получив флаг -h, эти команды выдают список всех своих опций. (Для того что- бы упорядочить вывод, можно использовать параметр 1езз.)Для обеих команд опция -х изменяет порядок следования байтов в IP-адресе на противоположный и выполняет обратный запрос. Флаги +trace команды dig и -т команды drill показывают итера- тивные шаги в процессе распознавания, начиная от корня и вниз по дереву иерархии. Мы не приводим примеры вывода с помощью команд dig и drill, поскольку мы использовали их во всей главе при описании разных аспектов системы DNS. Если ответ является авторитетным (т.е. приходит непосредственно от главного или подчиненного сервера данной зоны), то команды dig и drill во флагах вывода исполь- зуют символы аа. Код ad означает, что ответ является аутентичным в смысле протокола DNSSEC. Тестируя новую конфигурацию, следует убедиться, что вам доступны данные как локальных, так и удаленных узлов. Некорректное делегирование Подавая заявку на получение доменного имени, вы просите, чтобы основному серве- ру имен и администратору DNS была выделена (делегирована) часть дерева имен. Если не поддерживать работу домена или изменить адреса серверов имен, не обновив свя- зующие записи родительского домена, будет иметь место так называемое некорректное делегирование (lame delegation). Последствия некорректного делегирования могут оказаться весьма негативными. Если хотя бы один из ваших серверов окажется некорректным, то вся ваша система DNS снизит эффективность работы. Если все серверы имен являются некорректными, то ни один из них не будет доступен. Все запросы будут начинаться с корня, пока от- веты будут кешироваться, поэтому некорректные серверы и неисправное программное обеспечение, которое не делает негативного кеширования ошибок SERVFAL, увеличи- вают нагрузку на каждый узел, находящийся на пути от корня к некорректному домену. Есть два способа выявить некорректное делегирование — просматривая журнальные файлы и используя инструмент под названием doc, которое представляет собой сокра- щение от словосочетания “domain obscenity control” (проверка корректности домена). 38 Dig — копать, a drill — бурить, т.е. проникать глубже. — Примеч. ред.
Глава 17. Система доменных имен 723 Несколько примеров работы утилиты doc мы рассмотрим в следующем разделе, а пока приведем несколько записей из журнальных файлов. На многих сайтах в качестве канала для регистрации указан каталог /dev/null, что- бы не беспокоиться о некорректном делегировании. Это допустимо, если ваш домен на- ходится в полном порядке и не является ни источником, ни жертвой некорректного деле- гирования. Всего лишь один некорректный сервер снижает эффективность работы систе- мы DNS; если все серверы некорректные, то домен практически “взлетает на воздух”. Рассмотрим пример регистрационных записей. Мы сократили вывод, чтобы не за- громождать изложение; флаг +short позволяет сделать вывод команды dig еще более лаконичным. Jul 19 14:37:50 nubark named[757]: lame server resolving 'w3w3.com'(in 'w3w3.com'?): 216.117.131.52#53 Послав с помощью команды dig запрос о серверах имен для домена w3w3. com одно- му из серверов gTLD-домена . сот, мы получим следующую информацию. $ dig @е. gtld-servers. net w3w3. com ns ;; ANSWER SECTION: w3w3.com 172800 IN NS nsO.nameservices.net. w3w3.com 172800 IN NS nsl.nameservices.net. Если же теперь опросить каждый из этих серверов по очереди, задав им этот же во- прос, то мы получим ответ от сервера nsO и не получим ответа от сервера nsl. $ dig @nsO.nameservices.net w3w3.com ns ;; ANSWER SECTION: w3w3.com 14400 IN NS nsO.nameservices.net. w3w3.com 14400 IN NS nsl.nameservices.net. $ dig @nsl.nameservices.net w3w3.com ns ;; QUESTION SECTION: ;; w3w3.com. IN IN ;; AUTHORITY RECORDS: com. 244362 IN NS M.GTLD-SERVERS.NET. com. 244362 IN NS I.GTLD-SERVERS.NET. com. 244362 IN NS E.GTLD-SERVERS.NET. Сервер имен nsl. nameservices.net делегировал ответственность за домен w3w3. com серверам домена . com, но они эту ответственность не приняли. Эта конфигурация является неправильной, и возникло некорректное делегирование. Клиенты, пытающи- еся попасть в домен w3w3. com, будут обслуживаться медленно. Если домен w3w3. com оплачивает услуги DNS домену nameservices. net, то он заслуживает компенсации! Иногда, посылая запрос с помощью команды dig на авторитетный сервер в поисках некорректности, можно не получить никакой информации. В этом случае следует по- пытаться повторить запрос с флагом +norecurse, чтобы можно было увидеть точно, что знает искомый сервер. Инструменты для проверки корректности системы DNS Существует несколько инструментов, позволяющих проверить некоторые аспекты системы DNS. В пакете BIND 9 поставляются утилиты named-checkconf и named- checkzone; они проверяют выполнение основных синтаксических правил (не семанти- ку) в файле named, conf и зонных файлах. Пакеты NSD и Unbound содержат аналогич- ные инструменты под названием nsd-checkconf и unbound-checkconf.
724 Часть II. Работа в сети Оригинальным инструментом для проверки системы DNS является программа nslint, написанная Крейгом Лересом (Craig Leres), когда он работал в компании Lawarence Berkeley Labs. Утилита doc (domain obscenity control) — программа для проверки кор- ректности домена — проверяет делегирование и находит несоответствия и ошибки в раз- вернутой системе DNS. Ниже она обсуждается более подробно. Инструмент lamer (рас- положенный на том же веб-сайте, что и утилита doc) просматривает журнальные файлы и посылает администраторам DNS по электронной почте сообщения о некорректных сайтах, уведомляя их о том, что эти сайты порождают некорректное делегирование, и описывая, как исправить проблему. Утилита DDT, написанная Жоржем Фразао (Jorze Frazao) и Артуром Ромао (Artur Romao), выполняет отладку кешированных данных. Утилита dnswalk проходит по дереву делегирования и идентифицирует несоответ- ствия между родительским и дочерним узлами или между прямыми и обратными запи- сями. Она также находит отсутствующие точки, избыточные связующие записи и т.д. Это средство для поддержания общего порядка в системе DNS. Для успешной работы утилита dnswalk должны иметь возможность выполнять передачу зоны. Некоторые средства отладки и управления протоколом DNSSEC перечислены в раз- деле “Отладка протокола DNSSEC”. Утилита doc реализует основной сценарий, написанный на языке С. В настоящее время ее сопровождение осуществляет Бред Ноулз (Brad Knowls). Эту утилиту можно загрузить с его сайта shub-internet.org/brad/dns (обратите внимание на то, что следует писать “shub”, а не “shrub”). Если вы планируете указать утилиту doc в своем разделе PATH или запустить ее с помощью планировщика задач cron, то должны от- редактировать сценарий и установить переменную auxd так, чтобы она указывала на ка- талог инсталляции. Утилита doc проверяет делегирование, выполняя повторяющиеся вызовы команды dig. Она сообщает о несоответствиях, ошибках и других проблемах, связанных с кон- кретным именем домена. На экран выводится информация о всех выявленных пробле- мах. Кроме того, эта утилита создает подробный журнальный файл в текущем каталоге. Для своей работы утилита doc использует локальный сервер имен. Если домен ис- пользует инструкцию view сервера BIND и содержит частные адреса RFC1918 в своем внутреннем представлении, то применение утилиты doc к внутреннему представлению сбивает ее с толку и она сообщает о ложных ошибках. Если вы используете представле- ния, то запустите утилиту doc извне домена, чтобы она видела то, что видят внешние пользователи. Ниже приведен отчет утилиты doc о некорректном домене w3w3. com, который был рассмотрен выше. $ doc w3w3.com Doc-2.2.3: doc w3w3.com Doc-2.2.3: Starting test of w3w3.com. parent is com. Doc-2.2.3: Test date - Tue Jul 21 21:15:11 MDT 2009 Summary. ERRORS found for w3w3.com. (count: 1) WARNINGS issued for w3w3.com. (count: 1) Done testing w3w3.com. Tue Jul 21 21:15:21 MDT 2009 Утилита doc выводит в журнальный файл (в данном случае файл Iog.w3w3.com) подробности тестирования и сообщение об ошибках (в сумме более 600 строк). ERROR: no SOA record for w3w3.com. from nsl.nameservices.net.
Глава 17. Система доменных имен 725 Утилита не помечает домен w3w3. com как “некорректное делегирование”, а иден- тифицирует проблему, которая в связи с этим возникает. Начиная с записей NS в роди- тельской зоне, утилита проверяет, является ли сервер nsl.nameservices.net автори- тетным по отношению к домену w3w3. com; в данном случае это не так. Если вы управляете доменом, который содержит поддомены (или вы не доверяете менеджерам вашего родительского домена), постарайтесь выполнять утилиту doc из планировщика заданий cron каждую неделю, чтобы проверить, что все делегирования, связанные с вашим доменом, являются корректными. Производительность системы Производительность пакета BIND 9 на многопроцессорной архитектуре оказалась не такой высокой, как надеялись его разработчики, но некоторые корневые серверы исполь- зуют пакет BIND 9 и успешно обрабатывают десятки тысяч запросов в секунду. Для боль- шинства сайтов этого, вероятно, более чем достаточно. Однако производительность па- кетов NSD и Unbound еще выше, особенно в зонах, подписанных по протоколу DNSSEC. Мы уже несколько раз об этом говорили, но скажем еще раз: присваивайте вашим параметрам TTL разумные значения — недели или дни, а не минуты и секунды. Ис- пользование коротких периодов TTL отрицательно сказывается как на вашей работе (поскольку вы постоянно перезаписываете одни и те же записи), так и на работе ваших веб-клиентов (поскольку они постоянно извлекают эти записи). Кроме того, это позво- ляет потенциальным злоумышленникам искажать содержимое вашего кеша. Некоторые серверы имен преднамеренно игнорируют параметры TTL, которые им не нравятся (т.е. если эти значения неразумно малы или чрезмерно велики). Подкачка памяти снижает производительность сервера нелинейно, поэтому не ску- питесь на память ваших узлов, которые запускают серверы имен. Для того чтобы стаби- лизировать работу рекурсивных серверов, вам понадобится около недели на копирова- ние памяти (см. раздел 17.6). Для того чтобы оценить объем памяти, который может понадобиться демону nsd для обработки ваших авторитетных данных, заполните веб-форму на веб-странице nlsnetlabs.net/nsd/nsd-memsize.html. Отлично! Используйте переадресующие серверы (см. раздел 17.9). Сценарии init, запускающие демон named на многих системах, создают дополнитель- ные точки входа (например, reload), предназначенные для системного администратора. Однако проще и надежнее с точки зрения работы на разных платформах использовать утилиту rdnc. Ш Более подробно утилита inetd описана в разделе 32.1. Не используйте программы inetd или xinetd для управления сервером имен; они перезагружают сервер каждый раз, когда им это требуется, тем самым резко замедляя время ответа и не позволяя создавать хоть сколько-нибудь полезный кеш. 17.16. Специфика различных дистрибутивов В этом разделе описывается программное обеспечение серверов имен для разных платформ. В каждый дистрибутивный пакет серверов имен входит пакет BIND, хотя при инсталлировании операционной системы, а также при отдельной установке сервера имен есть возможность указать, какой именно пакет вы хотите установить.
726 Часть II. Работа в сети Операционные системы семейства Linux более оперативно реагируют на появление новых версий пакета BIND, чем ее аналоги из семейства UNIX. Тем не менее служба имен играет чрезвычайно важную роль. По этой причине вполне естественно желать, чтобы на компьютере немедленно устанавливались новейшие системы, а не дожидаться, пока эти пакеты станут общедоступными. Системы Ubuntu и Red Hat содержат полный комплект NSD/Unbound в виде паке- тов; система SUSE хранит в своих официальных репозиториях только пакет Unbound. В настоящее время все эти пакеты слегка устарели, поэтому мы рекомендуем загружать их новейшие версии с сайта nlnetlabs. nl и собирать их самостоятельно. В этом разделе рассмотрим указатели на файлы конфигурации, на которых основана работа любой версии пакета BIND любого поставщика. Кроме того, мы покажем, как объединить пакет BIND с другими источниками административных данных, такими как однородные файлы и файлы службы NIS. Более подробное обсуждение последней темы изложено в главе 19. Ш Более подробная информация о сценариях загрузки системы приведена в разделе 3.5. Мы также рассмотрим указатели на сценарии, которые должны выполняться при за- грузке серверов имен. Если сервер имен выходит из строя, то выходит из строя абсолют- но все — сеть, электронная почта, веб-сайт. Некоторые организации используют сцена- рий сохранения работоспособного состояния. К таким сценариям относится nanny из дистрибутивного пакета BIND. Специфика системы Linux Д Пакеты BIND для системы Linux инсталлируют сценарий для пакетов named, который запускается с помощью команд init: /etc/inut. d/bind9 для си- стемы Ubuintu и /etc/init.d/named для систем RHEL и SUSE. Пакеты named в системе Linux инсталлируют все программы в своих традиционных каталогах. Детали показаны в табл. 17.18. Система Red Hat имеет дополнительные про- граммы, которые взаимодействуют с инструментом Network Manager с помощью флага -D, который задается в командной строке демона named. Подробности можно найти в файле doc/README-DBUS в пакете Red Hat BIND. Таблица 17.18. Файлы пакета BIND в Linux Файл resolv.conf /etc Библиотечный файл конфигурации распознавателя named, Iwres /usr/sbin Демон сервера имен Iwresd /usr/sbin Облегченный распознаватель named.conf /etc Конфигурационный файл сервера named (RHEL и SUSE) named.conf /etc/bind Конфигурационный файл сервера имен (Ubuntu) named-checkconf /usr/sbin Проверяет синтаксис файла конфигурации namedGetFrowarders /usr/sbin Предназначен для инструмента Network Manager (только в Red Hat) namedSetFrowarders /usr/sbin Предназначен для инструмента Network Manager (только в Red Hat) nsswitch.conf /etc Файл переключения службы Система Linux использует файл переключения /etc/nsswitch. conf для того, чтобы указать, как выполняется отображение IP-адреса в имя компьютера и в каком порядке
Глава 17. Система доменных имен 727 следует использовать систему DNS — первой, последней или вообще не использовать. Если файла переключения нет, то по умолчанию устанавливается следующее поведение. hosts: dns [!UNAVAIL=return] files Раздел ! unavail означает, что если служба DNS доступна, но имя в ней не найдено, следует прекратить попытки поиска и не продолжать просмотр следующей записи (в дан- ном случае файла /etc/hosts). Если сервер имен не был запущен (это бывает во время загрузки системы), то процесс поиска рекомендуется согласовывать с файлом hosts. Все рассмотренные нами дистрибутивные пакеты содержат в файле nsswitch. conf следующую запись, определяющую поведение по умолчанию. hosts: files dns Не существует “наилучшего” способа конфигурации поиска — все зависит от того, как управляется ваш сайт. В общем, мы предпочитаем хранить как можно больше ин- формации об узле в системе DNS, а не в файлах системы NIS или в обычных файлах, но мы также пытаемся сохранить возможность вернуться при необходимости назад к стати- ческим файлам hosts в процессе загрузки системы. ©Система Ubuntu является наиболее современной версией системы Linux, по- скольку ее дистрибутивные пакеты появились лишь совсем недавно. Ее про- граммы и файлы имеют корневого владельца и группового владельца “bind”, которые выдают разрешения на получение доступа, когда демон named вызы- вается как пользователь сервера BIND, а не как корень. Несколько полезных файлов находится в каталоге /etc/bind. Помимо них, в пакет входят файлы named, conf и зонные файлы, содержащие корневые подсказки, инфор- мацию о локальном узле, адресах широковещательной рассылки и пространстве част- ных адресов. Поставляемый файл named, conf содержит файлы named, conf, options и named, conf .local. Он задает каталог пакета BIND по умолчанию — /var/cache/ bind; при поставке этот каталог уже существует, но остается пустым. Размещение конфигурации в каталоге /etc, а зонной информации — в каталоге /var объясняется тем, что если ваш сервер является подчиненным по отношению к дру- гим сайтам, то вы не можете управлять размерами своих зонных файлов, которые запи- сывает демон named. Для того чтобы предотвратить потенциальное заполнение корне- вой части, следует сохранить файлы в каталоге /var. Зоны, для которых вы являетесь главным сервером, могут находиться вместе с файлами конфигурации (и задаваться аб- солютными путями в файле named, cond) либо в каталоге /var/cache/bind. Если вы хотите запустить только кеширующий сервер, то модифицировать файл named.conf не следует. Все зоны, по отношению к которым вы являетесь авторитет- ным, желательно добавлять в файл named, conf. local. Стандартные файлы, предоставляемые системой Ubuntu, используют новые функци- ональные возможности пакета BIND, помогающие серверам правильно работать в систе- ме DNS. Например, они конфигурируют домены . сот и . net как зоны, выполняющие только делегирование, чтобы опечатки пользователей не генерировали доход от рекла- мы для компании VerySign благодаря их инструменту Site Finder. Если вы не используете пространство частных адресов (RFC1918) изначально, то пустые зонные файлы RFC1918 предотвращают утечку этих адресов из локальной сети. Вперед, Ubuntu! Каталог /usr/share/doc/bind9 содержит несколько полезных ссылок. Проверьте файл README. Debian (даже в системе Ubuntu), чтобы понять стратегию конфигуриро- вания пакета BIND.
728 Часть II. Работа в сети Инсталляция системы SUSE сопровождается сообщениями о выполняемых действиях и генерирует, хорошо документированную инсталляцию сервера имен. По умолчанию демон named выполняется в виртуальной среде chroot в каталоге /var/lib/named как пользователь и группа “named”. Инсталлятор создает виртуальный каталог chroot и заполняет его всеми файлами, необхо- димыми для выполнения демона named, даже такими как сокет UNIX-домена для системы syslog. Дополнительные файлы конфигурации (не совпадаю- щие с файлом named.conf) и зонные файлы в каталоге /etc/named.d копи- руются в виртуальный каталог при запуске демона named. Если вы не хотите выполнять демон named в виртуальной среде, модифицируйте строку NAME D_RUN_CHROOTE D="ye s" в каталоге /etc/sysconf ig/named. Это все, что следует изменить; сценарии запуска в каталоге /etc/init.d используют эту информацию и могут запу- скать демон named в любом режиме. Система SUSE предоставляет стандартный файл /etc/named.conf, содержа- щий описание множества полезных опций. Файл /etc/named. conf является нечита- бельным, в отличие от других систем. Стандартный файл импортирует файл с именем named.conf. include, который затем импортирует файл rdnc-access. conf из ката- лога /etc/named, который можно прочитать. Не совсем ясно, почему система SUSE таким образом беспокоится о безопасности. Программа rdnc заранее конфигурируется так, чтобы принимать управляющие команды только от локального узла. Для того чтобы запустить только кеширующий сервер, файл named, conf системы SUSE можно использовать как есть. Если же вы хотите обслуживать свои зоны, то по- местите зонные файлы в каталог /etc/named.d, а список зонных имен — в файл /etc/ named. conf. include. Документация к пакету ISC BIND хранится в каталоге /usr/share/doc/packages/ bi nd 9. При инсталляции системы RHEL пакет BIND помещает бинарные файлы в ка- талог /usr/sbin, справочные страницы — в каталог /usr/share/man, добав- ляет пользователя и группу с именем “named” и создает каталоги для зонных файлов. Пользователь “named” имеет доступ к файлам данных с помощью раз- решений группы. Если не внести изменений в файл /etc/sysconfig/named, то файл named, conf за- писывается в каталог /etc (как указал Пол Викси (Paul Vixie)), а зонные файлы — в ка- талог /var/named. Стандартные файлы конфигурации не поставляются, но в пакете bindconf они есть. Специфика системы Solaris УСистема Solaris 10 поставляется вместе с пакетом BIND 9.3.4-Р1, выпущен- soiaris ным в конце 2007 года; он уже устарел, потому следует подумать о его моди- фикации. Система OpenSolaris является более современной и поставляется вместе с пакетом BIND 9.6.1-Р1 (2009). Система Solaris всегда называла свои сетевые программы как 1п.имя_программы, и демон named — не исключение, поэтому его можно не сразу найти, если забыть, что на самом деле он называ- ется in. named, а не named. К счастью, это уже не так, и теперь система Solaris называет демон просто named, а имя in. named осталось просто как ссылка.
Глава 17. Система доменных имен Аналогично системе Linux система Solaris использует файл заказа на обслужи- вание /etc/nsswitch.conf, с помощью которого она указывает, как должны взаимодействовать серверы BIND, NIS, NIS+ (только в системе Solaris 10) и файл /est/hosts. Замена строки hosts в этом файле на строку hosts: files dns заставляет распознаватель имен сначала проверять файл /etc/hosts и только потом систему DNS. Короткая инструкция NOTFOUND=return может моди- фицировать любую запись. Размещение имен важных серверов и маршрути- заторов в файле /etc/hosts облегчает решение причинно-следственной про- блемы, которая иногда возникает на этапе загрузки системы, пока не станет доступной служба имен. Служба имен в системе Solaris начинается со службы SMF svc:/network/dns/server: : default. Опции SMF задают аргументы командной строки. Имена файлов пакета BIND и их расположение в системе Solaris приведены в табл. 17.19. Таблица 17.19. Файлы пакета BIND 9 в системе Solaris Файл Каталог Описание ’ resolv.conf /etc Библиотечный файл конфигурации распознавателя named /usr/sbin Демон сервера имен named-checkconf /usr/sbin Проверяет синтаксис файла конфигурации named-checkzone /usr/sbin Проверяет синтаксис зонного файла named-conf /etc Файл конфигурации для сервера имен nsswitch.conf /etc Файл переключения службы Специфика системы HP-UX Система HP-UX содержит устаревший пакет BIND 9.3.2, выпущенный в кон- це 2005 года. Лучше обновите! Система HP-UX поставляется со стандартными файлами nsswitch.conf для разных комбинаций баз данных и служб. Один из них содержит список умолчаний для системы HP. Скопируйте файл, кото- рый кажется вам подходящим, в файл /etc/nsswitch.conf. Рекомендации по умолчанию для системы HP: hosts: dns [NOTFOUND=return] nis [NOFOUND=return] files Однако мы рекомендуем такую настройку, которая предотвращает проблемы при за- грузке системы. hosts: files [NOTFOUND=continue] dns Важно иметь возможность конфигурировать сеть в последовательности загрузки без поиска имен в службах NIS или DNS, поскольку эти службы не могут работать, пока система не загрузится. Дистрибутивный пакет системы HP-UX содержит хорошо документированные стан- дартные файлы практически на все случаи жизни. Они находятся в каталоге /usr /newconfig, но, увы, среди них нет ни одного, который относился бы к службе имен. Однако существует набор устаревших команд, связанных со службой имен, — hosts_ to_named, которая преобразует файл hosts в зонный файл, и sig_named, которая по- сылает управляющие сигналы выполняемому процессу named. В настоящее время файл
730 Часть II. Работа в сети /etc/hosts содержит как имя локального узла, так и имя самого узла, поэтому про- грамма для преобразования не нужна. Начиная с версии BIND 9, для управления про- цессом named должна использоваться программа rdnc, а не сигналы. Имена файлов пакета BIND и их расположение в системе HP-UX приведены в табл. 17.20. Таблица 17.20. Файлы пакета BIND в системе HP-UX Файл ., J; resolv.conf /etc Библиотечный файл конфигурации распознавателя named /usr/sbin Демон сервера имен Iwresd /usr/sbin Облегченный распознаватель named-checkconf /usr/sbin Проверяет синтаксис файла конфигурации named-checkzone /usr/sbin Проверяет синтаксис зонного файла named-conf /etc/namedb Файл конфигурации для сервера имен nsswitch.conf /etc Файл переключения службы Специфика системы AIX Система AIX содержит пакеты BIND 8 и 9, которым соответствуют бинарные файлы named8 и named9 соответственно. При поставке файл named представ- ляет собой ссылку на файл named8, которая больше не поддерживается кон- сорциумом ISC. Они поставляют версии 8.3.3+ и 9..2.1, выпущенные еще в ян- варе 2004 года. Очевидно, что причиной отсутствия обновлений является лень! Система AIX не содержит команд named-checkconf и named-checkzones, возможно, потому что они входят в пакет BIND начиная с 2004 года. Сценарий запуска службы имен в системе AIX находится в каталоге /etc/гс/tcpip. Мы полагаем, что такое расположение файлов неразумно, потому что операцион- ные системы во многом уже стандартизировали расположение файлов с учетом пакета BIND, а в системе AIX это еще не сделано. Имена файлов и их расположение в системе AIX приведены в табл. 17.21. Таблица 17.21. Файлы пакета BIND в системе AIX . Файл resolv.conf /etc Библиотечный файл конфигурации распознавателя named8 /usr/sbin Демон сервера имен BIND 8 named9 /usr/sbin Облегченный распознаватель BIND 9 named.conf /etc Файл конфигурации для сервера имен netsvc.conf /etc Файл переключения служб irc-conf /etc Другой файл переключения служб NSORDER окружение Переменная переключения окружения Обычно в поставку системы AIX входит три механизма, реализующие концепцию ‘переключения службы”, с помощью которых можно указать, к каким каталогам долж- ны обращаться службы. Переменная среды NSORDER замещает информацию, задан- ную в файлах /etc/netsvc. conf и /etc/irs. conf.
Глава 17. Система доменных имен 731 Эти механизмы не только размещаются в разных местах, но и имеют разный син- таксис. Например, для того чтобы выбрать поиск имен узлов в системе DNS в файле netsvc.conf, можно использовать переменную bind, но то же самое можно сделать и с помощью файла irs. conf, в котором хранится значение dns. Этот синтаксис по- зволяет определить, что делать, если предпочитаемая служба не находит ответа, но он отличается от синтаксиса файла nsswitch. conf в других системах. Детали механизма переключения служб приведены в разделе 19.5. 17.17. Рекомендуемая литература Система доменных имен и пакет BIND описаны во многих источниках, включая до- кументацию, входящую в состав пакета, отдельные главы в книгах об Интернете, це- лую книгу серии “In a Nutshell” издательства O’Reilly, а также многочисленные ресурсы в глобальной сети. Серверы NSD и Unbound являются относительно новыми, поэтому внешних источников, посвященных их описанию, относительно немного, но мы нашли одну книгу, которая охватывает сразу несколько веб-документов. Списки рассылки и новостные группы Ниже перечислены списки рассылки, посвященные пакету BIND. • bind-announce — чтобы подписаться, отправьте сообщение по адресу bind- announce-request@isc.org • namedroppers — чтобы подписаться, отправьте сообщение по адресу namedroppers-request@internic.net • bindusers — чтобы подписаться, отправьте сообщение по адресу bind-users- request@isc.org • bind9-workers — чтобы подписаться, отправьте сообщение по адресу bind9- workers-request@isc. org (для разработчиков) Сообщения об ошибках следует слать по адресу bind9-bugs@isc. org. Ниже перечислены списки рассылки, посвященные пакету NSD/Unbound. • nsd-users — чтобы подписаться, зайдите на веб-сайт nlnetlabs. nl/projects/nsd • unbound-users — чтобы подписаться, зайдите на веб-сайт unbound. net • Idns-users — чтобы подписаться, зайдите на веб-сайт nlnetlabs. nl/projects/ Idns • drill — чтобы подписаться, зайдите на веб-сайт nlnetlabs.nl/projects/drill И вот список рассылки, посвященный службе DNS и функционированию чрезвы- чайно важных сайтов (регистраторов, корневых серверов, серверов TLD и т.д.). • dns-operations — чтобы подписаться, зайдите на веб-сайт lists. dns-oarc.net Книги и другая документация • The Nominum BIND Development Team. BINDv9 Administrator Reference Manual. • Документ включен в дистрибутив BIND (doc/arm), а также доступен на веб-узле www .isc.org. В нем в общих чертах описаны принципы администрирования па- кета BIND 9.
732 Часть II. Работа в сети • Reed, Jeremy С., editor. BIND 9 DNS Administration Reference Book, redwood City, CA: Reed Media Services, 2007. • Albitz, Paul and Cricket Liu. DNS and BIND, 4th Edition. Sebastopol, CA: O’Reilly, 2001. Это очень популярная книга о пакете BIND, содержащая описание версий BIND 8 и BIND 9. Полнота изложения впечатляет. • Liu, Cricket. DNS & BIND Cookbook. Sebastobol, CA: O’Reillymedia, 2002. Это упрощенная версия книги о системе DNS, выпущенной издательством O’Reilly, содержащая четкие и ясные инструкции, а также примеры разных операций на серверах имен. Она несколько устарела, но все еще полезна. • Atchison, Ron. Pro DNS and BIND. Berkeley, CA: Apress, 2005. Это новая книга о системе DNS, содержащая очень хороший раздел о протоколе DNSSEC с примерами и описание стратегии развертывания. Мы нашли несколь- ко опечаток, но, к счастью, автор поддерживает веб-сайт, посвященный ошибкам. По глубине материала и организации эта книга выгодно отличается от книги DNS and BIND, но администратору DNS лучше иметь обе эти книги! • Mens, Jan-Piet. Alternative DNS Servers: Choice and Deployment, and Optional SQL/LDAP Back-Ends. Camridge, England: UIT Cambridge Ltd., 2009. Эта книга описывает около 10 разных реализаций серверов имен, включая NSD/ Unbound. В ней изложены разные вопросы хранения данных о зоне, приведены прекрасные диаграммы и дано много полезной информации. Ресурсы в Интернете Каталог ресурсов DNS (dns. net/dnsrd) — это полезная коллекция ресурсов и ссы- лок на них, поддерживаемая Андрашем Саламоном (Andras Salamon). Веб-сайты isc.org,dns-oarc.net, ripe.net, nlnetlabs.nl, f.root-servers. org и k. root-servers. org содержат много информации о системе DNS, исследовани- ях, результатах измерений, презентациях и др. В поисковой системе Google индексированный список ресурсов DNS находится по следующему адресу: http://directory.google.com/Top/Computers/Internet/Protocols/DNS Подробная информация о протоколе DNS, записях о ресурсах и других аспектах DNS приведена на сайте iana.org/assignments/dns-parameters. Этот документ содер- жит информацию о том, в каком документе RFC описан тот или иной факт, касающий- ся работы системы DNS. Справочник DNSSEC HOWTO, написанный Олафом Колкманом (Olaf Kolkman), — это 70-страничный документ, в котором изложены все аспекты развертывания и отлад- ки протокола DNSSEC. Его можно загрузить с сайта nlnetlabs .nl/dnssec_howto/ dnssec_howto.pdf. Документы RFC Документы RFC, в которых описывается система доменных имен, доступны на веб- узле www. гf c-editor. org. Мы использовали только самые важные из них, хотя в на- стоящее время есть около 100 документов и около 50 черновиков, опубликованных в Ин- тернете, поэтому рекомендуем читателям зайти на сайт www. rf c-editor. org и изучить
Глава 17. Система доменных имен 733 весь архив. Для того чтобы увидеть все документы, касающиеся текущей версии BIND, найдите каталоги doc/rfс и doc/draft. Исходные спецификации 1987 года: • RFC 1034 — Domain Names: Concepts and Facilities (Доменные имена: концепции и базовые возможности). • RFC1035 — Domain Names: Implementation and Specification (Доменные имена: реа- лизация и спецификация). 17.18. Упражнения 17.1. Поясните назначение следующих записей о ресурсах: SOA, PTR, А, MX и CNAME. 17.2. Что такое связующие записи и зачем они нужны? Найдите с помощью команд dig или drill записи, связывающие вашу локальную и родительскую зоны. 17.3. В чем смысл отрицательного кеширования? Почему оно так важно? 17.4. Создайте записи SPF для своего сайта, чтобы контролировать спам. 17.5. ★ Какие действия необходимо предпринять для создания домена второго уровня? Назовите технические и организационные мероприятия. 17.6. ★ В чем разница между авторитетным и неавторитетным ответом на DNS-запрос? Как убедиться в том, что ответ действительно авторитетен? 17.7. ★ Какой компьютер является вашим локальным сервером имен? Какие действия придется ему предпринимать для распознавания имени www. admin. com (предпо- лагается, что ни в одном из кешей DNS информации об этом домене нет)? 17.8. ★ Объясните, какое влияние на DNS оказывает 512-байтовое ограничение на раз- мер пакета, налагаемое протоколом UDP? Какие существуют решения потенци- альных проблем? 17.9. Изучите 512-битовый русский алгоритм GOST или 256-битовый алгоритм NIST Р-256 ECDSA и оцените их влияние на 512-байтовое ограничение размера пакетов UDP. Могут ли они обеспечить требуемый размер пакета? Насколько длинными являются ключи и подписи? 17.10. ★ Создайте записи SSHFP для своего сайта и обновите свою команду ssh для их использования. 17.11. Используйте сервер для оценки размера пакетов ISC DNS-OARC из разных точек своего сайта, чтобы определить, какая локальная конфигурация может запретить развертывание протокола DNSSEC. Какой размер вы видите? Изменяется ли он при изменении вашего расположения? Какой размер вы видите из главного узла? Соберите такие же данные с помощью инструментов SecPider или dnsfunnel. Согласуются ли ваши данные? Если нет, то какой инструмент дает более точную информацию? 17.12. ★ Используя инструменты DNSSEC или библиотеки, создайте сценарий, опреде- ляющий синхронизацию между защищенным сайтом и записями DS на его ро- дительском сервере, а также срок действия подписи. Ежедневно выполняйте этот сценарий с помощью планировщика заданий cron. 17.13. ★ Создайте записи DKIM для своего домена и настройте почтовые серверы и кли- енты на работу с ним.
734 Часть II. Работа в сети 17.14. * Создайте поддомен вашего сайта. Добавьте реальный сайт со множеством имен и адресов, затем защитите его с помощью протокола DNSSEC и соедините с на- дежной сетью в Интернете, создав запись DLV на сайте консорциума ICS. Вклю- чите регистрацию и несколько дней наблюдайте за регистрационными записями. Задокументируйте все свои действия и проблемы
Глава 18 Сетевой протокол Network File System Сетевой протокол Network File System, или NFS, позволяет пользователям совмест- но работать с файлами, расположенными на разных компьютерах. Протокол NFS почти прозрачен для пользователей, т.е. при сбое сервера, поддерживающего протокол NFS, информация не пропадает. Клиенты просто ждут, когда сервер вновь начнет функцио- нировать, а затем продолжают работать так, будто ничего не произошло. Протокол NFS разработала компания Sun Microsystems в 1984 году. Первоначально протокол NFS был реализован как суррогат файловой системы для бездисковых кли- ентов, однако предложенный протокол оказался столь удачным, что со временем стал универсальным решением проблемы совместного использования файлов. Все дистри- бутивные пакеты систем UNIX и Linux содержат версию протокола NFS; многие из них используют лицензию компании Sun. В настоящее время протокол NFS открыто описан в документах RFC (см. RFC1094, RFC1983 и особенно RFC 3530). 18.1. Введение в протокол NFS Совместное использование файлов в сети выглядит простой задачей, но на самом деле она представляет собой сложную проблему, имеющую множество вариантов реше- ния и нюансов. В качестве свидетельства сложности этой задачи напомним, что много- численные ошибки протокола NFS проявились в необычных ситуациях только спустя четверть века его использования. Современные администраторы могут быть уверены в том, что большинство протоколов совместного использования файлов (NFS и CIFS) не
736 Часть II. Работа в сети портят данные и не вызывают ярость пользователей, но для того, чтобы этого достичь, пришлось немало потрудиться. Проблемы, связанные с состоянием При разработке файловой системы необходимо решить, какая ее часть будет отсле- живать файлы, открываемые каждым клиентом. Информация об этих файлах называ- ется “состоянием” (state). Сервер, не делающий записей о статусе файлов и клиентов, называется сервером без сохранения состояния (stateless), а сервер, который решает эту задачу, — сервером с сохранением состояния (stateful). Многие годы использовались оба этих подхода, причем каждый из них имеет как преимущества, так и недостатки. Серверы с сохранением состояния отслеживают все открытые файлы в сети. Этот ре- жим работы вызывает множество проблем (больше, чем можно было бы ожидать) и за- трудняет восстановление в случае краха. Когда сервер возвращается из небытия, клиент и сервер должны заново согласовать, какое состояние следует считать последним перед крахом. Серверы без сохранения состояния позволяют клиентам лучше контролировать файлы и облегчают управление файлами, открытыми в режиме чтения/записи. На сервере без сохранения состояния каждый запрос не зависит от предшествующих запросов. Если сервер или клиент терпит крах, то никаких потерь для процесса это не влечет. В этом случае сервер безболезненно терпит крах и перезагружается, поскольку никакого контекста нет. Однако в этом случае сервер не может знать, какие клиенты от- крыли файлы для записи, поэтому не способен управлять параллельной работой. Проблемы производительности Пользовательский интерфейс сетевых файловых систем не должен отличаться от пользовательского интерфейса локальных файловых систем. К сожалению, глобальные сети имеют большое время ожидания, что приводит к неправильному выполнению опе- раций и сужению полосы пропускания. Все это в итоге приводит к снижению произво- дительности работы с большими файлами. Большинство протоколов файловых служб, включая NFS, реализуют методы минимизации потерь производительности как в ло- кальных, так и глобальных сетях. Большинство протоколов пытается минимизировать количество запросов в сети. Например, предварительное кеширование предусматривает загрузку фрагментов файла в буфер локальной памяти, чтобы избежать задержки при считывании нового раздела файла. Часть полосы пропускания используется для того, чтобы избежать обмена ин- формацией с сервером в ходе общего цикла сканирования сети (full round trip exchange). Кроме того, некоторые системы кешируют записи в памяти и посылают их обновления в пакетах, уменьшая тем самым задержку, вызванную необходимостью выполнить опе- рации записи на сервере. Эти пакетные операции обычно называют объединением за- просов (request coalescing). Безопасность Любая служба, предоставляющая удобный доступ к файлам в сети, является источни- ком серьезных угроз для безопасности. Локальные файловые системы реализуют слож- ные алгоритмы управления доступом, наделяя пользователей разными правами. В сети эти проблемы многократно усложняются, поскольку существуют требования, предъ- являемые к быстродействию машин, а также имеются различия между их конфигура-
Глава 18. Сетевой протокол Network File System 737 циями, ошибки в программном обеспечении файловых систем и нерешенные вопросы связанные с протоколами совместного использования файлов. Развитие служб каталогов и централизованной аутентификации повысило безопас- ность сетевых файловых систем. По существу, ни один клиент не может аутентифициро- вать себя самостоятельно, поэтому необходима доверенная централизованная система, верифицирующая личности и предоставляющая им доступ к файлам. Сложная орга- низация этих служб замедляет их адаптацию, но в настоящее время централизованное управление доступом в той или иной степени реализовано в большинстве организаций. 18.2. Серверная часть NFS Новейшая версия протокола NFS является платформенно-независимой, обеспечивает высокую производительность в глобальных сетях, таких как Интернет, а также гаранти- рует высокую безопасность. Большинство его реализаций также содержат диагностиче- ские инструменты для решения проблем, связанных с настройкой и производительно- стью. Клиентское и серверное программное обеспечение расположено в ядре. Однако эти части протокола NFS не требуют настройки и прозрачны для администратора. Версии и история протокола Первая открытая версия протокола NFS, появившаяся в 1989 году, имела номер 2. Клиент второй версии NFS не мог считать операцию записи завершенной, не получив подтверждения от сервера. Для того чтобы избежать сбоя, сервер должен был записы- вать каждый модифицированный блок на диск, прежде чем ответить. Такое ограничение существенно замедляло запись, поскольку во многих случаях модифицированные блоки вполне можно было хранить лишь в буферном кеше. В версии 3, появившейся в начале 1990-х годов, этот недостаток был устранен за счет схемы согласования, которая позволяла выполнять запись асинхронно. Были улучшены также другие аспекты протокола, связанные с производительностью и обработкой боль- ших файлов, вследствие чего версия NFS 3 стала работать гораздо быстрее, чем NFS 2. По этой причине все организации должны использовать версии NFS 3 или 4. Версия NFS 4 является результатом крупной переработки протокола; она содержит много усовершенствований и новых функциональных возможностей. • Совместимость и взаимодействие со всеми брандмауэрами и устройствами NAT. • Интегрирование в основном протоколе NFS протоколов блокировки и монтиро- вания. • Операции с сохранением состояния. • Высокая интегрированная безопасность. • Поддержка репликации и миграции. • Поддержка клиентов как UNIX, так и Windows. • Списки управления доступом (ACL). • Поддержка файлов в кодировке Unicode. • Хорошая производительность даже при узкой полосе пропускания. Несмотря на то что во многих аспектах версия 4 представляет собой шаг вперед, из- менения, внесенные в протокол, не изменили существенно процесс конфигурирования и администрирования протокола NSF.
738 Часть II. Работа в сети Разные версии протокола не совместимы друг с другом, но серверы, поддерживаю- щие протокол NFS (включая все рассмотренные нами операционные системы), обычно реализуют три из них. На практике все клиенты и серверы протокола NFS могут взаи- модействовать с помощью одной из этих версий. Если и клиентская, и серверная сторо- ны поддерживают протокол NFS 4, следует использовать именно эту версию. Транспортные протоколы В версии NFS 2 применялся протокол UDP, поскольку он обеспечивал наилучшую производительность в локальных сетях 80-х годов. Несмотря на то что протокол NFS сам выполняет сборку пакетов и осуществляет контроль ошибок, ни в UDP, ни в NFS не реализованы алгоритмы управления перегрузкой, которые необходимы для достижения нормальной производительности в крупных 1Р-сетях. С целью решения этих проблем в большинстве UNIX-систем теперь разрешено ис- пользовать в качестве транспортного протокола в версии NFS 3 как UDP, так и TCP, а в версии NFS 4 — только TCP.1 Первоначально эта возможность предназначалась для обеспечения работы NFS в сетях с маршрутизаторами и в Интернете. По мере удешевле- ния памяти и роста производительности центральных процессоров и сетевых контролле- ров, первоначальное преимущество протокола UDP над протоколом TCP улетучилось. Состояние Прежде чем начать работать с файловой системой NFS, клиент должен ее смонтиро- вать, как если бы это была файловая система, находящаяся на локальном диске. Однако версии NFS 2 и 3 не сохраняют состояние, поэтому сервер не “знает”, какие клиенты смонтировали ту или иную файловую систему. Вместо этого сервер вручает клиенту секретный ключ по факту успешного завершения операции монтирования. Этот ключ идентифицирует каталог монтирования на сервере NFS и дает клиенту возможность получить доступ к содержимому каталога. Ключ сохраняется при перезагрузке, чтобы сервер после сбоя смог вернуться в предыдущее состояние. Клиент может просто подо- ждать, пока сервер перезагрузится, и повторить свой запрос. С другой стороны, версия NFSv4 представляет собой протокол с сохранением состо- яния: и клиент, и сервер хранят информацию об открытых файлах и блокировках. При сбое сервера клиент облегчает процесс восстановления, посылая на сервер информацию о состоянии, предшествующем сбою. Восстанавливающийся сервер ожидает в течение заданного периода отсрочки, пока бывшие клиенты отчитаются о своем предыдущем состоянии, прежде чем приступить к выполнению новых операций и блокировок. Упра- вления ключами, которое существовало в версиях V2 и V3, в версии NSFv4 больше нет. Экспорт файловой системы Говорят, что сервер “экспортирует” файловую систему, если он делает ее доступной для использования другими компьютерами. По определению, все серверы экспортируют хотя бы один каталог. В версиях V2 и V3 каждый экспорт рассматривается как незави- симая сущность. В версии V4 каждый сервер экспортирует одну иерархическую псевдо- файловую систему, содержащую все свои экспортируемые каталоги. По существу, псев- 1 С формальной точки зрения, можно использовать любой транспортный протокол, реализую- щий алгоритм управления перегрузкой, но в настоящее время единственным разумным выбором является только протокол TCP.
Глава 18. Сетевой протокол Network File System 739 дофайловая система — это пространство имен файловой системы сервера, из которой удалено все, что не подлежит экспорту. В качестве примера рассмотрим следующий список каталогов, в котором экспорти- руемые каталоги выделены полужирным шрифтом. /www/domainl /www/domain2 /www/domain3 /www/logs/httpd /var/spool В версии NFS 3 каждый экспортируемый каталог должен конфигурироваться отдель- но. Клиентские системы должны выполнить три разных запроса на монтирование, что- бы получить доступ ко всему экспорту сервера. В то же время в версии NFS 4 псевдофайловая система соединяет разрозненные ча- сти структуры каталогов и создает единое представление для клиентов NFS. Вместо за- проса на монтирование каждого из каталогов /www/domainl, /www/domain2 и /var/ logs/httpd, клиент может просто смонтировать серверный псевдокорневой каталог и просмотреть всю иерархию. Каталоги /www/domainl и /var/spool, не подлежащие экспорту, не появляются в этой иерархии. Кроме того, отдельные файлы, содержащиеся в каталогах /, /var, / www и /var/logs, не видны клиенту, потому что псевдофайловая часть иерархии состо- ит только из каталогов. Таким образом, при использовании версии NFSv4 клиент видит экспортируемую файловую систему в следующем виде. / /www /www.domainl /www.domain2 /var /var/logs /var/logs/httpd Сервер задает корень экспортируемой файловой системы в файле конфигурации под названием exports. Блокировка файлов Блокировка файлов (реализуемая системными вызовами flock, lockf или fcntl) в течение долгого времени была слабым звеном в системах UNIX. В локальных файловых системах этот механизм был воплощен далеко не идеально. В ранних версиях протокола NFS серверы не сохраняли состояние: им не известно, какие компьютеры работают с конкретным файлом. Однако эта информация необходима для использования блокиро- вок. Как быть? Традиционное решение заключается в реализации механизма файловых блокировок отдельно от протокола NFS. В большинстве систем этой цели служат два демона: lockd и statd. К сожалению, по ряду причин они работают не оптимально, и блокировка фай- лов в протоколе NFS оставалась его слабым местом. В версии NFSv4 демоны lockd и statd больше не используются для блокировки в основном протоколе (следовательно, серверы сохраняют состояние). Это изменение значительно усложнило протокол, но устранило множество проблем, характерных для более ранних версий протокола NFS. К сожалению, по отдельности демоны lockd и statd все еще нужны для поддержки клиентов, использующих версии V2 и V3. Все рас-
740 Часть II. Работа в сети сматриваемые нами примеры операционных систем содержат ранние версии протокола NFS, поэтому отдельные демоны по-прежнему запускаются по умолчанию. Вопросы безопасности Во многих аспектах версии V2 и V3 протокола NFS были типичными наследниками всех недостатков, касающихся вопросов безопасности в системах UNIX и Linux. Этот протокол изначально не предполагал никаких мер безопасности, и благодаря этому он был удобным. Версия NFSv4 устранила дефекты системы безопасности, которые были присущи предыдущим версиям, обеспечив сильную поддержку службам безопасности и внедрив более совершенную идентификацию пользователей. Все версии протокола NFS не зависят от механизма, обеспечивающего безопасность работы в сети, и большинство серверов поддерживают разные режимы аутентификации. Некоторые из этих режимов перечислены ниже. • AUTH_NONE — без аутентификации. • AUTH_SYS — способ управления доступом для пользователей и групп, напоми- нающий стиль системы UNIX. • RPCSEC_GSS — строгий режим аутентификации, предполагающий целостность и закрытость в дополнение к аутентификации. Традиционно в большинстве организаций применяется режим AUTH_SYS, который использует идентификаторы групп и пользователей в системе UNIX. В этой схеме при запросе к серверу клиент просто посылает локальный идентификатор пользователя и группы. Сервер сравнивает значения этих идентификаторов со значениями из своего файла /etc/passwd 2 и определяет, следует ли предоставлять доступ данному пользо- вателю. Таким образом, если два пользователя имеют одинаковые идентификаторы на двух разных клиентах, то они получат доступ ко всем файлам друг друга. Более того, пользователи, имеющие права администратора системы, могут применить команду su к любому идентификатору по своему усмотрению; после этого сервер предоставит им до- ступ к соответствующим файлам. Согласование файла passwd со всеми системами играет очень существенную роль в средах, использующих режим AUTH_SYS. Однако даже это — всего лишь иллюзия без- опасности; любой мошеннический узел (или Windows-машина) может “аутентифици- ровать” своих пользователей по своему желанию и тем самым разрушить безопасность протокола NFS. Для того чтобы предотвратить эти проблемы, большинство организаций использует более надежный механизм идентификации, такой как протокол Kerberos в сочетании со слоем NFS RPSSEC_GSS. Эта конфигурация требует от клиента и сервера совместно- го участия в работе механизма Kerberos. Механизм Kerberos аутентифицирует клиентов централизованно, тем самым предотвращая возможность самоидентификации, описан- ной выше. Кроме того, протокол Kerberos обеспечивает сильное шифрование и гаранти- рует целостность файлов, передаваемых по сети. Все системы, поддерживающие прото- кол NFS версии 4, должны реализовать режим RPCSEC_GSS, в то же время в версии 3 это требование не является строгим. Ш Более подробная информация о протоколе Kerberos изложена в разделе 22.10. Доступ к томам системы NFS обеспечивает файл /etc/exports, в котором пере- числены имена узлов (или IP-адреса), которые имеют право на доступ к совместно ис- 2 Или его эквивалента в виде сетевой базы данных, такой как NIS или LDAP.
Глава 18. Сетевой протокол Network File System 741 пользуемым файловым системам сервера. К сожалению, это слишком слабый механизм безопасности, поскольку сервер доверяет клиентам, называющим свой идентификатор. Клиента легко заставить солгать и указать неверный идентификатор и IP-адрес, поэтому этот механизм не слишком надежен. Тем не менее файловые системы следует экспорти- ровать только клиентам, заслуживающим доверия, и всегда следует проверять, не экс- портировали ли вы случайно файловые системы всему миру. Протокол NFSv4 использует в качестве транспортного протокола только TCP и обыч- но осуществляет связь через порт 2049. Поскольку протокол NFSv4 не использует другие порты, открыть доступ через брандмауэр так же просто, как открыть протокол ТС через порт 2049. Как и в случае со списком всех конфигураций доступа, кроме порта, следует идентифицировать адреса источника и пункта назначения. Если ваша организация не планирует предоставлять услуги протокола NFS узлам, расположенным в Интернете, за- блокируйте доступ через брандмауэр или используйте фильтр локальных пакетов. CQ Более подробная информация о брандмауэрах приведена в разделе 22.11. Мы не рекомендуем использовать для организации файловой службы в глобальных сетях протоколы NFSv2 и NFSv3, поскольку в протоколах RPC много ошибок и нет сильных механизмов безопасности. Администраторы серверов, работающих по протоко- лу NFS 3, должны блокировать доступ к TCP- и UDP-портам 2049, а также к порту 111 сервера portmap. Идентифицирующее отображение в версии 4 Как указывалось в главе 7, операционная система UNIX идентифицирует пользо- вателей с помощью набора индивидуальных и групповых идентификаторов, записан- ных в локальном файле passwd или административной базе данных. С другой сторо- ны, версия 4 протокола NFS представляет пользователей и группы в виде строковых идентификаторов, имеющих вид пользователь@п£s-домен или rpynnaenfs-домен. И клиенты, и серверы, работающие по протоколу NFS, запускают демона идентифици- рующего отображения (identity mapping daemon), который отображает значения иден- тификаторов UNIX в строки. Когда клиент, использующий версию 4, выполняет операцию, возвращающую иден- тификаторы, например команду Is -1, возвращающую листинг файла, демон иденти- фицирующего отображения использует свой локальный файл passwd для превращения пользовательских и групповых идентификаторов каждого файлового объекта в строку, например ben@atrust.com. Затем отображение идентификаторов клиентов выпол- няет обратное действие, превращая строку ben@atrust. com в локальные пользова- тельские и групповые идентификаторы, которые могут совпадать, а могут и не совпа- дать с идентификаторами сервера. Если строковое значение не соответствует ни одной локальной сущности, используется учетная запись анонимного пользователя. В этот момент вызов удаленной файловой системы (stat) завершается и возвраща- ет вызвавшей ее команде (в данном случае команде 1s) значения пользовательского и группового идентификаторов. Однако, поскольку команда 1s была выполнена с флагом -1, она должна вывести на экран текстовые имена, а не числа. Итак, команда 1s, в свою очередь, переводит идентификаторы обратно в текстовые имена, используя библиотеч- ные утилиты getpwuid и getgrgid. Эти утилиты еще раз проверяют файл passwd или эквивалентную ему базу данных. Какая долгая и запутанная процедура! К сожалению, идентифицирующее отображение используется только при извлечении и записи атрибутов файлов, как правило, используемых монопольно. Идентифицирующее
742 Часть II. Работа в сети отображение не играет никакой роли в процессе аутентификации и управлении доступом. Оно лишь переводит идентификаторы в форму, принятую в протоколе RPC. Следова- тельно, согласованность файлов passwd по-прежнему важна для пользователей, рабо- тающих в режиме “безопасности” AUTH_SYS. В системах, не синхронизирующих файлы passwd, вследствие неоднозначности иден- тификаторов и аутентификации возникает побочный эффект. Идентифицирующее ото- бражение может выполнять отображение точнее, чем базовый протокол NFS, вызывая противоречие между прямым доступом к файлам и доступом, на самом деле предостав- ляемым сервером, работающим по протоколу NFS. В качестве примера рассмотрим сле- дующие команды клиента протокола NFSv4. [ben@nfs-client]$ id ben uid=1000(ben) gid=1000(ben) groupd=1000(ben) [ben@nfs-client]$ id john uid=1010(john) gid=1010(john) groupd=1010(john) [ben@nfs-client]$ Is -Id ben drwxr-xr-x 2 john root 4096 May 2007 16:42 ben [ben@nfs-client] $ touch ben/file [ben@nfs-client]$ Is -1 ben/file -rw-rw-r— 1 john nfsnobody 0 May 2007 17:07 ben/file Мы видим, что пользователь ben имеет идентификатор 1000, a john — 1010. Рабочий каталог ben, экспортированный по протоколу NFS, имеет разрешение 775 и принадле- жит пользователю john. Однако пользователь ben может создать файл в этом каталоге, даже если вывод команды Is -1 означает, что у него нет прав на запись. На сервере пользователь john имеет идентификатор 1000. Поскольку на клиентском компьютере идентификатор пользователя john равен 1010, идентифицирующее отобра- жение выполняет преобразование идентификатора, как описано выше, и в результате пользователь john оказывается владельцем каталога. Однако демон идентифицирующего отображения не участвует в управлении доступом. Для создания файла непосредственно на сервер посылается идентификатор пользователя ben, равный 1000, который интер- претируется как идентификатор пользователя john. Как узнать, какие операции используют идентифицирующее отображение, а ка- кие нет? Это просто: как только пользовательский или групповой идентификатор по- является в интерфейсе файловой системы (например, в сочетании с командой stat или chown), он отображается. Если пользовательские или групповые идентификаторы неявно используются для управления доступом, они направляются через специальную систему аутентификации. К сожалению для администраторов, демоны идентифицирующего отображения не стандартизованы, поэтому их процессы конфигурирования на разных система могут быть разными. Специфика каждой системы описывается в разделе 18.5. Учетные записи root и nobody В общем случае пользователи должны иметь одинаковые привилегии в любой систе- ме, к которой они получают доступ. Однако традиционно системные администраторы стараются ограничивать возможности неконтролируемого применения прав привилеги- рованного пользователя в файловых системах, смонтированных посредством NFS. По умолчанию сервер NFS перехватывает входящие запросы, посылаемые от имени пользо-
Глава 18. Сетевой протокол Network File System 743 вателя с идентификатором 0, и “делает вид”, будто они поступают от другого пользова- теля. Этот прием называется “поражением в правах” (“squashing root”). Таким образом, учетная запись root не отменяется, но уравнивается в правах с обычными учетными записями. Для этого специально определена фиктивная учетная запись nobody, чтобы под нее “маскировался” пользователь root, работающий на сервере NFS. Традиционно ее иден- тификатор равен 65534 (обратный код числа -2)3. Значения UID и GID для пользователя root в файле exports можно изменить. С помощью опции all squash можно заста- вить систему преобразовать все клиентские идентификаторы пользователей в одинако- вый серверный идентификатор. Если идентификатор равен -1, то в системах Solaris и HP-UX доступ вообще запрещается. Все эти предосторожности преследуют благородную цель, однако конечный резуль- тат далек от идеала. Даже будучи клиентом NFS, пользователь root может с помощью команды su “принять облик” любого пользователя, так что файлы никогда не бывают полностью защищены. Единственный эффект от смены идентификаторов заключается в том, что предотвращается доступ к файлам, которые принадлежат пользователю root и недоступны для чтения или записи остальным пользователям. Производительность версии 4 Протокол NFSv4 был разработан для того, чтобы обеспечить высокую производи- тельность в глобальных сетях. Большинство глобальных сетей имеет более долгое вре- мя ожидания и меньшую пропускную способность, чем локальные сети. Протокол NFS должен был решить эти проблемы с помощью следующих усовершенствований. • Процедура протокола RPC под названием COMPOUND включает несколько фай- ловых операций в один запрос, сокращая время ожидания при выполнении мно- гочисленных сетевых запросов. • Механизм делегирования позволяет кеширование файлов на клиентской стороне. Клиенты могут сохранять контроль над локальными файлами, включая их откры- тие для записи. Эти функциональные возможности являются частью ядра протокола NFS и не требу- ют специального внимания со стороны системного администратора. Дисковые квоты Доступ к информации о дисковых квотах на удаленном компьютере осуществляет серверный демон rquotad, также работающий отдельно от NFS. Сервер NFS будет под- держивать дисковые квоты, но пользователи не смогут ничего о них узнать, если на уда- ленном компьютере не работает демон rquotad. Мы считаем механизм дисковых квот морально устаревшим, поэтому не будем рас- сказывать об этом демоне. Однако некоторые организации по-прежнему поддерживают его работу, чтобы пользователи не захватили все доступное пространство на диске. Если вы поддерживаете работу сети в одной из таких организаций, то обратитесь к справоч- ной странице, посвященной квотам. Больше мы к этому вопросу возвращаться не будем. 3 На сервере NFS в Red Hat стандартное значение UID равно -2, тогда как в файле passwd учетной записи nobody присвоен идентификатор 99. Можно оставить все как есть, добавить в файл passwd запись с идентификатором -2 или задать параметры anonuid и anongid равными 99.
744 Часть II. Работа в сети 18.3. Серверная часть протокола NFS Говорят, что сервер NFS “экспортирует” каталог, когда он делает этот каталог доступ- ным для использования другими компьютерами. Системы Solaris и HP-UX вместо слова “экспорт” используют словосочетание “совместное использование”. Для того чтобы не создавать путаницы, мы будем на протяжении этой главы использовать термин “экспорт”. В версии NFSv3 процесс, используемый клиентами для монтирования файловой си- стемы (т.е. для того, чтобы узнать секретный ключ), отделен от процесса, используемого для доступа к файлам. Эти операции используют отдельные протоколы, а запросы обра- батываются разными демонами: mountd — для запросов на монтирование и nf sd — для реальной файловой службы. В некоторых системах эти демоны называются rpc.nfsd и rpc. mountd, поскольку они основаны на протоколе RPC (а значит, для их запуска ну- жен сервер postmap). В этой главе для простоты мы будем пропускать префикс грс. Версия NFSv4 не использует демон mountd вообще. Однако, если не все ваши кли- енты используют версию NFSv4, демон mountd следует выполнять. На сервере NFS демоны mountd и nf sd должны запускаться при загрузке системы и должны работать на протяжении всего времени ее функционирования. Сценарии за- грузки системы обычно автоматически запускают этих демонов, если существует какая- либо конфигурация экспорта. Имена сценариев запуска сервера NFS для каждой из рас- сматриваемых нами платформ перечислены в табл. 18.1. Таблица 18.1. Сценарии запуска сервера NFS Система ч . Путьксценарию - - -M’ Ubuntu /etc/init.d/nfs-kernel-server /etc/init.d/nfs-common SUSE /etc/init.d/nfsservera Red Hat /etc/rc.d/init.d/nfs Solaris /etc/init.d/nfs.server HP-UX /sbin/init.d/nfs.server AIX /etc/rc.nfs а /etc/init. d/nfs монтирует клиентскую файловую систему NFS. Протокол NFS использует единую базу данных для управления доступом, которая определяет, какие файловые системы должны быть экспортированы и какие клиен- ты должны их монтировать. Оперативная копия этой базы данных обычно хранится в файле xtab (sharetab — в системах Solaris и HP-UX), а также во внутренних табли- цах ядра. Поскольку файлы xtab и sharetab не предназначены для чтения людьми, для добавления и модификации записей в них используются вспомогательные команды exports или share. Для удаления записей из таблицы экспорта используются команды exportfs -и или unshare. Монтирование бинарного файла вручную — неблагодарная задача, поэтому в большин- стве систем предполагается, что пользователь монтирует текстовый файл, а не перечисля- ет экспортируемые системные каталоги и их установки доступа. Система может прочитать этот текстовый файл при загрузке и автоматически создать файл xtab или shatretab. В большинстве систем каталог /etc/exports является каноническим списком, до- ступным для чтения экспортируемых каталогов. Его содержимое можно прочитать с помощью команды exportfs -а. В системах Solaris и HP-UX каноническим списком
Глава 18. Сетевой протокол Network File System 745 является /etc/dfs/dfstab, который представляет сценарий, составленный из команд share. (Команда shareall сканирует в файле dfstab команды, связанные с протоко- лом NFS, и выполняет их. Поскольку протокол NFS — единственная “родная” система совместного использования файлов, подчиняющаяся этим правилам, команда shareall эквивалентна команде sh /etc/dfs/dfstab.) Информация, приведенная в предыдущих разделах, подытожена в табл. 18.2. В ней указано, какой файл следует отредактировать, если вы хотите экспортировать новую файловую систему, и что делать, если вы хотите ввести в действие внесенные вами ис- правления. Таблица 18.2. Где задаются экспортируемые каталоги Система Linux /etc/exports Выполнить команду /usr/sbin/exportfs -а Solaris /etc/dfs/dfstab Выполнить команду shareall HP-UX /etc/dfs/dfstab Выполнить команду shareall AIX /etc/exports Выполнить команду /usr/sbin/exportfs -а Протокол NFS работает с логическим уровнем файловой системы. Любой каталог можно экспортировать; он не обязан быть точкой монтирования или корнем физиче- ской файловой системы. Однако с точки зрения безопасности протокол NFS различает границы между файловыми системами и требует, чтобы каждое устройство было смон- тировано отдельно. Например, на компьютере, имеющем отдельный раздел /users, можно было бы экспортировать корневой каталог без экспорта каталога /users.4 Клиентам обычно разрешается монтировать подкаталоги экспортируемых катало- гов, если это необходимо, хотя протокол этого не требует. Например, если сервер экс- портирует каталог /chimchim/users, то клиент может смонтировать только каталог /chinchim/users/ joe и игнорировать остальную часть каталога users. Большинство версий системы UNIX не позволяет экспортировать подкаталоги с раз- ными опциями, но на практике в системе Linux это возможно. Команда share и файл dfstab (Solaris, HP-UX) Сценарий /etc/dfs/dfstab однократно выполняет команду share для каж- SOiariS дой экспортируемой файловой системы. Например, на сервере, использую- щем каталог /home совместно с узлами monk и leopard (причем узел monk имеет права привилегированного пользователя) и каталог /usr/share/man — совместно с узлами ross и harp, файл /etc/dfs/dfstab может содержать сле- дующие команды. share -F -nfs -о rw=monk.atrust.com:leopard.atrust.com,root=monk.atrust.com /home share -F -nfs -0 rw=ross.atrust.com:harp.atrust.com /usr/share/man После редактирования файла /etc/dfs/dfstab следует обязательно выполнить ко- манду shareall, чтобы ввести в действие сделанные изменения. Поскольку команда shareall просто выполняет команды, записанные в файле dfstab, она не выводит из совместного использования удаленные вами файловые системы. Для того чтобы удалить файловую систему из совместного использования, следует выполнить команду unshare /путъ/к/файлам. Наиболее полезные опции команды share перечислены в табл. 18.3. 4 Разумеется, никогда не следует экспортировать корневой каталог.
746 Часть II. Работа в сети Таблица 18.3. Опции команды share (Solaris, HP-UX) Опция Описание ГО Экспортирует файловую систему только для чтения всему миру (не рекомендуется) го = список Экспортирует файловую систему только для чтения, открывая доступ только для поль- зователей, перечисленных в списке rw Экспортирует файловую систему для чтения и записи всему миру (не рекомендуется) rw = список Экспортирует файловую систему для чтения и записи, открывая доступ только для пользователей, перечисленных в списке root = список Перечисляет узлы, которым разрешен доступ к данной файловой системе с правами привилегированного пользователя; в противном случае привилегированный доступ кли- ента означает доступ “анонимного” пользователя (как правило, с идентификатором -2) anon = иден- Задает идентификатор, в который должен отображаться корень; по умолчанию счита- тификатор ется анонимным nosub Запрещает клиентам монтировать подкаталоги в экспортированном каталоге nosuid Запрещает создавать файлы setuid и setgid в системе NFS Если в качестве параметра команды share указывается список, то он должен состо- ять из групп элементов, разделенных двоеточиями. В табл. 18.4 перечислены все спосо- бы, которыми можно задать узлы или группы узлов. Таблица 18.4. Спецификации клиента для команды share Тип Синтаксис Описание Имя узла имя_узла Отдельные узлы (должны быть полностью указаны) Сетевая группа имя_группы Сетевые группы NIS (используется редко) Домены DNS .домен, сот Любой узел внутри домена IP-сети @имя_сети Имена сетей, как указано в файле /etc/networks а а Допускаются также спецификации в стиле CIDR, например @128.138.92.128/25. Замечание в табл. 18.4, касающееся имен узлов, можно назвать излишним: отдельные имена узлов должны быть указаны полностью или они будут проигнорированы. Для того чтобы явно закрыть доступ к элементу, достаточно поставить перед его име- нем косую черту. Список просматривается слева направо во время каждого сканирова- ния в поисках соответствующего элемента, поэтому символы отрицания должны пред- шествовать более общим элементам, которые они модифицируют. Например, строка share -F -nfs -0 -rw=-@192.168.10.0/25:.booklab.atrust.com /users экспортирует каталог /users, допускающий чтение и запись, во все узлы домена DNS book. atrust. com, за исключением узлов сети 192.168.10. В этой команде флаг -F озна- чает, что команда share должна использовать файловую систему nfs, а не системы, перечисленные в файле /etc/dfs/fstypes. Некоторым клиентам можно экспортировать каталог только для чтения, а другим — для чтения и записи. Для этого данных клиентов следует включить в опции го= и rw= соответственно. Справочная страница команды share содержит только несколько основных пара- метров протокола NFS. Полный список этих параметров можно найти на справочной странице команды share_nf s.
Глава 18. Сетевой протокол Network File System 747 Команда exports и файл exports (Linux, AIX) ДФайл exports содержит список экспортированных каталогов в левом столбце и список связанных с ними параметров в правом. Например, строка в файле • exports в системе AIX выглядит следующим образом. /home -vers=4,sec-sys,access=harp.atrust.com Это позволяет монтировать каталог /home на машине harp.atrust.com с помощью протокола NFS и механизма аутентификации системы UNIX (sec-sys). Файловые системы, перечисленные в файле exports без указания узлов, монтиру- ются на всех компьютерах, что является значительной брешью в системе безопасности. Параметры и синтаксические конструкции, используемые в файле exports, изме- няются от системы к системе, хотя между ними существует определенная тематическая схожесть. В следующем разделе описываются общие форматы для систем AIX и Linux. Как всегда, точную информацию следует искать в справочной системе. Файл exports в системе AIX ©Формат файла exports в системе AIX можно назвать самым классическим из всех рассматриваемых в книге систем. Допустимые параметры перечислены в табл. 18.5. Таблица 18.5. Параметры файла exports в системе AIX Параметр ' * ' ... ... _ Описание г..;. access=список Перечисляет узлы, которые могут монтировать файловую систему го Экспортирует файловую систему всем только для чтения; ни один клиент не может ничего записывать в эту файловую систему rw Экспортирует файловую систему всем для чтения и записи (по умолчанию) rw=^ СПИСОК Экспортирует файловую систему, в основном, для чтения. Список перечисляет узлы, которым разрешается монтировать файловую систему для записи; все остальные клиенты должны только читать эту систему ГOOt=СПИСОК Узлы, указанные в списке, могут монтировать файловую систему как привилегирован- ный пользователь. Без этой опции привилегированный доступ клиента эквивалентен доступу анонимного пользователя vers=n Экспортирует каталог клиентам с помощью версии п. Корректными значениями счи- таются 2,3 и 4 sec=режим Задает список методов обеспечения безопасности для экспортируемого каталога. Допускаются значения sys (аутентификация в системе UNIX), dh (DES), krb5 (аутен- тификация по протоколу Kerberos), krb5i (аутентификация и защита целостности по протоколу Kerberos), krb5p (аутентификация, также защита целостности и конфи- денциальности по протоколу Kerberos) и попе (анонимный доступ; не рекомендуется) anon=n Задает идентификатор, в который отображаются привилегированные пользователи. По умолчанию значение равно -2 (аноним). Задав значение -1, можно вообще запре- тить привилегированный доступ В табл. 18.5 список состоит из имен узлов и сетевых групп, разделенных двоеточиями. Параметры в табл. 18.5 похожи на параметры команды share. Однако между ними есть небольшая разница. Например, параметр rw=leopard.atrust.com:ross.atrust.com
748 Часть II. Работа в сети в команде share означает экспорт каталога для чтения и записи с предоставлением до- ступа только перечисленным узлам. В системе AIX этот параметр позволяет всем монти- ровать данный каталог только для чтения. Ясно! В системе AIX вы должны использовать параметр access, чтобы ограничить доступ к каталогу заданным списком клиентов. rw, access=leopard.atrust.com:ross.atrust.com По умолчанию каталог экспортируется для чтения и записи, поэтому параметр rw можно не указывать. Тем не менее его указание ошибкой не является. Каждая строка в файле exports в системе AIX должна состоять из пути к каталогу, разделителя и дефиса, за которым следует список параметров, разделенных запятыми. Например, приведенная ниже команда открывает узлу leopard, atrust. com доступ к каталогу /home в режиме безопасности AUTH_SEC и в рамках четвертой версии про- токола NFS. /home -vers=4,sec=sys,rw,access=leopard.atrust.com Помните, что после изменения файла /etc/exports следует выполнить команду exportfs. Файл exports в системе Linux ДКак и в системе AIX, в* системе Linux файл /etc/exports содержит перечис- ление файловых систем, экспортируемых в рамках протокола NFS, а также кли- ентов, которые могут иметь к ним доступ. Список клиентов отделен от списка файловых систем пробелами, и после имени каждого клиента в скобках зада- ется список параметров, разделенных запятыми. Длинные строки можно раз- делять на несколько с помощью обратной косой черты. Вот как выглядит этот формат. /home harp(rw,no_root_squash) monk(rw) /usr/share/man *.atrust.com(ro) Этот формат не позволяет задать сразу несколько клиентов с одинаковыми набора- ми параметров, хотя некоторые спецификации клиентов можно распространить на не- сколько узлов. В табл. 18.6 приведены четыре типа спецификаций, которые могут поя- виться в файле exports. Таблица 18.6. Спецификации клиента в файле /etc/exports в системе Linux Имя узла имя_узла Отдельные узлы Сетевая группа @ имя_группы Сетевые группы NIS (используется редко) Шаблонный символ *и? Полностью определенные имена доменов * с шаблонными символами, причем символ не может заменять точку IP-сети 1р_адрес/маска Имена сетей, как указано в файле /etc/networksа а Fully qualified domain names (FQDN). В табл. 18.7 перечислены основные параметры экспорта, используемые в системе Linux. В системе Linux сервер NFS имеет необычные функциональные возможности, по- зволяющие экспортировать подкаталоги экспортируемых каталогов с разными параме- трами. Для подкаталогов, которые вы предпочитаете исключить из общего использова- ния, следует использовать параметр noaccess.
Глава 18. Сетевой протокол Network File System 749 Таблица 18.7. Основные параметры экспорта в системе Linux Опция ' ' *' \ ro Экспорт только для чтения rw Экспорт для чтения и записи (по умолчанию) rw = список Экспорт преимущественно для чтения; в списке перечисляются узлы, которым разрешено монтировать файловую систему для записи; остальные должны монти- ровать ее только для чтения root_squash Отображает (“поражает в правах”) идентификаторы UID 0 и GID 0 в значения, задан- ные параметрами anonuid и anongid.а Этот параметр задается по умолчанию no_root_squash all_squash Разрешает привилегированный доступ для всех. Опасно! Отображает все идентификаторы UID и GID в значения, установленные для ано- нимных пользователей. Целесообразно для персональных компьютеров и отдель- ных узлов, не вызывающих доверия anonuid=xxx Задает идентификатор UID для удаленных привилегированных пользователей, ко- торых следует лишить привилегий anongid=xxx Задает идентификатор GID для удаленных привилегированных пользователей, ко- торых следует лишить привилегий secure insecure Допускает удаленный доступ только через привилегированный порт Допускает удаленный доступ через любой порт noaccess Блокирует доступ к данному каталогу и подкаталогам (используется при вложен- ном экспорте) wdelay no_wdelay async Откладывает запись в ожидании объединенных обновлений Немедленно записывает данные на диск Заставляет сервер отвечать на запросы до того, как запись на диск будет выполне- на в действительности nohide hide Выявляет файловые системы, смонтированные в дереве экспортированных файлов Противоположен по смыслу параметру nohide subtree_check no_subtree_check Проверяет, находится ли запрашиваемый файл в экспортированном дереве Проверяет лишь, относится ли запрашиваемый файл к экспортированной файло- вой системе secure_locks insecure_locks sec=режим Требует авторизации для всех запросов на блокировку Использует менее строгие критерии блокировки (поддерживает старых клиентов) Задает список методов обеспечения безопасности для экспортируемого каталога. Допускаются значения sys (аутентификация в системе UNIX), dh (DES), krb5 (ау- тентификация по протоколу Kerberos), krb5i (аутентификация и защита целост- ности по протоколу Kerberos), krb5p (аутентификация, также защита целостности и конфиденциальности по протоколу Kerberos) и попе (анонимный доступ; не рекомендуется) id-num Задает псевдофайловую систему в версии 4 (обычно 0) а В отличие от большинства операционных систем, Linux разрешает “поражение в правах” не только приви- легированных клиентов. Более подробно это изложено в пункте all_squash. Например, конфигурация /home *.atrust.com(rw) Zhome/ben (noaccess)
750 I Часть II. Работа в сети позволяет узлам в домене atrust. com иметь доступ ко всему содержимому каталога /home, за исключением подкаталога /home/ben. Отсутствие имени клиента во второй строке означает, что данный параметр относится ко всем узлам; возможно, тем самым можно достичь более высокой степени безопасности. Параметр subtree_check (по умолчанию) проверяет, принадлежит ли файл, к ко- торому обращается клиент, к экспортированному подкаталогу. Если этот параметр от- ключить, то будет проверяться только факт, что файл находится в экспортированной файловой системе. Проверка поддерева может вызвать неожиданные проблемы, если запрашиваемый файл был переименован, пока клиент держал его открытым. Если такие ситуации возникают часто, следует выбрать параметр no subtree check. Параметр secure locks требует авторизации и аутентификации при блокировке файла. Некоторые клиенты системы NFS не посылают мандатов вместе с запросами на блокировку и не работают с параметром secure locks. В этом смысле существует возможность заблокировать файлы, доступные для всеобщего чтения. Лучше всего за- менить этих клиентов теми, кто посылает мандаты. Однако в качестве временной меры можно использовать и параметр insecure locks. Демон mountd в системе Linux можно запускать без демона inetd. Эта конфигурация позволяет обеспечить дополнительный контроль за доступом с помощью сетевого ана- лизатора tcpd. Более полная информация по этому вопросу приведена в разделе 22.8. Демон nfsd: обслуживание файлов После того как демон mountd убедился в правильности клиентского запроса на мо- нтирование, клиенту разрешается запрашивать различные операции над файлами. Эти запросы обрабатываются на сервере демоном nfsd5. Он не должен выполняться на компьютере-клиенте NFS. Единственное исключение — когда клиент сам экспортирует файловые системы. Демон nfsd принимает числовой аргумент, определяющий, сколько экземпляров самого себя нужно породить посредством системного вызова fork. Правильный выбор числа про- цессов очень важен, но, к сожалению, это из области черной магии. Если это число будет слишком мало или слишком велико, производительность сервера NFS может снизиться. Оптимальное количество выполняющихся демонов nfsd зависит от операционной системы и используемого аппаратного обеспечения. Если вы заметили, что команда ps обычно показывает количество демонов в состоянии D (непрерываемый сон) и при этом наблюдается простой центрального процессора, попробуйте увеличить количество потоков. Если при добавлении демонов nfsd происходит увеличение средней загрузки (о чем сообщает команда uptime), значит, вы слишком увлеклись и следует вернуться к прежнему состоянию. Кроме того, следует регулярно выполнять команду nfsstat и проверять производительность, которая может зависеть от количества выполняемых де- монов nfsd. Более подробно демон nfsd описан в разделе 18.6. На интенсивно эксплуатируемом сервере NFS версии 2 или 3 с большим числом UDP-клиентов буферы UDP-сокетов могут переполниться, если запросы начнут посту- пать в то время, когда все демоны nfsd уже задействованы. Число переполнений мож- но узнать с помощью команды netstat -s. Запускайте дополнительные демоны до тех пор, пока число переполнений не упадет до нуля, так как переполнение свидетельствует о серьезной нехватке серверных демонов. 5 Демон nfsd всего лишь осуществляет не предусматривающий ответа системный вызов, код которого встроен в ядро.
Глава 18. Сетевой протокол Network File System 751 Для изменения числа запускаемых демонов nf sd следует отредактировать соответ- ствующий сценарий в файле конфигурации. Расположение этого файла и доступные параметры зависят от системы. Их примеры приведены в табл. 18.8. Внеся изменения в файл конфигурации демона nf sd, необходимо заново запустить службу с помощью сценариев, перечисленных в табл. 18.1. Таблица 18.8. Как задать количество выполняемых демонов nfsd Система Ubuntu SUSE Red Hat Solaris HP-UX AIX default/nfs-kemel-server RPCNFSDCOUNT 8 sysconfig/nfs USE.KERNEL.NFCD.NUMBER 4 sysconfig/nfs RPCNFSDCOUNT 8 default/nfs NFSD.SERVER 16 default/nfs NFSD.SERVER 16 Для изменения количества выполняемых демонов nfsd используется программа SMIT или команда chnfs. 18.4. Клиентская часть протокола NFS Процессы монтирования сетевых и локальных файловых систем во многом схожи. Ко- манда mount понимает запись вида имя_узла: каталог как путь к каталогу, расположен- ному на указанном компьютере. Этому каталогу будет поставлен в соответствие каталог локальной файловой системы. По завершении монтирования доступ к сетевой файловой системе осуществляется традиционнышгсредствами. Таким образом, команда mount и ее NFS-расширения — самое важное для системного администратора на NFS-клиенте. Для того чтобы файловую систему NFS можно было монтировать, ее необходимо со- ответствующим образом экспортировать (об этом рассказывалось выше). Клиентская команда showmount позволяет клиенту проверить, правильно ли сервер экспортирует файловые системы. $ showmount -е monk Export list for monk: /home/ben harp.atrust.com Как следует из этого примера, каталог /home/ben на сервере monk экспортирован в клиентскую систему harp. atrast. com. Если сетевая файловая система по какой-то причине не работает, возможно, вы просто забыли выполнить команду exportfs -а по- сле редактирования файла exports. Проверьте после этого вывод команды showmount. Если каталог был правильно экспортирован на сервере, а команда showmount со- общает об ошибке или возвращает пустой список, внимательно проверьте^ все ли не- обходимые процессы запущены на сервере (portmap, mountd, nfsd, statd и lockd), разрешен ли в файлах hosts. allow и hosts. deny доступ к этим демонам и, вообще, та ли это клиентская система. Ш Более подробная информация о файлах hosts.* и системе TCP Wrapper приведена в раз- деле 22.8. Информация о пути, отображаемая командой showmount, например /home/ben, как в предыдущем случае, является корректной только в версиях протокола NFS 2 и 3. Серверы, работающие в рамках протокола NFS 4, экспортируют целостную и единоо-
752 Часть II. Работа в сети1 бразную псевдофайловую систему. Традиционная концепция протокола NFS, относяща- яся к разным точкам монтирования, в версии 4 не работает, поэтому команду showmount применять нельзя. К сожалению, достойной альтернативы команде showmount в версии NFS 4 нет. На сервере команда exportfs -v демонстрирует существующие экспортированные файло- вые системы, но она работает только в локальном масштабе. Если у вас нет прямого доступа к серверу, смонтируйте корень псевдофайловой системы сервера и пройдите по структуре каталогов вручную, отметив каждую точку монтирования. Реальное монтирование файловой системы осуществляется примерно такой командой. $ sudo mount -о rw,hard,intr,bg monk:/home/ben /nfs/ben Для того чтобы сделать то же самое в версии 4 под управлением системы Linux, вы- полните следующую команду. $ sudo mount -t nfs4 -о rw,hard,intr,bg monk: / nfs/ben В данном случае указанные после опции -о флаги говорят о том, что файловая си- стема монтируется в режиме чтения/записи (rw), файловые операции разрешается пре- рывать (intr), а повторные попытки монтирования должны выполняться в фоновом режиме (bg). Наиболее распространенные флаги приведены в табл. 18.9. Таблица 18.9. Флаги монтирования NFS Монтирование файловой системы для чтения/записи (она должна экспортировать- ся сервером в режиме чтения/записи) Монтирование файловой системы только для чтения Если смонтировать файловую систему не удается (сервер не отвечает), следует перевести операцию в фоновый режим и продолжить обработку других запросов на монтирование Если сервер отключился, операции, которые пытаются получить к нему доступ, блокируются до тех пор, пока сервер не включится вновь Если сервер отключился, операции, которые пытаются получить к нему доступ, за- вершаются выдачей сообщения об ошибке. Этот флаг полезно устанавливать для того, чтобы предотвратить зависание процессов в случае неудачного монтирова- ния не очень важных файловых систем Позволяет прерывать с клавиатуры заблокированные операции (будут выдаваться сообщения об ошибке) Не позволяет прерывать с клавиатуры заблокированные операции Указывает, сколько раз нужно повторить запрос, прежде чем будет выдано со- общение об ошибке (для файловых систем, смонтированных с флагом soft) Задает интервал тайм-аута для запросов (в десятых долях секунды) Задает размер буфера чтения равным п байт Задает размер буфера записи равным п байт Задает режим безопасности Задает версию протокола NFS proto = протокол Выбирает транспортный протокол; им должен быть протокол top для версии NVS 4 а Несмотря на то что флаг vers указан на справочных страницах систем Linux, посвященных команде mount, использование ее результатов является ошибкой. Для того чтобы задать четвертую версию протокола NFS, следует выполнить команду mount -t nfs4. rw го bg hard soft intr nointr retrans=n timeo=n rsize=n wsize=n зес=режим ------a
Глава 18. Сетевой протокол Network File System 753 Файловые системы, смонтированные с флагом hard (установка по умолчанию), мо- гут вызывать зависание процессов при отключении сервера. Это особенно неприятно, когда такими процессами оказываются стандартные демоны. Вот почему не рекомен- дуется обслуживать ключевые системные программы через NFS. В общем случае ис- пользование флагов soft и intr позволяет сократить число проблем, связанных с NFS. Но эти же флаги могут вызывать нежелательные побочные эффекты (например, оста- нов 20-часового процесса моделирования из-за временного сбоя в сети после 18 часов работы)6. Исправить некоторые недостатки монтирования позволяют средства автома- тического монтирования, например демон autofs (описывается далее). Размеры буферов чтения и записи применимы в отношении обоих протоколов — TCP и UDP, но оптимальные значения различны. В случае TCP буфер должен быть большим, поскольку данные передаются эффективнее. Хорошее значение — 32 Кбайт. В случае UDP, если сервер и клиент находятся в одной сети, оптимальный размер равен 8 Кбайт. Тем не менее по умолчанию принят размер 1 Кбайт, хотя даже на шап-странице рекомендуется повысить это значение до 8 Кбайт. Протестировать точку монтирования можно с помощью команды df, как если бы это была обычная локальная файловая система. % df /nfs/ben Filesystem lk-blocks Used Available Use% Mounted on Itopard:/home/ben 17212156 1694128 14643692 11% /nfs/ben Разделы NFS демонтируются командой umount. Если сетевая файловая система кем- то используется в момент демонтирования, будет выдано сообщение об ошибке. umount: /nfs/ben: device is busy Найдите с помощью команды Isof процессы, у которых есть открытые файлы в этой файловой системе, и уничтожьте эти процессы либо смените каталоги в случае интер- претаторов команд. Если ничего не помогает или сервер отключен, воспользуйтесь ко- мандой umount -f для принудительного демонтирования. Д Стоит повторить сноску в табл. 18.9: по умолчанию команда mount системы Linux, распознав в командной строке синтаксическую конструкцию имя_ узла:каталог, выбирает тип файловой системы nf s, который является кор- ректным только в версиях 2 и 3. Для того чтобы задать четвертую версию про- токола NFS, следует выполнить команду mount -t nfs4. Монтирование файловых систем NFS на этапе начальной загрузки С помощью команды mount можно создавать лишь временные сетевые точки мон- тирования. Файловые системы, которые являются частью постоянной конфигурации, должны быть перечислены в файле /etc/fstab (/etc/vfstab в системе Solaris), для того чтобы они автоматически монтировались на этапе начальной загрузки. С другой 6 Джефф Форис (JefTForys), один из наших рецензентов, заметил по этому поводу: “Боль- шинство сетевых файловых систем должно монтироваться с флагами hard, intr и bg, поскольку они наилучшим образом соответствуют исходной концепции NFS (надежность и отсутствие ин- формации о состоянии). Флаг soft — это мерзкий сатанинский трюк! Если пользователь захочет прервать операцию монтирования, пусть он сделает это сам. В противном случае следует дождаться включения сервера, и все в конце концов нормализуется без какой бы то ни было потери данных”.
754 Часть II. Работа в сети стороны, они могут обрабатываться утилитой автоматического монтирования, например демоном autofs. Ш Более подробная информация о демоне autofs приведена в разделе 18.8. Следующие элементы файла fstab предназначены для монтирования файловых си- стем /home и /usr/local компьютеров monk и ross. # filesystem mountpoint fstype monk:/home /nfs/home nfs ross:/usr/local /usr/local nfs4 flags dump fsck rw,bg,intr,hard,nodev,nosuid 0 0 ro,bg,intr,soft,nodev,nosuid 0 0 При добавлении элементов в файл fstab обязательно создавайте каталоги soians точек монтирования с помощью команды mkdir. Можно сделать так, чтобы изменения вступили в силу немедленно (без перезагрузки). Для этого следует выполнить команду mount -a -t nfs, которая смонтирует все файловые си- стемы типа nfs, перечисленные в файле fstab. Формат файла /etc/vfstab в системе Solaris немного отличается, но пара- soiaris метры остаются прежними. Параметры протокола NFS в основном являются одинаковыми у всех систем. ®Для конфигурирования процесса монтирования системы NFS в процессе за- грузки операционной системы AIX используется программа SMIT. Не надо редактировать файл /etc/filesystems вручную, потому что он может быть записан заново при импорте или экспорте группового тома. Ш Более подробная информация о файле fstab приведена в разделе 8.9. Добавляя записи в файл /fstab/vfstab, не забудьте создать соответствующие ката- логи в точке монтирования с помощью команды mkdir. Эти изменения можно ввести в действие немедленно (без перезагрузки), выполнив команду mount -a -F nfs в си- стемах Solaris или HP-UX; в системе Linux вместо флага -а необходимо использовать флаг -F, а версия 4 монтируется с помощью команды mount -a -t nfs4. В системе AIX файловые системы NFS можно смонтировать с помощью команды mount -v nfs -а. В поле flags файла /etc/fstab задаются параметры точек монтирования NFS. Это те же параметры, которые указываются в командной строке mount. Ограничения на выбор порта Клиентам NFS разрешается использовать любой TCP- или UDP-порт для подклю- чения к серверу NFS. Однако некоторые серверы могут требовать, чтобы запросы по- ступали из привилегированного порта (номер которого меньше 1024). Другие серверы позволяют выбирать порт по своему усмотрению. Впрочем, в мире персональных ком- пьютеров и настольных Linux-систем применение привилегированных портов не приво- дит к реальному повышению безопасности системы. Большинство клиентов протокола NFS следуют традиционному (и по-прежнему ре- комендуемому) подходу: по умолчанию выбирается привилегированный порт, что по- зволяет избежать ненужных конфликтов. Для того чтобы разрешить запросы на мон- тирование, поступающие из непривилегированных портов, в системе Linux можно использовать параметр insecure.
Глава 18. Сетевой протокол Network File System 755 18.5 Идентифицирующее отображение в протоколе NFS 4 В отличие от ранних версий протокола NFS, в которых пользователи идентифициро- вались просто по идентификаторам UID и GID, в версии 4 используются строки, имею- щие вид пользователь@nfз_домен и rpynna@nf з_домен. Как на серверной, так и на клиентской стороне демон идентифицирующего отображения выполняет преобразова- ние строковых идентификаторов в значения локальных идентификаторов UID и GID и наоборот. Отображенные значения используются для трансляции файла, содержа- щего информацию об атрибутах, но не для управления доступом, которое реализуется отдельно. Все системы, участвующие в работе системы по протоколу NFSv4, должны иметь одинаковые домены NFS. В большинстве случаев в качестве домена NFS целесообраз- но использовать свой домен DNS. Например, естественно выбрать atrust. com в ка- честве домена NFS для сервера harp. atrust. com. Клиенты в поддоменах (например, booklab. atrust. com) могут при желании использовать более короткие имена сайта (например, atrust. com) для реализации взаимодействия в рамках протокола NFS. К сожалению для администраторов, стандартной реализации отображения иденти- фикаторов UID в протоколе NFSv4 не существует. В табл. 18.10 перечислены демоны идентифицирующего отображения в каждой из систем и указано местонахождение их конфигурационного файла. Таблица 18.10. Демоны идентифицирующего отображения и их конфигурации Система Демон * 1Сонфй1уа1^- Linux /usr/sbin/rpc.idmapd /etc/idmapid.conf Solaris /usr/lib/nfs/nfsmapid /etc/default/nfsa HP-UX /usr/lib/nfs/nfsmapid /etc/default/nfsa AIX /usr/sbin/nfsgyd chnfsdom домен а Домен задается параметром NFSMAID.DOMAIN. Кроме указания доменов NFS, для реализации идентифицирующего отображения необходима дополнительная помощь системного администратора. Демон запускается в момент загрузки системы в том же самом сценарии, который управляет системой NFS. После внесения изменения в файл конфигурации необходимо вновь запустить демон. Параметры, определяющие, например, детализацию вывода и альтернативное управле- ние анонимной учетной записью, обычно являются доступными; более подробную ин- формацию следует искать на справочной странице, посвященной демону идентифици- рующего отображения. 18.6. Команда nfsstat: отображение статистики NFS Команда nfsstat отображает различные статистические данные, накапливаемые в системе NFS. Команда nfsstat -s выдает статистику процессов сервера NFS, а коман- да nfsstat -с отображает информацию, касающуюся клиентских операций. % nfsstat -с Client rpc:
756 Часть II. Работа в сети calls 62235 badcalls 1595 retrans 0 badxid 3. timeout wait newscred timers 886 1592 0 0 Client calls 62213 nfs: badcalls 3 nclget 62643 nslsleep 0 null getattr setattr readlink lookup root read 0% 34% 0% 21% 30% 0% 2% write wrcache create remove rename link symlink 3% mkdir 0% 0% readdr 6% 0% rmdir 0% 0% fsstat 0% 0% 0% 0% Приведенные результаты получены на нормально функционирующем сервере NFS. Если более 3% вызовов терпят неудачу, то это говорит о наличии проблем на NFS-сер- вере или в сети. Как правило, причину можно выяснить, проверив значение параметра badxid. Если его значение близко к нулю, а количество тайм-аутов больше 3%, то па- кеты, поступающие на сервер и отправляемые с него, теряются в сети. Решить эту про- блему можно, уменьшив значение параметров монтирования rsize и wsize (размеры блоков для чтения и записи). Если значение параметра badxid такое же большое, как и значение параметра timeout, то сервер отвечает, но слишком медленно. В этом случае необходимо либо за- менить сервер, либо увеличить параметр time о. Регулярное выполнение команд nfsstat и netstat и анализ выдаваемой ими ин- формации помогут администратору выявлять возникающие в NFS проблемы раньше, чем с ними столкнутся пользователи. 18.7. Специализированные файловые серверы NFS Быстрый и надежный файловый сервер — один из важнейших элементов вычисли- тельной среды. Конечно, дешевле всего организовать файловый сервер на рабочей стан- ции, воспользовавшись имеющимися жесткими дисками. Однако это не оптимальное решение с точки зрения производительности и удобства администрирования. Уже много лет на рынке предлагаются специализированные файловые серверы NFS. У них есть ряд преимуществ по сравнению с “кустарными” системами. • Они оптимизированы на выполнение операций с файлами и, как правило, обе- спечивают наилучшую производительность при работе с системой NFS. • По мере увеличения требований к хранилищу файлов можно легко наращивать мощности сервера, даже если придется обслуживать терабайтовые массивы дан- ных и сотни пользователей. • Они более надежны, чем обычные системы, благодаря усеченному набору про- грамм, применению дополнительных устройств, обеспечивающих избыточность, и зеркальному дублированию информации на жестких дисках. • Они обычно реализуют доступ к файлам для клиентов как UNIX, так и Windows, а иногда даже содержат встроенные веб-, FTP- и SFTP-серверы. • Чаще всего они проще в администрировании, чем файловые серверы UNIX. • Они обладают улучшенными средствами резервного копирования и контроля со- стояния, по сравнению с обычными UNIX-системами.
Глава 18. Сетевой протокол Network File System 757 На рынке существующих систем лидируют устройства компании Network Appliance, Inc. (netapp.com). Диапазон предложений — от малых до очень крупных систем, и цены вполне приемлемы. Компания ЕМС занимает нишу устройств высшего класса. Она выпускает хорошие продукты, но их цены могут испугать кого угодно. Компания LeftHand Networks, приобретенная корпорацией HP, является еще одним игроком, кото- рый выиграл от появления дешевых, высокопроизводительных и удобных устройств для хранения информации. Еще одним возможным решением проблем, связанных с эффективным управлением памятью, могут стать сети хранения данных (storage area network — SAN). Они отлича- ются от специализированных серверов тем, что не имеют представления о файловых си- стемах; они просто обслуживают блоки дисков. Следовательно, сеть SAN не обременена затратами, связанными с операционной системой, и способна осуществлять быстрый доступ для записи и чтения, но не может управлять параллельным доступом нескольких клиентов без помощи кластеризованной файловой системы. Более подробная информа- ция о сетях SAN приведена в разделе 8.11. 18.8. Автоматическое монтирование Индивидуальное монтирование файловых систем посредством упоминания их в фай- лах /etc/fstab и /etc/vfstab сопряжено в крупных сетях с рядом проблем. Во-первых, ведение файла fstab на нескольких сотнях компьютеров — весьма уто- мительная задача. Каждый из компьютеров может отличаться от других и требовать осо- бого подхода. Во-вторых, если файловые системы монтируются с множества компьютеров, то в слу- чае сбоя всего лишь одного из серверов наступает хаос, так как все команды, пытающиеся получить доступ к точкам монтирования этого сервера, зависают. В-третьих, сбой какого-нибудь важного сервера может нанести немалый ущерб поль- зователям, сделав недоступными такие важные разделы, как, например, /usr/share/ man. Самый простой выход из этой ситуации — временно смонтировать копию раздела с резервного сервера. Однако система NFS не имеет инструментов для обеспечения ра- боты резервных серверов. Решить эту проблему можно с помощью демона автоматического монтирования, ко- торый подключает файловые системы, когда к ним выполняется обращение, и отклю- чает их, когда надобность в них отпадает. Этот процесс осуществляется незаметно для пользователей и позволяет свести к минимуму число активных точек монтирования. Демону можно также предоставить список реплицированных (идентичных) файловых систем, чтобы сеть могла функционировать в случае отказа основного сервера. Для реализации фонового подключения и отключения демон связывает драйвер вир- туальной файловой системы с каталогами, обозначенными как точки автоматического монтирования. Раньше он делал это, выступая в качестве сервера NFS, но такой подход имел ряд серьезных ограничений, поэтому редко применяется в современных системах. В настоящее время используется драйвер файловой системы autofs, встроенный в ядро. Вместо того чтобы зеркально дублировать в сети реальную файловую систему, демон автоматического монтирования воссоздает ее иерархию в соответствии со специфика- циями, указанными в файле конфигурации. Когда пользователь ссылается на каталог виртуальной файловой системы демона, последний перехватывает эту ссылку, монтиру- ет реальную файловую систему, к которой обращается пользователь, и передает ссылку Дальше. На системах, поддерживающих демон autofs, файловая система NFS монтиру-
758 Часть II. Работа в сети ется в файловой системе autof s в обычном для системы UNIX режиме. Другие системы могут потребовать, чтобы монтирование осуществлялось в отдельном каталоге, на кото- рый затем устанавливается символическая ссылка. Идея автоматического монтирования была предложена компанией Sun, которая в на- стоящее время стала частью корпорации Oracle. Имеющийся в Linux демон automount имитирует работу одноименной утилиты компании Sun, хотя реализован независимо и обладает рядом отличительных особенностей. Аналогично система AIX предоставляет свой собственный демон automount, который компания IBM называет “инструментом управления для системы AutoFS”. Разные реализации демона automount используют три вида файлов конфигурации, которые называются таблицами (maps): таблицы прямых назначений, таблицы косвен- ных назначений и главные таблицы.7 Таблицы прямых и косвенных назначений содер- жат информацию о файловых системах, подлежащих автоматическому монтированию. Главная таблица перечисляет таблицы прямых и косвенных назначений, которые дол*: жен учесть демон automount. В каждый момент времени может быть активной только одна главная таблица; по умолчанию главная таблица хранится в каталоге /etc/auto_ master (/etc/auto.master — в системе Linux). В большинстве систем демон automount представляет собой отдельную команду, ко ; торая считывает свои файлы конфигурации, настраивает все необходимые для демона autof s параметры и прекращает работу. Действительные ссылки на файловые систе? . мы, подлежащие автоматическому монтированию, обрабатываются с помощью демона autof s другим процессом — демоном automontd. Этот демон выполняет свою работу незаметно и не требует дополнительной конфигурации. }' ДВ системах Linux этот демон называется automountd, а функция настройки выполняется в сценарии загрузки /etc/init.d/autofs. Подробная информ мация об этом приведена ниже. Далее мы будем называть команду настройкй^ именем automount, а демон автоматического монтирования — automountd. Если вы изменили главную таблицу или одну из таблиц прямых назначений, на кО-л торую она ссылается, то необходимо заново запустить демон automount, чтобы эти из- менения вступили в силу. При использовании параметра -v команда automount демону стрирует изменения, внесенные в ее конфигурацию. 5 Демон automount имеет также аргумент -t, сообщающий, как долго (в секундах^ файловая система, монтируемая автоматически, может оставаться неиспользуемой пе- ред тем, как будет размонтирована. По умолчанию этот параметр равен 10 минутам! Поскольку точка монтирования NFS, принадлежащая сбойному серверу, может вызвать зависание программы, целесообразно удалять автоматически смонтированные файло-^ вые системы, которые больше не используются. Кроме того, не следует задавать тайм- аут слишком долгим.8 Таблицы косвенных назначений Эти таблицы используются для автоматического монтирования нескольких файло- вых систем в общем каталоге. Однако путь к каталогу задается в главном файле, а не в самой таблице. Например, таблица назначений для файловых систем, монтируемых 7 Таблицы прямых назначений также управляют базой данных системы NFS или каталогом. LDAP, но это сложно. 8 С другой стороны, монтирование файловой системы занимает определенное время. Система отвечает быстрее и плавнее, если файловые системы не монтируются непрерывно. «
Глава 18. Сетевой протокол Network File System 759 в каталоге /chimchim (в соответствии с показанным выше главным файлом), может иметь следующий вид. users harp:/harp/users devel -soft harp:/haгр/devel info -ro harp:/harp/info В первой колонке указывается имя подкаталога, в котором будет смонтирована фай- ловая система. В следующих колонках перечислены опции монтирования и приведен исходный путь к файловой системе. В данном примере (файл /etc/auto.harp) демо- ну automount сообщается о том, что он может монтировать каталоги /harp/users, /harp/devel и /harp/info с компьютера harp, при этом каталог info монтируется только для чтения, а каталог devel — в режиме soft. В рассматриваемой конфигурации подкаталоги на компьютере chimchim и на ло- кальном компьютере будут идентичными, хотя это вовсе не обязательно. Таблицы прямых назначений Рассматриваемые таблицы перечисляют файловые системы, не имеющие общего префикса, такие как /usr/src и /cs/tools. Таблица прямых назначений (например, /etc/auto.direct), указывающая, что обе эти файловые системы должны монтиро- ваться автоматически, может выглядеть следующим образом. /usr/src harp:/usr/src /cs/tools -ro monk:/cs/tools Поскольку у этих файловых систем нет общего родительского каталога, их монтиро- вание должно реализовываться с помощью разных демонов autof s. Эта конфигурация требует дополнительных расходов, но ее преимуществом является то, что точка монти- рования и структура каталогов всегда остаются доступными таким командам, как 1s. Применяя команду 1s к каталогу, содержащему таблицы косвенных назначений, поль- зователи могут запутаться, потому что демон automount не показывает подкаталоги, пока не получит доступ к их содержимому (команда 1s не заглядывает внутрь каталогов, смонтированных автоматически, поэтому она не может вызвать их монтирование). Главные таблицы Главный файл содержит список таблиц прямых и косвенных назначений, которые должен учитывать демон automount. Для каждой таблицы косвенных назначений ука- зывается корневой каталог, используемый для монтирования, определенного в таблице. Главная таблица, использующая таблицы прямых и косвенных назначений, упомяну- тых в предыдущих примерах, может выглядеть следующим образом. # Directory Мар /harp /etc/auto.harp -proto=tcp /“ /etc/auto.direct В первом столбце указывается имя локального каталога для таблицы косвенных назначений или специальный токен / - для таблицы прямых назначений. Во втором столбце указывается файл, в котором должна храниться таблица. Может существовать несколько таблиц разного типа. Если параметр монтирования указывается в конце стро- ки» то он по умолчанию применяется ко всем точкам монтирования, указанным в та- блице. Администраторы системы Linux всегда должны указывать флаг монтирования stype=nf s4 для серверов, использующих четвертую версию протокола NFS.
760 Часть II. Работа в сети А В большинстве систем параметры, заданные по умолчанию для элементов главной таблицы, не смешиваются с параметрами, заданными для таблиц прямых и косвенных назначений. Если элемент главной таблицы имеет свой собственный список параметров, то значения, заданные по умолчанию, игно- рируются. Тем не менее в системе Linux эти наборы параметров смешиваются. Если один и тот же параметр встречается в двух местах, то значение элемента главной таблицы заменяет значение, заданное по умолчанию. Главная таблица обычно заменяется или дополняется версией, используемой со- вместно с сетевой службой NIS. Подробности можно найти в документации. Исполняемые таблицы Если файл, содержащий таблицу косвенных назначений, является исполняемым, то он считается сценарием (или программой), динамически генерирующим информацию об автоматическом монтировании. Демон не читает таблицу в текстовом виде, а запу- скает файл на выполнение, передавая ему аргумент (“ключ”), где указывается, к какому подкаталогу пользователь пытается получить доступ. Сценарий отвечает за вывод соот- ветствующей записи таблицы. Если переданный ключ неверен, сценарий завершается, ничего не отображая. Такая методика очень удобна и позволяет компенсировать многочисленные недо- статки довольно странной системы конфигурирования демона automount. По сути, она дает возможность создать единый для всей организации конфигурационный файл про- извольного формата. Можно написать несложный сценарий, декодирующий глобальные конфигурационные параметры на каждом компьютере. В состав некоторых систем вхо- дит удобный сценарий /etc/auto. net, принимающий в качестве ключа имя компью- тера и монтирующий все экспортируемые файловые системы этого компьютера. florissant_1003 гшпрОЗ f го z en_dead_guy_0ct2 009 rmnp_0 30806 greenville.021129 streamboat2006 Видимость демона automount Когда вы перечисляете содержимое родительского каталога файловой системы, мон- тируемой автоматически, этот каталог оказывается пустым независимо от того, сколько там было автоматически смонтировано файловых систем. Файловые системы, смонтиро- ванные автоматически, невозможно просмотреть с помощью пользовательского браузера. Рассмотрим пример. $ Is /portal $ Is /portal/photos art_class_2010 blizzard2008 boston021130 Файловая система photos прекрасно работает и автоматически монтируется в ка- талоге /portal. Для того чтобы получить к ней доступ, необходимо указать ее полное имя. Однако обзор каталога /portal не указывает на ее существование. Если бы вы смонтировали эту систему с помощью команды fstab или mount, то она ничем бы не отличалась от других каталогов и была бы видимой в родительском каталоге. Для того чтобы увидеть файловые системы, смонтированные автоматически, ис- пользуются символические ссылки на точки автоматического монтирования. Например, если /automounts/photos — это ссылка на каталог /portal/photos, то команда 1s позволяет увидеть среди содержимого каталога /automounts, что каталог photos был
Глава 18. Сетевой протокол Network File System 761 смонтирован автоматически. Ссылки на каталог /authomounts/photos по-прежнему проходят через механизм автоматического монтирования и работают правильно. К сожалению, эти символические ссылки требуют сопровождения и могут потерять согласованность с реальными точками автоматического монтирования, если они перио- дически не обновляются с помощью некоего сценария. Реплицированные файловые системы и демон automount В некоторых случаях файловая система, предназначенная только для чтения, напри- мер /usr/share, может оказаться идентичной на нескольких серверах одновременно. В этом случае мы можем сообщить демону automount о нескольких потенциальных ис- точниках этой файловой системы. Демон самостоятельно выберет источник файловой системы, исходя из того, какой сервер окажется ближайшим по номеру в данной сети, по версии протокола NFS, а также по времени ответа на первоначальный запрос. Несмотря на то что демон automount не видит файловую систему и не следит за ее использованием, реплицированные файловые системы должны предназначаться только для чтения (/usr/share или /usr/local/Xll). Демон automount не имеет возмож- ности синхронизировать записи между серверами, поэтому реплицированные файловые системы, предназначенные только для чтения, имеют небольшое практические значение. В системах Solaris и HP-UX при возникновении проблем демон automount может просто переключаться с одного сервера, имеющего реплицированную файловую систему, на другой. Эта функциональная возможность поддержи- soians вается исключительно для файловых систем, предназначенных только для чтения, но ходят слухи, что на системы чтения-записи она распространяется больше, чем об этом написано в документации. Однако если демон automount изменяет сервер, ссылки на файлы, открытые для записи, становятся некор- ректными, что лишний раз свидетельствует о том, что использовать реплици- рованные файловые системы для чтения и записи не рекомендуется. Несмотря на то что демон automount способен выбирать сервер с реплицирован- ной файловой системой, руководствуясь собственными критериями эффективности и близости, при желании вы можете назначить свои приоритеты. Приоритет задается не- большим целым числом, причем чем больше число, тем ниже приоритет. Наиболее под- ходящим является приоритет по умолчанию, который равен 0. Файл auto.direct, определяющий файловые системы /usr/man и /cs/tools как реплицированные, может выглядеть следующим образом. /usr/man -ro harp:/usr/share/man monk(l):/usr/man /cs/tools -ro leopard,monk:/cs/tools Обратите внимание на то, что имена серверов могут перечисляться вместе, если пути к их источникам совпадают. Значение (1) после имени monk в первой строке задает при- оритет сервера по отношению к файловой системе /usr/man. Отсутствие такого значения после имени harp означает, что этот сервер имеет неявный приоритет, равный нулю. Автоматическое монтирование (V3; все, кроме Linux) Вместо перечисления всех возможных монтируемых файловых систем в таблице кос- венных или прямых назначений, вы можете сообщить демону automount немного ин- формации о правилах именования и позволить ему разбираться в них самостоятельно. Главным обстоятельством при этом является тот факт, что демон mountd, применяемый
762 Часть II. Работа в сети к удаленному серверу, может посылать запросы о том, какие файловые системы были смонтированы на этом сервере. В четвертой версии протокола NFS экспорт всегда обозна- чается символом /, что исключает необходимость в такой функциональной возможности. Существует несколько способов “автоматического конфигурирования автоматиче- ского монтирования”. Самый простой из них относится к типу монтирования -hosts. Если указать флаг -hosts в качестве имени таблицы в файле главной таблицы, то демон automount отобразит файловые системы, экспортированные на указанные узлы, в за- данный каталог автоматического монтирования. /net -hosts -nosuid,soft Например, если сервер harp экспортировал файловую систему /usr/share/man, то каталог должен стать доступным для демона автоматического монтирования с помощью пути /net/harp/usr/ share /man. Реализация флага -hosts не подразумевает перечисления всех возможных узлов, с которых можно экспортировать монтируемую файловую систему; это просто практиче- ски невозможно. Вместо этого команда ждет ссылки на имена конкретных подкатало- гов, а затем монтирует экспортированные системы с указанного узла. Аналогичного, но более тонкого эффекта можно достичь с помощью шаблонных символов и “&” в таблице косвенных назначений. Кроме того, существует множе- ство макросов, используемых вместе с таблицами и именем текущего узла, типом архи- тектуры и т.д. Подробности можно найти на справочной странице automount(lM). Специфика системы Linux Л Реализация демона automount в системе Linux немного отличается от реали- jTjb зации компании Sun. Основные отличия касаются имен команд и файлов. В системе Linux automount — это демон, который на самом деле монтирует и демон- тирует удаленные файловые системы. Он выполняет работу, которую демон automount делает в других системах, и обычно не требует запуска вручную. По умолчанию главная таблица записана в файле /etc/auto. mas ter. Ее формат и формат таблиц косвенных назначений описаны выше. Однако документацию о них най- ти трудно. Формат главной таблицы описан на странице auto.master(5), а формат та- блицы косвенных назначений — на странице autof s(5). Будьте осторожны, не перепу- тайте их со страницей autof s(8), которая документирует команду autof s. (Как сказано на одной из справочных страниц: “Документация оставляет желать лучшего.”) Для того чтобы изменения вступили в силу, выполните команду /etc/init.d/autofs/ reload, являющуюся эквивалентом команды из системы Solaris. Реализация системы Linux не поддерживает флаг -hosts для “автоматического кон- фигурирования автоматического монтирования”. 18.9. Рекомендуемая литература • Callaghan, Brent. NFS Illustrated, Addison-Wesley, 1999. • Stem, Hal, Mike Eisler and Ricardo Labiaga. Managing NFS and NIS, Second Edition, Sebastopol: O’Reilly & Associates, 2001. В табл. 18.11 перечислены документы RFC, посвященные протоколу NFS и его рас- ширениям.
Глава 18. Сетевой протокол Network File System 763 Таблица 18.11. Документы RFC, связанные с NFS RFC Название -•? , 1094 Network File System Protocol Specification Sun Mircosystems Май 1989 1813 NFS Version 3 Protocol Specification B. Callaghan et al. Июнь 1995 2623 NFS Version 2 and Version 3 Security Issues M.Eisler Июнь 1999 2624 NFS Version 4 Design Considerations S.Shepler Июнь 1999 3530 NFS Version 4 Protocol S.Shepler et al. Апрель 2003 18.10. Упражнения 18.1. ★ Проанализируйте локальную конфигурацию NFS в своей системе. Используется ли NFS или применяется какое-то другое решение? Используется ли автомати- ческое монтирование? На какие компромиссы пришлось пойти, создавая такую конфигурацию? 18.2. Какова взаимосвязь между демонами mountd, nfsd и portmap в версиях NFS 2 и 3? Как зависимость от демона portmap сказывается на безопасности системы? 18.3. Какие принципиальные различия существуют между версиями NFS 3 и 4? Как состояние или его отсутствие влияет на другие атрибуты протокола? 18.4. Ваш начальник хочет экспортировать вам свои каталоги /usr и /usr/local через систему NFS. Ответьте на следующие вопросы: а) предположим, вследствие существующих ограничений вы хотите, чтобы слу- жащие только вашего отдела (подсеть 192.168.123.0/24) могли работать с этими файловыми системами. Какие строки необходимо добавить и в какие файлы, чтобы такая конфигурация стала возможной? Обратите внимание на выбор опций экспортирования; б) какие действия следует предпринять для того, чтобы демоны mountd и nfsd смогли распознать эти новые файловые системы? Как проверить факт со- вместного использования каталогов, не монтируя их? в) какой стратегии следует придерживаться, чтобы все компьютеры локальной подсети автоматически монтировали экспортируемые каталоги с использова- нием точек монтирования /mnt/usr и /mnt/usr/local?
Глава Совместное использование системных файлов Мы знакомы с идеей совместного использования данных разными компьютерами: посредством вложений в сообщения электронной почты, протоколов передачи данных (HTTP и FTP) или служб коллективного доступа к файлам, предоставляемым файловый ми системами NFS и CIFS. Эти механизмы позволяют и пользователям совместно ис^ пользовать файлы и данные приложений. Однако системы UNIX и Linux могут извлек пользу еще из одного вида коллективного использования ресурсов, а именно распредё- ления административных данных конфигурации. В этом случае имеет место централиза* ция административного управления ресурсами между системами и поддержка согласо- ванности данных. % Регистрационные имена и пароли пользователей — это реальный пример необходим мости этого вида коллективного использования ресурсов. Вам редко придется добавлять пользователя на один компьютер; в большинстве случаев вы будете определять этого пользователя в целый класс или сеть компьютеров. Кроме того, большинство организа- ций в настоящее время сталкивается с необходимостью поддержки платформ смешан- ного типа — UNIX, Linux и Windows. Разумеется, пользователи испытывают неудоб- ства, поскольку им приходится привыкать к тому, что на компьютерах разных платформ' им нужно вводить разные пароли (которые необходимо запоминать и иногда менять). К счастью, синхронизация конфигурации и сведений о пользователях в разных системах (например, в Linux и Windows) — это тривиальная задача. Совместное использование системных файлов не так просто реализовать, как может показаться. Попытки разработать распределенные административные базы данных для; больших сетей продолжались несколько десятилетий, в результате чего были созданы^ интересные системы. К сожалению, ни одна из этих систем сегодня не кажется нам без-|
Глава 19. Совместное использование системных файлов 765 упречной по идеологии. Некоторые из них просты, но не отличаются достаточной сте- пенью безопасности и масштабирования. Другие обладают хорошими функциональ- ными возможностями, но являются громоздкими. Всем этим системам присущи огра- ничения, которые могут помешать организовать и настроить сеть так, как нужно адми- нистратору, и ни одна из систем не позволяет управлять всей информацией, которую требуется совместно использовать на разных компьютерах. В этой главе сначала будет рассмотрен ряд базовых методик сохранения файлов конфигурации, синхронизированных по сети. Затем поговорим об облегченном (упро- щенном) протоколе доступа к сетевым каталогам (Lightweight Directory Access Protocol — LDAP) — более сложной платформонезависимой системе управления базой данных, которая уже де-факто стала стандартом как в мире UNIX, так и Windows. Сегодня во многих организациях постепенно переходят на использование протокола LDAP. К этому их подталкивает, прежде всего, принятие фирмой Microsoft стандарта LDAP в ее продук- те Active Directory, а также желание добиться более качественной интеграции сред Linux и Windows. Наконец, мы поговорим о довольно популярной прежде административной СУБД — NIS, которая остается в рабочем состоянии в некоторых средах, но не устанав- ливается в новых сетях. Обратите внимание на то, что совместное использование системных файлов отлича- ется от конфигурации систем и распространения программного обеспечения. Эти обла- сти имеют различные цели и потребности и на практике реализуются разными методами. 19.1. Предмет совместного использования В системах Linux и UNIX существует много файлов конфигурации, но далеко не все из них имеет смысл совместно использовать на нескольких компьютерах. В настоящее время совместному использованию подлежат, например, файлы, которые содержат па- роли, узлы и псевдонимы. Наиболее распространенные файлы коллективного доступа перечислены в табл. 19.1. Таблица 19.1. Системные файлы, которые часто являются объектами совместного использования Имя файла Назначение ; /etc/passwd /etc/shadow3 /etc/group /etc/hosts База данных с информацией о пользовательских учетных записях Файл паролей, соответствующих учетным записям пользователей Определения UNIX-групп Соответствия между именами компьютеров и их IP-адресами /etc/mail/aliases Псевдонимы электронной почты /etc/sudoers /etc/skel/a Полномочия для команды sudo Стандартные файлы конфигурации для новых домашних каталогов а Совместное использование может не поддерживаться другими версиями UNIX из-за несовпадения меха- низмов шифрования (см. раздел 7.1). Содержимое табл. 19.1 не претендует на “звание” исчерпывающего списка; точная конфигурация зависит от того, какую степень подобия вы хотите реализовать для своих компьютеров. По большей части, дополнительные файлы конфигурации имеют отно- шение к конкретным приложениям и не поддерживаются такими административными СУБД, как LDAP, — в этом случае совместное использование файлов достигается их ко- пированием.
766 Часть II. Работа в сети Ш О модулях РАМ речь пойдет в конце раздела 22.5. Доступ к файлам, перечисленным в табл. 19.1, традиционно осуществляется через функции стандартной библиотеки языка С. Например, поиск в файле /etc/passwd выполняют функции getpwuid, getpwnam и getpwent. Они берут на себя открытие, чтение и синтаксический анализ файла passwd, освобождая от этой задачи программы пользовательского уровня. В современных системах используются также модули РАМ (Pluggable Authentication Module — подключаемый модуль аутентификации), которые определяют стандартный программный интерфейс безопасного поиска информации. Эти модули позволяют легко интегрировать в Linux и UNIX различные системы, в част- ности Kerberos и LDAP. Точный порядок поиска данных устанавливается системным ад- министратором (подробнее об этом — в разделе 19.5). 19.2. Копирование файлов Простое копирование файлов не является идеальным решением, но оно применимо на всех типах компьютеров и отличается простотой настройки и сопровождения. Оно также надежно, поскольку число перекрестных зависимостей между компьютерами сво- дится к минимуму (правда, при этом легче нарушить синхронизацию систем). Благодаря этому мы всегда вольны решать, что распространять по сети и как именно. У нас по- является возможность своевременно обновлять не только системные файлы, но и при- ложения вместе с файлами данных. Довольно большое число конфигурационных файлов не поддерживается ни одной из административных СУБД (среди них файл /etc/ntp. conf, задающий правила сетевой синхронизации часов). Чтобы поддерживать согласованность этих файлов, не остается другого выхода, кроме как копировать их. Использование сервера NFS Некоторые системы распространяют файлы конфигурации путем опубликования их на сервере NFS. Это, пожалуй, самый простой метод с точки зрения автоматизации — все, что вам нужно на стороне клиента, сосредоточено в ср (по крайней мере, теорети- чески). Ш Об NFS больше информации можно найти в главе 18. Раньше протокол сетевого доступа к файловым системам NFS “грешил” пробле- мами безопасности, что делало его использование несколько рискованным, но в вер- сии NFSv4 основные проблемы были решены. Для улучшения безопасности и защиты от любопытных глаз можно прибегнуть к шифрованию важных файлов. Ш Подробнее о пакете PGP написано в разделе 22.10. Следующий шаг на пути повышения безопасности состоит в использовании цифро- вой подписи применительно к файлам конфигурации с помощью такого пакета шифро- вания открытых ключей, как PGP (Pretty Good Privacy — вполне хорошая секретность). Клиенты могут удостовериться, что файлы, полученные ими через систему NFS, под- линны и не были модифицированы. Причем это важно сделать еще до их инсталляции. Многие пакеты программ позволяют указать нестандартное местоположение фай- лов конфигурации. Следовательно, теоретически можно указать эти пакеты в файлах конфигурации, которые “прописаны” в файловой системе NFS, что избавило бы от необходимости создавать локальные копии. Однако мы настоятельно рекомендуем не
Глава 19. Совместное использование системных файлов использовать такую схему конфигурации, поскольку она делает каждую систему в мире зависимой от одного сервера NFS, и этот сервер тогда будет вынужден обслуживать всех таких клиентов. Хуже того, во многих пакетах не предусмотрена ситуация, когда уда- ленные системы будут блокировать свои файлы конфигурации или создавать временные файлы в конфигурационных каталогах (и их настройка может даже не сработать коррек- тно). При этом вполне вероятно, что ваша система, прекрасно работая в течение долгого времени, может вдруг напрочь отказать, причем по совершенно непонятной причине, не оставив никаких “улик”, по которым бы можно было понять, что произошло. Хотя, если вы любите сюрпризы, добро пожаловать в ад! Сравнение модели принудительной рассылки с моделью рассылки по запросу Отказавшись от модели совместно используемых файловых систем, вы можете рас- смотреть и другие варианты. Системы копирования файлов могут работать по модели принудительной рассылки (push system) либо модели рассылки по запросу (pull system). В первом случае главный сервер периодически отправляет самые свежие версии файлов каждому клиенту независимо от желания последнего. Файлы могут копироваться явно при каждом изменении или просто регулярно высылаться согласно графику (при этом, вероятно, одни файлы будут обновляться чаще других). Преимущество модели принудительной рассылки заключается в том, что система распространения работает централизованно, на одном компьютере. Файлы, списки кли- ентов, сценарии обновления и расписания хранятся в одном месте, что делает эту схему простой в управлении. Есть у нее и недостаток: каждый клиент должен позволять глав- ному серверу модифицировать свои системные файлы, что не всегда приемлемо с точки зрения безопасности. В модели рассылки по запросу каждый клиент отвечает за обновление самого себя с помощью данных, запрашиваемых с сервера. Это менее централизованный способ распространения файлов, зато более гибкий и безопасный. Данная схема копирования особенно привлекательна, когда совместно используемые данные находятся в разных административных областях, поскольку вовсе не обязательно, чтобы главный сервер и компьютер-клиент располагались в одной области. Утилита relist: принудительная рассылка файлов Проще всего распространять файлы с центрального сервера с помощью утилиты rdist. Она немного напоминает программу make: вначале пользователь в текстовом редакторе составляет описание (спецификацию) файлов, подлежащих рассылке, а за- тем утилита rdist осуществляет операции копирования в соответствии с описанием. Утилита копирует файлы только в том случае, если их копии устарели, поэтому в спец- ификации можно задать копирование всех файлов, а утилита rdist самостоятельно определит, какие файлы и когда следует копировать. Утилита rdist сохраняет информацию о владельце, группе, правах доступа и време- ни модификации файла. Когда утилита обновляет существующий файл, то перед инстал- ляцией новой версии она удаляет старую. Это позволяет использовать данную утилиту для пересылки исполняемых файлов, запущенных во время обновления1. Традиционно 1 Хотя старая версия удаляется из пространства имен файловой системы, она продолжает су- ществовать до тех пор, пока не освобождены все ссылки на нее. Об этом следует помнить при ра- боте с журнальными файлами.
768 Часть II. Работа в сети утилита rdist работала поверх команды rsh и пользовалась ее средствами аутентифика- ции для получения доступа к удаленным системам. К сожалению, она имела ряд слабых мест с точки зрения безопасности кг по умолчанию была отключена во многих современ- ных операционных системах. Несмотря даже на то, что в документации к rdist до сих пор упоминается rsh, не нужно думать, что rsh является приемлемым вариантом. Современные версии утилиты rdist примечательны тем, что позволяют заменять команду rsh любой другой, понимающей аналогичный синтаксис. Чаще всего это ко- манда ssh, которая использует шифрование с открытым ключом для аутентификации узлов и, кроме того, шифрует весь диалог, не давая возможности злоумышленникам, прослушивающим сеть, получать копии системных файлов. Недостаток заключается в том, что удаленные серверы ssh должны работать в режиме, позволяющем не указывать пароль (хотя клиента нужно аутентифицировать с помощью пары криптографических ключей), а это менее безопасный режим, чем требуется в обычных условиях. Но все рав- но это значительный шаг вперед по сравнению с rsh. Подробнее о демоне sshd и его режимах аутентификации рассказывается в разделе 22.10. Итак, разобравшись с тем, какую угрозу таит в себе утилита rdist, рассмотрим в деталях, как она функционирует. Подобно программе make, утилита rdist ищет в теку- щем каталоге управляющий файл (Distfile или distfile). Команда rdist -f задает имя управляющего файла явно. В качестве разделителей в этом файле используются зна- ки табуляции, пробелы и символы новой строки. Комментарии предваряются знаком #. Тело управляющего файла состоит из инструкций следующего вида. метка: имена_файлов -> адресаты команды Поле метка является именем инструкции. В командной строке можно ввести коман- ду rdist метка, которая обеспечит рассылку только файлов, упомянутых в указанной инструкции. Поля имена_файлов и адресаты — это список файлов, подлежащих копированию, и список компьютеров, куда их нужно переслать соответственно. Если в списке больше одного элемента, нужно заключить его в круглые скобки, а элементы разделить пробе- лами. Список имен файлов может включать метасимволы, допустимые в интерпретато- ре команд (например, /usr/man/man[123] или /usr/lib/*). Допустима также запись '-пользователь, но соответствующие ей значения на узле-отправителе и узле-адресате могут не совпадать. По умолчанию утилита rdist копирует файлы и каталоги, перечисленные в списке имен, в эквивалентные каталоги на каждом узле-адресате. Этот порядок можно изме- нить, указав последовательность команд. Каждую команду следует завершать точкой с запятой. Поддерживаются такие команды. install опции [целевой_каталог]; notify список_адресов; except список_имен; except_pat список_шаблонов; special [список_имен] строка; cmdspecial [список_имен] строка; Команда install задает опции, влияющие на то, как утилита rdist копирует фай- лы. Опции, как правило, используются для обработки символических ссылок, провер- ки правильности применяемого алгоритма сравнения файлов, а также для контроля над процедурой обработки файлов, отсутствующих в исходном дереве каталогов. Опции,
Глава 19. Совместное использование системных файлов 769 перед которыми должен стоять флаг -о, включают список разделенных запятыми имен. Например, строка install -©remove,follow; заставляет утилиту г di st отслеживать символические ссылки (а не копировать их как обычные файлы) и удалять на целевом компьютере файлы, для которых не найдено со- ответствие на исходном компьютере. Полный список опций приведен на man-странице утилиты rdist. В большинстве случаев установки по умолчанию вполне подходят. Название команды install слегка вводит в заблуждение, поскольку файлы копи- руются независимо от того, присутствует эта команда или нет. Опции задаются так, как они задавались бы в командной строке утилиты rdist, но при включении в управляю- щий файл Distfile они действуют только на совокупность файлов, указанную в ин- струкции. Необязательный аргумент целевой_каталог задает каталог, в который инсталлиру- ются файлы на компьютерах-адресатах. По умолчанию утилита rdist использует ис- ходные имена каталогов. В качестве аргумента команды notify задается список адресов электронной почты. При каждом обновлении очередного файла утилита rdist посылает по этим адресам почтовое сообщение. Ко всем адресам, не содержащим знак @, добавляется имя узла- адресата. Например, при выдаче списка файлов, откорректированных на компьютере anchor, запись “pete” превратится в “pete@anchor”. Ш Больше о регулярных выражениях можно прочитать в разделе 2.3. Команды except и except_j>at предназначены для удаления имен из списка фай- лов, подлежащих копированию. Аргументы команды except трактуются буквально, аргументы команды except_j>at интерпретируются как регулярные выражения. Эти команды весьма полезны, поскольку утилита rdist, как и make, позволяет задавать ма- кроконстанты в начале управляющего файла. Благодаря этому появляется возможность использовать один список файлов в нескольких инструкциях, указывая для каждого компьютера только добавления или удаления. Команда special позволяет выполнить команду интерпретатора sh (аргумент строка, который следует брать в кавычки) на всех удаленных компьютерах. Если бу- дет задан аргумент список_имен, утилита rdist выполнит команду после копирования каждого из указанных файлов. Без этого списка rdist выполнит команду после каждого файла. Команда cmdspecial работает подобным образом, но только выполняет коман- ду интерпретатора sh после завершения каждой операции копирования. (Содержимое аргумента список_имен передается интерпретатору sh в виде переменной окружения.) Приведем пример файла Distfile. SYS_FILES = (/etc/passwd /etc/group /etc/mail/aliases) GET_ALL = (chimchim lollipop barkadon) GET_SOME = (whammo spiff) all: ${SYS_FILES} -> ${GET_ALL} notify barb; special /etc/mail/aliases "/usr/bin/newaliases"; some: ${SYS_FILES} -> ${GET_SOME} except /etc/mail/aliases; notify eddie@spiff; Ш Подробнее о команде newaliases рассказывается в конце раздела 20.5.
770 Часть II. Работа в сети В данной конфигурации три указанных системных файла копируются на компьюте- ры chimchim, lollipop и barkadon, а по адресу ЬагЬ@адресат посылается сообщение с описанием всех изменений и замеченных ошибок. После копирования файла /etc /mail/aliases утилита rdist выполняет на каждом компьютере команду newaliases. На компьютеры whammo и spiff копируются только два файла, а отчет посылается по адресу eddie@spiff. Команда newaliases на этих двух компьютерах не выполняется. Для того чтобы утилита rdist могла работать, нужно, чтобы демон sshd на прини- мающих узлах доверял узлу, осуществляющему рассылку файлов. Для этого на сервере нужно сгенерировать текстовый ключ и сохранить копию его открытой части в фай- ле -root/. ssh/authorized_keys на каждом клиенте. Имеет также смысл ограничить сферу применения ключа и количество узлов, от которых он может приниматься. Более подробно об этом речь пойдет в разделе 22.10 при описании альтернативного метода. Утилита rsync: более безопасная рассылка файлов Ш Утилита rsync доступна по адресу: rsync. samba. org. Утилита rsync, написанная Эндрю Триджеллом (Andrew Tridgell) и Полом Маккер- расом (Paul Mackerras), подобна утилите rdist, но иначе реализована. Она не исполь- зует управляющий файл (хотя у сервера все же есть свой конфигурационный файл) и напоминает улучшенную версию команды г ср, пытающуюся сохранить ссылки, время модификации и права доступа. Утилита rsync более эффективна, чем rdist, посколь- ку анализирует отдельные файлы и пытается передавать только изменения между вер- сиями. С нашей точки зрения, основным преимуществом утилиты rsync является то, что на принимающих компьютерах серверный процесс может запускаться из демона xinetd или inetd. Сервер (на самом деле это та же утилита rsync, но работающая в другом режиме; она должна быть инсталлирована как на главном компьютере, так и на кли- ентах) допускает гибкую настройку: он может предоставлять удаленный доступ лишь к заданному набору каталогов и требовать, чтобы главный компьютер подтвердил свою подлинность паролем. Поскольку доступ на уровне команды ssh не требуется, можно организовать распространение системных файлов посредством утилиты rsync, не жерт- вуя безопасностью. (Тем не менее утилита rsync разрешает пользоваться командой ssh, а не серверным процессом, работающим под управлением демона inetd.) Более того, утилита способна работать в режиме рассылки по запросу (самостоятельно запрашивая файлы у сервера rsync и не дожидаясь принудительной рассылки в локальную систе- му), что делает ее еще более безопасной. К сожалению, утилита rsync в целом не столь гибкая в настройке, как rdist, и ее конфигурационный файл не такой сложный, как файл distfile. На стороне клиента нельзя выполнить произвольную команду и нельзя рассылать файлы нескольким узлам одновременно. Например, команда # rsync -gopt —password-file=/etc/rsync.pwd /etc/passwd lollipop::sysfiles посылает файл /etc/passwd на компьютер lollipop. Флаг -gopt указывает на со- хранение прав доступа, идентификаторов владельцев и времени модификации файла. Цва двоеточия в выражении lollipop:: sysf iles заставляют утилиту связаться с уда-
Глава 19. Совместное использование системных файлов 771 ленным сервером rsync непосредственно через порт 873, а не использовать для этого ко- манду ssh. Для аутентификации соединения берется пароль из файла /etc/rsync.pwd2. В этом примере передается только один файл, хотя утилита rsync способна обраба- тывать одновременно группу файлов. Кроме того, флаги —include и —exclude по- зволяют указать список регулярных выражений, с которым будут сравниваться имена файлов. Благодаря этому можно сформировать довольно сложный набор правил копи- рования. Если командная строка становится слишком громоздкой, поместите регуляр- ные выражения в отдельные файлы. Для этого существуют опции —include-file и —exclude-file. Linux-пакеты rsync обычно обеспечивают конфигурацию xinetd этой ути- литы. Для того чтобы активировать работу сервера, вам нужно будет отре- дактировать файл /etc/xinetd. rsync, поменяв строку disable=yes на disable=no. На момент написания этих строк утилита rsync не поставляется как часть SOLb Г IS дистрибутива Solaris. Вы можете загрузить ее исходный код с адреса rsync. samba. org и инсталлировать ее либо отыскать с помощью Google исполняе- мый файл-“полуфабрикат” Solaris. Возможно, для преобразования метода за- пуска демона в форму, совместимую с новой SMF-оболочкой Solaris, вам при- дется использовать утилиту inetconv. KjSt Система HP-UX также не включает утилиту rsync, но вы можете получить предварительно скомпилированные исполняемые файлы HP-UX в depot-фор- ме swinstall по адресу: hpux. connect. org. uk/hppd/hpux/Networking/Admin/rsync-3.0.6 Доступ к AIX-версии утилиты rsync можно получить с адреса: ftp: //ftp. software. ibm. com/aix/f reeSof tware/aixtoolbox/RPMS/ррс/r sync На момент написания этих строк пакет RPM для AIX 6.1 находится все еще в ста- дии разработки. Между тем многим удалось добиться успеха в использовании пакета AIX 5.3 RPM в своих системах AIX 6.1. После того как утилита rsync активизирована, следует модифицировать ряд кон- фигурационных файлов для настройки сервера rsync. Основной из них — это /etc /rsyncd. conf, содержащий глобальные конфигурационные параметры и описание на- бора “модулей”, каждый из которых представляет собой дерево каталогов для экспорта или импорта. Разумная конфигу рация модуля, в который можно копировать файлы (т.е. который будет принимать запросы на пересылку файлов от подключенного клиента), выглядит примерно так. # Название "sysfiles" для данного модуля выбрано произвольно. [sysfiles] # Это каталог, в который будут помещаться рассылаемые файлы. # Может быть просто '/’. path = /etc # Это файл, содержащий пары значений имя_пользователя/пароль # для аутентификации модуля. 2 Пароль посылается по сети в зашифрованном виде, но сами передаваемые файлы не шифру- ются. С другой стороны, если в качестве транспортного средства используется команда ssh (rsync -gopt -е ssh /etc/passwd /etc/shadow lollipop: /etc — обратите внимание на одинар- ное двоеточие), то шифруется все соединение, однако демон sshd придется сконфигурировать так, чтобы он не запрашивал пароль. Воистину, мы сами выбираем свою казнь!
772 Часть II. Работа в сети secrets file = /etc/rsyncd.secrets # Модуль должен быть доступен только для чтения в случае # рассылки по запросу. read only = false # Идентификаторы пользователя и группы для операций рассылки. uid = root gid = root # Список узлов, которым разрешено подключаться. hosts allow = главныи_сервер_рассылки Существует множество других опций, но установки по умолчанию вполне прием- лемы. В данной конфигурации все операции локализованы в каталоге /etc, а доступ разрешен только указанному узлу. С точки зрения пользователя или клиента можно осуществлять рассылку файлов на сервер, указывая в качестве пункта назначения выра- жение узел: :sysfile, которое соответствует описанному выше модулю. Если утилита rsync должна работать в режиме рассылки по запросу (файлы загружаются с централь- ного сервера rsync), то показанные выше строки конфигурации тоже подойдут (разве что придется включить режим “только чтение”). Наконец, необходимо настроить файл rsyncd. secrets. Он обычно хранится в ката- логе /etc (это может быть любой другой каталог) и содержит пароли, с помощью кото- рых клиенты аутентифицируют себя. root: пароль В общем случае пароли, используемые утилитой rsync, должны отличаться от реаль- ных паролей. Поскольку пароли отображаются в незашифрованном виде, файл rsyncd. secrets должен быть доступен для чтения только суперпользователю. Рассылка файлов по запросу Реализовать систему рассылки файлов по запросу можно несколькими способами. Самый простой из них заключается в том, чтобы делать системные файлы доступными на центральном FTP- или веб-сервере3 и заставлять клиентов автоматически загружать их по мере необходимости. Раньше администраторам приходилось писать для этого соб- ственные утилиты (например, сценарии системы expect), но сейчас уже существуют стандартные средства. Наиболее популярная утилита, входящая в состав большинства систем, называется wget. Это довольно простая небольшая программа, которая извлекает содержимое по указанному URL-адресу (с использованием протокола FTP либо HTTP). Например, для загрузки файла средствами FTP введите такую команду. wget ftp: //пользователь: пароль® узел! путь /файл Указанный файл будет помещен в текущий каталог. В случае протокола FTP альтернативой является команда ncf tp, которая тоже есть в большинстве систем. Она представляет собой улучшенный вариант FTP-клиента и до- пускает написание простейших сценариев. Вы можете также использовать утилиту rsync, как описано в предыдущем разделе. Если на центральном узле рассылки выполняется сервер rsync, то клиенты могут загру- жать файлы с помощью данной утилиты. Это сложнее, чем в случае FTP, зато расширя- ются функциональные возможности. 3 Следует иметь в виду, что передача данных по протоколам HTTP и FTP осуществляется по- средством открытого текста. Если вопрос защиты данных является крайне важным, можно вос- пользоваться протоколами HTTPS и SFTP соответственно.
Глава 19. Совместное использование системных файлов 773 Какая бы система ни применялась, следите за тем, чтобы на сервер ложилась посиль- ная нагрузка. Если множество клиентов попытается обратиться к серверу по сети одно- временно (например, у каждого из них операция обновления запланирована демоном cron на одно и то же время), сервер может, хоть и не преднамеренно, подвергнуться ата- ке вида “отказ в обслуживании”. Это особенно касается крупных систем, где необходимо обеспечить смещение таких операций по времени или же их запуск в случайном порядке. Проще всего распределять задания демона сгоп с помощью Perl-сценария следующе- го вида. # !/usr/bin/perl sleep rand() * 600; # пауза от 0 до 600 секунд (т.е. 10 минут) system(coimand_to_copy_files_down); 19.3. LDAP: упрощенный протокол ДОСТУПА К КАТАЛОГАМ Организациям, где применяются системы UNIX и Linux, необходим надежный способ распространения своих административных данных. Но проблема в действительности бо- лее глобальна. Как быть с неадминистративными ресурсами, например каталогами элек- тронной почты? Как контролировать информацию, предоставляемую внешнему миру? Решением, которое устроило бы всех, является унифицированная служба каталогов. Служба каталогов — это просто база данных, но такая, в которой сделан ряд допол- нительных предположений. Любой набор данных, характеристики которых подпадают под эти предположения, становится кандидатом на включение в базу данных. Основные предположения таковы: • информационные объекты относительно невелики; • база данных будет реплицироваться и кешироваться на множестве компьютеров; • у информации есть атрибуты; • данные извлекаются часто, но записываются редко; • операции поиска выполняются очень часто. Текущая стандартная система, предложенная организацией IETF для этих целей, на- зывается LDAP (Lightweight Directory Access Protocol — упрощенный протокол доступа к каталогам). В спецификациях LDAP говорится не о самой базе данных, а лишь о том, как получить к ней доступ по сети. В то же время заданы схемы организации данных и осуществления поиска, поэтому подразумевается достаточно четкая модель данных. Изначально LDAP задумывался как простой шлюзовой протокол, который позволял бы клиентам TCP/IP взаимодействовать с серверами каталогов Х.500, теперь уже уста- ревшими. Со временем стало очевидно, что стандарт Х.500 изжил себя и в UNIX необ- ходима стандартная служба каталогов. Все это привело к тому, что из LDAP получилась совершенно самостоятельная, полноценная система управления каталогами (возможно, буква “L” в названии стоит незаслуженно)4. Как бы там ни было, но протокол LDAP получил широкое распространение, чему отчасти способствовало принятие его фирмой Microsoft в качестве основы для службы Active Directory. В среде UNIX и Linux стандартной реализацией стал пакет OpenLDAP 4 Вследствие сложной истории LDAP во многих книгах можно встретить подробные рассказы о Х.500 и OSI. Однако эта история не имеет никакого отношения к современному использованию LDAP. Просто забудьте о ней.
774 Часть II. Работа в сети (openldap.org). Служба каталогов уровня предприятия 389 Directory Server (ранее из- вестная как Fedora Directory Server и Netscape Directory Server) также является проектом с открытым исходным кодом, к которому можно получить доступ на сайте port389. org. Эта служба работает в системах Linux, Solaris и HP-UX. Структура данных LDAP Данные протокола LDAP принимают форму списков свойств, которые в мире LDAP называют “записями” (entry). Каждая запись состоит из набора именованных атрибутов (например, “uid”, “description”) и значений этих атрибутов. Пользователи, работающие в среде Windows, вероятно, заметят, что эта структура напоминает структуру записей в си- стемном реестре. Как и в реестре Windows, отдельный атрибут может иметь несколько различных значений. В качестве примера рассмотрим обычную (и упрощенную) строку файла /etc/passwd, выраженную в виде записи LDAP. uid: ghopper cn: Grace Hopper userPassword: {crypt}$l$pZaGA2RL$MPDJoc0afuhHY6yk8HQFp0 loginShell: /bin/bash uidNumber: 1202 gidNumber: 1202 homeDirectory: /home/ghopper Здесь мы видим простой пример формата LDIF (LDAP Data Interchange Format — фор- мат обмена данными LDAP), который применяется в большинстве инструментов, свя- занных с LDAP, и в реализациях серверов. Причиной успеха этого формата является то обстоятельство, что LDAP можно без труда преобразовывать в простой текст и обратно. Записи систематизируются по “отличительным именам” (имя атрибута: dn — distin- guished лате), которые формируют некоторую разновидность пути поиска. Например, запись dn для вышеупомянутого пользователя может выглядеть так. dn: uid=ghopper f ou=People, dc=navy , dc=mi 1 Как и в DNS, самый значащий бит ставится справа. Здесь имя DNS navy.mil исполь- зуется для построения верхних уровней иерархии LDAP. Оно разбивается на два компо- нента домена: navy и mil, хотя это всего лишь одно из некоторых обычных соглашений. Каждая запись имеет одно отличительное имя. Поэтому иерархия записей будет вы- глядеть подобно простому ветвлению без циклов. Кроме того, существуют также и ре- зервы для символических ссылок между записями и для отсылок на другие серверы. Записи LDAP обычно составляются на основе использования атрибута objectclass (объектный класс). Классы объектов определяют атрибуты, которые может содержать за- пись, причем некоторые из них могут требоваться для проверки достоверности. Каждому атрибуту назначается тип данных. Схема вложения и комбинирования классов объектов ничем не отличается от схемы, принятой в традиционном объектно-ориентированном программировании. Верхний уровень дерева класса объектов называется top; он озна- чает лишь то, что запись должна иметь атрибут objectclass. В табл. 19.2 приведены некоторые обычные атрибуты LDAP, назначение которых с первого взгляда может быть непонятным.
Глава 19. Совместное использование системных файлов 775 Таблица 19.2. Некоторые имена атрибутов, которые можно встретить в иерархиях LDAP Атрибут Расшифровка Назначение О Organization (организация) Часто идентифицирует запись верхнего уровня сайта8 Ou Organization unit (организаци- онная единица) Логическое подразделение, например “marketing” (отдел маркетинга) Сп Common name (обычное имя) Наиболее естественное имя, с помощью которого можно передать смысл записи De Domain component (компонент домена) Используется в сайтах, в которых иерархия построена на основе DNS objectclass Object class (объектный класс) Схема, в соответствии с которой формируются атри- буты данной записи а Обычно не используется системами, в которых LDAP-иерархия построена на основе DNS. Особенности LDAP Для уверенной работы с LDAP вам нужен хотя бы небольшой опыт. Протокол LDAP сам по себе не решает какую-либо административную проблему. Нет какой-то “глав- ной задачи”, которую можно было бы решить исключительно с помощью LDAP; к тому же, на разных сайтах по-разному подходят к необходимости развертывания серверов LDAP. Поэтому прежде чем перейти к особенностям инсталляции и конфигурирования OpenLDAP, поговорим о том, в каких случаях целесообразно использовать LDAP. • LDAP можно использовать в качестве центрального хранилища полной информа- ции о пользователях (от их телефонных номеров и домашних адресов до зареги- стрированных имен и паролей). Ш Подробнее об использовании LDAP с агентом передачи почты sendmail написано в раз- деле 20.7. • В дальнейшем LDAP можно использовать для распространения конфигурационной информации для вспомогательных приложений. Многие почтовые системы, вклю- чая sendmail, Exim и Postfix, могут получить данные о маршрутизации из LDAP, и этим отчасти можно объяснить популярность применения LDAP. Инструменты будут отличаться в зависимости от конфигурации веб-сервера Apache и программы автоматического монтирования файловых систем по запросу autof s. Вероятно, со временем поддержка LDAP будет все более и более расширяться. • LDAP позволяет упростить процесс аутентифицирования пользователей для при- ложений (даже тех, которые написаны другими командами программистов и в дру- гих подразделениях), избавляя разработчиков от необходимости беспокоиться о точных деталях управления учеными записями. • Изменения, внесенные в LDAP-данные, немедленно вступают в силу и мгновенно становятся видимыми для всех узлов и приложений клиентов. • Доступ к данным LDAP производится с помощью инструментов командной стро- ки, таких как Idapsearch. Кроме того, LDAP всесторонне поддерживается языка- ми написания сценариев вроде Perl и Python (посредством использования библи- отек). Следовательно, LDAP выгодно использовать для передачи информации о конфигурации локально написанным сценариям и утилитам администрирования.
776 Часть II. Работа в сети • Для управления LDAP доступен превосходный веб-инструментарий, например phpLDAPadmin (phpldapadmin.sourceforge.com) и Directory Administrator (diradmin.open-it.org). Эти инструменты настолько просты в использовании, что вы сможете приступить к работе с ними, даже не читая руководства. • LDAP хорошо поддерживается и как служба общедоступных каталогов. Многие ведущие почтовые клиенты применяют LDAP для доступа к каталогам пользова- телей. Простой поиск с использованием LDAP поддерживается во многих веб- браузерах посредством типа LDAP URL. • Архитектура Microsoft Active Directory построена на LDAP, а текущая версия Win- dows Server включает расширения (раньше они назывались “Службы для UNIX”, затем “Службы каталогов и защиты Windows для UNIX” а сейчас — “Windows Server 2008 UNIX Interoperability Components”), с помощью которых можно вы- полнять отображение пользователей и групп UNIX. Подробнее об объединении систем UNIX с протоколом LDAP, ориентированным на использование архитек- туры Active Directory, написано в главе 30. Документация и спецификации LDAP В качестве общего введения в LDAP мы можем порекомендовать неплохой “хресто- матийный учебник” LDAP for Rocket Scientists, который содержит описание архитектуры и протокола LDAP. Эта книга опубликована в электронном виде на сайте zytrax.com/ books/ldap. Кроме того, существует множество разнообразных документов RFC, по- священных протоколу LDAP, каждый из которых является довольно сложным. Наиболее важные документы перечислены в табл. 19.3. Таблица 19.3. Документы RFC, посвященные протоколу LDAP rfc Название - ? .. 2307 An Approach for Using LDAP as a Network Information Service 2820 Access Control Requirements for LDAP 2849 LDAP Data Interchange Format (LDIF)—Technical Specification 3112 LDAP Authentication Password Schema 3672 Subentries in the Lightweight Directory Access Protocol (LDAP) 4511 LDAP: The Protocol 4512 LDAP: Directory Information Models 4513 LDAP: Authentication Methods and Security Mechanisms 4514 LDAP: String Representation of Distinguished Names 4515 LDAP: String Representation of Search Filters 4516 LDAP: Uniform Resource Locator 4517 LDAP: Syntaxes and Matching Rules 4519 LDAP: Schema for User Applications OpenLDAP: традиционный LDAP-сервер с открытым исходным кодом OpenLDAP — это расширение проекта, выполненного в Мичиганском университете. В настоящее время он продолжает оставаться проектом с открытым исходным текстом
Глава 19. Совместное использование системных файлов 777 и распространяется с большинством дистрибутивов Linux (хотя и не всегда включается в стандартный вариант инсталляции). Для использования OpenLDAP в системах Solaris HP-UX или AIX вам придется предварительно загрузить и инсталлировать необходимые компоненты соответствующей реализации. В дистрибутиве OpenLDAP стандартным демоном LDAP-сервера является slapd. В среде с несколькими серверами OpenLDAP демон slurpd выполняется на главном сервере и отрабатывает механизм репликации посредством внесения изменений на под- чиненные серверы. Утилиты командной строки позволяют выполнять запросы и моди- фицировать данные LDAP. Настройка не является сложной. В первую очередь потребуется создать файл /etc /openldap/slapd. conf, скопировав образец, который был инсталлирован вместе с сер- вером OpenLDAP. Необходимо обратить внимание на следующие строки. database bdb suffix "dc=mydomain, dc=com” rootdn "cn=admin, dc=mydomain, dc=com" rootpw {crypt}abJnggxhB/yWI directory /var/lib/ldap По умолчанию выбирается формат базы данных Berkley DB, отлично подходящий для данных, манипуляция которыми будет производиться в системе OpenLDAP. Вы мо- жете использовать разнообразные интерфейсы, включая специальные методы (напри- мер, сценарии, создающие данные “на лету”). Переменная suffix задает “базовое имя” LDAP Это корень вашей части простран- ства имен LDAP, подобный тому, что в DNS называется доменным именем. Этот пример показывает обычное использование доменного имени в качестве базового имени LDAP. Переменная rootdn задает административное имя, а переменная rootpw — пароль администратора в стандартном формате UNIX (алгоритм DES). Обратите внимание на то, что доменные компоненты, восходящие к административному имени, также должны быть указаны. Пароль можно либо скопировать из файла /etc/shadow (если не исполь- зуются пароли MD5), либо сгенерировать с помощью простейшего Perl-сценария. perl -е "print crypt ( г пароль',' примесь');" Здесь примесь — это произвольная двухсимвольная строка. Из-за наличия пароля сле- дует убедиться в том, что режим доступа к файлу slapd. conf равен 600, а его владель- цем является пользователь root. Нужно также отредактировать файл /etc/openldap/ldap. conf, чтобы указать сер- вер по умолчанию и базовое имя для клиентских запросов LDAP. Это несложно: просто задайте аргумент записи host равным имени сервера, а в переменную base занесите то же значение, что и в переменной suffix файла slapd.conf (убедитесь, что обе строки не являются комментариями). С этого момента можно запускать демон slapd без аргументов. 389 Directory Server: альтернативный LDAP-сервер с открытым исходным кодом Подобно OpenLDAP, служба каталогов уровня предприятия 389 Directory Server (port389.org) является расширением проекта, выполненного в Мичиганском универ- ситете. Однако прошло несколько лет (в компании Netscape Communications), прежде чем этот проект снова стал открытым.
778 Часть II. Работа в сети Существует множество причин рассматривать проект 389 Directory Server как альтер- нативу для OpenLDAP, но среди его явных преимуществ все же стоит выделить более совершенную документацию. Проект 389 Directory Server поставляется с инструкциями профессионального уровня по администрированию и использованию, включая подроб- ные руководства по инсталляции и внедрению. К ключевым особенностям проекта 389 Directory Server можно отнести следующие: • использование нескольких полностью равноправных мастер-серверов, что позво- ляет обеспечить отказоустойчивость и высокую скорость выполнения операций записи; • возможность синхронизации пользователей, групп и паролей с контроллерами до- мена Active Directory; • консоль администрирования с графическим интерфейсом, управления из команд- ной строки и через веб-интерфейс; • поддержка протокола LDAP, оперативное (без потерь времени) обновление схемы, конфигурации и управления, а также мощный механизм разграничения доступа вплоть до уровня отдельных атрибутов. Проект 389 Directory Server, по-видимому, имеет более активных разработчиков, чем проект OpenLDAP. Поэтому мы обычно рекомендуем отдавать предпочтение именно проекту 389 Directory Server, а не OpenLDAP. С административной точки зрения эти два сервера с открытым исходным кодом по- разительно сходны в том, что касается структуры и функционирования. И это не удиви- тельно, поскольку оба пакета были построены на базе одного и того же исходного кода. LDAP вместо /etc/passwd и /etc/group Включить поддержку LDAP на стороне клиента будет несложно. В некоторых систе- мах необходимый пакет nss_ldap инсталлируется по умолчанию; в противном случае пакет можно найти в качестве опции. Этот пакет включает модуль РАМ, с помощью ко- торого можно использовать LDAP с подключаемыми модулями аутентификации в до- полнение к переключателю службы имен. (Подробнее об интеграции систем UNIX и Linux с протоколом LDAP, построенным на базе Active Directory, написано в главе 30.) Параметры этого пакета, используемые по умолчанию в LDAP на стороне клиен- та, задаются в файле /etc/ldap.conf, который совместно использует свой формат с описанным выше файлом /etc/openldap/ldap.conf, но который включает дополни- тельные опции, специфические для службы имен и контекста РАМ. Вы должны буде- те также отредактировать файл /etc/nsswitch.conf на каждом клиенте, чтобы доба- вить Idap в качестве источника для каждого типа данных, который будет приведен к стандарту LDAP. (Изменения в файле ns switch, conf приводят к тому, что библиотека языка С передает запросы библиотеке libnss__ldap, которая затем использует инфор- мацию /etc/ldap.conf, чтобы выяснить, как нужно обращаться с запросами LDAP. Подробнее — в разделе 19.5.) В документе RFC2307 определено стандартное преобразование традиционных набо- ров данных UNIX, к которым относятся файлы passwd и group, в пространство имен LDAP. Это полезный справочный документ (по крайней мере, с теоретической точки зрения) для системных администраторов, использующих LDAP в качестве замены NIS. На практике все эти спецификации читать гораздо проще компьютерам, чем людям; вам же лучше просто просмотреть примеры.
Глава 19. Совместное использование системных файлов 779 Фирма Padl Software предлагает бесплатную коллекцию сценариев, которые перево- дят существующие текстовые файлы или карты NIS в LDAP. Эти сценарии можно най- ти по адресу: padl. com/OSS/MigrationTools.html. Работать с ними очень просто. Сценарии можно использовать в качестве фильтров для генерации LDIF, а также мож- но запускать, чтобы загружать данные прямо с сервера. Например, сценарий migrate group преобразовывает взятую из /etc/group строку ~ css taf f: х: 2033: evi, matthew , trent в следующий блок LDIF. dn: cn=csstaff,ou=Group,dc=domainname, dc=com cn: csstaff objectclass: posixGroup obj ectClass: top userPassword: {crypt}x gidNumber: 2033 memberuid: evi memberuid: matthew memberuid: trent Обратите внимание на спецификации классов объектов и отличительные имена, ко- торые были опущены в примере passwd в разделе 19.3. После импортирования базы данных вы сможете проверить работу преобразования, запустив утилиту slapcat, которая отображает всю базу данных. Создание LDAP-запросов Для администрирования LDAP вам не обойтись без просмотра содержимого базы данных и управления им. Для этого вам очень пригодится упомянутый выше свободно распространяемый пакет phpLDAPadmin, который предоставляет удобный интерфейс, работающий по принципу “указал и щелкнул”. Помимо phpLDAPadmin, можно исполь- зовать утилиту Idapsearch (распространяемую с OpenLDAP и 389 Directory Server), ко- торая предназначена для поиска информации в службе каталога и является аналогичным инструментом командной строки, генерирующим результат в формате LDIF. Утилита Idapsearch особенно полезна для вызова из сценариев, а также для сред отладки, в ко- торых служба Active Directory действует в качестве сервера LDAP. В следующем примере запроса используется утилита Idapsearch для проЬмотра информации о каталогах тех пользователей, у которых обычное имя cn (common name) начинается с “ned”. (В данном случае найден только один результат, соответствующий такому запросу.) Назначения используемых здесь флагов рассматриваются ниже. $ Idapsearch -h atlantic.atrust.com -р 389 -х -D "cn=trent,cn=users,dc=boulder,dc=atrust,dc=cQm" -W -b "CN=users , DC=boulder, DC=atrust, DC=com" ” cn=ned* " Enter LDAP Password: пароль # LDAPv3 # base <CN=users,DC=boulder,DC=atrust, DC=com> with scope sub # filter: cn=ned* # requesting: ALL # # ned, Users, boulder.atrust.com dn: CN=ned,CN=Users,DC=boulder,DC=atrust,DC=com
780 Часть II. Работа в сети objectclass: top objectclass: person objectclass: organizationalPerson objectclass: user on: ned sn: McClain telephoneNumber: 303 245 4505 givenName: Ned distinguishedName: CN=ned, CN=Users, DC=boulder, DC=atrust, DC=com displayName: Ned McClain memberOf: CN=Users,CN=Builtin,DC=boulder,DC=atrust,DC=com memberOf: CN=Enterprise Admins,CN=Users,DC=boulder,DC=atrust,DC=com name: ned sAMAccountName: ned userPrincipalName: nedOboulder.atrust.com lastLogonTimestamp: 129086952498943974 mail: ned@atrust.com Флаги -h и -p команды Idapsearch позволяют указать в запросе узел и порт серве- ра LDAP соответственно. Обычно вам потребуется аутентифицировать себя на сервере LDAP. В этом случае используются специальные флаги. Флаг -х запрашивает простую аутентификацию (в от- личие от SASL). Флаг -D идентифицирует отличительное имя учетной записи пользо- вателя, который имеет права доступа, необходимые для выполнения запроса. Наконец, флаг -W предписывает утилите Idapsearch предложить вам ввести соответствующий пароль. Флаг -Ь указывает утилите Idapsearch, где именно в иерархии LDAP начать поиск. Этот параметр известен как baseDN (отсюда и имя флага “Ь”). По умолчанию утили- та Idapsearch возвращает все соответствующие критерию поиска строки, найденные ниже базовой точки дерева baseDN, т.е. поиск будет выполняться только в дочерних эле- ментах базы поиска (включая ее саму). Подстроить характер такого поиска можно с по- мощью флага -s. Последний аргумент представляет собой “фильтр”, который описывает объект ваше- го поиска. Он не требует использования флагов. Этот фильтр, cn=ned*, обеспечивает возвращение всех строк LDAP, “обычное имя” которых начинается с “ned”. Этот фильтр заключается в кавычки ("cn=ned*"), чтобы специальные символы универсализации в строке поиска (в данном случае это “звездочка”) не были восприняты системой как управляющие символы командной оболочки. Если вы хотите извлечь все записи ниже заданной базы baseDN, просто используйте в качестве фильтра поиска выражение objectClass=* — или же опустите фильтр во- обще, поскольку такой характер поиска действует по умолчанию. Любые аргументы, которые указаны за фильтром, обеспечивают выбор конкретных атрибутов для возвращаемого результата. Например, если бы вы добавили в конец при- веденной выше командной строки аргумент mail givenName, утилита Idapsearch возвратила бы только эти атрибуты отфильтрованных записей. LDAP и безопасность Так уж сложилось, что протокол LDAP использовался чаще всего по принципу теле- фонного каталога, поэтому отправка данных без шифрования была обычным делом. Как результат, “стандартная” реализация LDAP предоставляет незашифрованный доступ че-
Глава 19. Совместное использование системных файлов 781 рез ТСР-порт 389. Однако мы настоятельно не советуем использовать незашифрован- ный протокол LDAP для передачи информации об аутентификации, даже если пароли индивидуально хешируются или зашифровываются. Как вариант, во многих ситуациях (даже в мире Microsoft) LDAP можно использовать на основе SSL (эта комбинация известна как LDAPS; обычно эта пара работает на ТСР- порте 686) на стороне как сервера, так и клиента. Такой способ доступа является пред- почтительным, поскольку он защищает информацию, содержащуюся как в запросе, так и в ответе. Желательно использовать LDAPS везде, где это возможно. Столь сложная система, как LDAP, неизбежно содержит бреши, ослабляющие ее за- щиту, не говоря уже о брешах, издавна существующих в операционной системе. Поэтому системным администраторам постоянно приходится быть начеку. 19.4. NIS: СЕТЕВАЯ ИНФОРМАЦИОННАЯ служба Административная СУБД NIS (Network Information Service — сетевая информацион- ная служба), выпущенная компанией Sun в 80-х годах, была первой СУБД такого рода. Сначала она называлась Sun Yellow Pages (желтые страницы Sun), но по причинам пра- вового характера ее пришлось переименовать. Команды NIS до сих пор начинаются с префикса ур, поскольку имя, данное при рождении, забыть трудно. СУБД NIS была с воодушевлением принята поставщиками UNIX-систем и поддерживается во всех дис- трибутивах Linux. Но в наши дни для новых систем все же не следует использовать NIS, причем не только из-за неизбежной интеграции с системами Windows, но и из-за несовершенства NIS-системы безопасности и масштабируемости. Тем не менее мы кратко рассмотрим службу NIS из уважения к большому числу дей- ствующих систем, на которых она все еще используется. Модель NIS Единицей совместного использования в NIS является запись, а не файл. Зайись обыч- но соответствует одной строке конфигурационного файла. Главный сервер хранит офи- циальные копии системных файлов, которые находятся в исходных каталогах и имеют текстовый формат. Серверный процесс делает эти файлы доступными по сети. Сервер и его клиенты образуют домен NIS5. Для повышения эффективности поиска текстовые файлы преобразуются в файлы базы данных с помощью хеширующих функций библиотеки. После редактирования файлов на главном сервере необходимо попросить NIS преобразовать их в хеширован- ный формат с помощью программы make. Полученный файл называется картой (шар). С каждой записью может быть связан всего один ключ, поэтому системные файлы иногда приходится транслировать в несколько карт NIS. Например, файл /etc/passwd преобразуется в две карты: passwd.byname и passwd.byuid. Первая служит для отбо- ра записей по имени пользователя, а вторая — для поиска по идентификатору. Любую из них можно использовать для выборки всех записей файла passwd, но хеширующие функции не сохраняют порядок записей, поэтому нельзя воссоздать точную копию ис- ходного файла. 5 Не следует путать домены NIS с доменами DNS. Это абсолютно разные понятия, не имею- щие ничего общего.
782 Часть ll. Работа в сети --_--------- , ' СУБД NIS позволяет реплицировать карты сети среди группы подчиненных серве- ров. Это дает возможность ослабить нагрузку на главный сервер и поддерживать функ- ционирование клиентов даже в том случае, когда некоторые серверы недоступны. Если на главном сервере файл изменился, необходимо разослать соответствующую карту NIS всем подчиненным серверам, чтобы везде были одинаковые данные. Клиенты не раз- личают главный и подчиненные серверы. Схема работы NIS Файлы данных NIS хранятся в одном каталоге, обычно в каталоге /var/ур. Далее мы будем называть его “NIS-каталогом”. Все карты NIS хранятся в хешированном виде (в формате базы данных) в подкаталоге NIS-каталога, соответствующем домену NISI Точное имя и количество таких файлов зависит от используемой библиотеки хеширу- ющих функций. Для каждого поля (ключа), по которому можно осуществить поиск в файле, должна быть создана отдельная карта. Например, в домене cssuns карты DB для файла /etc/passwd могут называться так. /var/yp/cssuns/passwd. byname /var/ур/cssuns/passwd. byuid Команда makedbm создает карты NIS из обычных файлов. Ее никогда не нужно вы- зывать непосредственно. Файл Makefile в каталоге /var/ур сконфигурирован так, что- бы автоматически генерировать все распространенные карты NIS. После модификации какого-нибудь системного файла перейдите в каталог /var/ур и запустите программу- make. Она сверит время модификации каждого файла со временем модификации соот- ветствующих карт и выполнит команду makedbm для каждой карты, который необходи- мо перестроить. М В системах HP-UX вместо команды make используется команда ypmake. , Копирование карт с главного сервера на подчиненные осуществляет команда ypxf хм Она работает по модели запроса: для того чтобы она импортировала карты, ее нужней запускать на каждом подчиненном сервере. Подчиненные серверы время от времени выполняют команду ypxf г для того, чтобы проверить, последние ли версии карт на^ ходятся в их распоряжении. С помощью демона cron можно управлять периодичностью J этих проверок. Стандартная реализация механизма копирования карт несколько неэффективна, поэтому в Linux существует демон rpc. ypxf rd, который можно запустить на главном сервере для ускорения ответов на запросы команды ypxf г. Этот демон работает в обход стандартного протокола NIS и просто рассылает копии файлов карт. К сожалению, в разных системах файлы карт хранятся с использованием различных форматов баз дан- ных и разного порядка следования байтов, поэтому применение команды ypxf rd чрева- то возможной несовместимостью. Команда yppush используется на главном сервере. Она не пересылает никаких данных, а просто заставляет каждый подчиненный сервер выполнить команду ypxfr. Команда yppush задается в файле Makefile, находящемся в NIS-каталоге, и обеспечи- вает принудительную рассылку откорректированных карт на подчиненные серверы. Существует специальная карта ypservers, которая не соответствует ни одному обыч- ному файлу. Он содержит список всех серверов домена и создается автоматически при
Глава 19. Совместное использование системных файлов 783 конфигурировании домена с помощью команды ypinit. Содержимое этой карты изуча- ется всякий раз, когда главному серверу нужно разослать карты на подчиненные серверы. После начального конфигурирования единственными активными компонентами си- стемы NIS остаются демоны ypserv и ypbind. Первый из них работает только на серве- рах (и главном, и подчиненных); он принимает запросы от клиентов и отвечает на них, осуществляя поиск информации в хешированных файлах карт. Демон ypbind работает на всех компьютерах NIS-домена, включая серверы. Функ- ции библиотеки языка С обращаются к локальному демону ypbind всякий раз, когда им нужно ответить на административный запрос (при условии, что это разрешено установ- ками файла /etc/nsswitch. conf). Демон ypbind находит в соответствующем домене демон ypserv и возвращает его адрес библиотечной функции, которая затем обращает- ся непосредственно к серверу. Современные версии демона ypbind периодически проверяют, работают ли они с наиболее активным сервером в домене NIS. Это является улучшением по сравнению с традиционной реализацией демона, в которой осуществлялась привязка к определен- ному серверу. В NIS есть ряд вспомогательных команд, которые предназначены для изучения карт, определения версий карт, используемых каждым сервером, и управления привязкой клиентов к серверам. Полный перечень команд и демонов NIS приведен в табл. 19.4. Таблица 19.4. Команды и демоны NIS Утилита Отйаний^<\ ypserv Демон сервера NIS; запускается на этапе начальной загрузки ypbind Демон клиента NIS; запускается на этапе начальной загрузки domainnaxne Задает домен NIS, в который входит компьютер (выполняется на этапе начальной загрузки) ypxf г Загружает текущую версию карты с главного сервера ypxf rd Обслуживает запросы, поступающие от команды ypxf г (работает на главном сервере) yppush Заставляет подчиненные серверы обновить свои версии карты makedbm Создает хешированную карту из обычного файла ypmakea Обновляет хешированные карты для тех файлов, которые изменились ypinit Конфигурирует компьютер как главный или подчиненный сервер yPset Заставляет демон ypbind установить соединение с конкретным сервером® ypwhich Определяет, с каким сервером работает текущий компьютер yppoll Определяет, какую версию карты использует сервер ypcat Отображает значения, содержащиеся в карте NIS ypmatch Отображает элементы карты, соответствующие заданному ключу yppasswd Изменяет пароль на главном сервере NIS ypchfn Изменяет содержимое поля GECOS на главном сервере NIS ypchsh Меняет регистрационный интерпретатор команд на главном сервере NIS yppasswdd Сервер для команд yppasswd, ypchsh и ypchfn ypupdated6 Сервер для обновления карты NIS (управляется демоном inetd) ______________ 8 Нужно отдельно включать с помощью команды ypbind -ypsetme или ypbind -ypset (второй вариант опаснее). 6 Не используется или не поддерживается во всех системах.
784 Часть II. Работа в сети Безопасность NIS Система NIS небезопасна. Особенно неприятен широковещательный режим. Любой узел сети может выступить в качестве сервера для того или иного домена и распростра- нить среди NIS-клиентов ложные административные данные. В системах Linux эту про- блему можно смягчить, если явно указать каждому клиенту доступные ему серверы NIS. Если вопросы безопасности системы для вас очень важны, не следует использовать NIS для управления скрытыми паролями. Используйте для этого такие альтернативные распределенные механизмы аутентификации, как LDAP. В старых версиях СУБД NIS содержала множество “прорех”. Поэтому используйте только современную версию NIS. 19.5. Задание приоритетов для источников АДМИНИСТРАТИВНОЙ ИНФОРМАЦИИ Информацию о конфигурации можно распространять несколькими способами. Любая система способна обрабатывать обычные файлы и осуществлять поиск имен компью- теров и IP-адресов в DNS. Поскольку для каждого элемента информации может суще- ствовать несколько потенциальных источников, предусмотрен способ задания источни- ков и порядка их опроса. Конфигурационный файл /etc/nsswitch. conf (/etc/netsvc. conf в системе AIX) позволяет для каждого типа административной информации указывать явный путь по- иска. Типичный файл nsswitch.conf выглядит следующим образом. passwd: files Idap hosts: files dns group: files Каждая строка соответствует отдельному типу информации (обычно это эквивалент одного текстового файла). Обычные источники таковы: nis, nisplus, files, dns, Idap и compat. Им соответствуют (в порядке перечисления) NIS, NIS+6, обычные текстовые файлы (без учета специальных обозначений вроде “+”), DNS, LDAP и обычные файлы системы NIS. DNS предоставляет информацию только о узлах и сетях. Источники просматриваются слева направо, пока один из них не выдаст ответ на за- прос. В показанном выше примере функция gethostbyname сначала Проверит файл / etc/hosts и, если требуемый узел там не указан, обратится к DNS. В процессе обработ- ки запросов, касающихся UNIX-групп, будет проверяться только файл /etc/group. В случае необходимости можно явно указать, как следует поступать при получении отрицательного ответа на запрос от того или иного источника. Соответствующее усло- вие берется в квадратные скобки. Например, строка hosts: dns [NOTFOUND=retum] files заставляет получать информацию только от DNS, если эта служба доступна. Получение отрицательного ответа от сервера имен приведет к немедленному завершению запроса (с выдачей кода ошибки) без обращения к текстовым файлам. В то же время текстовые файлы будут задействованы, если все серверы имен окажутся недоступными. В табл. 19.5 перечислены различные условия проверки ошибок. Каждое из них может быть задано 6 Неудачный “наследник” исходной версии NIS уже не поддерживается фирмой Sun, хотя в некоторых системах его все еще можно встретить.
Глава 19. Совместное использование системных файлов 785 равным return или continue, что означает прерывание запроса или переход к следую- щему источнику соответственно. Таблица; 19.5. Условия проверки ошибок в файле /etc/nsswitch.conf УСЛОВИф . UNAVAIL NOTFOUND TRYAGAIN SUCCESS Источник не существует или недоступен Источник существует, но не может ответить на запрос Источник существует, но занят Источник смог ответить на запрос В большинство дистрибутивов систем входит файл nsswitch.conf, который подхо- дит для изолированного компьютера. Источником всех данных служат обычные файлы, за исключением информации о узлах (сначала опрашиваются файлы, потом — DNS). В некоторых системах для файлов passwd и group задан источник compat, что, скорее всего, нежелательно. Если вы действительно используете NIS, просто вставьте этот ис- точник в файл nsswitch.conf. Демон nscd: кеширование результатов поиска В В некоторых дистрибутивах Linux большую роль в обработке системных фай- Zjb лов играет демон nscd, название которого немного сбивает с толку (лате ser- vice cache daemon — демон кеширования для службы имен). Демон nscd работает в связке с библиотекой языка С, кешируя результаты таких функ- ций, как getpwent, и подобных ей. По сути, демон является просто оболочкой этих функций; ему не известно, какие источники данных опрашивались. Теоретически демон должен способствовать повышению эффективности поиска информации в системных файлах, но с точки зрения пользователей реальный эффект практически не ощутим. Ш О DNS рассказывалось в главе 17. Мы говорим, что название “демон кеширования для службы имен” способно ввести в заблуждение, поскольку термин “служба имен” обычно относится к DNS, распределен- ной СУБД, осуществляющей связь между доменными именами и IP-адресами. Демон nscd, в числе прочего, кеширует и результаты DNS-запросов (одна из контролируемых им функций — gethostbyname), он также связан с функциями, черпающими информа- цию из файлов passwd и group, и их сетевыми эквивалентами (из соображений безо- пасности, результаты запросов к файлу /etc/shadow не кешируются). В принципе, демон nscd не должен влиять на работу системы; он лишь ускоряет выполнение повторяющихся операций поиска. Но на практике влияние демона может оказаться непредсказуемым из-за того, что он хранит собственную копию результа- тов поиска. Эти данные находятся в кеше в течение фиксированного интервала времени (задается в конфигурационном файле демона — /etc/nscd.conf), поэтому всегда есть вероятность того, что самые последние изменения не будут отражены в кеше, пока преж- ние данные не устареют. Вообще-то, демон достаточно “умен” и следит за состоянием ло- кальных источников данных (например, файлом /etc/passwd), поэтому локальные изме- нения должны вступать в силу в течение 15 секунд. Что касается удаленных источников, например NIS, то в худшем случае величина задержки будет равна периоду устаревания. Мы с вами упоминали несколько примеров дистрибутивов. Так вот, только SUSE запускает nscd по умолчанию. В системе Red Hat демон nscd инсталлируется, но по
786 Часть II. Работа в сети умолчанию не запускается на этапе загрузки системы; чтобы разрешить использование демона nscd, выполните команду chkconfig nscd on. Система Ubuntu разрешает ра- боту демона nscd, но не инсталлирует его по умолчанию; чтобы его загрузить, нужно выполнить команду apt-get install nscd. Демон nscd запускается на этапе начальной загрузки и работает непрерывно. По умолчанию в файле /etc/nscd.conf задан период 10 минут для файла passwd и 1 час — для файлов hosts и group. Интервал между попытками в случае неудачного запроса составляет 20 секунд. Эти значения редко приходится менять. Если вас удивляет, что сделанные вами изменения не вступили в силу, то, очевидно, виной тому демон nscd. 19.6. Рекомендуемая литература • Carter, Gerald. LDAP System Administration. Sebastopol, CA: O’Reilly Media, 2003. • Malere, Luiz Ernesto Pinheiro. LDAP Linux HOWTO, tldp. org • Volgmaier, Reinhard. The ABCs of LDAP: How to Install, Run, and Administer LDAP Servi- ces. Boca Raton, FL: Auerbach Publications, 2004. • LDAP for Rocket Scientists, zy tr ax. com/books / Idap 19.7. Упражнения 19.1. Почему метод обновления файлов локального компьютера по запросу считается безопаснее метода принудительной рассылки? 19.2. Поясните приведенный ниже фрагмент управляющего файла утилиты rdist. LINUX_PASSWD = ( redhatbox ubuntubox susebox ) passwd: ( /etc/passwd ) -> ( ${LINUX_PASSWD} ) install /etc/passwd.rdist; cmdspecial /etc/passwd.rdist ”/usr/local/sbin/mkpasswd"; 19.3. Объясните разницу между утилитами rdist и rsync. В каких случаях предпо- чтительнее использовать ту или другую? 19.4. 18г Какой метод совместного использования файлов применяется в вашей системе? Какие проблемы безопасности при этом возникают? Предложите альтернативную схему совместного использования файлов и укажите ее преимущества и недостатки. 19.5. Придумайте схему LDAP, которая хранила бы такую информацию о пользователе, как регистрационное имя, пароль, оболочка, авторизированные компьютеры и т.п. Создайте инструмент, с помощью которого можно в интерак- тивном режиме добавлять новых пользователей в базу данных из файла, содер- жащего список пользователей. Создайте инструмент, который будет генерировать файлы passwd, group и shadow из базы данных LDAP для компьютеров, работаю- щих в вашем отделе. Разрешите пользователям иметь различные пароли на каждом компьютере. (Чтобы пользоваться каждым компьютером, не всем пользователям нужна обязательная авторизация.) Ваша система adduser должна уметь печатать списки регистрационных имен существующих пользователей и пары “регистраци- онное имя/пароль” для новых пользователей.
Глава 20 Электронная почта Социальные сети и пересылка SMS-сообщений постепенно вытесняют электронную почту в категорию “устаревших технологий”, поскольку возникают новые отношения и новые темы для обсуждения (microthoughts). Тем не менее электронная почта остается универсальным стандартом общения по сети. Все, от старушек до огромных корпора- ций, привыкли использовать электронную почту для общения с семьей, коллегами, пар- тнерами, потребителями и даже с правительством. Этот безумный, безумный, безумный мир электронной почты!1 Электронная почта проста и удобна; если вы знаете чей-нибудь почтовый адрес, то набираете сообщение и щелкните на кнопке Send. Все! Уже через несколько секунд это сообщение окажется в электронном почтовом ящике адресата, независимо от того, где он находится: в соседней комнате или в другой части Земного шара. С точки зрения пользователя, ничего не может быть проще. Инфраструктура, лежащая в основе электронной почты и обеспечивающая все ее удобства, напротив, довольно сложная. Существует несколько программных пакетов, с помощью которых можно посылать сообщения электронной почты и управлять ею (три из них будут рассмотрены в этой главе), но все они требуют довольно сложного кон- фигурирования и управления. Кроме того, необходимо понимать основные концепции и протоколы, связанные с электронной почтой, чтобы у вас не сложилось ложное пред- ставление, что кроссплатформенная и интерорганизованная (interorganizational) элек- тронная почта — это подарок небес, работающий по мановению волшебной палочки. Понимание собственной инфраструктуры электронной почты и управление ею тре- буется не только от системного администратора. Многие провайдеры сегодня предлага- 1 Даже когда Эви пересекала на паруснике океан, она всегда находилась в контакте по элек- тронной почте с помощью своего бортового радиопередатчика HAM/SSB и “скоростного” пакета для радиосвязи, скорость которого в лучшем случае приближалась к 30 бод.
788 Часть II. Работа в сети ют “управляемую” службу электронной почты, которая размещает систему электронной почты на удаленных серверах за ежемесячную или ежегодную плату (иногда за каждого пользователя отдельно). Существует также множество аналогичных “бесплатных” служб, таких как Gmail компании Google, Yahoo! Mail и MSN Hotmail, имеющих большую по- пулярность среди индивидуальных пользователей. Если вы хотите получить персональ- ную учетную запись электронной почты или открыть почтовый адрес для маленькой компании, то эти службы будут удобными для вас. Служба Gmail не только предостав- ляет персональные учетные записи электронной почты, но и обладает интересной воз- можностью настраивать электронную почту для всего домена. Детали этого механизма и описание процесса настройки можно найти на странице google. сот/а или наберите в поисковой строке системы Google запрос “hosted Gmail”. Служба, размещенная на удаленном сервере, решает массу проблем, включая хране- ние, управление сервером, обновление программного обеспечения, конфигурирование, фильтрацию спама, резервное копирование и обеспечение безопасности. Как плата за услуги “бесплатных” служб, вы, возможно, будете вынуждены получать рекламные объ- явления и пожертвовать конфиденциальностью. Во многих ситуациях это хороший вы- бор; если служба, расположенная на удаленном сервере, вас устраивает, то остальную часть это огромной главы можно не читать. Однако служба электронной почты, расположенная на удаленном сервере, устраи- вает не всех. Коммерческие и другие крупные организации, работа которых зависит от электронной почты, не желают рисковать, размещая службу электронной почты за пределами своего офиса. Такие организации могут иметь множество причин для разме- щения службы электронной почты на своих серверах, включая вопросы безопасности, производительности и доступности. Эта глава предназначена именно для них. Огромный объем этой главы свидетельствует о том, что почтовые системы — доста- точно сложная тема. Здесь изложены только основные сведения. Схематическое описа- ние главы представлено в табл. 20.1. Таблица 20.1. Структура главы Описание Раздел Основы 20.1 Вопросы проектирования почтовых систем 20.4 Спам и вредоносные программы 20.6 Фильтрация вирусов и спама с помощью интерфейса amavisd 20.6 Настройка программы sendmail 20.8 Настройка агента exim 20.14 Настройка агента postfix 20.15 Технология DKIM 20.16 Интегрированные системы электронной почты 20.17 20.1. Системы электронной почты Теоретически система электронной почты состоит из нескольких компонентов. • Пользовательский агент (“mail user agent”— MUA или UA)9 который дает пользовате- лям возможность читать и составлять сообщения.
Глава 20. Электронная почта 789 • Агент передачи электронной почты (mail submission agent — MSA), принимающий по- чту, исходящую от агента MUA, обрабатывающий ее и передающий транспортной системе. • Транспортный агент (mail transport agent — МТА), который пересылает сообщения с одного компьютера на другой. • Агент доставки (delivery agent — DA), который помещает сообщения в локальное хранилище2. • Необязательный агент доступа (acess agent — АА), который связывает пользо- вательский агент с хранилищем сообщений (например, посредством протокола IMAP или POP). К некоторым из этих агентов присоединяются инструменты для распознания спама, вирусов и (исходящих) внутренних секретов компании. Схема взаимодействия всех ука- занных компонентов представлена на рис. 20.1. Компьютер А - отправитель Компьютер Б - получатель Рис. 20.1. Компоненты почтовой системы Пользовательские агенты Пользовательский агент (иногда говорят “клиент электронной почты”) применяется для чтения и составления электронных сообщений. Первоначально сообщения могли со- держать только простой текст, однако благодаря стандарту MIME (Multipurpose Internet Mail Extensions — многоцелевые расширения электронной почты в сети Интернет) по- явилась возможность включать в них форматированный текст и присоединять разные файлы (в том числе вирусы). Стандарт MIME поддерживается большинством пользова- тельских агентов. Поскольку он не влияет на процесс адресации и доставки почты, мы не будем его рассматривать. Самым первым пользовательским агентом была утилита /bin/mail, которая и сей- час остается удобным инструментом для чтения текстовых сообщений. Поскольку элек- тронная почта в Интернете давно вышла за пределы “текстовой эры”, пользовательские агенты, ориентированные на текст, для большинства пользователей являются непрак- 2 Иногда это почтовые ящики пользователей, иногда — база данных.
790 Часть II. Работа в сети тичными. Но не следует отбрасывать утилиту /bin/mail; она остается удобным ин- терфейсом для сценариев и других программ. (Один “завзятый” пользователь системы Linux каждую ночь посылает сообщение электронной почты от демона cron программе- планировщику, чтобы при первом взгляде на календарь становился ясным статус всех его программ. По умолчанию демон cron использует утилиту /bin/mail для уведомле- ния пользователя в ситуациях, когда он не может выполнить задание, указанное в рас- писании.) Одна из элегантных функциональных возможностей, проиллюстрированных на рис. 20.1, состоит в том, что пользовательский агент не обязан выполняться в той же самой системе и даже на той же самой платформе, на которой выполняется остальная часть почтовой системы. Пользователи могут получить свои сообщения электронной почты на ноутбуках или смартфонах, работающих под управлением системы Windows, с помощью протоколов агентов доступа IMAP или POP. Страница http://en.wikipedia.org/wiki/Comparison_of_e-mail_clients3 содержит подробный список многих клиентов электронной почты, операционных си- стем, в которых они выполняются, и функциональные возможности, которые они поддерживают. К популярным клиентам относятся Thunderbird, Alpine, Zimbra и, раз- умеется, Microsoft Outlook. Страница http://en.wikipedia.org/wiki/Comparison_ of webmail providers содержит информацию о таких веб-службах, как Gmail, Hormail и Yahoo! Mail. Агенты представления Агенты MSA — последнее новшество в пантеоне электронной почты — были изобре- тены для того, чтобы разгрузить агентов МТА от некоторых задач. Агенты MSA облег- чают серверам-концентраторам задачу различения входящих и исходящих сообщений (например, для принятия решения об ответе) и обеспечивают пользовательским агентам единообразную и простую конфигурацию исходящей почты. Агент MSA напоминает секретаря, кторый ведет прием новых сообщений и внедрен в систему локальными пользовательскими агентами. Агент MSA располагается между поль- зовательским и транспортным агентами и выполняет несколько функций, которые ранее относились к компетенции агента МТА. Агент MSA реализует безопасную (зашифро- ванную и аутентифицированную) связь с пользовательскими агентами и часто немного изменяет заголовки и удаляет входящие сообщения. Во многих ситуациях агент MSA просто прослушивает агентов МТА на разных портах, применяя разные конфигурации. Агенты MSA используют тот же протокол передачи почты, что и агенты МТА, поэто- му с точки зрения пользовательских агентов они выглядят как агенты МТА. Однако они обычно прослушивают соединение на порту 587, а не 25, который является стандартным для агентов МТА. При такой схеме работы пользовательские агенты должны соединять- ся с портом 587, а не 25. Если ваш пользовательский агент не может использовать порт 587, вы можете запустить агента MSA на порту 25, но в системе, которая отличается от системы, в которой был запущен агент МТА; в каждый момент времени на конкретном порту можно прослушивать только один процесс. Агент MSA может помочь решить несколько задач, возникающих из-за спама. Для рассылки большого количества спама используются инфицированные домашние персо- нальные компьютеры. В результате многие интернет-провайдеры, обслуживающие до- машние компьютеры, либо блокируют исходящее соединение на порту 25, либо требу- 3 Актуальность ссылок на момент выхода русского издания не гарантируется. — Примеч. ред.
Глава 20. Электронная почта 791 ют верификации учетной записи в процессе обмена информацией по протоколу SMTP. Домашний персональный компьютер может использовать собственный почтовый сервер интернет-провайдера для исходящих сообщений, но некоторые современные механиз- мы фильтрации спама, такие как протоколы SPF (раздел 20.6) и DKIM (20.16), требуют, чтобы почта, отправляемая организацией, действительно создавалась именно указанной организацией. Если вы используете агент MSA, проверьте, что конфигурация вашего транспортного агента задана так, что он не дублирует работу, выполняемую агентом MS А. Обработка дубликатов никак не влияет на корректность обработки почты, но заставляет систему выполнять дополнительную ненужную работу. Поскольку агент MSA для передачи сообщений использует агент МТА, для взаимной аутентификации оба агента должны использовать протокол SMTP-AUTH. В противном случае возникнет так называемая “открытая передача” (open relay), которую могут ис- пользовать спамеры, и другие сайты занесут ваш адрес в “черный список”. Транспортные агенты Задача транспортного агента — принимать почту от пользовательского агента или агента представления, интерпретировать адреса получателей и перенаправлять почту на соответствующие компьютеры для последующей доставки. Транспортные агенты рабо- тают по протоколу SMTP (Simple Mail Transport Protocol — простой протокол передачи электронной почты), который вначале был определен в документе REC821, а затем до- полнен в документе RFC5321. Расширенная версия этого протокола называется ESMTP (Extended SMTP). Список заданий транспортных агентов как отправителя, так и получателя содержит следующие пункты. • Получение сообщений электронной почты от удаленных почтовых серверов. • Распознавание адресов получателей. • Перезапись адресов получателей в форме, понятной для агента доставки. • Перенаправление сообщения следующему ответственному серверу или передача его локальному агенту доставки для сохранения в почтовом ящике пользователя. Большая часть работы, связанной с настройкой почтовой системы, сводится к кон- фигурированию транспортного агента. В книге мы рассматриваем три агента MSA с от- крытым кодом: sendmail, Exim и Postfix. Локальные агенты доставки Агент доставки, которого иногда называют также локальным агентом доставки (local delivery agent — LDA), отвечает за прием почты от транспортного агента и ее передачу соответствующим получателям на локальном компьютере. Почта может доставляться конкретному пользователю, в список рассылки, в файл и даже в программу. Однако два последних получателя могут ослабить конфиденциальность и безопасность вашей си- стемы. Транспортные агенты обычно содержат встроенных локальных агентов доставки. Например, программы procmail (procmail.org) и Maildrop (courier-mta.org/ maildrop) являются локальными агентами доставки, которые способны фильтровать и сортировать почту перед ее доставкой. Некоторые агенты доступа (АА) также имеют встроенных агентов доставки, выполняющих как доставку, так и другие задания.
792 Часть II. Работа в сети Хранилища сообщений Хранилище сообщений — пункт назначения, находящийся в конце долгого пути, кото- рый сообщение электронной почты проходит по Интернету от отправителя к получателю. Почта обычно хранится в формате mbox или Maildir. В первом случае вся почта хранится в одном файле, как правило, /var/mail/имя пользователя, а индивидуаль- ные сообщения отделяются специальной линией From. Во втором варианте каждое со- общение хранится в отдельном файле. Хранить сообщения в отдельных файлах намного удобнее, но при этом в каталоге находится очень много маленьких файлов; некоторые файловые системы этого не одобряют. Эти простые файлы до сих пор используются в качестве хранилищ сообщений, но интернет-провайдеры, имеющие тысячи и миллионы клиентов электронной почты, ищут другие технологии для реализации своих хранилищ, как правило, на основе баз данных. Хранилища сообщений становятся все более сложными. Агенты доступа Для доступа к хранилищам и загрузки сообщений электронной почты на локаль- ное устройство (рабочую станцию, ноутбук, телефон и т.п.) используется два протоко- ла: IMAP4 и POP. Ранние версии этих протоколов имели проблемы с безопасностью. Убедитесь, что вы используете версию (IMAPS или POP3S), которая реализует шифрова- ние SSL и не передает через Интернет пароли в открытом виде. Мы предпочитаем протокол IMAP (Internet Message Access Protocol — протокол до- ступа к электронной почте Интернета). Он лучше, чем протокол POP, поскольку достав- ляет ваши почтовые сообщения по одному, а не все сразу, что более удобно для работы в сети (особенно если линии связи не обладают высокой пропускной способностью) и комфортнее для людей, перемещающихся с места на место. Протокол IMAP также луч- ше обрабатывает огромные файлы, которые многие любят присоединять к своим сооб- щениям: вы можете просматривать заголовки своих сообщений и не загружать вложен- ные файлы, пока не будете готовы к работе с ними. Протокол IMAP управляет почтовыми каталогами на нескольких сайтах; например, на почтовом сервере и на вашем персональном компьютере. Почта, размещенная на почтовом сервере, может стать частью процедуры резервного копирования. Страница Википедии, посвященная протоколу IMAP, содержит много информации о его доступ- ных реализациях. Протокол POP (Post Office Protocol — протокол почтового отделения) аналогичен протоколу IMAP, но основан на модели, в которой все почтовые сообщения загружают- ся с сервера на клиентский компьютер. При этом почта может быть либо удалена с сер- вера (в этом случае ее невозможно впоследствии восстановить), либо сохранена на нем (в этом случае буферный файл почты становится все больше и больше). Парадигма “вся почта за один раз” неудобна для работы в сети и некомфортна для пользователя. Если пользователь никогда не выбрасывает ненужного старья, то передача почты может стать очень медленной, а буферный файл достигнет огромных размеров. Серверы IMAP/POP имеют несколько реализаций: Courier, Cyrus IMAP, Dovecot, imapd университета штата Вашингтон (Сиэтл) и Zimbra. Мы предпочитаем серверы Dovecot и Zimbra4. Протоколы IMAP и POP поддерживают практически все почтовые пользовательские агенты. 4 Zimbra — это не просто агент доступа, а, скорее, полноценная промышленная почтовая си- стема (см. раздел 20.17).
Глава 20. Электронная почта 793 Так много компонентов, так мало времени Если почтовая система состоит из множества компонентов (а мы еще даже не упо- минали о сканировании спама и вирусов!), то ее архитектура, скорее всего, является слишком сложной. Однако в небольших организациях транспортные агенты могут ад- сорбировать функции агентов представления и локальных агентов доставки, что позво- ляет упростить почтовую систему. Более крупные организации могут пожелать хранить все компоненты по отдельности и выполнять несколько их экземпляров одновремен- но, чтобы обеспечить распределенную загрузку. На самом деле почтовая система может быть настолько же сложной, насколько и простой, в зависимости от вашего желания. Проблемы ее проектирования рассматриваются в разделе 20.4. 20.2. Структура почтового сообщения Структура электронного сообщения состоит из трех частей. • Конверт • Заголовки • Тело Конверт определяет, куда должно быть доставлено сообщение или куда его требуется возвратить в случае, если доставка невозможна. Обычно конверт невидим для пользова- теля и не является частью самого сообщения; он используется транспортным агентом. Если отправителем и получателем являются обычные люди, то адреса конверта обыч- но согласованы со строками From и То заголовка. Если же сообщение направлено спи- ску рассылки или было сгенерировано спамером, пытающимся подделать идентичность отправителя, то конверт и заголовки могут быть не согласованы друг с другом. Заголовки — это набор пар “свойство/значение”, отформатированных в соответствии с документом RFC5322. В них содержится различная информация о сообщении, вклю- чая дату и время его отправки, а также сведения о транспортных агентах, через которые оно прошло на своем пути. Заголовки являются неотъемлемой частью сообщения, но пользовательские агенты часто скрывают некоторые менее интересные заголовки при отображении сообщения. Тело сообщения — это та информация, которую, собственно, и требуется переслать. Оно должно содержать обычный текст, однако часто он представляет собой двоичные данные в специальной почтовой кодировке. Заголовки почтовых сообщений Системный администратор должен уметь анализировать заголовки почтовых сообще- ний и выявлять с их помощью возникшие проблемы. Многие пользовательские агенты скрывают заголовки, но существует способ их увидеть, открыв хранилище сообщений в текстовом редакторе. Ниже приведены заголовки (с сокращениями, обозначенными многоточиями) из обычного сообщения, которое не является спамом. Мы удалили по- ловину страницы заголовков, которые система Gmail использует для фильтрации спама. Delivered-To: sailingevi@gmail.com Received: by 10.231.39.205 with SMTP id...; Fri, 16 Oct 2009 08:14:27 -700 (PDT) Received: by 10.114.163.26 with SMTP id...; Fri, 16 Oct 2009 08:14:26 -700 (PDT) Return-Path: <david@schweikert.ch> Received: frommail-relay.atrust.com (mail-relay.atrust.com [63.173.189.2])
794 Часть II. Работа в сети by mx.google.com with ESMTP id 17si2166978pxi.34.2009.10.16.08.14.20; Fri, 16 Oct 2009 08:14:25 -0700 (PDT) Received-SPF: fail (google.com: domain of david@schweikert.ch does not designate 63.173.189.2 as permitted sender) client-ip=63.173.189.2; Authentication-Results: mx.google.com; spf=hardfail (google.com: domain of david@schweikert.ch does not designate 63.173.189.2 as permitted sender) smtp.mail=david@schweikert.ch Received: from mail.schweikert.ch (nigel.schweikert.ch [88.198.52.145]) by mail-relay.atrust.com (8.12.11/8.12.11) with ESMTP id n9GFEDKA029250 for <evi@atrust.com>; Fri, 16 Oct 2009 09:14:14 -0600 Received: from localhost (localhost.localdomain [127.0.0.1]) by mail.schweikert.ch (Postfix) with ESMTP id 3251112DA79; Fri, 16 Oct 2009 17:14:12 +0200 (CEST) X-Virus-Scanned: Debian amavisd-new at mail.schweikert.ch Received: from mail.schweikert.ch ([127.0.0.1]) by localhost (mail.schweikert.ch [127.0.0.1]) (amavisd-new, port 10024) with ESMTP id dV8BpT7rhJKC; Fri, 16 Oct 2009 17:14:07 +0200 (CEST) Received: by mail.schweikert.ch (Postfix, from userid 1000) id 2A15612DB89; Fri, 16 Oct 2009 17:14:07 +0200 (CEST) Date: Fri, 16 Oct 2009 17:14:06 +0200 From: David Schweikert <david@schweikert.ch> To: evi@atrust.com Cc: Garth Snyder <garth@garthsnyder.com> Subject: Email chapter comments Для того чтобы прочитать эту тарабарщину, начнем со строк Received, но в направ- лении снизу вверх (т.е. со стороны отправителя). Это сообщение пришло с домашнего компьютера Дэвида Швайкерта (David Schweikert), находящегося в домене schweikert. ch, на его почтовый сервер (mail. schweikert. ch) , где оно прошло сканирование на вирусы. Затем оно было переслано получателю по адресу evi@atrust. com. Однако по- лучатель mail-relay.atrust.com послал его по адресу sailingevi@gmail.com, где находится почтовый ящик Эви. Ш Более подробная информация о технологии SPF приведена в разделе 20.6. Посреди заголовков мы видим, что проверка сообщения на основе технологии SPF завершилась неудачно. Это произошло потому, что система Google проверила IP-адрес сервера mail-relay. atrust. com, сравнила его с записью SPF в домене schweirkert. ch и они не совпали. Это недостаток технологии SPF — она не распознает сообщения, которые предназначены для пересылки. Мы можем видеть следы частого использования транспортных агентов (Postfix — в домене schweirkert. ch и sendmail 8.12 — в домене atrust. com). В данном случае сканирование вирусов было выполнено с помощью агента amavisd-new на порту 10024 на компьютере, работающем под управлением операционной системы Debian Linux. Мы можем проследить путь, который проделало сообщение из часового пояса центрально- европейского летнего времени (CEST +0200) в Колорадо (-0600) и на сервер Google (PDT -0700); эти числа представляют собой разницу между местным временем и все- мирным координированным временем (UTC — Coordinated Universal Time). В заголов- ках можно найти много скрытой информации! Рассмотрим заголовки (тоже сокращенные) сообщения, которое является спамом. Delivered-To: sailingevi@gmail.com Received: by 10.231.39.205 with SMTP id...; Mon, 19 Oct 2009 08:59:32 -0700... Received: by 10.231.5.143 with SMTP id...; Mon, 19 Oct 2009 08:59:31 -0700...
Глава 20. Электронная почта 795 Return-Path: <smotheringl39@sherman.dp.ua> Received: frommail-relay.atrust.com (mail-relay.atrust.com [63.173.189.2]) Received-SPF: neutral (google.com: 63.173.189.2 is neither permitted nor denied by best guess record for domain of smotheringl39@sherman.dp.ua) clientip= 63.173.189.2; Authentication-Results: mx.google.com; spf=neutral (google.com: 63.173.189.2 is neither permitted nor denied by best guess record for domain of smotheringl39@sherman.dp.ua) smtp.mail=smotheringl39@sherman.dp.ua Received: from SpeedTouch.Ian (187-10-167-249.dsl.telesp.net.br [187.10.167.249] (maybe forged)) bymail-relay.atrust.com... Received: from 187.10.167.249 by relay2.trifle.net; Mon, 19 Oct 2009 13:59: ... From: "alert@atrust.com" <alert@atrust.com> To: <ned@atrust.com> Subject: A new settings file for the ned@atrust.com mailbox Date: Mon, 19 Oct 2009 13:59:12 -0300 ... В соответствии с заголовком From, отправителем этого сообщения является почто- вый ящик alert@atrust.com. Однако заголовок Return-Path, содержащий копию конверта отправителя, свидетельствует о том, что источником сообщения является по- чтовый ящик smotheringl39@sherman.dp.ua, адрес которого указывает на Украину. Первый транспортный агент, обработавший сообщение, имеет IP-адрес 187.10.167.249 и находится в Бразилии. Хитрые спамеры ...5 Проверка по технологии SPF, которую выполнил сервер Google, снова завершилась провалом, но на этот раз с “нейтральным” результатом, потому что домен sherman. dp. ua не имеет записи SPF, с которой можно было бы сравнить IP-адрес сервера mail- relay .atrust.com. Информация о получателе также не совсем правдива. Заголовок То указывает, что сообщение направлено по адресу ned@atrust. com. Однако для того, чтобы сообщение было направлено по адресу sailingevi@gmail. com, среди адресов получателя на кон- верте должен находиться адрес evi@atrust. com. 20.3. Протокол SMTP Протокол SMTP (Simple Mail Transport Protocol — простой протокол передачи элек- тронной почты) и его расширенная версия ESMTP были стандартизованы в документах RFC (в частности, RFC5321) и используются для передачи сообщений между разными частями почтовой системы. • От пользовательского агента к агенту представления или транспортному агенту, когда сообщение поступает в почтовую систему. • От агента представления к транспортному агенту, когда сообщение начинает свой путь. • От транспортного агента или агента представления к программам сканирования спама и вирусов. • От одного транспортного агента к другому при передаче сообщений от одной ор- ганизации другой. • От транспортного агента к агенту доставки, когда сообщение поступает в локаль- ное хранилище. 5 Следует отметить, что многие строки заголовка, включая строки Received, могут оказаться поддельными. С этими данными необходимо быть крайне осторожными.
796 Часть II. Работа в сети Поскольку формат сообщений и протокол передачи стандартизированы, транспорт- ные агенты отправителя и получателя не обязательно должны быть одинаковыми и даже знать друг о друге; просто они оба должны придерживаться протоколов SMTP и ESMTP. На разных почтовых серверах могут работать различные транспортные агенты, и их вза- имодействие будет безошибочным. В соответствии со своим именем, протокол SMTP является довольно простым. Транспортный агент связывается с вашим почтовым сервером и, по существу, сообщает следующее: “Вот сообщение; пожалуйста, доставь его по адресу user@your .domain”. Ваш транспортный агент отвечает: “Хорошо”. Требование строго придерживаться протокола SMTP стало основой для борьбы со спамом и вредоносными программами, поэтому системные администраторы должны хорошо в нем разбираться. Его язык имеет всего несколько команд; самые важные пере- числены в табл. 20.2. Таблица 20.2. Команды протокола SMTP Команда______________f. Функции ;;____________; - -_______с_________________ helo имя_компыотера Проверяет, поддерживает ли компьютер протокол SMTP ehlo имя_компьютера Проверяет, поддерживает ли компьютер протокол ESMTP mail from: обратный_адрес Идентифицирует конверт отправителя rcpt то: прямой_адреса Идентифицирует конверт получателя vrfy адрес Проверяет корректность адреса (возможность доставки) expn адрес Демонстрирует расширение альтернативных имен и отображения файла .forward data Отмечает начало тела сообщения6 Quit Завершает сообщение и прерывает соединение RSET Восстанавливает состояние соединения HELP Выводит на экран описание команд SMTP а У сообщения может быть несколько команд RCPT. 6 Тело завершается точкой в строке. Вы прислали мне привет Серверы, использующие протокол ESMTP, начинают общение, посылая команду EHLO, а не HELO. Если процесс на другом конце соединения понимает эту команду и отвечает “ОК”, то участники согласовывают расширения и находят наименьший общий знаменатель для обмена. Если в ответ на команду EHLO собеседник присылает ошибку, то сервер, использующий протокол ESMTP, переключается на протокол SMTP. Однако в настоящее время практически все серверы используют протокол ESMTP. Типичное общение по протоколу SMTP для доставки сообщения состоит из следую- щих команд: HELO или EHLO, MAIL FROM:, RCPT TO:, DATA и QUIT. Большая часть команды выполняется отправителем. Получатель лишь высылает коды ошибок и под- тверждения. Протоколы SMTP и ESMTP основаны на тексте, поэтому их можно использовать непосредственно в процессе отладки почтовой системы. Достаточно просто применить утилиту telnet к ТСР-порту 25 или 587 и начать ввод команд SMTP. Пример приведен в разделе 20.15.
Глава 20. Электронная почта 797 Коды ошибок протокола SMTP Кроме протокола SMTP, в документах RFC определена совокупность кодов времен- ных и постоянных ошибок. Изначально эти коды состояли из трех цифр (например, 550), каждая из которых интерпретировалась отдельно. Если первая цифра равнялась 2, зна- чит, все прошло успешно, если 4 — произошла временная ошибка, а если 5 — постоян- ная ошибка. Трехзначная система кодирования ошибок слишком жесткая, поэтому в документе RFC3463 была описана ее гибкая модификация. В этом документе определен расширен- ный формат кодирования ошибок, получивший название уведомление о состоянии до- ставки, или DSN (delivery status notification). Коды DNS имеют формат Х.Х.Х, а не XXX, как раньше, причем каждый символ X может означать многозначное число. Первое чис- ло X по-прежнему может принимать значения 2, 4 и 5. Второе число означает тему, а третье кодирует подробности. В новой системе кодирования второе число используется для того, чтобы отличать ошибки компьютера от ошибок почтового ящика. Некоторые коды DSN перечислены в табл. 20.3. Все коды перечислены в приложении А к докумен- ту RFC3463. Таблица 20.3. Команды протокола SMTP Временная ошибка Постоянная ошибка Смысл , - . - 4.2.1 5.2.1 Почтовый ящик недоступен 4.2.2 5.2.2 Почтовый ящик полон 4.2.3 5.2.3 Слишком длинное сообщение 4.4.1 5.4.1 Нет ответа от компьютера 4.4.4 5.4.4 Невозможно выполнить маршрутизацию 4.5.3 5.5.3 Слишком много получателей 4.7.1 5.7.1 Доставка не авторизована, сообщение отклонено 4.7.* 5.7.* Нарушение правил организации Аутентификация SMTP Документ RFC4954 определяет расширение исходного протокола SMTP, позволяю- щее SMTP-клиенту идентифицировать себя и проходить аутентификацию у почтового сервера. После этого сервер может позволить клиенту использовать себя для пересылки почты. Этот протокол поддерживает несколько механизмов аутентификации. Обмен ин- формацией состоит из следующих этапов. • Клиент посылает команду EHLO, сообщая, что он использует протокол ESMT. • Сервер отвечает и уведомляет о своих механизмах аутентификации. • Клиент посылает команду AUTH и называет конкретный механизм аутентифика- ции, который он хочет использовать, включая свои данные для аутентификации. • Сервер принимает данные, присланные с командой AUTH, или начинает после- довательность команд “вызов/ответ” для обмена информацией с клиентом. • Сервер либо принимает, либо отвергает попытку аутентификации. Для того чтобы узнать, какой механизм аутентификации поддерживает сервер, мож- но применить утилиту telnet к порту 25 и выполнить команду EHLO. Например, ниже
798 Часть II. Работа в сети приведен усеченный вариант обмена сообщениями с почтовым сервером mail-relay, atrust. com (команды набраны полужирным шрифтом). Solaris $ telnet mail-relay.atrust.com 25 Trying 192.168.2.10... Connected to mail-relay.atrust.com. Escape character is ,Л]'. 220 mail-relay.atrust.com ESMTP ATE Mail Service 24.1.2/24.1.2; Tue, 20 Oct 2009 14:28:53 -0600 ehlo solaris.booklab.atrust.com 250-mail-relay.atrust.com Hello solaris.booklab.atrust.com, pleased to meet you 250-ENHANCEDSTATUSCODES 250-AUTH LOGIN PLAIN 250 HELP quit 221 2.0.0 mail-relay.atrust.com closing connection В данном случае почтовый сервер поддерживает механизмы аутентификации LOGIN и PLAIN. Серверы sendmail, Exim и Postfix поддерживают аутентификацию SMTP; де- тали их конфигураций описаны в разделе 20.11, 20.14 и 20.15. 20.4. Принципы организации электронной почты Соблюдение принципов работы с электронной почтой, описанных в этой главе, является обязательным условием нормального администрирования почтовых систем в средних и крупных организациях. Естественно, ими можно руководствоваться и в не- больших организациях. Есть несколько основных факторов, которые позволяют значи- тельно облегчить решение административных задач. • Наличие серверов для входящей и исходящей почты или, в случае крупных орга- низаций, иерархии серверов. • Фильтрация спама и вирусов прежде, чем разрешить доставку сообщения в вашу организацию. • Фильтрация спама, вирусов и утечки данных перед отправкой сообщений во внешний мир. • Для загруженных сайтов наличие резервного копирования, выполняемого агента- ми МТА для исходящих сообщений, не отправленных с первой попытки. • Ведение журнала и архива в соответствии с законом (например, для проведения расследований). • Наличие почтового каталога для каждого пользователя в организации. • Поддержка протоколов IMAP или POP для интеграции персональных компьюте- ров, систем Macintosh и удаленных клиентов. Каждый фактор будет подробно проанализирован ниже. Кроме того, необходимо добиться хорошего взаимодействия и функционирования других подсистем и средств: записи MX базы данных DNS должны быть правильными, брандмауэры должны пропу- скать входящую и исходящую почту, должны быть определены компьютеры, на которых организованы хранилища сообщений, и т.д. Ш Подробнее о записях MX рассказывалось в разделе 17.8.
Глава 20. Электронная почта 799 Почтовые серверы решают пять задач. • Принимают исходящую почту от агентов представления или пользовательских агентов. • Принимают входящую почту из внешнего мира. • Фильтруют сообщения от спама, вирусов и других вредоносных программ. • Доставляют сообщения в почтовые ящики пользователей. • Позволяют пользователям получать доступ к почтовым ящикам посредством про- токола ШАР или POP. В небольшой организации серверы, реализующие указанные функции, могут рабо- тать на одном компьютере. В крупных сетях это должны быть отдельные компьютеры. Настройка брандмауэра значительно упростится, если входящая почта будет поступать на один компьютер и вся исходящая почта тоже будет проходить через один компьютер. Кроме того, реалии современного Интернета вынуждают почтовые серверы заниматься сканированием содержимого сообщений. Почтовые серверы Существует два типа почтовых серверов: серверы, взаимодействующие с Интернетом для обработки входящих и исходящих сообщений, и внутренние серверы, взаимодей- ствующие с пользователями. Ниже мы опишем структуру почтовой системы, которая, как нам кажется, является легко масштабируемой, хорошо управляемой и безопасной. Задачи управления входящей и исходящей почтой в ней решают специально выделен- ные для этих целей серверы. Один из вариантов такой структуры приведен на рис. 20.2. Интернет Внутренняя сеть Рис. 20.2. Структура почтовой системы (вариант D Почтовая система, изображенная на рис. 20.2, состоит из двух частей: DMZ (демили- таризованной зоны), компьютеры которой подключены непосредственно к Интернету, и внутренней зоны, отделенной от зоны DMZ и Интернета с помощью брандмауэра. В зоне DMZ расположено несколько серверов. • Транспортный агент, прослушивающий порт 25 и передающий входящую почту на фильтры.
800 Часть IL Работа в сети • Фильтры вирусов и спама, отвергающие или отправляющие “в карантин” опасные сообщения. • Копия базы данных LDAP (Lightweight Directory Access Protocol — облегченный про- токол доступа к каталогам), содержащая исходящую информацию почтовой системы. • Исходящий транспортный агент, пытающийся доставить почту, отправленную аген- том представления. • Резервный исходящий агент МТА для исходящих сообщений, не отправленных с первой попытки. • Кеширующий сервер DNS, используемый исходящим агентом МТА для просмо- тра записей MX и входящим агентом МТА — для просмотра “черного списка” (до- менов отправителей), а также криптографической информации для подписанных сообщений. Сервер исходящей почты, который непосредственно подключен к Интернету, наи- более уязвим. Он должен быть хорошо защищен, иметь мало пользователей и не выполз нять посторонних процессов или услуг. Каждое сообщение, которое он обрабатывает, должно быть проверено, чтобы выполнялись следующие условия. ' • Организация отправителя не занесена в черный список. • Запись SPF отправителя является корректной. • Местный получатель является корректным. ч • Если сообщение подписано, можно проверить его подпись DKIM. • Сообщение не содержит вредоносных программ. • Сообщение не является спамом. Все эти задачи, связанные со сканированием сообщений, можно выполнить внутри агента МТА или с помощью отдельного пакета, например amavisd-new. Сканирование спама и вредоносных программ описывается в разделе 20.6. Сервер исходящей почты должен не менее хорошо контролироваться. Если в ор- ганизации используются большие списки рассылки, то резервный агент МТА может повысить общую производительность работы, изолировав проблему, связанную с пот лучателем, и решив ее отдельно. Мы предполагаем, что фильтрация и сканирование ис* ходящей почты выполняются агентом МТА во внутренней зоне. К серверам внутренней зоны относятся следующие агенты. • Транспортный агент внутренней маршрутизации, выполняющий маршрутизацию принятой почты в хранилище сообщений. • Исходная база данных LDAP, содержащая информацию о маршрутизации почты. • Агенты представления или транспортные агенты для исходящей почты. • Фильтры вирусов, спама и механизм предотвращения утечки данных (DLP — data leak prevention). Исходящая почта должна сканироваться на вирусы и спам, чтобы убедиться, что ло- кальные компьютеры не инфицированы, и ограничить распространение вредоносных программ среди других организаций. Если ваша организация обеспокоена вопросами утечки конфиденциальной или секретной информации (например, номеров кредитных карточек или карточек социального страхования), то фильтрация DLP должна быть вы- полнена во внутреннем агенте представления до того, как сообщение достигнет исходя- щего транспортного агента в более уязвимой зоне DMZ.
Глава 20. Электронная почта 801 Большинство современных систем фильтрации DLP встроено в коммерческие про- дукты для работы в сети веб и обработки электронной почты (например, ClearEmail, IronPort компании Cisco, WebSense, Content Control и так далее) и “раскручено” с по- мощью агрессивной рекламы. Некоторые из этих программ содержат механизмы для перекодировки номеров карточек социального страхования и кредитных карточек, а также слов и фраз, которые можно задать заранее. Сканирование DLP пока находится в первичном состоянии и имеет определенные юридические последствия. Следует убедить сотрудников и заключить с ними соглашение о том, что вы имеете право сканировать входящую и исходящую почту в поисках спама, вредоносных программ и конфиденци- альной информации. В конце пути, который проходит электронное сообщение, находятся пользователи, работающие во внутренней зоне и имеющие доступ как к хранилищу сообщений (для отправки входящей почты), так и к агенту представления (для посылки исходящей по- чты). Эти пользователи могут быть удаленными. В этом случае они должны использо- вать команду SMTP-AUTH, чтобы аутентифицировать себя. При необходимости почтовые серверы для входящих и исходящих сообщений можно реплицировать. Например, несколько серверов для входящих сообщений можно скрыть за блоком балансировки загрузки или можно использовать записи DNS WC, чтобы при- мерно сбалансировать загрузку. Разные клиентские машины могут направлять почту че- рез разные серверы исходящих сообщений. И наоборот, организации с небольшой загрузкой могут разумно сочетать серверы входящих и исходящих сообщений. Некоторые механизмы, такие как BATV или отража- тель Pen-pals, легче реализовать на одном сервере. BATV (bounce address tag valifation — проверка обратного адреса) — это схема, определяющая, истинным или поддельным является обратный адрес. Он не дает отражателю электронной почты отправлять со- общения по поддельным адресам. Pen-pals (часть утилиты amavisd-new) — это схема, уменьшающая вероятность того, что письмо является спамом, если его отправитель ра- нее уже отвечал на сообщения, посланные одним из ваших пользователей. Ш Обсуждение механизмов распределения файлов приведено в разделе 19.2. Большинство компьютеров вашей организации могут использовать минимальную конфигурацию агентов MSA/MTA, которые пересылают всю исходящую почту для об- работки на сервер с более сложными механизмами. Они не обязаны принимать почту из Интернета и могут использовать одну и ту же конфигурацию. Эту конфигурацию можно распространить с помощью команд rdist или rsync. Организации, использующие такие программы, как Microsoft Exchange или Lotus Notes, но не желающие подсоединять их непосредственно к Интернету, могут использо- вать схему, описанную выше, в которой программа Exchange играет роль маршрутизато- ра во внутренней зоне. Независимо от выбранной схемы организации почтовой системы, убедитесь, что ваша конфигурация агента МТА, зажси DNS MX и правила брандмауэра соответствуют одним и тем же правилам обработки почты.
802 Часть II. Работа в сети 20.5. Почтовые псевдонимы Псевдонимы позволяют системному администратору или отдельным пользователям переадресовывать почту6. Их можно применять для задания списков рассылки, для пере- сылки почты между компьютерами, а также для того, чтобы к пользователям можно было обращаться по нескольким именам. Псевдонимы обрабатываются рекурсивно, поэтому могут указывать на объекты, которые, в свою очередь, тоже являются псевдонимами. Системные администраторы часто используют роли или функциональные псевдони- мы (например, printers@example. com), чтобы направлять сообщения определенной темы именно тому пользователю, который ею сейчас занимается. Кроме того, псевдо- нимы используются для пересылки результатов ночного сканирования на вирусы и для указания администратора, отвечающего за электронную почту. Почтовые системы поддерживают несколько механизмов поддержки псевдонимов. • Отображения простых файлов, сгенерированных из файла /etc/mail/alias. • Различные маршрутные почтовые базы данных, связанные с конкретным транс- портным агентом. • Базы данных LDAP. • Другие коллективные механизмы, такие как протокол NIS. Ш Протокол LDAP описан в главе 19. Простые файлы, такие как /etc/mail/alises (см. ниже), — самый простой способ задать псевдоним в малых и средних организациях. Если вы хотите использовать кон- цепцию почтового дома (mail home) и обслуживаете крупную организацию со сложной структурой, мы рекомендуем реализовать почтовый дом, сохраняя псевдонимы на сер- вере LDAP Большинство пользовательских агентов в некоторой степени поддерживают концеп- цию псевдонимов (обычно называемых “моя группа”, “мои письма” или как-то еще). Однако пользовательский агент раскрывает такие псевдонимы еще до того, как почта достигнет агента представления или транспортного агента. Эти псевдонимы являются внутренними для пользовательского агента и не требуют поддержки от остальных ком- понентов почтовой системы. Псевдоним можно также определить в файле пересылки в рабочем каталоге каждого пользователя (~. forward). Эти псевдонимы, имеющие несколько необычную синтак- сическую структуру, применяются ко всей почте, поступающей конкретному пользова- телю. Они часто используются для пересылки почты по другому адресу или для реализа- ции автоответчика. Транспортные агенты ищут псевдонимы в глобальных файлах aliases (/etc/mail /address или /etc/aliases), а затем в файлах пересылки получателя. Псевдонимы применяются только к сообщениям, которые транспортный агент считает локальными. Формат записи в файле alises имеет следующий вид. локальное_имя: получатель!, получатель 2, ... Здесь локалъное_имя — оригинальный адрес, с которым будут сравниваться входящие сообщения, а список получателей содержит либо адреса получателей, либо другие псев- донимы. Строки, начинающиеся с отступа, считаются продолжением предыдущих строк. 6 По техническим причинам псевдонимы настраивает только системный администратор. Пользователи управляют маршрутизацией почты при помощи файла .forward, который в действи- тельности не имеет прямого отношения к псевдонимам, но мы использовали оба этих средства.
Глава 20. Электронная почта 803 С точки зрения почтовой системы, файл alises заменяет файл /etc/passwd, поэ- тому запись david: david@somewhere-else.edu не позволит локальному пользователю david вообще получать сообщения электронной почты. Следовательно, при выборе новых имен для пользователей администраторы и инструменты adduser должны проверять как файл passwd, так и файл aliases. Файл aliases всегда должен содержать псевдоним “postmaster”, перенаправляющий сообщение тому, кто обслуживает почтовую систему. Аналогично псевдоним “abuse” подходит для ситуаций, когда кто-то извне вашей организации хочет прислать вам спам или предпринимает подозрительные действия в вашей сети. Кроме того, в файле дол- жен присутствовать псевдоним для автоматических сообщений от транспортного агента; обычно этот агент называется Mailer-Daemon и часто имеет псевдоним “postmaster”. К сожалению, в настоящее время в почтовой системе происходит столько злоупотре- блений, что некоторые организации настраивают эти стандартные контактные адреса так, чтобы отбрасывать почту вообще, вместо ее пересылки индивидуальным пользова- телям. Записи вроде # Basic system aliases - these MUST be present mailer-daemon: postmaster postmaster: ”/dev/null” стали обычными. Мы не рекомендуем эту практику, поскольку люди, имеющие пробле- мы с пересылкой почты в вашу организацию, должны сообщить об этом пользователю postmaster. Мы рекомендуем использовать такие записи. # Basic system aliases - these MUST be present mailer-daemon: "/dev/null" postmaster: root Вы должны перенаправлять почту, поступающую на корневой сервер, системным администраторам или тому лицу, которое ведет ежедневные регистрационные записи. Учетные записи bin, sys, daemon, nobody и hostmaster (а также любые другие учетные за- писи псевдопользователей) должны иметь похожие псевдонимы. Помимо списков пользователей, псевдонимы могут ссылаться на следующие файлы и программы. • Файл, содержащий список адресов. • Файл, в который должны добавляться сообщения. • Программу, на вход которой должны передаваться сообщения. Два последних адресата должны вызывать подозрения с точки зрения безопасности, поскольку отправитель сообщения полностью определяет его содержание. Иметь воз- можность добавлять это содержание в файл или передавать его командам в качестве ар- гументов — значит подвергать систему опасности. Многие транспортные агенты либо не разрешают передавать сообщения таким адресатам, либо строго ограничивают список разрешенных команд и файлов. Псевдонимы могут создавать циклические ссылки. Транспортные агенты пытаются распознавать циклы, которые вызывают бесконечную циркуляцию сообщений от полу- чателя к отправителю и обратно, и возвращать ошибочные сообщения их отправителям. Для того чтобы распознать циклическую ссылку, транспортный агент может подсчи- тывать количество строк Received в заголовке сообщения и прекращать ретрансляцию,
804 Часть II. Работа в сети если это количество превышает установленный предел (обычно 25). Каждое посещение нового компьютера, на жаргоне электронной почты, называется “скачком” (“hop”). Возвращение сообщения его отправителю называется “рикошетом” (“bouncing”). Итак, типичное выражение на этом жаргоне может звучать следующим образом: “Письмо от- скакивает после 25 рикошетов”.7 Другой способ распознавания циклов заключается в добавлении заголовка Delivered-То для каждого компьютера, которому пересылается сообщение. Если транспортный агент обнаружит в этом заголовке адрес, который уже упоминался ранее, то он будет знать, что письмо “ходит по кругу”. Загрузка списков рассылки из файла Директива :include: в файле aliases (или пользовательском файле .forward) является прекрасным средством управления псевдонимами с помощью специального файла. Это отличное средство, позволяющее пользователям создавать свои собствен- ные списки рассылки. Этот файл управляется только пользователем и его можно менять без вмешательства системного администратора. Однако такой псевдоним легко может стать пособником при рассылке спама, поэтому не следует разрешать ретрансляцию со- общений, поступающих извне, на эти адреса. Если внешнему пользователю необходимо послать сообщение с использованием псевдонима, применяйте такие программы, как Mailman (см. ниже), чтобы сохранить систему в безопасности. Для создания такого списка рассылки с помощью директивы : include: системный администратор должен ввести псевдоним в глобальный файл aliases, а затем создать внешний файл и при помощи команды chown сделать его владельцем пользователя, управляющего списком рассылки. Например, файл aliases может содержать следую- щую строку. sa-book: :include:/usr/local/mail/ulsah.authors Файл ulsah. authors должен находиться в локальной файловой системе. Кроме то- го, запись в этот файл должна быть разрешена только его владельцу. Для полноты следу- ет также создать псевдоним, соответствующий владельцу списка рассылки, чтобы сооб- щения об ошибках (“рикошеты”) посылались владельцу, а не отправителю сообщения. owner-sa-book: evi О списках рассылки, а также об их взаимосвязи с файлом aliases пойдет речь чуть ниже. Направление почты в файл Если объект, на который ссылается псевдоним, — полное имя файла (заключенное в двойные кавычки при наличии специальных символов), то сообщения добавляются в ко- нец указанного файла. Сам файл должен существовать. Вот пример такого псевдонима. cron-status: /usr/local/admin/cron-status-messages Возможность посылать почту в файл или на вход программы очень полезна, но она ослабляет безопасность и потому должна быть ограничена. Приведенный синтаксис до- пустим только в файле aliases и пользовательском файле . forward (а также в файлах, 7 Мы не придерживались последовательной терминологии в этой главе, иногда называя воз- врат сообщения “рикошетом”, а иногда “ошибкой”. На самом деле мы имеем в виду, что в этом случае генерируется уведомление о состоянии доставки (DSN, представляющее собой сообщение, форматированное специальным образом). Такое уведомление обычно означает, что сообщение не было доставлено и, следовательно, возвращается отправителю.
Глава 20. Электронная почта 805 которые внедряются в них посредством директивы : include:). Имя файла не трактует- ся как адрес, поэтому почта, направленная по адресу /etc/passwd@host. domain, будет возвращена. Если ссылка на внешний файл содержится в файле aliases, то адресуемый файл либо должен быть полностью открыт для записи (что нежелательно), либо иметь уста- новленный бит смены идентификатора пользователя (SUID) и быть неисполняемым, либо принадлежать основному пользователю транспортного агента. Этот пользователь задается в файле конфигурации транспортного агента. Если же ссылка на файл содержится в файле . forward, то адресуемый файл дол- жен принадлежать и быть доступным для записи основному получателю сообще- ния. Необходимо, чтобы у этого пользователя была своя запись в файле /etc/passwd, а его интерпретатор команд был упомянут в файле /etc/shells. Для файлов, принадле- жащих пользователю root, следует задать режим доступа 4644 или 4600, т.е. установить бит SUID и отменить возможность выполнения. Направление почты в программу Благодаря псевдонимам можно организовать пересылку почты на вход заданной про- граммы. Это реализуется с помощью строки примерно следующего вида. autoftp: ’’|/usr/local/bin/ftpserver" Однако использование такого способа доставки почты создает еще более серьезные бреши в защите, чем направление почты в файл, поэтому данный механизм тоже раз- решен только для файлов aliases и . forward и для файлов, которые подключаются к ним посредством директивы : include:, и часто требует использования ограниченной оболочки (restricted shell). Примеры псевдонимов Ниже представлен ряд псевдонимов, которые могут понадобиться системному адми- нистратору. # Перенаправление на псевдозаписи bin: root daemon: root adm: root abuse: root junk: "/dev/null" root: ned # Псевдонимы пейджеров pigdog: :include:/usr/local/etc/pigdog tierlcoverage: :include:/usr/local/etc/tierlcoverage tier2coverage: :include:/usr/local/etc/tier2coverage # Соглашения системных администраторов diary: "/usr/local/admin/diary" info: "|/usr/local/bin/sendinfo” # Псевдонимы учебных групп, которые изменяются каждый семестр sa-class: real-sa-class@nag.cs.colorado.edu real-sa-class: :include:/usr/local/adm/sa-class.list
806 Часть II. Работа в сети Псевдоним sa-class имеет два уровня, чтобы файл данных, содержащий список сту- дентов, хранился только на одной машине. Псевдоним diary очень удобен для докумен- тирования работы этих странных системных администраторов, которые терпеть не могут документировать свои действия. Системные администраторы могут просто запоминать важные события, происшедшие с компьютером (обновление операционной системы, изменение аппаратного обеспечения, сбои и прочее), посылая сообщения в файл diary. Хешированная база данных псевдонимов Поскольку записи файла aliases не упорядочены, прямой поиск в данном файле был бы для программы sendmail неэффективным. По этой причине создается хеширо- ванная версия файла aliases. Это делается средствами системы Berkeley DB. Хеширо- вание значительно ускоряет поиск псевдонимов, особенно в больших файлах. Файлы, образованные из файла /etc/mail/aliases, называются aliases .db. При каждом изменении файла aliases хешированную базу данных следует перестраивать с помощью команды newaliases. Если команда newaliases вызывается в автоматиче- ском режиме, сохраняйте выводимые ею сообщения об ошибках, поскольку могут воз- никнуть проблемы с форматированием. Списки рассылки и программы для работы с ними Список рассылки — это гигантский псевдоним, при помощи которого копия каждо- го адресованного ему сообщения передается каждому члену списка. Некоторые списки рассылки содержат адреса тысяч получателей. Списки рассылки обычно объявляются в файле aliases, но формируются во внешнем файле. Существуют стандартные соглашения по присвоению имен, понятные транспорт- ным агентам и специальным программам ведения таких списков. Опытные пользователи тоже придерживаются их. Эти соглашения иллюстрируются следующими примерами. mylist: :include:/etc/mail/include/mylist owner-mylist: mylist-request mylist-request: evi owner-owner: postmaster В данном случае mylist — это имя списка рассылки; в файле /etc/mail/include/ mylist содержится список его членов. Сообщения о рикошетах посылаются его владель- цу (пользователю evi). Косвенная адресация “владелец—запрос—пользователь” удоб- на, так как адрес владельца (mylist-request) указывается в заголовке “Return-Path” каждого сообщения, посылаемого в список рассылки. Выражение “mylist-request” — это более подходящее содержимое заголовка, чем настоящее имя владельца. Сообщения об ошибках, возникающие при отправке писем псевдониму owner-mylist (на самом деле это пользователь evi), направляются псевдониму owner-owner. Когда используется общесистемный файл псевдонимов, необходимо ввести еще один уровень косвенной адресации, связав псевдоним mylist с адресом реальное_имя_ списка@главный_компьютер, чтобы файл, содержащий список членов, существовал только в одном месте. Программы для работы со списками рассылки Существует два пакета — Mailman и Sympa,— которые автоматизируют работу со спис- ками рассылки. Они лучшие в своем роде. Эти пакеты обычно позволяют пользователям
Глава 20. Электронная почта 807 получать информацию о списке и легко оформлять подписку или отказ от нее. Они об- легчают управление списком, а также выполняют фильтрацию спама и вирусов. Каждый пакет предоставляет возможность использования разных языков (обычных, не языков программирования). И пакет Mailman (gnu. org/sof tware/mailman), написанный на языке программи- рования Python, и пакет Sympa (sympa. org), написанный на языке программирования Perl, имеют веб-интерфейс, позволяющий пользователям оформлять подписку и отказ от нее, не прибегая к помощи менеджера списка. 20.6. Сканирование содержимого: спам И ВРЕДОНОСНЫЕ ПРОГРАММЫ В этом разделе рассматриваются общие вопросы, касающиеся борьбы со спамом и вирусами, включая использование внешнего антивирусного инструмента amavis-new. Детали, относящиеся к конкретным транспортным агентам, описываются в соответству- ющих разделах. Прежде чем приступать к сканированию содержимого писем, следует ответить на сле- дующие вопросы. • Где производить сканирование: в зоне DMZ или во внутренней сети? • Когда производить сканирование: при первом соединении или после получения сообщения? • В каком порядке производить сканирование? • Что делать с обнаруженными вирусами и спамом? Входящая корреспонденция обычно сканируется на концентраторе поступающих со- общений в зоне DMZ. В идеале ее следовало бы сканировать оперативно, чтобы вред- ные сообщения можно было отбрасывать, пока исходное соединение SMTP остается разомкнутым. Исходящую почту можно сканировать на вирусы и спам на внутреннем специальном компьютере, выполняющем маршрутизацию всех сообщений. Проверка корректности сообщения должна состоять из следующих действий. • Проверяем, соответствует ли реализация протокола SMTP, по которому работает отправитель, документации RFC. • Проверяем, существуют ли локальные получатели. • Сравниваем адрес с черным списком IP-адресов. • Проверяем репутацию. • Верифицируем подпись DKIM и запись SPF. • Фильтруем спам. • Фильтруем вирусы. Многие роботы для рассылки спама неточно следуют протоколу SMTP; они обыч- но посылают сообщение еще до того, как получат ответ EHLO. Небольшая задержка на вашем сервере может выявить эту “несдержанность”. Эту информацию можно исполь- зовать для того, чтобы либо разорвать соединение, либо увеличить рейтинг спама для полученных сообщений. Проверка существования локальных получателей имеет смысл, если при дальнейшей проверке вы не искажаете их адреса. Ранняя проверка минимизирует работу почтового
808 Часть II. Работа в сети сервера с недоставленной почтой. Кроме того, она исключает много “беспорядочного” спама. Однако она открывает доступ в ваше адресное пространство для зонда отправителя. Порядок остальных проверок, в основном, зависит от связанных с ними затрат. Быстрые и простые проверки следует выполнять до более продолжительных и сложных, чтобы в среднем некорректные сообщения отфильтровывались на как можно более ран- них стадиях. Что делать с обнаруженным некорректным сообщением? Отклонить его, выбросить в мусорную корзину, отправить в карантин, заархивировать? Если вы тестируете настрой- ки, мы рекомендуем отправлять их в карантин и архивировать. Если же система уже на- строена так, как надо, отклоняйте или выбрасывайте в корзину все письма с вирусами, а также отклоняйте или архивируйте спам в соответствии с установленными вами пра- вилами. Удаляйте заархивированный спам, срок давности которого превышает месяц; за это время пользователи смогут разобраться с письмами, которые были распознаны как спам по ошибке. Спам Спам — это жаргонное название макулатурной почты, которую также называют не- прошеной коммерческой электронной почтой (unsolicited commercial email — UCE). Она стала серьезной проблемой, потому что, несмотря на невысокий процент отвечающих, стоимость ответа в расчете на доллар высока. (Список, состоящий из 30 миллионов адресов электронной почты, стоит около 40 долл.) Если бы это не было выгодно для спамеров, то проблема не достигла бы таких масштабов. Исследования показывают, что" 95—98% всех почтовых отправлений являются спамом. Самые свежие данные на эту тему можно найти на специализированных сайтах, например spamlinks. net. Для борьбы со спамом рекомендуем использовать превентивные меры и открытые черные списки, доступные для вас. Хорошим источником таких списков является сайт*.. zen. spamhaus. org. Можно также перенаправлять входящую корреспонденцию аут-л сорсинговым компаниям по борьбе со спамом, таким как Postini (которая стала частью', компании Google) или Message Labs (которая в настоящее время является частью кок(Ц< пании Symantec). Однако это может повлечь за собой снижение производительности/: уровня конфиденциальности и безопасности. ; Посоветуйте своим пользователям просто удалять спам, который они получают. ' Многие сообщения, являющиеся спамом, содержат инструкции о том, как удалить свой адрес из списка рассылки. Если последовать этим инструкциям, спамеры могут действи- тельно удалить ваш адрес из текущего списка, но они немедленно добавят его в несколь- ко других списков с аннотацией “доставлено реальному человеку, прочитавшему это со- общение”. С этого момента ваш электронный адрес будет стоить еще дороже. Люди, продающие электронные адреса спамерам, для сбора адресов используют специальный вид атаки с помощью словаря. Начиная со списка распространенных фа- милий, сканирующие программы добавляют к ним разные инициалы в надежде обна- ружить реальный электронный адрес. Для того чтобы проверить этот адрес, программа связывается с почтовыми серверами, принадлежащими, например, пятидесяти крупней- шим интернет-провайдерам, и применяет команды VRFY, EXPN или RCPT к милли- ардам адресов. Транспортные агенты могут блокировать команды VRFY и EXPN про- токола SMTP, но не команду RCPT. Такие действия загружают ваш почтовый сервер и мешают быстро доставлять реальные почтовые сообщений. Для защиты от подобного рода атак транспортные агенты могут ограничивать количество выполнений команды RCPT, поступающих из одного источника.
Глава 20. Электронная почта 809 Подделки Подделать электронное письмо очень просто; многие пользовательские агенты по- зволяют заполнять поле адреса отправителя чем угодно. Транспортные агенты могут использовать механизм аутентификацию по протоколу SMTP между локальными сер- верами, но они не могут этого сделать в масштабе всего Интернета. Некоторые транс- портные агенты добавляют предупреждающие заголовки в исходящие локальные со- общения, которые могут быть подделаны. В электронном сообщении личность отправителя может быть фальсифицирована. Будьте очень осторожны, если в вашей организации электронные сообщения исполь- зуются в качестве средства авторизации, например, ключей от дверей, карточек доступа и денег. Вы должны предупредить об этом администраторов и полагаться на то, что они просматривают подозрительные письма, поступающие от авторитетных отправителей, и проверяют корректность сообщений. Следует быть еще более осторожным, если в сооб- щении предлагается предоставить необычной персоне непропорциональные привилегии. Конфиденциальность сообщений 03 Более подробно пакеты PGP и GPG описаны в разделе 22.10. Если вы не используете какой-либо внешний пакет для шифрования, например Pretty Good Privacy (PGP), его клон для GNU (GPG) или S/MIME, то о конфиденци- альности сообщений говорить не приходится. По умолчанию вся почта посылается не- зашифрованной. Шифрование требует специальной поддержки со стороны почтовых пользовательских агентов. Если ваши пользователи хотят сохранить свои сообщения в тайне, они должны применять собственное шифрование. Пакеты S/MIME и PGP описаны в документах RFC, причем стандартом считается S/MIME. Однако мы предпочитаем пакеты PGP и GPG; они являются более доступны- ми. Пакет PGP был разработан выдающимся криптографом Филом Циммерманом (Phil Zimmermann), которому мы доверяем. Эти стандарты образуют основу для обеспечения конфиденциальности электронной почты, аутентификации, проверки целостности сообщений и гарантии сохранения ав- торства. Однако анализ трафика по-прежнему возможен, потому что заголовки и кон- верты пересылаются открытым текстом. Фильтрация спама Проблема спама привела к борьбе между борцами со спамом, с одной стороны, и спа- мерами, с другой, причем обе стороны вооружены сложными технологиями. В настоя- щее время для текущего контроля используются следующие показатели. • “Серые” списки: временная отсрочка (форма проверки на соответствие докумен- там RFC). • SpamAssassin: эвристический инструмент для распознавания спама на основе срав- нения с образцами. • “Черные” списки: списки известных спамеров; часто на основе системы DNS. • “Белые” списки: списки разрешенных отправителей на основе системы DNS, что- бы избежать ложного распознавания спама. • Почтовые фильтры, сканирующие заголовки и тело сообщения.
810 Часть II. Работа в сети • Записи SPF и DKIM/ADSP для идентификации доменов отправителей и почтовых правил. • Системы amavisd-new и MailScanner: антивирусные и антиспамовские фильтрую- щие системы. Боле подробно эти инструменты будут рассмотрены немного позже. Когда следует фильтровать Это фундаментальный вопрос, и на него нет однозначного ответа. Основная пробле- ма заключается в том, следует ли выполнять фильтрацию одновременно с выполнением транзакции SMTP при соединении с отправителем или уже после получения сообще- ния. Эти схемы имеют как преимущества, так и недостатки. Преимущества оперативной фильтрации (до размещения в очереди почтовой системы) заключаются в следующем. • Вы можете отказаться от приема почты и не принимать на себя ответственность за ее доставку. (В некоторых странах это даже является юридическим требованием!) • Отправитель гарантированно уведомляется о причине, по которой его сообщение не могло быть доставлено. Вы не обязаны доверять отправителю сообщения; вы просто формулируете причину отказа и поручаете исходному почтовому серверу сообщить об этом отправителю. Это более аккуратный и надежный способ, чем прием почты и ее отправка обратно. Однако у схемы обработки почты после ее размещения в очереди почтовой системы тоже есть свои преимущества. • Производительность почтового сервера, имеющего выход в Интернет, не страда- ет от интенсивной проверки спама. Это особенно ценно, когда одновременно со спамом почтовый сервер загружен полезными сообщениями. • Фильтрация после размещения сообщения в очереди почтовой системы проще и надежнее. На первый взгляд, может показаться, что следует предпочесть фильтрацию после раз- мещения сообщения в очереди почтовой системы. Она не снижает производительность работы почтового сервера и легче управляется системными администраторами. Однако обратная отправка сообщения, генерируемая системой фильтрации после размещения в очереди почтовой системы, сама становится разновидностью спама, если адрес отправи- теля был подделан, как это обычно бывает при рассылке спама. Эта проблема называется “обратной рассылкой спама” (“backscatter spam”). Для борьбы с ней была изобретена система BATV (bounce address tag validation — проверка обратного адреса). Тем не менее проблема остается нерешенной. Система может опреде- лить корректность обратного адреса (адрес отправителя на конверте), если отправитель сообщения подписал адрес на конверте. Фильтры системы BATV могут помочь сайтам отправлять сообщения только по корректным обратным адресам. Разумным компромиссом было бы выполнение фильтрации вирусов и спама до раз- мещения сообщений в очереди почтовой системы, а затем выполнение дополнительного сканирования после размещения сообщений в очереди. "Серые" списки/DCC “Серые” списки — это схема, в которой почтовый сервер конфигурируется так, что- бы при установлении всех соединений с новыми, нераспознанными, IP-адресами воз-
Глава 20. Электронная почта 811 никала задержка, например, от 15 минут до часа. Сервер отказывается принимать почту, отправляя в ответ сообщение “повторите попытку позже”. Реальные транспортные аген- ты, посылающие реальную почту реальных пользователей, подождут и затем повторят попытку; роботы для рассылки спама перейдут к следующему адресу в списке и не будут повторять попытку. “Серые” списки были реализованы для компьютеров, на которых работают транс- портные агенты; подробности можно найти на сайте greylisting.org. Они особенно эффективны в качестве компонентов системы борьбы со спамом под названием DCC (Distributed Checksum Clearinghouses; см. rhyolite.com/dcc), распознающей “массо- вость” сообщения путем вычисления нечеткой контрольной суммы и проверки, сколько почтовых серверов имеют ту же самую контрольную сумму. Эта система распознает не спам как таковой, а массовые рассылки. Если вы поместите в белый список всю массо- вую рассылку, которую хотите получать (например, списки рассылки, принадлежащие вам), то остальные распознанные сообщения образуют непрошеную почту, т.е. спам. Система DCC также может работать с серыми списками; она используется как фильтр и может заносить в серые списки или отвергать письма до их постановки в очередь по- чтовой системы во время сеанса SMTP. Поскольку система DCC не выполняет сравне- ние с образцами, как инструменты типа SpamAssassin, ее невозможно обмануть, добав- ляя случайные слова в свои сообщения, как делают спамеры, пытаясь обмануть системы, сравнивающие образцы. Эффективность серых списков снизилась (с более чем 97% до 90%), когда роботы для рассылки спама восприняли их всерьез и привели в порядок свою реализацию про- токола SMTP. Однако они по-прежнему остаются эффективными, если используются в сочетании с черными списками, потому что система автоматической поддержки черных списков часто управляется сайтами, специализирующимися на борьбе со спамом, пока не истечет период для повторной попытки. Программа SpamAssassin Программа SpamAssassin (spamassassin. apache. org) — это открытый модуль на языке Perl, написанный Хабибом Диу (Habeeb Dihu) и поддержанный Яном Джастманом (Ian Justman). Он прекрасно справляется с распознаванием спама. Эту программу можно вызвать с помощью фильтра и использовать во многих системах для борьбы со спамом. Для распознавания спама программа SpamAssassin использует множество эмпири- ческих правил. Эти правила постоянно обновляются, но в настоящее время они под- держиваются все менее активно. Программа SpamAssassin перехватывает практически весь спам, но иногда принимает “ложноположительные” решения, особенно если она настроена с включенной опцией “авто-Байес”. При настройке программы SpamAssassin и выборе ее параметров внимательно изучите накопленный спам. Программа SpamAssassin использует систему подсчета баллов для оценки сообщений. Если сообщение набирает слишком много баллов, количество которых зависит как от настроек сайта, так и от пользователя, то программа SpamAssassin помечает сообщение как спам. После этого подозрительные сообщения можно отправить в папку для спама, либо запустив на сервере фильтр, например фильтр sieve фирмы Cyrus, либо соответ- ствующим образом настроив своего пользовательского агента. Программу SpamAssassin можно даже обучить распознавать хорошие и плохие сообщения (“ham” и “spam”), под- ключив байесовский фильтр.
812 Часть II. Работа в сети Черные списки Ш Более подробная информация о системе DNS приведена в главе 17. Несколько организаций (например, spamhaus.org) составляют списки спамеров и публикуют их в системе DNS. Транспортные агенты можно настроить так, чтобы они проверяли эти черные списки (известные также как Realtime Black Lists, или RBL) и от- вергали почту, приходящую с указанных адресов. Они также составляют списки открытых почтовых станций, т.е. почтовых серверов, предназначенных для пересылки сообщений из Интернета пользователю, находящему- ся вне локальной сети, без аутентификации сервера-отправителя. Спамеры используют открытые почтовые станции для маскировки источников сообщений и перепоручения рассылки огромного количества сообщений другим сайтам. Белые списки Белые списки — это репутационные списки, основанные на системе DNS, которые, по существу, являются противоположностью черных списков, описанных выше. Они ис- пользуются для сокращения количества “ложноположительных” ответов, генерируемых фильтрами спама. Один из белых списков, поддерживаемых на сайте dnswl. org, оце- нивает домены следующим образом. • Высокий рейтинг — никогда не посылает спама. • Средний рейтинг — редко посылает спам, исправляет проблемы, связанные со спамом, если они возникают. • Низкий рейтинг — иногда посылает спам, медленно исправляет проблемы. • Нет рейтинга — законный почтовый сервер, но может рассылать спам. Белые списки рекомендуют пропускать часть обычной процедуры сканирования по- чты с учетом рейтинга отправителя в белом списке. • Не искать в черном и сером списках домены, имеющие рейтинг. • Не выполнять фильтрацию спама для доменов с высоким или средним рейтингом. • Никогда не игнорировать сканирование на вирусы. Веб-сайт dnswl. org содержит подробную информацию о том, как использовать бе- лый список для каждого транспортного агента, рассмотренного в нашей книге. Анализ выполняется на основе системы DNS, как и для черных списков. Например, если вы хотите узнать рейтинг IP-адреса 1.2.3.4, должны выполнить DNS-запрос для псевдоузла 4.3.2.1. list. dnswl. org. В ответ вы получите IP-адрес в форме 127.0. х.у, где х — число, идентифицирующее общую категорию бизнеса для данного домена (например, финансовые услуги или маркетинг электронной почты), а у — рейтинг сайта в белом списке по шкале 0—3 (0 — нет, 3 — высокий). Для ускорения работы белых списков можно загрузить данные для полного белого списка и ежедневно выполнять команду rsync; каждый час или каждые полчаса это де- лать не следует. Можно также оценить рейтинг своей организации на веб-сайте dnswl. org. Ниже приводится типичный вывод для сайта caida. org, не рассылающего спам. IP range 192.172.226.32/32 Domain/Ноstname jungle.caida.org Score med
Глава 20. Электронная почта 813 IP range 192.172.226.36/32 Domain/Hostname fido.caida.org Score med IP range 192.172.226.78/32 Domain/Hostname rommie.caida.org Score med Домен hotmail. com порождает около десяти страниц, содержащих записи, которые имеют рейтинг “нет”. Фильтрация почты Разработчики программы sendmail создали прикладной интерфейс, позволяющий программам сторонних производителей фильтровать заголовки и содержимое почтовых сообщений так, будто они обрабатываются транспортным агентом. Эти почтовые фильтры используются для борьбы со спамом, распознавания виру- сов, статистического анализа, шифрования и многих других целей. Почтовые филь- тры поддерживаются как утилитой sendmail, так и транспортными агентами сервера Postfix; вместо них сервер Exim использует обычные фильтры и списки контроля досту- па. Каталог доступных почтовых фильтров, сопровождаемый рейтингами пользователей, лицензионной информацией и статистическими показателями о загрузках и обновлени- ях, находится на сайте milter. org. Транспортные агенты применяют почтовые фильтры к входящим сообщениям, пока те еще остаются на связи с сайтом-отправителем. Почтовые фильтры могут распознать профиль вируса или спама и сообщить об этом транспортному агенту, игнорировать со- общение, создать записи в журнале или предпринять другое действие, которое вы со- чтете приемлемым. Почтовые фильтры имеют доступ и к метаданным, и к содержимому сообщения. Почтовые фильтры представляют собой потенциально мощные инструменты как для борьбы со спамом и вирусами, так и с попытками нарушить конфиденциальность пере- писки. Когда менеджеры узнают, что по электронной почте из их организации проис- ходит утечка конфиденциальной информации, возникает щекотливая ситуация, потому что сотрудники полагают, будто их сообщения должны считаться приватными. В согла- шениях с сотрудниками следует четко указывать, что вы имеете право выполнять любое сканирование их электронных сообщений. Технология SPF и спецификации Sender ID Лучший способ борьбы со спамом — остановить работу его источника. Это звучит легко и просто, но в реальной жизни это практически невозможно сделать. Структура Интернета затрудняет отслеживание реального источника сообщения и проверку его ау- тентичности. Обществу необходим надежный способ верификации отправителя и его намерений. Для решения этой проблемы было сделано много предложений, но технология SPF и спецификации Sender ID оказались наиболее удачными. Технология SPF (Sender Policy Framework — инфраструктура политики отправителей) описана организацией IETF в документе RFC4408. Протокол SPF определяет набор DNS-записей (см. раздел 17.8), с помощью которых организация может указать свои официальные почтовые серверы для исходящей корреспонденции. Транспортные агенты могут отвергать сообщения, исходящие из домена организации, если они не отправлены из указанных источников.
814 Часть II. Работа в сети Разумеется, эта система работает хорошо только в том случае, когда большинство орга- низаций публикует записи SPF. Для проверки записей SPF разработано несколько по- чтовых фильтров. Спецификации Sender ID и технология SPF практически идентичны по форме и функ- циям. Однако ключевые части технологии Sender ID запатентованы компанией Microsoft, следовательно, являются предметом полемики. В момент написания книги компания Microsoft все еще пыталась склонить индустрию к принятию своих запатентованных стандартов. Организация IETF решила не делать однозначный выбор и опубликовала документы RFC4406 (о спецификациях Sender ID) и RFC4408 (о технологии SPF). Обе технологии названы экспериментальными, так что рынок сам должен решить, какая из них будет выбрана в качестве стандартной. Отложенные сообщения не соответствуют ни спецификациям Sender ID, ни про- токолу SPF, что является серьезным недостатком обеих систем. Получатель проверяет запись SPF об оригинальном отправителе, чтобы открыть его список авторизованных серверов. Однако эти адреса не соответствуют компьютерам, выполняющим задержку писем и задействованным в транспортировке данного сообщения. Следует быть осто- рожным, принимая решения на основе отказов системы SPF. Системы DomainKeys, DKIM и ADSP Ш Более подробно технология DKIM описана в главе 17. DKIM (DomainKeys Identified Mail — почта, идентифицированная доменными клю- чами) — это система криптографических подписей для сообщений электронной почты. Она позволяет получателю верифицировать не только личность отправителя, но и тот факт, что сообщение не было подделано по пути. Система использует DNS-записи для публикации доменных криптографических ключей и правил подписи сообщений. Оригинальная система DomainKeys, предшественница системы DKIM, обладавшая аналогичными функциональными возможностями, продвигалась компанией Yahoo!. Она по-прежнему используется. Системы DKIM и DomainKeys не конфликтуют, и ор- ганизации могут верифицировать подписи обоих типов. И все же для подписи новых сообщений лучше использовать систему DKIM. Записи ADSP DNS (Author Domain Signing Practice) позволяют отправителю объяв- лять свои правила подписи для каждого поддомена. Например, банк может объявить, что он подписывает всю почту, исходящую с сервера transactions .mybank. com. Лю- бой адресат, получивший неподписанную почту (или почту, подпись на которой не была верифицирована), которая утверждает, что отправлена с указанного домена, должен либо отвергнуть ее, либо отправить в карантин. Однако сайт marketing.mybank.com может вообще не подписывать свои сообщения. Некоторое время система ADSP называлась SSP (sender signing policy — политика подписи отправителя), так что ее можно было рассматривать как разновидность об- работки записей DNS ТХТ. Технология DKIM поддерживалась всеми транспортными агентами, описанными в этой главе, но ее развертывание в реальном мире по неизвест- ным причинам оказалось медленным. Даже если вы не хотите отвергать сообщения на основе верификации по технологи- ям DKIM или SPF, все еще можете использовать информацию, повышающую рейтинг спама, или изменять свою реакцию в соответствии с репутацией отправителя.
Глава 20. Электронная почта 815 Функциональные возможности транспортных агентов по борьбе со спамом Каждый транспортный агент имеет настройки конфигурации, которые облегчают борьбу со спамом. Например, некоторые транспортные агенты могут распознать, что их просят выполнить миллиарды операций RCPT, и ввести 15-секундную задержку между выполнением команд RCPT для соединений, которые требуют их выполнить. Мы рассмотрим настройки конфигурации, предназначенные для борьбы со спа- мом, вместе с остальными настройками транспортных агентов. Для утилиты sendmail см. раздел 20.8, для сервера Exim — раздел 20.13, а для сервера Postfix — раздел 20.15. Технологии DKIM и ADSP более подробно обсуждаются в разделах 20.16 и 17.8. Программа Mailscanner Эта программа (mailscanner. info), написанная Джулианом Филдом (Julian Field), представляет собой активно используемый, гибкий и открытый сканер концентраторов почты, который распознает спам, вирусы и попытки фишинга. Он написан на языке Perl и использует внешние антивирусные программы (в частности, ClamAV и 25 других инструментов), а также программное обеспечение для борьбы со спамом (SpamAssassin). Его компонент ScamNailer (scamnailer. info), предназначенный для предотвращения фишинга, является независимым и может использоваться самостоятельно. Системный администратор может настроить конфигурацию программы MailScanner на уровне пользователей, доменов и IP-адресов. Программа MailScanner — это не почтовый фильтр, а самостоятельная программа, ра- ботающая с очередями сообщений, принадлежащих транспортным агентам. Например, можно конфигурировать транспортный агент в своей зоне DMZ, чтобы принимать со- общения (после их проверки с помощью почтовых фильтров, черных списков и так да- лее, но до размещения в очереди), а затем размещать их в очереди входящих сообщений. Программа MailScanner считывает сообщения из очереди, проверяет их на спам, вирусы и фишинг, а затем передает в отдельную очередь исходящих сообщений. Другой экзем- пляр транспортного агента может обработать очередь входящих сообщений и доставить их адресату. Недостатком этой системы является тот факт, что почта, отвергнутая программой MailScanner, создает рикошет сообщений и, следовательно, может порождать обратную рассылку спама. Несмотря на то что программа MailScanner является свободной распространяемой, существует ее коммерческая версия. Кроме того, она поддерживает список рассылки для активных пользователей и выделенный канал IRC, который отслеживается круглосуточ- но. Она хорошо документирована как в Интернете, так и в книге MailScanner: A User Guide and Training Manual, написанной Джулианом Филдом. Файл конфигурации про- граммы MailScanner содержит так много комментариев, что примитивы конфигурации трудно распознать; если вы эксперт, то, возможно, захотите удалить некоторые из этих формулировок. Статистические показатели, определяемые программой MailScanner, можно получить от веб-интерфейса Mail-Watch. Графическое изображение данных можно создать с по- мощью программного обеспечения MRTG (рис. 20.3). Обратите внимание на огром- ный пик, возникший 19 сентября. Вероятно, в этот день имела место атака определен- ного типа.
816 Часть II. Работа в сети Total Mail Processed by Date □ Volume (Gb) El Mail □ Spam Puc. 20.3. График почтового трафика, созданный с помощью программы MRTG Интерфейс amavisd-new Программа amavisd-new — это интерфейс между транспортными агентами и скане- рами спама, такими как ClamAV и SpamAssassin. Изначально он был основан на сканере AMaViS (A Mail Virus Scanner), но в настоящее время имеет с оригиналом мало обще* го. Он написан на языке Perl Марком Мартинесом (Mark Martinec); веб-сайт: i j s. si/ software/amavisd. Следуя соглашениям с организациями, поддерживающими эту про* грамму, мы называем весь пакет (полужирным шрифтом) amavisd-new, хотя сам демон называется amavisd. * Программа amavisd-new взаимодействует с транспортным агентом через локальный ; домен или сокет TCP. Она может фильтровать письма либо до их размещения в очереди (с помощью почтового фильтра, до того как транспортный агент получит сообщение), либо после приема сообщения, но до доставки его получателю. Зачем нужна еще одна программа, если транспортный агент и так выполняет ска* нирование с помощью почтовых фильтров и аналогичных инструментов? Ответ заклюй чается в том, что конфигурацию всех фильтров удобно хранить в одном месте. Кроме ' того, если весь процесс фильтрации координируется одним интерфейсом, то легче от- ражать новую атаку или включать в линию обороны новый инструмент. Другое преиму- щество заключается в том, что сканер может работать на отдельном компьютере и тем самым облегчать работу по приему и обработке сообщений на загруженном сервере, ‘ Компромиссом является следующая схема: простые и быстрые проверки выполнять , с омощью транспортного агента, а более сложные и продолжительные — с помощью инструмента типа amavisd. Программа amavisd может взаимодействовать со многими пакетами, предназначен- ными для борьбы со спамом и вирусами. Это довольно мощный инструмент, хотя и об- ладает некоторыми недостатками. • Документация немного разбросана, и не очень понятно, что является современ- ным вариантом, а что устаревшим и не действующим. • Сложная конфигурация; содержит множество параметров и их слабо различимых вариантов.
Глава 20. Электронная почта 817 Как работает программа amavisd Программа amavisd занимает промежуточное место между транспортными аген- тами, хранящими сообщение, подлежащее проверке, и программным обеспечением, которое будет выполнять эту проверку. Программа amavisd прослушивает соединения с транспортным агентом на порту 10 024, отдает протоколам SMTP или LMTP приказ принять сообщения и возвращает ответы транспортному агенту на порту 10 025. Кроме того, если она и транспортный агент выполняются на одном и том же компьютере, эта программа использует сокет в локальном домене. Если программа amavisd передает отсканированное сообщение и результат скани- рования обратно транспортному агенту, от которого она получила данное сообщение, то можно выполнить фильтрацию до размещения сообщения в очереди и отвергнуть его во время первоначального сеанса SMTP, выполняемого транспортным агентом. Если же вместо этого программа amavisd размещает сообщения в очереди внутреннего концен- тратора почты, то фильтрация производится автономно и сообщения могут быть отвер- гнуты или отправлены обратно. CQ Информация о протоколе SNMP приведена в главе 21. Пакет amavisd старается не потерять сообщения и не пропустить их без проверки, учитывает пожелания получателей и следует стандартам, описанным в разных докумен- тах RFC, посвященных электронной почте. Несмотря на то что программа amavisd на- писана на языке Perl, ее производительность довольно высока. Она сканирует каждое сообщение только один раз, независимо от того, сколько получателей с ним связано. Процесс сканирования выполняется довольно интенсивно, инструменты, входящие в дистрибутивный набор, могут отслеживать процесс фильтрации с помощью протокола SNMP. Программу amavisd не обязательно запускать как корневую; у нее хорошая ре- путация в области безопасности. Инсталляция пакета amavisd Загрузите самую свежую версию программы с сайта Download the latest ijs. si/software/amavisd или выполните команду grab в пакете Linux и пройдите эта- пы, описанные в файле INSTALL, расположенном на вершине иерархии дистрибутива. Домашняя страница проекта имеет ссылки на заранее скомпилированные пакеты. Программа amavisd должна запускаться как пользователь и группа vscan или amavis, поэтому проще всего создать этого пользователя и группу, а затем зарегистрироваться как vscan, чтобы получить программное обеспечение и инсталлировать его. Если после инсталляции программа amavisd работает правильно, измените регистрационное имя на /bin/false или на имя другой ограниченной оболочки. Файл amavisd. conf-default содержит список всех возможных параметров конфи- гурации и их значения, заданные по умолчанию. Файл amavisd. conf-sample содержит типичный пример конфигурации. Кроме того, файл amavisd. conf представляет собой минимальную стартовую площадку (хотя и содержит более 750 строк!) с комментариями к некоторым переменным, которые необходимо изменить. Языком конфигурации явля- ется Perl. Базовая конфигурация пакета amavisd Рассмотрим базовую конфигурацию пакета amavisd для узла mail. example. com, где транспортный агент и пакет amavisd выполняются на одном и том же компьютере, а Для взаимодействия используют протоколы TCP и SMTP.
818 Часть II. Работа в сети use strict; $myhostname = 'mail.example.com.'; @local_domains_maps = ([’.example.com']); @mynetworks = qw(127.О.0.0/8 192.168.0.0/16); $forward_method = 'smtp:[127.0.0.1]:10025'; $enable_db =1; $enable_global_cache = 1; $max_servers = 5; $D0_SYSLOG = 1; $SYSLOG_LEVEL = "mail.info"; $bypass_decode_parts = 1; $final_viruS—destiny = D_REJECT; $final_banned—destiny = D_REJECT; $final—bad—header_destiny = D_PASS; $log_recip_tempi = undef; @av_scanners = ( ['ClamAV-clamd', \&ask_daemon, ["CONTSCAN {}\n", "/var/run/clamav/clamd"], qr/\bOK$/m, qr/\bF0UND$/m, qr/A.*?: (?!Infected Archive) (.*) F0UND$/m ], ); 1; В массиве стандартных конфигураций av scanners перечислены более 40 про- грамм для борьбы со спамом и вирусами; в этом фрагменте показана только программа ClamAV. Выражение 1; в конце файла является специфичным для языка Perl. Оно га- рантирует, что сам файл в любом контексте языка Perl при попытке чтения будет интер- претироваться как истинный. Инструменты amavisd-new Дистрибутивный пакет amavisd-new содержит два полезных инструмента: amavisd- nanny и amavisd-agent. Инструмент amavisd-nanny следит за состоянием пакета amavisd, а программа amavisd-agent обеспечивает доступ в реальном времени к счет- чикам и шкалам, похожим на те, которые используются в протоколе SNMP. Обе про- граммы требуют наличия библиотеки Berkeley DB library. Программа amavisd-nanny демонстрирует состояние всех процессов пакета amavisd, какие сообщения они в данный момент обрабатывают, что именно делают и как долго будут выполняться. Запустив эту программу с флагом -h, можно увидеть со- общение о ее использовании и список состояний, в которых может находиться пакет amavisd. Рассмотрим наиболее интересные состояния: S — фильтрация спама, V — ска- нирование вирусов и точка — простой. Буква, обозначающая состояние, выводится на экран ежесекундно вместе с двоеточием после каждых десяти букв, чтобы их легче было считать. Программу amavisd-nanny следует запускать иногда, просто чтобы увидеть, как система работает. Рассмотрим пример. $ sudo amavisd-nanny process-id task-id elapsed in elapsed-bar (dots indicate idle) or state idle or busy PID 01422: 0:09:51 .........:.........:.........:..... PID 26784: 26784-18 0:00:01
Глава 20. Электронная почта 819 PID 01422: 0:09:53 ........:.........:..........:..... PID 26784: 0:00:03 Программа amavisd-agent — это агент, похожий на агентов в протоколе SNMP, который собирает статистические данные от всех выполняющихся демонов и может выводить такую информацию, как количество обработанных сообщений, время обра- ботки каждого сообщения, доля содержащихся вирусов, наиболее распространенные вирусы и т.д. Приведем усеченный пример. $ sudo amavisd-agent entropy STR ipwvEIo5VA sysContact STR sysDescr STR amavisd-new-2.6.1 (20080629) sysLocation STR sysObjectID OID 1.3.6.1.4.1.15312.2.1 sysServices INT 64 sysUpTime Timeticks 111090596 (12 days, 20:35:05.96) ContentVirusMsgs 1274 InMsgs 247458 InMsgsRecips 297574 InMsgsSize ' 28728MB TimeElapsedTotal 62518s virus.byname.W32/MyDoom-N 9 virus.byname.Troj/BredoZp-H 8 3/h 0.5% (InMsgs)... 515/h 100.0% (InMsgs)... 619/h 120.3% (InMsgs)... 60MB/h 100.0% (InMsgsSize)... 0.253s/msg (InMsgs)... 0/h 15.5% (ContentVirusM... 0/h 13.8% (ContentVirusM... Первый столбец чисел — это количество элементов, за ним следует вычисленный уровень и доля по отношению к основному значению, выраженная в процентах. В данном случае почтовый сервер обработал 247 458 сообщений за 12 дней со сред- ним уровнем 1,2 получателей на сообщение (показатель InMsgsRecips равен 120,3% входящих сообщений (InMsgs)). Сервер обнаружил 1274 вируса, которые составили око- ло 0,5% всего почтового трафика. Сканеры в среднем потребовали 0,253 секунды на об- работку одного почтового сообщения. Наиболее часто встречающимися вирусами были MyDoom-N и BredoZp-H. Проверка эффективности сканирования с помощью транспортных агентов Проверяя, правильно ли ваши транспортные агенты идентифицируют вирусы и дру- гое вредоносное программное обеспечение, вы должны использовать реальные инфици- рованные сообщения, чтобы убедиться, что ваши меры оказались эффективными. Это не следует делать в промышленном окружении, где события могут выйти из-под кон- троля. Организуйте безопасную, физически отдельную тестовую лабораторию, не соеди- ненную с промышленной сетью. Исследователи антивирусных программ скомпилировали небольшой тестовый файл и предоставили его организации EICAR (European Expert Group for IT-Security (eicar. org/anti_virus_test_file .htm)) для распространения. На самом деле это не ви- рус, о последовательность байтов, которую антивирусные программы добавляют в свои базы данных как вирус (обычно под описательным именем, например, EICAR-AV-Test). Тестовый файл можно свободно пересылать по электронной почте, распространять сре- ди коллег и воспроизводить, не беспокоясь о вирусной опасности. Группа EICAR пре- доставляет несколько вариантов этого файла, так что его можно даже протестировать в архивах, например ZIP.
820 Часть II. Работа в сети Текст GTUBE, обобщенный текст для массива непрошеной почты, похож на преды- дущий файл, но предназначен для тестирования фильтров спама. Он доступен на сайте spamassassin.apache.org/gtube. Если вы тестируете и отлаживаете свой транспортный агент с помощью протокола SMTP, проверьте инструмент SWAKS (SWiss Army Knife SMTP, jetmore.org/john/ code/#swaks), разработанный Джоном Джетмором (John Jetmore). Он написан на язы- ке Perl и позволяет легко тестировать обмен сообщениями по протоколу SMTP с аргу- ментами в командной строке. Документацию можно найти на справочной странице или выполнив команду swaks —help. Для аутентификации по протоколу SMTP этот ин- струмент требует наличия библиотек libnet-ssleay-perl и libnet-dns-perl. Это не высшая математика, но все же быстрее, чем набирать команды SMTP вручную. 20.7. Конфигурация электронной почты Ядром системы электронной почты является ее транспортный агент. Программа sendmail сначала была транспортным почтовым агентом системы UNIX, написан- ной много лет тому назад выпускником университета Беркли (UC Berkeley) Эриком Аллманом (Eric Allman). С тех пор были разработаны другие транспортные агенты. Одни из них являются коммерческими продуктами, а другие — программами с открытым ко- дом. В этой главе мы рассмотрим три почтовых транспортных агента с открытым ко- дом: sendmail, Postfix, написанный Витцем Венема (Wietse Venema) из компании IBM Research, и Exim, написанный Филипом Хазелем (Philip Hazel) из Кембриджского уни- верситета. После высокоуровневого проектирования почтовой системы, ее настройка является второй по важности заботой системного администратора. К счастью, образцы конфигу- рации или примеры настроек, поставляемые вместе с транспортными агентами, часто оказываются очень близкими к тому, что требуется для среднестатистического сайта. Конфигурацию транспортного агента не следует начинать с нуля. Сайт SecuritySpace (securityspace. com) ежемесячно проводит исследования, что- бы определить рыночную долю разных транспортных агентов. В отчете за декабрь 2009 года было указано, что ответы получены от 1,7 миллионов из 2 миллионов опрошенных транспортных агентов и 950 000 из них были идентифицированы. Результаты этого ис- следования приведены в табл. 20.4 наряду с результатами исследований, проведенных в 2007 году, и некоторыми значениями, полученными в 2001 году. Таблица 20.4. Рыночная доля почтовых транспортных агентов Рыночная доля, % 2007 , 2001 Exim exim.org 30 20 8 Postfix postfix.org 20 15 2 MS Exchange microsoft.com/exchange 20 22 4 sendmail sendmail.org 19 29 60 Другие — <3% <3% <3% Очевиден переход лидерства от программы sendmail к пакетам Exim и Postfix, в то время как компания Microsoft сначала достигла лидерства на рынке транспортных аген- тов, а потом уступила его. Среди остальных операционных систем все варианты системы
Глава 20. Электронная почта 821 UNIX поставляются вместе с программой sendmail. Система Ubuntu перешла от пакета Postfix к пакету Exim, SUSE поставляется с пакетом Postfix, a Red Hat включает все три варианта, но по умолчанию устанавливает программу sendmail. Для каждого из упомянутых транспортных агентов мы приводим детали конфигура- ции, необходимой для выполнения их функций, включая следующие. • Конфигурация простых клиентов. • Конфигурация почтового сервера, имеющего выход в Интернет. • Управление маршрутизацией входящей и исходящей корреспонденции. • Штемпелевание почты, поступающей от центрального сервера или самого домена. • Безопасность. • Отладка. Если вы реализуете почтовую систему с нуля и не придерживаетесь заранее установ- ленных правил или предпочтений, вам может быть трудно выбрать транспортный агент. Программа sendmail и пакет Exim определенно являются самыми сложными и, веро- ятно, допускают самую точную настройку и самые мощные опции. Пакет Postfix проще, быстрее и основной целью считает безопасность. Если ваша организация или системные администраторы ранее работали с какими-то транспортными агентами, они, вероятно, не захотят переключаться на что-то другое, если необходимые вам функциональные воз- можности не реализованы в старых агентах. Конфигурация агента sendmail описывается в следующем разделе. Конфигурации пакета Exim описаны в разделе 20.14, а конфигурация пакета Postfix — в разделе 20.15. 20.8. Почтовый АГЕНТ SENDMAIL Почтовый агент sendmail распространяется в виде открытого кода и доступен на сайте sendmail .org, но в настоящее время его редко приходится собирать с само- го начала. При желании можно сослаться на файл верхнего уровня INSTALL. Если не- обходимо обойти определенные установки, сделанные по умолчанию, то можно найти их в файле devtools/OS/uAW-e^wew-05. Можно также добавить новые функциональ- ные свойства, отредактировав файл devtools/Site/site.config.m4. Программа sendmail использует препроцессор макросов т4 не только во время компиляции, но и для конфигурирования. Файл конфигурации т4 обычно называется имя_компыотера. тс. Он компилируется из довольно понятного синтаксиса в совершенно невразумитель- ный низкоуровневый язык и записывается в файл имя_компьютера. cf, который в свою очередь инсталлируется как /etc/mail/sendmail. cf. Для того чтобы увидеть версию программы sendmail, инсталлированной на вашем компьютере, а также узнать, как она скомпилировалась, попытайтесь выполнить сле- дующую команду. linux$ /usr/sbin/sendmail -dO.l -bt < /dev/null Version 8.13.8 Compiled with: DNSMAP HESIOD HES_GETMAILHOST LDAPMAP LOG MAP_REGEX MATCHGECOS MILTER MIME7TO8 MIME8TO7 NAMED_BIND NETINET NETINET6 NETUNIX NEWDB NIS PIPELINING SASLv2 SCANF SOCKETMAP STARTTLS TCPWRAPPERS USERDB USE_LDAP_INIT ============ SYSTEM IDENTITY (after readcf) ============ (short domain name) $w = ross (canonical domain name) $j = ross.atrust.com
I 822 Часть ll. Работа в сети (subdomain name) $m = atrust.com (node name) $k = ross.atrust.com Эта команда переводит программу sendmail в режимы проверки адреса (-bt) и отладки (-dO.l), но не вводит никакого адреса для тестирования (</dev/null). Побочный эффект заключается в том, что программа sendmail сообщает номер своей версии и флаги компилятора, с которыми она компилировалась. Зная номер версии, вы можете зайти на веб-сайт sendmail. org и увидеть, существуют ли у этой версии про- граммы скрытые недостатки. Для того чтобы найти файлы программы sendmail в своей системе, посмотрите в начало инсталлированного файла /etc/mail/sendmail.cf. Комментарии, которые там находятся, содержат имя каталога, в котором была собрана данная конфигурация. Этот каталог, в свою очередь, приведет вас к файлу .тс, являющемуся исходным источ- ником конфигурации. Большинство поставщиков программы sendmail включают в дистрибутивный пакет не только исполняемый модуль, но и каталог cf из дистрибутивного дерева, который они скрывают среди файлов операционной системы. Найти его поможет табл. 20.5. Таблица 20.5. Местоположение каталога конфигурации программы sendmail Система Ubuntu SUSE Red Hat Solaris HP-UX AIX /изг/share/sendmai1 /usr/share/sendmail /usr/share/sendmail-cf /etc/mail/cf /usr/newconfig/etc/mail/cf /usr/samples/tcpip/sendmail/cf Файл переключения Ш Переключение служб более подробно описано в главе 19. В большинстве систем существует конфигурационный файл “переключения служб” /etc/nsswitch.conf, в котором перечисляются методы, удовлетворяющие разным* стандартным запросам, например запросам поиска пользователя и компьютера. Если для данного типа запросов в файле указано несколько методов распознавания, то файл переключения служб также определит порядок, в котором будут проверяться эти мето- ды. Существование переключения служб в программном обеспечении обычно не скры- вается. Однако программа sendmail осуществляет очень плотный контроль над своими процедурами поиска, поэтому в настоящее время она игнорирует системный файл пере- ключения служб и использует свой собственный внутренний файл конфигурации служб (/etc/mail/service. switch). На почтовую систему оказывают влияние два поля в файле переключения служб: aliases и hosts. Поле hosts может иметь значения dns, nis, nisplus и files, а поле aliases — files, nis, nisplus и Idap. Вспомогательные файлы для механиз- мов, которые вы используете (за исключением files), должны быть скомпилированы в программе sendmail до того, как данная служба будет использована.
Глава 20. Электронная почта 823 Запуск программы sendmail Программа sendmail не должна контролироваться демонами inetd или xinetd, поэтому ее необходимо явно запускать во время загрузки. Подробности этой процеду- ры описаны в главе 3. Функционирование программы sendmail определяется флага- ми, с которыми она запускается. Программу sendmail можно запускать в нескольких режимах, выбранных с помощью флага -Ь, который означает слово “be” (“быть”) или “become” (“становиться”) и всегда используется в сочетании с другим флагом, опреде- ляющим роль программы sendmail. Допустимые значения флага -Ь и флага -А, кото- рый производит выбор между агентами МТА и MSA, приведены в табл. 20.6. Таблица 20.6. Флаги командной строки для основных режимов работы программы sendmail Флаг > Описание ; ' -Ас Использует файл конфигурации submit. cf и действует как агент доставки -Ат Использует файл конфигурации sendmail. cf и действует как транспортный агент -Ьа Функционирует в режиме ARPANET (ожидает управляющих символов CR/LF в конце строки) - bd Функционирует в режиме демона и прослушивает соединения на порту 25 - bD Функционирует в режиме демона, но явно, а не в фоновом режимеа - bh Просматривает информацию о последнем соединении (аналогично команде hoststat) - ьн Стирает с диска копию информации об устаревших соединениях (аналогично команде purgestat) - Ы Инициализирует хешированные псевдонимы (аналогично команде newaliases) - bm Функционирует как почтальон, доставляет почту как обычно (по умолчанию) - Ьр Выводит на печать очередь почтовых сообщений (аналогично команде mailq) "ЬР Выводит на печать количество записей в очередях, расположенных в совместно используе- мой памяти Ь s Устанавливает режим сервера SMTP (для стандартного входа, но не для порта 25) “bt Устанавливает режим проверки адреса ~bv Только проверяет почтовые адреса; не посылает почту а Этот режим используется для отладки, чтобы увидеть сообщения об ошибках. Если вы конфигурируете сервер, который будет принимать почту из Интернета, запу- стите программу sendmail в режиме демона (-bd). В этом режиме программа sendmail прослушивает сетевой порт 25 и ожидает задания.8 Обычно, кроме него, устанавливается флаг -q, задающий интервал времени, в течение которого программа sendmail обраба- тывает почтовую очередь. Например, флаг -q30m заставляет программу проверять оче- редь каждые 30 минут, a -qlh — каждый час. Программа sendmail обычно пытается доставить сообщение немедленно, сохраняя его в очереди только на короткий промежуток времени, чтобы гарантировать надежность работы. Однако если ваш узел перегружен или адресат недоступен, программа sendmail размещает сообщение в очереди и пытается послать его снова. Программа sendmail ис- пользует персистентные обработчики очереди (queue runners), которые обычно запуска- ются во время загрузки. Она выполняет блокировку, поэтому параллельное выполнение нескольких обработчиков очереди вполне безопасно. Функциональная возможность 8 Порты, которые прослушивает программа sendmail, определяются параметром daemon_ options: порт 25 задается по умолчанию.
824 Часть II. Работа в сети “группы очередей” позволяет работать со списками рассылки и очередями. Более под- робно она описывается в разделе 20.12. Программа sendmail считывает Свой конфигурационный файл sendmail. cf только в момент запуска. Следовательно, если вы изменили конфигурационный файл, то долж- ны либо прекратить выполнение и запустить программу sendmail заново, либо послать сигнал HUP. Программа sendmail создает файл sendmail .pid, содержащий иденти- фикатор процесса и команду его запуска. Вы должны запустить программу sendmail, используя полностью определенный путь, потому что она, получив сигнал HUP, при- меняет сама к себе команду ехес. Файл sendmail .pid позволяет процессу принимать сигнал HUP с помощью следующей следующей команды. $ sudo kill -HUP head -1 sendmail.pid Местоположение файла PID зависит от операционной системы. Обычно он находит- ся по адресу /var/run/sendmail .pid или /etc/mail/sendmail .pid, но его можно задать в конфигурационном файле с помощью параметра conf PID FILE. define(confPID_FILE, '/var/run/sendmail.pid') Почтовые очереди Программа sendmail использует, по крайней мере, две очереди: /var/spool/ mqueue, когда она функционирует как транспортный агент на порту 25, и /var/spool/ clientmqueue, когда она функционирует как агент доставки на порту 587.9 Все сообще- ния, по крайней мере, на короткое время оказываются в очереди, прежде чем отпра- виться в дальнейший путь. Сообщения, находящиеся в очереди, сохраняются в виде фрагментов в разных фай- лах. Каждое имя файла имеет двухбуквенный префикс, идентифицирующий фрагмент, за ним следует случайный идентификатор, построенный на основе идентификатора про- цесса в программе sendmail. Шесть возможных фрагментов приведены в табл. 20.7. Таблица 20.7. Префиксы для файлов из очереди ----‘'i'1' .........................> ...........; qf Заголовок сообщения и управляющий файл df Тело сообщения tf Временная версия файла df в момент его обновления Tf Информация о том, что было выполнено более 32 неудачных попыток блокировки Qf Информация о том, что сообщение было отправлено обратно и не может быть восстановлено xf Временный файл транскрипции сообщений об ошибках, поступивших от программы для рас- сылки писем Если подкаталоги qf, df и xf в каталоге очереди уже существуют, то эти фрагменты сообщения помещаются в соответствующий подкаталог. Файл qf содержит не только за- головок сообщения, но и адреса, указанные на конверте, дату, при наступлении которой сообщение следует вернуть как недоставленное, приоритет сообщения в очереди и при- чину, по которой сообщение оказалось в очереди. Каждая строка начинается с однобук- венного кода, идентифицирующего остальную часть строки. 9 Для повышения производительности работы программа sendmail может использовать не- сколько очередей в каталоге mqueue; см. раздел 20.12.
Глава 20. Электронная почта 825 Каждое сообщение, помещенное в очередь, должно иметь файлы qf и df. Все осталь- ные префиксы программа sendmail использует, пытаясь доставить сообщение. Если компьютер дает сбой и перезагружается, то последовательность загрузочных комавд для программы sendmail должна удалить файлы tf, xf и Tf из всех очередей. Системный администратор, ответственный за почту, должен иногда проверять файлы Qf, если ло- кальная конфигурация вызывает рикошет. Эпизодическая проверка каталогов очереди позволит исправить проблемы до того, как произойдет катастрофа. Почтовая очередь создает несколько предпосылок для неприятностей. Например, файловая система может переполниться (избегайте размещения каталогов /var/spool/ mqueue и /var/log в одном и том же разделе диска), очередь может “засориться”, а беспризорные почтовые сообщения могут “застрять” в очереди. В конфигурации про- граммы sendmail есть параметры, обеспечивающие высокую производительность на очень загруженных компьютерах; рассмотрим их в разделе 20.12. 20.9. Конфигурация программы sendmail Действия программы sendmail определяются одним конфигурационным файлом, который обычно называется /etc/mail/sendmail. cf, если программа sendmail запу- скается как транспортный почтовый агент, или /etc/mail/submit.cf, если програм- ма sendmail действует как агент доставки. Флаги, с которыми запускается программа sendmail, определяют, какой файл конфигурации используется: флаги -bm, -bs и -bt означают использование файла submit. cf, если он существует, а все другие режимы ис- пользуют файл sendmail. cf. Эти имена можно изменить с помощью флагов в команд- ной строке или параметров конфигурационного файла, но лучше этого не делать. Формат конфигурационного файла был разработан для того, чтобы облегчить его разбор с помощью компьютера, а не человека. Исходный файл препроцессора m4 (с рас- ширением .тс), который порождает файл с расширением .cf, является усовершен- ствованием, но его капризный и строгий синтаксис очень неудобен. К счастью, многие парадигмы, которые вы, возможно, захотите использовать, уже были предусмотрены и реализованы в дистрибутивном пакете в качестве готовых решений. Настройка конфигурации программы sendmail состоит из нескольких этапов. • Выбор роли для компьютера, который вы конфигурируете: клиент, сервер, получа- тель почты через Интернет и т.д. • Выбор функциональных возможностей, необходимых для реализации этой роли, и создание файла с расширением .тс для данной конфигурации. • Компиляция файла с расширением .тс с помощью препроцессора т4, чтобы соз- дать файл конфигурации . cf. Мы опишем функциональные возможности, типичные для общедоступных в рамках организации серверов, имеющих выход в Интернет, и для небольших настольных кли- ентов. Более подробное описание можно найти в документации программы sendmail, в книге Sendmail Брайана Косталеса и его соавторов (Bryan Costales et al.), а также в файле cf/readme из дистрибутивного пакета. Препроцессор т4 Изначально предназначенный для использования в сочетании с языками программи- рования, препроцессор т4 позволяет пользователям писать более удобочитаемые (или,
826 Часть IL Работа в сети наоборот, запуганные) программы. Это достаточно мощный инструмент, чтобы оказать- ся полезным во многих ситуациях, связанных с преобразованием входной информации, он прекрасно работает с конфигурационными файлами программы sendmail. Макрос препроцессора т4 имеет следующую форму. name(arglf агд2, агдп) Между именем и открывающей скобкой не должно быть пробелов. Левая и правая одинарные кавычки обозначают строки в качестве аргументов. Соглашения о кавычках в макросах препроцессора т4 являются странными, поскольку левая и правая кавыч- ки — это одинаковые символы. Кроме того, кавычки могут быть вложенными. Препроцессор т4 имеет несколько встроенных макросов, и пользователи могут определять свои собственные макросы. Основные встроенные макросы, используемые в конфигурации программы sendmail, приведены в табл. 20.8. Таблица 20.8. Макросы препроцессора т4, часто используемые программой sendmail Макрос define Определяет макрос с именем arg1 со значением arg2 undefine Отменяет предыдущее определение макроса с именем arg 1 include Включает (интерполирует) файл с именем arg 1 dnl Игнорирует все символы до начала новой строки divert Управляет выходными потоками Фрагменты конфигурации программы sendmail Дистрибутивный пакет программы sendmail содержит подкаталог cf, в котором находятся все фрагменты, необходимые для конфигурации препроцессора т4. Если вы не самостоятельно инсталлируете программу sendmail на основе исходного текста, а полагаетесь на поставщика, то используйте местоположение каталога cf, указанное в табл. 20.5. Документация о конфигурации программы sendmail записана в файле README. Подкаталоги, перечисленные в табл. 20.9, содержат примеры и фрагменты, ко- торые можно включать в свою конфигурацию. Таблица 20.9. Подкаталоги конфигурации программы sendmail Каталог Содержимое Д- г , cf Эталонные файлы .тс (мастера конфигурации) domain Эталонные файлы т4 для разных доменов в домене Berkeley feature Фрагменты, реализующие разные функциональные возможности hack Особые функциональные возможности, ценность или реализация которых сомнительна т4 Основной файл конфигурации и другие важные файлы ostype Местоположение файлов, зависящее от операционной системы, и другая полезная информация mailer Файлы т4, описывающие основные программы для рассылки (агенты доставки) sh Сценарии оболочки, используемые в препроцессоре т4 Каталог cf/cf содержит примеры файлов с расширением .тс. Фактически он со- держит так много примеров, что в них легко запутаться. Мы рекомендуем хранить свои файлы с расширением .тс отдельно от примеров, размещенных в каталоге cf. Для этого следует либо создать новый каталог для своего сайта (cf/имясайта), либо разместить
Глава 20. Электронная почта 827 каталог cf отдельно под именем cf. examples и создать новый каталог cf. Если вы сделаете это, скопируйте в свой новый каталог сценарии Makefile и Build, чтобы инструкции из файла README сохранили свою работоспособность. В качестве альтер- нативы можно скопировать все собственные файлы конфигурации с расширением .тс в центральное место хранения, а не оставлять их в дистрибутивном пакете программы sendmail. Сценарий Build использует относительные пути, поэтому, если вы хотите создать файл с расширением . cf из файла с расширением .тс и не использовать имена их дистрибутивной иерархии программы sendmail, придется их изменить. Файлы из каталога cf/ostype конфигурируют программу sendmail для любой кон- кретной операционной системы. Многие из них являются заранее заданными, но если вы изменили настройки своей системы, то вам придется либо модифицировать их, либо создавать новые. Скопируйте тот из них, который лучше соответствует вашей системе, и присвойте ему новое имя. Каталог cf/feature — это место, где вы будете искать все фрагменты конфигура- ции, которые вам нужны. Там найдутся все функциональные возможности, которые мо- гут оказаться полезными для сайта, использующего программу sendmail. Остальные подкаталоги каталога cf служат, скорее, как заглушки. Их не надо иссле- довать или анализировать — просто используйте их. Конфигурационный файл, построенный на основе эталонного файла с расширением .тс Перед тем как погрузиться в детали различных конфигурационных макросов, свойств и параметров, которые могут использоваться при конфигурировании программы sendmail, создадим простую конфигурацию, тем самым проиллюстрировав весь про- цесс. Предметом нашего примера будет концевой узел myhost. example. com; главный конфигурационный файл называется myhost .тс. Рассмотрим полный файл с расшире- нием .тс. divert(-1) #### basic .тс file for example.com divert (0) VERSIONID('$Id$') OSTYPE('linux’) MAILER(4 local') MAILER('smtp*) За небольшим исключением, каждая строка содержит вызов готового макроса. Пер- вые четыре строки представляют собой заглушку; они вставляют комментарий в ском- пилированный файл, чтобы указать версию программы sendmail, созданный ката- лог конфигурации и т.д. Макрос OSTYPE интерполирует файл . . /ostype/linux.m4. Строки, содержащие вызов макроса MAILER, разрешают локальную доставку сообщений (пользователям, имеющим учетные записи на сервере myhost. example. com), а также доставку интернет-сайтам. Для того чтобы создать реальный конфигурационный файл, просто примените ко- манду Build к новому скопированному вами каталогу cf. $ . /Build myhost. cf В заключение инсталлируйте файл myhost. cf в соответствующем месте —как пра- вило, как файл /etc/mail/sendmail. cf, хотя некоторые поставщики могут поместить его в другое место. Чаще всего поставщики размещают его в каталоге /etc и /usr/lib.
828 Часть II. Работа в сети Для более крупных сайтов можно создать отдельный файл препроцессора т4, что- бы хранить там значения, заданные по умолчанию; поместите его в каталог cf/domain. Отдельные узлы могут затем включать его содержимое, используя макрос domain. Отдельный файл конфигурации нужен не каждому компьютеру, но каждая группа по- хожих компьютеров (с одинаковой архитектурой и одинаковыми ролями: сервер, клиент и т.д.), вероятно, нуждается в собственной конфигурации. Порядок следования макросов в файле с расширением .тс не случаен. Он должен быть таким. VERSIONID OSTYPE DOMAIN FEATURE определения локальных макросов MAILER Даже имея простую систему конфигурации т4 для программы sendmail, вам, воз- можно, придется принимать несколько разных решений, связанных с конфигурацией вашего сайта. Читая о функциональных возможностях, описанных ниже, подумайте о том, как их применять к вашей сети. Небольшая сеть, вероятно, будет иметь один кон- центратор и концевые узлы, а значит, только два варианта файла конфигурации. В более крупной сети могут понадобиться отдельные концентраторы для входящей и исходящей почты и, вероятно, отдельный сервер POP/IMAP. Независимо от сложности вашей сети и ее представления во внешнем мире (откры- той, за брандмауэром или виртуальной частной сети, например), скорее всего, каталог cf содержит готовые фрагменты, подходящие для настройки и использования. 20.10. Примитивы конфигурации программы sendmail Команды конфигурации sendmail чувствительны к регистру клавиатуры. По обще- принятому соглашению, имена заранее определенных макросов состоят только из про- писных букв (например, OSTYPE), команды препроцессора т4 — только из строчных букв (например, define). Названия параметров конфигурации начинаются с префикса conf, набранного в нижнем регистре, и заканчиваются именем переменной, набран- ным в верхнем регистре (например, confFALLBACK_MX). Макросы обычно ссылают- ся на файл препроцессора т4 с именем . . /имя_макроса/аг%1 .т4. Например, ссылка OSTYPE (' linux') включает файл .. /ostype/linux.m4. Таблицы и базы данных Перед тем как погрузиться в детали, связанные с конкретными примитивами конфи- гурации, сначала следует обсудить таблицы (иногда называемые ассоциативными мас- сивами (maps) или базами данных), которые программа sendmail может использовать для маршрутизации почты или перезаписи адреса. Большинство из них используется в сочетании с макросом feature. Таблица — это кеш (как правило, текстовый файл), содержащий информацию о маршрутизации, псевдонимах, правилах, а также другие данные, которые можно пре- образовать в формат базы данных с помощью команды makemap, а затем использовать как источник информации при выполнении одной или нескольких операций програм- мы sendmail.
Глава 20. Электронная почта 829 Хотя данные для программы sendmail обычно хранятся в текстовом файле, они мо- гут также поступать из системы DNS, от сервера NIS, от протокола LDAP или из других источников. Использование централизованного сервера IMAP освобождает программу sendmail от выполнения рутинных операций, связанных с розыском пользователей и их устаревших таблиц. Поддерживаются две библиотеки баз данных: библиотека dbm/ndbm — стандарт для большинства версий систем UNIX и Linux, а также Berkeley DB — более крупная библи- отека, поддерживающая многочисленные схемы хранения. Мы рекомендуем использо- вать библиотеку BDB, если она уже установлена в вашей системе или вы можете ее уста- новить. Она работает быстрее, чем база данных dbm, и создает файлы меньшего размера. Программа sendmail предусматривает три типа ассоциативных массивов. • dbm — использует расширяемые алгоритмы хеширования (dbm/ndbm) • hash — использует стандартную схему хеширования (DB) • btree — использует В-дерево (DB) В большинстве случаев использования таблиц в программе sendmail наилучшим яв- ляется формат базы данных hash, заданный по умолчанию. Для создания базы данных из текстового файла следует использовать команду makemap, задав тип и имя выходного файла базы данных. Текстовая версия базы данных должна передаваться на стандартный вход команды makemap. Рассмотрим пример. $ sudo makemap hash /etc/mail/access < /etc/mail/access На первый взгляд эта команда выглядит ошибкой, которая может вызвать переза- пись входного файла пустым результирующим файлом. Однако команда makemap добав- ляет специальный суффикс, так что реальный результирующий файл будет называться / etc/mail/access. db и конфликт не возникнет. Каждый раз при изменении текстового файла файл базы данных необходимо создавать заново с помощью команды makemap (но программа sendmail не требует использования сигнала HUP). В текстовых файлах, на основе которых создаются ассоциативные массивы, могут на- ходиться комментарии. Они начинаются символом # и продолжаются до конца строки. В большинстве случаев в качестве ключа базы данных используется самое длинное из возможных совпадений. Как и в любой другой хешированной структуре, порядок сле- дования записей во входном текстовом файле не имеет значения. Примитивы FEATURE, ожидающие файл базы данных как параметр, по умолчанию предусматривают в каче- стве типа базы данных тип hash, а в качестве имени базы данных — имя /etc/mail/ имя__таблицы. db. Обобщенные макросы и функциональные возможности В табл. 20.10 перечислены основные примитивы конфигурации с указанием степени их использования (да, нет, возможно) и кратким описанием их действий. Более подроб- но они будут рассмотрены ниже. Таблица 20.10. Основные примитивы конфигурации программы sendmail Примитив Испаньзумся? '''У* OSTYPE Да Включает пути, специфичные для операционной системы, и флаги программы рассылки DOMAIN Нет Включает детали конфигурации, специфичные для сайта
830 Часть II. Работа в сети Окончание табл. 20.10 •; «у ’-'«» .Л •_ ‘ Примитив ^ Описание - MAILER Да Допускает использование программ рассылки, обычно smtp и local FEATURE Возможно Допускает использование набора функциональных возмож- ностей программы sendmail use cw_file Да(серверы) Перечисляет узлы, на которые можно посылать сообщения redirect Возможно (серверы) Перенаправляет письма при перемещении пользователей always_add_domain Да Полностью определяет имена компьютеров, если сервер UA этого не сделал access_db Возможно (серверы) Заставляет базу данных задерживать отправление почты virtusertable Возможно (серверы) Включает псевдонимы доменов (виртуальные домены) ldap_routing Возможно (серверы) Маршрутизирует входящую почту с помощью протокола LDAP MASQUERADE_AS Да Маскирует всю почту так, будто она исходит из одного ис- точника EXPOSED_USER Да Перечисляет пользователей, которых не следует маскиро- вать MAIL_HUB Возможно (серверы) Задает почтовый сервер, предназначенный для входящей почты SMART_HOST Возможно (клиенты) Задает почтовый сервер, предназначенный для исходящей почты Макрос OSTYPE Файл OSTYPE содержит разнообразную информацию от производителей, например ожидаемое местонахождение файлов, связанных с почтовой системой, пути к командам, которые необходимы для программы sendmail, флаги для программ рассылки и т.д. Список всех переменных, которые можно определить в файле OSTYPE, перечислены в файле cf/README.10 Каждая из рассмотренных нами операционных систем, за исключением систе- * мы SUSE, содержит соответствующий файл OSTYPE из дистрибутивного паке- та sendmail. Вместо этого система SUSE содержит свой собственный файл suse_linux. m4. Этот файл длинный (более 80 строк, по сравнению с пятью строками в сопостави- мом файле linux .m4) и содержит многочисленные примитивы FEATURE наряду с други- ми макросами, которые обычно можно найти в главном конфигурационном файле сайта (файле с расширением .тс), но не в файле OSTYPE. Таким образом, реальная конфигу- рация скрыта от системного администратора — в этом есть и преимущества, и недостат- ки, но мы не рекомендуем эту практику. 10 Так где же все-таки определен макрос OSTYPE? В одном из файлов в каталоге cf /т4, кото- рый таинственным образом добавляется к вашему конфигурационному файлу при запуске сцена- рия Build.
Глава 20. Электронная почта 831 Макрос DOMAIN Директива domain позволяет указывать всю общую информацию о сайте в одном ме- сте (cf /domain/имя_файла а затем включать в каждый конфигурационный файл компьютера. DOMAIN (' filename ’) Макрос MAILER Этот макрос следует включать в каждый агент доставки, который вы хотите исполь- зовать. Полный список программ рассылки можно найти в каталоге cf/mailers, но обычно необходимы только local, smtp и, возможно, cyrus. Строки, содержащие ма- крос MAILER, обычно являются последними в файле .тс. Макрос FEATURE Рассматриваемый макрос позволяет реализовать большое количество сценариев (по последним данным, 56!), включая файлы препроцессора т4 из каталога feature. Его синтаксическая конструкция выглядит следующим образом. FEATURE (keyword, arg, arg, ...) Здесь аргумент keyword соответствует файлу keyword.яА в каталоге cf/feature. Коли- чество остальных аргументов не должно превышать девяти. Функциональная возможность use^cwjFlle Внутренний класс w программы sendmail (отсюда имя cw) содержит имена всех локальных компьютеров, к которым есть доступ из данного узла и может доставляться почта. Эта функциональная возможность позволяет доставлять почту узлам, построчно перечисленным в списке, находящемся в файле /etc/mail/local-host-names. Эту функциональную возможность активизирует конфигурационный файл. FEATURE('use_cw_file’) Клиентская машина на самом деле не нуждается в этой возможности, если у нее есть псевдоним. Файл local-host-names должен содержать имена всех локальных узлов и виртуальных доменов, которым можно доставлять почту, включая сайты, резервные за- писи MX которых ссылаются на ваш компьютер. Если эта функциональная возможность не подключена, то программа sendmail вы- полняет локальную доставку почты, только если она адресована компьютеру, на котором выполняется сама программа sendmail. Если вы добавили в сеть новый компьютер, то должны добавить его имя в файл local- host-names и послать сигнал HUP программе sendmail, чтобы изменения вступили в силу. К сожалению, программа sendmail считывает этот файл только при запуске. Функциональная возможность redirect Когда люди покидают вашу организацию, вы обычно либо пересылаете им почту, либо возвращаете ее отправителю с сообщением об ошибке. Функциональная возмож- ность redirect позволяет реализовать более элегантное решение для возврата почты. Если Джо Смит окончил университет oldsite.edu (регистрационное имя smithj) и перешел в организацию newsite. com (регистрационное имя joe), то, включив функ- циональную возможность redirect с помощью примитива FEATURE('redirect1)
832 Часть II. Работа в сети и добавив строку smithj: joe@newsite.com.REDIRECT в файл aliases на сайте oldsite.edu, вы сможете возвращать почту, адресованную пользователю smithj, отправителю вместе с сообщением об ошибке, в котором указан новый адрес получателя joe@newsite. com. Само письмо автоматически не перенаправ- ляется. Функциональная возможность always_add_domain Эта функциональная возможность задает полное определение всех почтовых адресов. Ее следует использовать постоянно. Функциональная возможность accessjdb С помощью этой функциональной возможности можно управлять задержкой и дру- гими правилами работы с почтой. Обычно данные, которые управляют этой функцио- нальной возможностью, либо поступают от сервера LDAP, либо хранятся в текстовом файле /etc/mail/access. Во втором случае текстовый файл должен быть преобразо- ван в индексированный формат с помощью команды makemap, как показано выше. Для использования простого файла в конфигурационном файле следует указать инструкцию FEATURE (' access db •); для работы с сервером LDAP следует использовать инструк- цию FEATURE ('accesS-db', 'LDAP*) .п Полем ключа для доступа к базе данных является IP-адрес сети или имя домена, сопровождаемое необязательным дескриптором, например Connect:, То: или From:. Поле значения указывает, что делать с сообщением. Наиболее широко используются такие значения, как ОК для приема сообщений, RELAY для разрешения задержки, REJECT для отказа с сообщением об ошибке общего характера или ERROR: "код ошибки и сообщение" для отказа с сообщением о конкретной ошибке. С помощью других значений можно установить более точный контроль. Рас- смотрим фрагмент из файла /etc/mail/access. localhost 127.0.0.1 192.168.1.1 192.168.1.17 66.77.123.1 fax.com 61 67.106.63 RELAY RELAY RELAY RELAY OK OK ERROR:”550 We don’t accept mail from spammers" ERROR:"550 We don’t accept mail from spammers" Функциональная возможность virtusertable Эта функциональная возможность позволяет задавать псевдонимы доменов для входящей корреспонденции, размещать несколько виртуальных доменов на одной ма- шине и использовать их для веб-хостинга. Поле ключа таблицы содержит либо адрес электронной почты (userQhost. domain), либо спецификацию домена (^domain). Поле значения содержит локальный или внешний адрес электронной почты. Если ключом является домен, то значение может либо передавать поле user как переменную %1, либо направлять почту другому пользователю. Рассмотрим несколько примеров. 11 В этом примитиве используется схема LDAP, определенная в файле cf/sendmail.schema; если вы хотите использовать другой файл схемы, укажите дополнительные аргументы в инструкции FEATURE.
Глава 20. Электронная почта 833 @appliedtrust.com %10atrust.com unix0book.admin.com sa-book-authors0atrust.com linux0book.admin.com sa-book-authors0atrust.com webmaster0example.com billy.q.zakowski0colorado.edu info0testdomain.net ausername0hotmail.com Все ключи в левой части отображения данных должны быть перечислены в файле cw, т.е. /etc/mail/local-host-names, или находиться в списке VIRTUSER DOMAIN. Если это условие не выполняется, то программа sendmail не сможет принять локальную по- чту и попытается найти адресата в Интернете. Однако записи DNS MX вернут програм- му sendmail назад на тот же самый сервер, и в результате рикошета вы получите со- общение “local configuration error” (“ошибка локальной конфигурации”). К сожалению, программа sendmail не может сообщить, что это сообщение на самом деле означает “ключа виртуального пользователя в файле cw нет”. Функциональная возможность ldap_routing Протокол LDAP (Lightweight Directory Access Protocol — облегченный протокол до- ступа к каталогам) может быть источником данных о псевдонимах или информации о маршрутизации почты, а также общих данных, хранящихся в таблицах. Файл cf /README содержит большой раздел о протоколе LDAP с множеством примеров. Для того чтобы использовать сервер LDAP указанным выше способом, необходимо скомпилировать программу sendmail так, чтобы она включала поддержку протокола LDAP. Для этого в файл .тс следует добавить такие строки. define ('confLDAP_DEFAULT_SPEC', '-h server -b searchbase') FEATURE('ldap_routing') LDAPROUTE_DOMAIN('my_domain') Эти строки означают, что вы хотите использовать базу данных протокола LDAP для маршрутизации входящей почты, адресованной указанному домену. Параметр LDAP DEFAULT SPEC идентифицирует сервер LDAP и базовое имя LDAP для поисков. Протокол LDAP использует порт 389, если вы не указали явным образом другой порт, добавив в инструкцию define параметр -р nopT_ldap. Программа sendmail использует значения двух дескрипторов в базе данных LDAP. • mailLocalAddress — для адресата входящей почты. • mailRoutingAddress — для пункта назначения, в который должна быть достав- лена почта. Кроме того, программа sendmail использует дескриптор mailHost, который на- правляет почту обработчику, заданному в поле MX для указанного узла. Адресом полу- чателя остается значение дескриптора mailRoutingAddress. Записи базы данных LDAP позволяют использовать шаблонный символ 0 domain, который перенаправляет почту, адресованную кому-либо в указанном домене (как и па- раметр virtusertable). По умолчанию почта, адресованная получателю user0hostl .mydomain, сначала направляется пользователю адресата user0hostl .mydomain. Если такого адресата нет, программа sendmail может попытаться выполнить поиск в домене 0hostl .mydomain, а не использовать адрес user0mydomain. Включив строку LDAPROUTE_EQUIVALENT('hostl.mydomain1) можно также проверить ключи user0mydomain и @mydomain. Эта функциональная возможность допускает использование единой базы данных для маршрутизации почты
834 Часть II. Работа в сети на сложных сайтах. Вы также можете использовать записи для разделов LDAPROUTE_ equivalent из файла, что делает это свойство еще более полезным. Синтаксис этой инструкции выглядит следующим образом. LDAPROUTE_EQUIVALENT_FILE('filename') Кроме того, свойство Idap routing позволяет более подробно описать схему LDAP, чем в разделе +detail, и точнее управлять обработкой имен адресатов. Как всегда, бо- лее подробную информацию следует искать в файле cf/README. Маскирующие функциональные возможности Адрес электронной почты часто используется в качестве имени пользователя, узла и домена, но многие организации не хотят демонстрировать имена своих узлов в Интернете. Макрос MASQUERADE_AS позволяет скрыть все машины за единственной сущностью. Вся появляющаяся почта будет исходить от указанного компьютера или до- мена. Это очень удобно для обычных пользователей, но системные пользователи, такие как корневой пользователь, не должны участвовать в маскировке. Например, последовательность инструкций MASQUERADE—AS (' atrust. com') EXPOSED_USER('root’) EXPOSED—USER('Mailer-Daemon') проштамповывает почту так, будто она исходит от адреса user@atrust. com, если она не была послана корневым пользователем или почтовой системой; в этих случаях почта должна иметь истинный адрес отправителя. Инструкция MASQUERADE AS — это верхуш- ка айсберга, за которой скрываются десятки вариантов и исключений. Функциональные возможности allmasquerade и masquerade_envelope (в сочетании с MASQUERADE_AS) скрывают требуемую часть локальной информации. Детали см. в файле cf/README. Макросы MAILJiUB и SMARTJiOST Маскировка изменяет заголовки и, возможно, конверт, чтобы вся почта выглядела исходящей от одного компьютера или домена. Однако большинство организаций дей- ствительно желают, чтобы вся почта исходила от одного компьютера или поступала на один компьютер, чтобы можно было контролировать поток вирусов, спама и секретов компании. Этот контроль можно обеспечить с помощью сочетания записей MX в систе- ме DNS, макроса MAIL_HUB для входящей почты и макроса SMART_HOST для исходящей почты. СЗ Более подробная информация о записях DNS MX приведена в разделе 17.8. Например, в архитектурной диаграмме из раздела 20.4 записи MX могут направлять входящую электронную почту из Интернета транспортному агенту в демилитаризован- ной зоне. После проверки того факта, что полученная почта не содержит вирусы и спам и была направлена правильному локальному пользователю, почту можно передать с по- мощью инструкции define внутреннему транспортному агенту, выполняющему марш- рутизацию. define('MAIL_HUB', 'smtp:routingMTA.mydomain1) Ш Функциональная возможность nullclient рассматривается в следующем разделе. Аналогично клиентские компьютеры могут направлять свою почту компьютеру SMART HOST, назначенному в конфигурации с помощью свойства nullclient. Компью-
Глава 20. Электронная почта 835 тер SMART HOST затем может профильтровать вирусы и спам, чтобы почта из вашей сети не просочилась в Интернет. Синтаксис инструкции SMART HOST аналогичен синтаксису инструкции MAIL нив, причем агентом доставки тоже является relay. “ define ('SMART_HOST* , ' smtp: outgoingMTA.mydomain') Ту же самую машину можно использовать как сервер для входящей и исходящей по- чты. Инструкции SMART HOST и MAIL HUB должны разрешать передачу: первая — от клиентов внутри вашего домена, а вторая — от транспортного агента в зоне DMZ. Конфигурация клиентов Если ваша организация следует принципам, описанным в разделе 20.4, то большин- ство ваших компьютеров необходимо конфигурировать как клиентов, желающих посы- лать исходящую почту, генерируемую пользователями, и не получать почту вообще. Одна из функциональных возможностей программы sendmail под названием nullcltent предназначена именно для таких ситуаций. Она создает конфигурационный файд, ко- торый перенаправляет всю почту на центральный концентратор через сервер SMTP. Содержание всего конфигурационного файла, следующее за строками с макросами VERSIONID и OSTYPE, сводится к следующим строкам. FEATURE('nocanonify’) FEATURE('nullclient’, 'mailserver1) EXPOSED_USER('root1) Здесь mailserver — это имя центрального концентратора. Параметр nocanonify сооб- щает программе sendmail, что она не должна выполнять поиск в системе DNS или перезаписывать адреса с полностью определенными именами доменов. Всю эту рабо- ту будет выполнять почтовый сервер. Этот параметр похож на параметр SMART_HOST и предполагает, что клиент применяет к почтовому серверу инструкцию MASQUERADE—AS. Инструкция EXPOSED USER исключает корень из маскировки и открывает возможности для отладки. Компьютер mailserver должен разрешать ретрансляцию от своих нулевых клиентов. Это разрешение предоставляется примитивом access_db, описанным выше. Нулевой клиент должен иметь соответствующую запись MX, ссылающуюся на компьютер mailserver, а также содержаться в файле cw на компьютере mailserver (который обычно называется /etc/mail/local -host-names). Эти настройки позволяют компьютеру mailserver принимать почту для клиента. Если пользовательские агенты на клиентской машине могут использовать порт 587 для отправки почтовых сообщений, то программа sendmail должна выполняться как агент доставки (без флага -bd). В противном случае вы можете выполнить программу sendmail в режиме демона (-bd), задав параметр конфигурации DAEMON—OPTIONS так, чтобы прослушивать соединения только в интерфейсе замыкания (loopback interface). В операционной системе SUSE есть эталонный файл /etc/mail/linux. •11 R nullclient. тс для нулевого клиента. Запишите в него имя своего почтового сервера, создайте файл sendmail. cf, и готово! Параметры конфигурации Параметры файла конфигурации задаются с помощью команды define, относящей- ся к препроцессору т4. Полный список параметров, доступных как переменные препро-
836 Часть II. Работа в сети цессора т4 (вместе с их значениями, заданными по умолчанию), приведен в файле cf/ README. Значения по умолчанию подходят для типичной организации, не страдающей от па- ранойи и не слишком обеспокоенной вопросами производительности. Параметры, за- данные по умолчанию, предназначены для защиты от спама: они отключают ретрансля- цию и требуют, чтобы адреса были полностью определенными, а домены отправителей соответствовали их IP-адресам. Если ваш почтовый концентратор слишком загружен и обслуживает слишком много списков рассылки, может потребоваться более тонкая на- стройка. Параметры, которые приходится настраивать чаще всего, перечислены в табл. 20.11 (это лишь около 10% из почти 175 параметров конфигурации). В скобках указаны их значения по умолчанию. В целях экономии места префикс conf в названиях пара- метров опущен. Например, параметр FALLBACK MX в действительности называется conf FALLBACK MX. Таблица разделена на части, в соответствии с тем, для каких целей применяются те или иные параметры: общих, связанных с ресурсами, производительно- стью, безопасностью, спамом и т.д. Некоторые параметры попадают сразу в несколько категорий, однако мы указали их только в одном месте. Таблица 20.11. Основные параметры конфигурации У" ' 11 " i._ Л 111 ' 1 К Jl)1 Параметр _ ' . RSg-j MAX_DAEMON_CHILDREN Максимальное количество порожденных процессова (ограни- чений нет) 3 о MAX_MESSAGE_SIZE Максимальный размер в байтах одного сообщения (ограниче- о. о ний нет) £ MIN_FREE_BLOCKS Минимальное пространство в файловой системе для хранения поступающей почты (100) Т0_имя Время тайм-аута для разных ситуаций (варьируется) DELAY_LA Показатель средней загруженности, при котором доставка по- чты замедляется (0 — нет ограничений) FALLBACK_MX См. описание в разделе 20.12 (значение по умолчанию отсут- ствует) FAST_SPLIT Подавляет поиск записей MX при сортировке адресов получа- телей и распределении их по очередям (1 — включено) е о HOST_STATUS_DIRECTORY См. описание в разделе 20.12 (значение по умолчанию отсут- о X ствует) MCI_CACHE_SIZE Количество открытых кешированных ТСР-соединений (2) I MCI_CACHE_TIMEOUT Время, в течение которого кешированные соединения остают- со X ся открытыми (5m) о о. CZ MIN_QUEUE_AGE Минимальный период времени, в течение которого сообщение должно находиться в очереди; позволяет улучшить обработку очереди на перегруженном компьютере (0) QUEUE_LA Показатель средней загруженности, при котором сообще- ния помещаются в очередь, а не отправляются немедленно (%* число .процессоров) REFUSE_LA Показатель средней загруженности, при котором почта пере- стает приниматься (12*число_лроцессоров)
Глава 20. Электронная почта 837 Окончание табл. 20.11 Параметр . > AUTHJMECHANISMS Список механизмов аутентификации по протоколу SMTP для библиотеки Cyrus SASL6 CONNECTION_RATE_ Предотвращает атаки типа “отказ от обслуживания”, ограничи- THROTTLE вая скорость, при которой разрешается устанавливать почто- со с вое соединение (ограничений нет) DONT_BLAME_SENDMAIL Отменяет ряд функций программы sendmail, связанных с без- н о опасностью и проверкой файлов; не изменяйте значение этой X о опции без особой необходимости (safe) со с о MAX_MIME_HEADER_LENGTH Максимальный размер заголовков MIME (ограничений нет)8 ф из MAX_RCPTS_PER_MESSAGE Препятствует отправке спама; обработка избыточного числа получателей приостанавливается и генерируется временное сообщение об ошибке (число получателей не ограничено) PRIVACY_FLAGS Налагает ограничения на информацию, выдаваемую по про- токолу SMTP (authwarnings) DOUBLE_BOUNCE_ADDRESS Перехватывает множество спама; некоторые организации ф о используют каталог /dev/null, но это может привести к оерьез- X 8 ным проблемам (почтовый сервер) О- L DAP_DE FAUL T_S PE C Спецификация базы данных LDAP, включая имя компьютера, на котором запущен сервер, и номер порта (не определена) аТочнее говоря, это максимальное количество дочерних процессов, которые можно выполнить одновремен- но. При достижении предельного значения программа sendmail отказывается принимать запросы. Эта оп- ция позволяет предотвратить атаки типа “отказ от обслуживания”. Значение по умолчанию таково: “EXTERNAL GSSAPI KERBER0S_V4 DIGEST-MD5 CRAM-MD5”. Не добавляйте “PLAIN LOGIN”, поскольку пароль передается открытым текстом. Если соединение также не защищено с по- мощью криптографического протокола SSL, то изнутри все может выглядеть благополучно, а со стороны Интернета — нет. 8 Эта опция защищает буфер пользовательского агента от переполнения. Рекомендуемое значение — “256/128”, что означает “256 байт на заголовок и 128 байт на каждый параметр заголовка”. Средства программы sendmail для борьбы со спамом Программа sendmail имеет разнообразные возможности для борьбы со спамом и вирусами. • Правила управления открытой ретрансляцией, под которой понимается использова- ние почтового сервера для отправки сообщения одним сторонним пользователем другому, тоже стороннему. Спамеры часто прибегают к ретрансляции, пытаясь таким способом замаскировать действительного адресата сообщения и тем самым избежать обнаружения со стороны своих собственных провайдеров. Это также по- зволяет им перекладывать финансовую и вычислительную нагрузку на чужие плечи. • База доступа, позволяющая фильтровать почту согласно адресам, содержащимся в базе. Это напоминает применение брандмауэра для электронной почты. • Черные списки открытых ретрансляторов и известных спамеров, проверяемые про- граммой sendmail. • Дроссели, которые могут замедлять прием почты при обнаружении неправильного по- ведения.
838 Часть II. Работа в сети • Проверка заголовков и фильтрация входящей почты посредством универсальной би- блиотеки фильтров libmilter. Эта библиотека позволяет сканировать заголовки и содержимое сообщений и отбрасывать сообщения, удовлетворяющие опреде- ленным критериям. Эти средства в сочетании с другими технологиями, такими как серые списки, скани- рование содержимого с помощью интерфейса amavisd-new и новые записи DNS для аутентификации электронной почты, описанными в разделе 20.6, создают эффективную защиту от спама. Ретрансляция Программа sendmail получает входящую почту, просматривает адреса конверта, принимает решение о том, куда переслать сообщение, после чего отправляет его в со- ответствующий пункт назначения. Это может быть не только локальный получатель, но и другой транспортный агент, расположенный далее по цепи доставки. Когда входящее сообщение не имеет локального получателя, транспортный агент, обрабатывающий его, играет роль ретранслятора (relay). До появления программы sendmail версии 8.9 по умолчанию включался режим “бес- порядочной” рассылки (известный как открытая ретрансляция). Программа sendmail принимала сообщения через порт 25 и пыталась осуществить доставку оптимальным способом. В те времена считалось, что Интернет — дружественная среда. Только узлам, помеченным ключевым словом RELAY в базе доступа (см. выше), а также узлам, перечисленным в файле /etc/mail/relay-domains, разрешается предо- ставлять почту для ретрансляции. Впрочем, некоторые типы ретрансляции необходи- мы. Как определить, какое сообщение следует ретранслировать, а какое — отклонить? Ретрансляция нужна лишь в двух случаях. • Когда транспортный агент выступает в качестве шлюза для узлов, недоступных ни- каким другим способом. Это могут быть периодически выключаемые компьютеры (PPP-узлы, персональные компьютеры, работающие под управлением Windows) и виртуальные узлы. В этом случае все получатели, которым требуется переслать со- общение, должны находиться на одном домене. • Когда транспортный агент является сервером исходящей почты для других узлов. В этом случае имена и IP-адреса всех узлов-отправителей являются локальными (или, по крайней мере, заданы явно). Любые другие случаи ретрансляции, скорее всего, свидетельствуют о плохой конфи- гурации сервера (исключение можно сделать в отношении мобильных пользователей). Чтобы избежать ретрансляции в первом из упомянутых вариантов, организуйте прием почты на центральном сервере (с использованием протокола POP или IMAP для клиент- ского доступа). Второй вариант должен быть всегда допустим, но только для локальных узлов. Лучше проверять IP-адреса, чем имена компьютеров, так как последние проще подделать; впрочем, программа sendmail следит за этим. В программе sendmail ретрансляция запрещена по умолчанию, но с помощью специальных средств ее можно разрешить либо в полном объеме, либо в ограничен- ном и контролируемом режиме. Эти средства перечислены ниже. Их можно исполь- зовать, но мы рекомендуем проявлять максимум осторожности и не злоупотреблять ими. Безопаснее всего организовать ограниченную ретрансляцию с помощью средства access db, рассматриваемого в следующем подразделе.
Глава 20. Электронная почта 839 • FEATURE (' relay entire domain') — разрешает ретрансляцию для узлов теку- щего домена. • RELAY DOMAIN (4 домен, . . .') — дополнительно разрешает ретрансляцию для указанных доменов. • RELAY_DOMAIN_FILE (' имя_файла ’) — то же самое, но список доменов берется из файла. • FEATURE (' relay_hosts_only ’) — влияет на работу макроса RELAY_DOMAIN и средства access_db. Если благодаря макроконстантам SMART_HOST и MAIL HUB почта направляется на конкретный почтовый сервер, придется сделать исключение. Этот сервер должен быть настроен на ретрансляцию всей почты, поступающей от локальных компьютеров. FEATURE('relay_entire_domain’) Если вы рассматриваете возможность разрешения ретрансляции в какой-то форме, обратитесь к документации программы sendmail в файле cf/README , чтобы ненаро- ком не стать подручным спамеров. Если решите включить ретрансляцию, то обратитесь к одному из специализированных сайтов с просьбой проверить, что вы случайно не соз- дали открытую ретрансляцию, в частности, можно обратиться на сайт spamhelp. org. Использование черных списков Если необходимо блокировать почту каких-либо локальных пользователей или узлов, воспользуйтесь средством FEATURE('blacklist_recipients') которому в базе доступа соответствуют записи следующих типов. To:nobody@ ERROR:550 Mailbox disabled for this user To:printer.mydomain ERROR:550 This host does not accept mail To:user@host.mydomain ERROR:550 Mailbox disabled for this user Эти записи блокируют почту, приходящую на адрес пользователя nobody (на любом узле), а также адресованную сетевому принтеру и одному из пользователей конкретного компьютера. Дескриптор То: разрешает этим пользователям посылать сообщения (по- добной возможностью обладают некоторые принтеры), но не принимать их. Для того чтобы подключить черные DNS-списки для входящей почты, используется параметр dnsbl. FEATURE('dnsbl’) FEATURE('enhdnsbl') Эта функциональная возможность заставляет программу sendmail отклонять по- чту, приходящую от узла, IP-адрес которого указан в списке известных спамеров (SBL, XBL и PBL), поддерживаемых сайтом spamhaus. org. В других списках указаны адреса спамеров, работающих по коммутируемым линиям, и узлов, поддерживающих открытую ретрансляцию. Черные списки распространяются через службу DNS с помощью особого приема. Более подробное описание работы этой системы приведено в разделе 20.6. Средство dnsbl может принимать третий аргумент, который задает требуемое со- общение об ошибке. Если третий аргумент пропущен, будет выдано фиксированное со- общение (из базы данных DNS, содержащей проверяемые записи). Функциональную возможность dnsbl можно включать несколько раз, чтобы прове- рять разные списки злоумышленников.
840 Часть II. Работа в сети дроссели, скорость и ограничения на количество соединений В табл. 20.12 перечислено несколько команд программы sendmail, которые могут замедлить обработку почты, если поведение клиентов покажется подозрительным. Таблица 20.12. Основные параметры конфигурации ULV'JI ' ' "Л I и II ЛИ И. . ........ 11 ^iu и 11 Ill Примитив Описание _______ bad_rcpt_throttle Замедляет коллекционирование адресов спамерами max_rcpts_per_message Откладывает доставку, если сообщение имеет слишком много получателей ratecontrol Ограничивает скорость входящих соединений conncontrol Ограничивает количество одновременных соединений greet pause Задерживает ответ НЕЮ, требует точного подчинения протоколу SMTP После того как счетчик no-such-login достигает предельного значения, заданного параметром BAD_RCPT_THROTTLE, программа sendmail выполняет односекундную за- держку после получения каждой команды RCPT, замедляя сбор адресов спамерской про- граммой. Для того чтобы задать это предельное значение равным 3, используйте следую- щую команду. define (' confBAD_RCPT_THROTTLE ’, ' 3 ’) Параметр MAX_RCPTS_PER_MESSAGE заставляет отправителя поставить дополнитель- ных получателей в конец очереди. Это простая форма серого списка для сообщений, имеющих подозрительно много получателей. Параметры ratecontrol и conncontrol позволяют установить для каждого ком- пьютера или каждой сети скорость приема входящих соединений и количество одно- временно устанавливаемых соединений соответственно. Оба параметра можно задать в файле /etc/mail/access, чтобы указать пределы и домены, к которым они относят- ся. Первый параметр сопровождается дескриптором ClientRate: в поле ключа, а вто- рой — дескриптором ClientConn:. Для того чтобы включить режим контроля скорости, вставьте следующие строки в свой файл с расширением .тс.12 FEATURE(4 ratecontrol’, 'nodelay','terminate’) FEATURE('conncontrol’, 'nodelay’, 'terminate') Затем добавьте в свой файл /etc/mail/access список компьютеров или сетей, под- лежащих контролю, а также соответствующие предельные значения. Например, строки ClientRate:192.168.6.17 2 ClientRate:170.65.3.4 10 ограничивают узлы 192.168.6.17 и 170.65.3.4 двумя новыми соединениями в минуту и де- сятью новыми соединениями в минуту соответственно. Строки ClientConn:192.168.2.8 2 ClientConn:175.14.4.1 7 ClientConn: 10 устанавливают следующие пределы: два соединения для узла 192.168.2.8, семь — для узла 175.14.4.1 и десять — для одновременных соединений со всеми другими узлами. Еще одним интересным параметром является greet pause. Когда удаленный транс- портный агент соединяется с вашим сервером sendmail, протокол SMTP заставляет 12 Наряду с инструкцией FEATURE ('access_db').
Глава 20. Электронная почта 841 его подождать и поприветствовать ваш сервер, прежде чем начать обмен сообщениями. Однако программы рассылки спама обычно мгновенно выдают команду EHLO/HELO. Это поведение частично объясняется плохой реализацией протокола SMTP в инструмен- тах для рассылки спама, но это может экономить время для спамера. Как бы то ни было, такое поведение является подозрительным и называется “навязыванием” (“slamming”). Параметр greet pause заставляет программу sendmail подождать указанный пери- од времени в начале соединения, прежде чем поздороваться со новообретенным другом. Если удаленный транспортный агент не останавливается, чтобы правильно поздоро- ваться и обменяться командами EHLO или HELO в назначенный момент времени для знакомства, программа sendmail регистрирует ошибку и отказывается от выполнения последующих команд, поступающих от удаленного транспортного агента. Вы можете задать паузу для приветствия с помощью следующей записи в файле с рас- ширением .тс. FEATURE('greet_pause', '700’) Эта строка устанавливает задержку в 700 миллисекунд в начале каждого нового сое- динения. Вы можете устанавливать задержки для узлов или сетей с помощью префикса GreetPause: в базе доступа, но большинство сайтов для этого использует общее значе- ние для этого параметра. Конфигурирование почтовых фильтров в программе sendmail Почтовые фильтры в общих чертах были описаны в разделе 20.5. Этот раздел посвя- щен вопросам конфигурирования почтовых фильтров в программе sendmail. Почтовые фильтры управляются директивами INPUT_MAIL_FILTER и MAIL FILTER и контролиру- ются опциями MILTER MACROS *, которые позволяют указывать, какие фильтры долж- ны применяться на той или иной стадии SMTP-диалога. Например, инструкция INPUT_MAIL_FILTER(’filtername', 'S=mailer:/var/run/filtername.socket’) перенаправляет все входящие сообщения программе /etc/mail/filtername через со- кет, указанный во втором аргументе. Ниже приведен боле реалистичный пример использования почтовых фильтров для соединения с программой SpamAssassin через локальный доменный сокет и для проверки подписей DKIM с помощью программы dkim-filter через сокет TCP на порту 8699. dnl # Enable SpamAssassin INPUT_MAIL_FILTER('spamassassin', 'S=local:/var/run/spamass-milter.sock, F=, T=C:15m;S:4m;R:4m;E:10m') dnl # Enable DomainKeys and DKIM INPUT_MAIL_FILTER('dkim-filter', 'S=inet:8 69 90127.0.0.1, T=R:2m') define('confMILTER_MACROS_CONNECT', ' j , {daemon_name}') define('confMILTER_MACROS_ENVFROM', 'i, {auth_type}') Две последние инструкции устанавливают параметры, передаваемые почтовым филь- трам в начале сеанса связи и после команды MAIL FROM соответственно. Для получения более подробной информации обратитесь к документации в файле libmilter/README или HTML-файлам в каталоге libmilter/docs дистрибутивного пакета sendmail. Файл README содержит обзор и простой пример фильтра, регистри- рующего сообщения в файле. Файлы в каталоге docs описывают интерфейс библиотеки и содержат информацию о том, как использовать разные вызовы для сборки своих соб-
842 Часть II. Работа в сети ственных фильтрующих программ. Отличным источником информации является также сайт milter.org. Соединение сканера amavisd и программы sendmail Amavisd — это внешний коммерческий сканер вирусов и спама, описанный в раз- деле 20.6. В этом разделе показано, как его использовать в сочетании с программой sendmail. Легче всего соединить программу sendmail и сканер amavisd с помощью двух по- чтовых серверов: один получает почту из Интернета и передает ее сканеру amavisd, а второй, работающий только в режиме постановки в очередь, получает отсканированные сообщения от сканера amavisd и передает их дальше либо для локальной доставки, либо в Интернет. Сканер amavisd в этой схеме расположен посредине, действуя как концен- тратор MAIL HUB для входящей почты и узел SMART HOST для исходящей. К сожалению, эта схема сканирует сообщения после постановки писем в почтовую очередь, после того как программа sendmail уже приняла почту для доставки. Проце- дура использования сканера amavisd до постановки писем в почтовую очередь описана в файле README .milter в документации дистрибутивного пакета amavisd-new. Основные строки конфигурации сервера, взаимодействующего с Интернетом, — это те строки, которые передают всю почту на прослушку порта 10024 с помощью сканера amavisd. FEATURE('stickyhost’) define('MAIL_HUB', 'esmtp:[127.0.0.1]’) define('SMART_HOST’, 'esmtp:[127.0.0.1]’) define('confDELIVERY_MODE1, ' q ’) define('ESMTP_MAILER_ARGS’, 'TCP $h 10024’) DAEMON_OPTIONS('Name=receivingMTA') Последняя строка намного облегчает отладку конфигурации, поскольку мы можем сказать, какой процесс (получения писем программой sendmail, передачи писем про- граммой sendmail или процесс сканирования, выполняемый программой amavisd) за- регистрировал сообщения. После сканирования программа amavisd передает сообщения процессу прослушива- ния порта 10025 (а не порта 25, как обычно) с помощью программы sendmail, работаю- щей только в режиме постановки в очередь. С этого момента обработчик очереди либо выполнит полную локальную доставку, либо вернет сообщения в Интернет. На передаточном сервере инструкция DAEMON_OPTIONS('Addr=127.0.0.1, Port=10025, Name=transmittingMTA’) сообщает программе sendmail, что она должна прослушивать порт 10025 в ожидании сообщений, поступающих от сканера amavisd. Эта программа должна регистрировать любую информацию или сообщение об ошибке, содержащее имя transmittingMTA, что- бы отличать его от сообщений, содержащих имя receivingMTA. Существует много настроек (например, пределы, регулирующие производитель- ность), позволяющих обеспечить согласованную работу двух экземпляров программы sendmail. Для того чтобы точно решить, какие проверки следует осуществить, какой процесс выполнить и в каком порядке они должны следовать друг за другом, необходи- мо хорошенько подумать. Полезным источником информации является файл README_FILES/README . sendmail-dual в дистрибутивном пакете amavisd-new.
Глава 20. Электронная почта 843 20.11. Безопасность и программа sendmail С началом лавинообразного роста Интернета программы наподобие sendmail, при- нимающие произвольные входные данные и направляющие их локальным пользовате- лям, в файлы или в интерпретаторы команд, превратились в излюбленные мишени для хакеров. В настоящее время программа sendmail, наряду со службой DNS и даже про- токолом IP, начала “обзаводиться” встроенными средствами аутентификации и шифро- вания, позволяющими решать основные проблемы безопасности. Программа sendmail поддерживает систему SMTP-аутентификации и шифрование по протоколу TSL (Transport Layer Security — безопасность транспортного уровня), ранее известному как протокол SSL (Secure Sockets Layer — протокол защищенных сокетов). Протокол TSL содержит шесть новых конфигурационных параметров, связанных с фай- лами сертификатов и ключей. Кроме того, в базе доступа появились новые операции сравнения, связанные с аутентификацией. В этом разделе мы опишем модель безопасности программы sendmail и систему для защиты конфиденциальности. Затем кратко рассмотрим протоколы TLS и SASL (Simple Authentication and Security Layer — простой протокол аутентификации и защиты) й их применение в сочетании с программой sendmail. Прежде чем довериться содержимому, скажем, файлов .forward или aliases, про- грамма sendmail тщательно проверяет права доступа к ним. Как правило, подобшЯ£ меры предосторожности действительно необходимы, но иногда все же требуетсяГЙх ослабить. С этой целью в программе появился параметр DontBlameSendmail, название которого (“не осуждай sendmail”) подсказывает системным администраторам, что по- сле изменения опции действия программы станут небезопасными. У параметра DontBlameSendmail очень много возможных значений (по последним подсчетам, 55). По умолчанию он равен safe. Полный список значений можно найти в файле doc/op/op.ps дистрибутива sendmail или в книге О’Рейли, посвященной про- грамме sendmail. Впрочем, лучше всего оставить этот параметр заданным по умолчанию. Владельцы файлов Программа sendmail различает трех специальных пользователей: Defaultuser, RunAsUser и TrustedUser. По умолчанию все агенты доставки работают от имени пользователя Defaultuser, если не установлены специальные флаги. При наличии в файле /etc/passwd учет- ной записи mailnull, sendmail или daemon именно эта запись будет соответство- вать пользователю Defaultuser. В противном случае пользователю будут соответ- ствовать значения UID и GID, равные 1. Мы рекомендуем применять учетную запись mailnull. Добавьте ее в файл /etc/passwd со звездочкой в поле пароля, с пустым по- лем идентификатора команд, с пустым полем начального каталога и группой mailnull. Понадобится также добавить запись mailnull в файл /etc/group. Этой учетной запи- си не должны принадлежать никакие файлы. Если программа sendmail не выполняется с правами суперпользователя, для агентов доставки должен быть установлен бит setuid. Если задан пользователь RunAsUser, программа sendmail работает от его имени, иг- норируя пользователя Defaultuser. Если программа запускается с установленным би- том setgid (идентификатор группы меняется на smmsp), то агент подачи почты (програм- ма sendmail) передает транспортному агенту (другой экземпляр sendmail) сообщения по протоколу SMTP. Транспортный агент sendmail не имеет установленного бита setuid, но вызывается с правами корневого пользователя из сценариев запуска системы.
844 Часть II. Работа в сети Пользователю RunAsUser соответствует значение UID, которое присваивается про- грамме sendmail при открытии сокета, подключенного к порту 25. Привилегированные порты (их номера не превышают 1024) могут открываться только суперпользователем, следовательно, программа sendmail первоначально должна работать от имени поль- зователя root. Тем не менее по завершении указанной операции программа может взять себе другое значение UID. Это уменьшает вероятность возможных злоупотребле- ний, если программа sendmail запускается обманным путем. Не применяйте средство RunAsUser на компьютерах, где есть другие пользовательские учетные записи и службы; оно предназначено для брандмауэров и бастионных узлов.13 По умолчанию программа продолжает выполняться от имени пользователя root. Если же учетная запись RunAsUser не эквивалентна суперпользователю, придется мно- гое изменить. Пользователю RunAsUser должна принадлежать очередь почтовых со- общений, он должен иметь возможность читать все подключаемые файлы и файлы баз данных, запускать нужные программы и т.д. На поиск всех файлов и каталогов, владелец которых должен быть изменен, может уйти несколько часов. Пользователь TrustedUser может владеть файлами баз данных и псевдонимов. Ему разрешается запускать демон и перестраивать файл aliases. Этот пользователь необ- ходим для поддержки графических надстроек к программе sendmail, которые вынуж- дены предоставлять ограниченный административный контроль определенным пользо- вателям. Обязательно контролируйте учетную запись, соответствующую пользователю TrustedUser, поскольку через нее можно легко получить права суперпользователя. Пользователь TrustedUser не соответствует классу TRUSTED USERS, который опреде- ляет, кто имеет право менять заголовок “From” сообщений14. Права доступа Для безопасности программы sendmail большое значение имеют права доступа к определенным файлам и каталогам. Установки, приведенные в табл. 20.13, считаются безопасными. Таблица 20.13. Владельцы и права доступа для каталогов, связанных с программой sendmail /var/spool/clientmqueue smmsp:smmsp 770 Почтовая очередь для начальной подачи по- чты /var/spool/mqueue RunAsUser 700 Очередь почтовых сообщений /, /var, /var/spool root 755 Родительские каталоги подкаталога mqueue /etc/mail/* TrustedUser 644 Таблицы, конфигурационный файл, файлы псевдонимов /etc/mail TrustedUser 755 Родительский каталог для разных файлов /etc root 755 Путь к каталогу mail Программа sendmail не будет читать файлы с “ослабленными” правами доступа (на- пример, файлы, открытые для записи, а также файлы, находящиеся в каталогах, которые открыты для записи). Программа sendmail тщательно проверяет путь к любому фай- 13 Бастионные узлы — это специально укрепленные узлы, предназначенные для отражения атаки и размещенные в зоне DMZ или за пределами брандмауэра. 14 Средство TRUSTED USERS обычно применяется для поддержки программ, работающих со списками рассылки.
Глава 20. Электронная почта 845 лу псевдонимов, что иногда сказывается на управлении списками рассылки. Для того чтобы проверить настройки, запустите команду sendmail -v -bi. Флаг -bi заставляет программу проинициализировать базу данных псевдонимов и выдать предупреждение, если права доступа не подходят. Операционная система Solaris имеет удобную программу check-permissions, SOLariS которая соответствует стандартам безопасности программы sendmail и со- общает об опасных путях и файлах. Она прослеживает директивы include в файлах псевдонимов и . forward. Кроме того, она может проверять либо вы- зывающих пользователей, либо всех пользователей, в зависимости от флагов командной строки. Программа sendmail больше не читает файл . forward, если число ссылок на него больше единицы, а путь к каталогу небезопасен (права доступа ослаблены). На этом не так давно попалась Эви Немет, когда ее файл . forward, представляющий собой жесткую ссылку либо на файл . forward. to. boulder, либо на файл . forward. to. sandiego, перестал поддерживать пересылку почты от небольшого узла, с которого ей иногда при- ходили сообщения. Прошли месяцы, прежде чем Эви поняла, что это происходит по ее вине и фраза “Я никогда не получала от вас почту” не является оправданием. Отключить многие ограничения на доступ к файлам можно с помощью опции DontBlameSendmail. Но не забывайте о безопасности. Безопасная пересылка почты в файлы и программы В качестве агента программной доставки мы рекомендуем применять утилиту smrsh, а не /bin/sh; агентом локальной доставки лучше назначить утилиту mail. local, а не /bin/mail. Обе утилиты входят в дистрибутив sendmail. Для их активизации необхо- димо добавить в mc-файл следующие директивы. FEATURE (' smrsh' t ' каталог1) FEATURE (' local_lmtp ’, ' каталог1) Если каталоги не указаны, по умолчанию принимается каталог /usr/libexec. Можно воспользоваться опцией confEBINDlR, чтобы изменить стандартный каталог исполняемых файлов. Найти агентов доставки вам поможет табл. 20.14. Таблица 20.14. Местоположение ограниченных агентов доставки программы sendmail Опера^нна^и^гема sendmail /usr/libexec /usr/libexec /usr/adm Ubuntu /usr/lib/sm.bin /usr/lib/sm.bin /usr/adm SUSE /usr/lib/sendmail.d/bin /usr/lib/sendmail.d/bin - Red Hat /usr/sbin - /etc/smrsh Solaris /usr/lib /usr/lib /var/adm HP-UX /usr/sbin - /var/adm AIX /usr/sbin - /var/adm a а Этот каталог не существует ни в системе HP-UX, ни в системе AIX, поэтому его необходимо создать. Утилита smrsh — это ограниченная оболочка, запускающая программы, находящие- ся только в одном каталоге (по умолчанию — /usr/adm/sm.bin). Она игнорирует за- данные пользователями имена каталогов и деревьев, выполняя поиск требуемых команд
846 Часть II. Работа в сети в собственном безопасном каталоге. Утилита smrsh также блокирует некоторые метасим- волы интерпретатора команд, в частности — оператор переадресации входного потока. В каталоге sm.bin допускается наличие символических ссылок, поэтому создавать копии программ не потребуется. Программа vacation — подходящий кандидат для включения в каталог sm.bin. Не размещайте в нем программу procmail; она небезопасна. Приведем несколько примеров команд вместе с их возможными интерпретациями утилитой smrsh. vacation eric # Выполняется команда /usr/adm/sm.bin/vacation cat /etc/password # Отклоняется, т.к. cat нет в каталоге sm.bin vacation eric < /etc/password # Отклоняется, т.к. оператор < не разрешен Опция SafeFileEnvironment программы sendmail контролирует, куда можно за- писывать сообщения, если в файле aliases или . forward задано перенаправление почты в файл. Это опция заставляет программу осуществить системный вызов chroot, вследствие чего корневым каталогом файловой системы станет не /, a /safe или любой другой указанный в опции каталог. Например, если в файле псевдонимов задается пере- направление почты в файл /etc/passwd, то на самом деле сообщения будут записы- ваться в файл /safe/etc/passwd. Опция SafeFileEnvironment защищает также файлы устройств, каталоги и другие специальные файлы, позволяя записывать почту только в обычные файлы. Это полезно не только в плане улучшения безопасности, но и с точки зрения борьбы с ошибками пользователей. В некоторых системах значение этой опции задается равным /home, что открывает доступ к начальным каталогам пользователей, но оставляет системные файлы вне досягаемости. Агенты доставки тоже могут запускаться в виртуальном каталоге. Опции безопасности В программе sendmail есть опции безопасности, которые определяют следующее: • какие сведения о системе можно узнать из внешнего мира по протоколу SMTP; • что требуется от узла на противоположном конце SMTP-соединения; , • могут ли пользователи просматривать или обрабатывать очередь почтовых со?, общений. В табл. 20.15 приведены текущие значения опций безопасности. Самую последнюю информацию можно узнать в файле doc/op/op.ps дистрибутива. Таблица 20.15. Значения переменной PrivacyOption public needmailhelo Проверка конфиденциальности/безопасности не осуществляется Требуется SMTP-команда HELO (идентифицирует удаленный узел) noexpn novrfy needexpnhelo needvrfyhelo noverba restrictmailq Не допускается SMTP-команда EXPN Не допускается SMTP-команда VRFY Не допускается раскрытие адреса (команда EXPN) без команды НЕЮ Не допускается проверка адреса (команда VRFY) без команды НЕЮ Не допускается “многословный” режим команды EXPN Только пользователи группы, которой принадлежит каталог mqueue, могут просма- тривать очередь сообщений
Глава 20. Электронная почта 847 Окончание табл, 20.15 Значений ХСХ restrictqrun restrictexpand noetrn**’ authwarnings Только владелец каталога mqueue может обрабатывать очередь сообщений Ограничивается объем информации, выдаваемой при наличии флагов -bv и -v6 Не допускается асинхронная обработка очереди К сообщениям добавляется заголовок “Authentication-Warning” (это установка по умолчанию) noreceipts nobodyreturn Запрещается выдача кодов состояния доставки При выдаче кода состояния доставки не возвращается тело сообщения goaway Отменяются все статусные SMTP-запросы (EXPN, VRFYи т.д.) а В “многословном” режиме команда EXPN отслеживает переадресацию в файле . forward и выдает допол- нительную информацию о местонахождении пользовательской почты. Необходимо включать опцию noverb или, еще лучше, поехрп на любом компьютере, имеющем выход во внешний мир. 6 Если только программа не выполняется от имени пользователя root или TrustedUser. в ETRN — это команда протокола ESMTP, которая используется узлами с коммутируемым доступом. Она за- прашивает обработку очереди только для сообщений данного узла. Мы рекомендуем сделать в mc-файле “консервативные” установки. define('confPRIVACY_FLAGS', ''goaway, authwarnings, restrictmailq, restrictqrun’’) По умолчанию установлен лишь параметр authwarnings. Обратите внимание на двойные кавычки: некоторые версии препроцессора т4 требуют этого для предотвраще- ния ненужной интерпретации запятых в списке значений. В системах Red Hat, Solaris и AIX по умолчанию принята установка authwarnings, в системах SuSE и Ubuntu — уста- новки authwarnings, needmailhelo, novrfу, поехрп и noverb, а в системе HP-UX — restrictqrun, goaway и authwarnings. Самыми безопасными являются установки системы HP. Выполнение программы sendmail в виртуальном каталоге (для настоящих параноиков) Те, кого беспокоит влияние программы sendmail на файловую систему, могут за- пускать ее в виртуальной среде. Создайте в этом каталоге минимальную файловую си- стему, включив в нее файл /dev/null, важные файлы каталога /etc (passwd, group, resolv.conf, sendmail. cf, таблицы баз данных, mail/*), необходимые программе sendmail совместно используемые библиотеки, исполняемый файл sendmail, каталог очереди почтовых сообщений и журнальные файлы. Вероятно, вы захотите поэкспери- ментировать со списком. Для запуска программы sendmail в виртуальном окружении используйте команду chroot. # sudo chroot /jail /usr/sbin/sendmail -bd -q30m Отражение атак типа "отказ от обслуживания” Атаки типа “отказ от обслуживания” невозможно предотвратить, потому что нельзя заранее предсказать, является ли сообщение оружием атаки или нет. Злоумышленники могут поступать по-разному, например переполнять SMTP-порт ложными запросами На подключение, “забивать” разделы диска гигантскими сообщениями, засорять вы-
848 Часть II. Работа в сети ходные соединения, бомбардировать систему почтовыми сообщениями и т.д. В про- грамме sendmail имеются конфигурационные параметры, позволяющие ограничить влияние этих атак на систему, но в результате может пострадать и легитимная почта. Определенную помощь может оказать и новая библиотека функций фильтрации почты. Параметр MaxDaemonChildren ограничивает число процессов sendmail. Он не по- зволяет программе захватить все вычислительные ресурсы системы, но зато дает воз- можность хакерам очень легко одолеть службу SMTP. Опция MaxMessageSize защищает каталог очереди от переполнения, но если задать значение опции слишком маленьким, жертвами могут оказаться обычные сообщения. (Следует уведомить пользователей о су- ществующем пределе на размер сообщения, чтобы они не удивлялись, если письмо вдруг вернется обратно. Этот предел обычно устанавливается достаточно большим.) Параметр ConnectionRateThrottle задает предельно допустимое число соединений в секунду. Это может привести к небольшому замедлению работы программы sendmail. Наконец, опция MaxRcpts PerMess age определяет максимальное число получателей сообщения. Программа sendmail всегда умела отказываться от приема сообщений (опция REFUSE LA) и ставить сообщения в очередь (опция QUEUE LA) в зависимости от уровня загруженности системы. Дополнительный параметр DELAY LA позволяет обработку по- чты, но с меньшей скоростью. Подробности изложены в разделе 20.12. Несмотря на все меры предосторожности, трудно предотвратить ситуацию, когда кто-то начинает бомбардировать систему письмами. Это может стать очень неприятной проблемой. SASL: простой протокол аутентификации и защиты Программа sendmail поддерживает систему SMTP-аутентификации, которая опре- делена в документе RFC2554. Она основана на технологии SASL (Simple Authentication and Security Layer — простой протокол аутентификации и защиты), представляющей со- бой систему совместного использования секретного ключа между двумя узлами (см. до- кументы RFC4422 и RFC4752). В ней нужно явно задавать пары серверов, осуществляю- щих взаимную аутентификацию. Обычно она используется между пользовательскими агентами и агентами доставки или между агентами доставки и транспортными агентами внутри сайта. SASL — это базовый механизм аутентификации, который может быть встроен в ряд других протоколов. Механизм SASL (это библиотека) основан на двух концепциях: ав- торизации идентификатора (например, регистрационного имени) и аутентификации идентификатора (например, пароля). Она может применять их для распределения прав доступа к файлам, паролям, сертификатам протокола Kerberos и т.д. Библиотека функ- ций SASL состоит из двух частей: модуля аутентификации (например, регистрационно- го имени) и модуля шифрования (например, пароля). Для использования библиотеки SASL в сочетании с программой sendmail необходимо получить копию библиотеки Cyrus SASL по адресу: ftp: / /ftp.andrew.cmu.edu/pub/cyrus-mail. TLS: безопасность транспортного уровня Еще одна система аутентификации и шифрования — TLS — определена в документе RFC3207. Она реализована в программе sendmail в виде расширения протокола SMTP под названием STARTTLS. Можно даже одновременно использовать протоколы SASL и TLS. Протокол TLS труднее настроить, так как требуется поддержка со стороны центра сертификации. Можно заплатить компании VeriSign, которая выдаст вам необходимые
Глава 20. Электронная почта 849 сертификаты (подписанные открытые ключи, идентифицирующие их предъявителя), или организовать собственный центр сертификации. В процессе ретрансляции почты и приема запросов от других узлов аутентификация осуществляется не на основе имени узла или его IP-адреса, а путем обмена ключами. Записи вида TLS_Srv:secure.example.com ENCR: 112 TLS_Clt:laptop.example.com PERM+VERIFY:112 в базе доступа указывают на то, что используется механизм STARTTLS. Почта, направ- ляемая в домен secure. example. com, должна шифроваться, как минимум, 112-бито- выми ключами. Почта, поступающая от узла secure. example. com, будет приниматься лишь в том случае, если клиент пройдет процедуру аутентификации. Грег Шапиро (Greg Shapiro) и Клаус Ассман (Claus Assmann) из компании Sendmail, Inc., ведут прекрасные веб-страницы, посвященные настройке протоколов SASL и TLS в программе sendmail: sendmail.org/~gshapiro и www.sendmail.org/~ca. Ссылка index на сайте ~са особенно полезна. 20.12. Производительность программы sendmail Программа sendmail имеет ряд конфигурационных опций, предназначенных для повышения производительности. Мы упоминали их ранее в главе, а теперь попытаем- ся более подробно описать наиболее важные из них. Эти опции и средства необходимо учитывать при развертывании крупномасштабной почтовой системы. Но, конечно,’ если пропускная способность системы должна составлять порядка миллиона сообщений в час, имеет смысл приобрести коммерческую версию программы sendmail, предлагае- мую компанией Sendmail, Inc. Режимы доставки Программа sendmail имеет четыре режима доставки: фоновый, интерактивный, с постановкой в очередь и отложенный. Каждый из них представляет собой определенный компромисс между временем задержки и пропускной способностью. В фоновом режиме сообщение доставляется немедленно, но для этого программа должна породить новый процесс. В интерактивном режиме тоже поддерживается немедленная доставка, но ее осуществляет тот же процесс, поэтому удаленный узел вынужден дожидаться результа- тов. В режиме очереди поступившее сообщение помещается в буфер, откуда позднее его извлекает обработчик очереди. Режим отложенной доставки аналогичен предыдущему, но в очередь заносятся также все операции поиска в таблицах, в DNS, в файлах aliases и . forward. Интерактивный режим применяется редко. Фоновый режим обеспечивает меньшее время задержки, а в режиме отложенной доставки и режиме очереди выше про- пускная способность. Режим доставки задается с помощью опции conf DELIVERY_MODE. По умолчанию принят фоновый режим. Группы очередей и разбивка конвертов Группы очередей позволяют создавать несколько очередей для исходящей почты и управлять атрибутами каждой группы по отдельности. Группа очередей используется для разбивки конвертов, позволяя распределить конверт с множеством получателей (напри- мер, сообщение, направленное списку рассылки) между несколькими группами очере- дей. Группа очередей имеет несколько примитивов конфигурации. Подробности можно
850 Часть II. Работа в сети найти в книге О’Рейли Sendmail или в файле cf/README. Это помогает решить проблему, связанную с нахождением слишком большого числа файлов в одном почтовом каталоге. Обработчики очередей Программа sendmail порождает копии самой себя при транспортировке сообще- ний. Можно задавать, сколько копий программы должно выполняться в любой момент времени и даже сколько из них должно быть связано с каждой группой очередей. Это позволяет системным администраторам перераспределять нагрузку между программой sendmail и операционной системой на крупных почтовых концентраторах. Число демонов sendmail, обрабатывающих каждую очередь, определяется тремя оп- циями. • MAX_DAEMON_CHILDREN — задает общее число демонов sendmail, которые могут выполняться одновременно, включая те, что обрабатывают очередь, и те, что при- нимают входящую почту. • MAX_QUEUE—CHILDREN — задает общее число одновременно выполняющихся об- работчиков очереди. • MAX_RUNNERS—PER—QUEUE — задает стандартный предел числа обработчиков одной очереди, если в определении группы отсутствует параметр Runners= (или R=). Контроль средней загруженности Программа sendmail всегда умела отказываться от приема сообщений или поме- щать сообщения в очередь, когда показатель средней загруженности системы становится очень высоким. К сожалению, измерение средней загруженности осуществляется раз в минуту, что не позволяет с достаточной степенью точности контролировать потребление программой sendmail ресурсов системы. Новая опция DELAY LA позволяет задать по- казатель средней загруженности, при котором программа должна замедлить свою рабо- ту: она будет делать секундную паузу между выполнением SMTP-команд текущего сое- динения и приемом нового запроса на подключение. По умолчанию опция равна нулю, т.е. режим отключен. Обработка недоставленных сообщений Недоставленные сообщения, остающиеся в почтовой очереди, способны существен- но снизить производительность почтового сервера. У программы sendmail есть ряд средств для борьбы с такими сообщениями. Наиболее эффективным из них является опция FALLBACK MX, задающая пересылку сообщений на другой компьютер, если их не удалось доставить с первой попытки. Эта опция позволяет главному серверу заниматься доставкой почты с правильными адресами, перепоручив “проблемную” почту резервно- му серверу. Вторая опция, HOST STATUS DIRECTORY, позволяет сохранять информацию о состоянии удаленных узлов между запусками обработчиков очереди. Опция FALLBACK MX позволяет существенно повысить производительность узла с большими списками рассылки, где неизбежно попадаются временно или постоянно недоступные адреса. Значением опции должен быть адрес компьютера, обрабатывающе- го отложенную почту. Например, команда define('confFALLBACKJMX', 'mailbackup.xor.com')
Глава 20. Электронная почта 851 задает пересылку всех сообщений, которые не удалось доставить с первого раза, на цен- тральный сервер mailbackup. xor. com для последующей обработки. Разрешается иметь несколько резервных серверов, если указанному узлу соответствует несколько записей MX в базе данных DNS. Параметр to inconnect задает паузу перед первой попыткой связи и отправки со- общения. Если эта пауза установлена короткой, то транспортный агент будет перегружен излишней работой. Однако она позволяет главному серверу обработать большой список рассылки за одну попытку в течение рекордно короткого времени. На резервном сервере можно воспользоваться опцией HOST STATUS DIRECTORY для решения проблемы повторных сбоев. Эта опция предписывает программе sendmail хранить статусный файл для каждого компьютера, на который посылается почта. На основании этой информации определяются приоритеты просмотра узлов при очеред- ной обработке очереди. Это позволяет реализовать схему отрицательного кеширования и хранить статусную информацию в промежутках между запусками обработчиков оче- редей. Результатом становится повышение производительности серверов, обрабатыва- ющих списки рассылки с большим числом неправильных адресов, хотя это и затратно с точки зрения файлового ввода-вывода. В следующем примере для хранения статусной информации выделяется каталог /var/ spool/mqueue/ .hoststat (его нужно предварительно создать). define('confHOST_STATUS_DIRECTORY’, '/var/spool/mqueue/.hoststat’) Если указать относительный путь к каталогу .hoststat, то он будет создан в ка- талоге очереди. Программа sendmail формирует собственную иерархию подкаталогов, основываясь на имени узла-получателя. Например, если почту по адресу evi@anchor. cs. Colorado. edu не удается доста- вить, то статусная информация будет занесена в файл anchor каталога /var/spool /mqueue/. hosts tat/edu. /Colorado. /cs. /, так как наиболее приоритетная запись MX узла anchor ссылается на него самого. Если бы записи MX задавали перенаправле- ние почты узла anchor на узел foo, то имя файла было бы foo, а не anchor. Еще одна возможность повышения производительности связана с заданием мини- мального времени пребывания сообщения в очереди. Сообщение, которое не удалось доставить с первого раза, помещается в очередь и остается там до тех пор, пока не будет осуществлена повторная попытка. Обычно это делается в сочетании с флагами команд- ной строки, задающими более частую обработку очереди (например, -q5m). Если обра- ботчик очереди “зависает” на каком-то сообщении, то через 5 минут запускается другой. Вся очередь обрабатывается блоками, формируемыми в зависимости от того, какие со- общения превысили минимальное время пребывания в очереди. Таким образом, запуск программы sendmail с флагами -bd -q5m и включение опции define('confMIN-QUEUE_AGE’, ' 27m’) в конфигурационном файле позволяют организовать более оперативную обработку почты. Настройка ядра Если UNIX- или Linux-систему планируется использовать в качестве крупного по- чтового сервера, придется модифицировать ряд параметров сетевой конфигурации ядра. В табл. 20.16 приведены параметры, которые необходимо изменить в системе Linux на загруженномтючтовом сервере, а также их рекомендуемые значения и значения, задан- ные по умолчанию.
852 Часть II. Работа в сети Таблица 20.16. Параметры ядра, которые требуется менять на крупных почтовых серверах Переменная (относительна катал ora^ioc/sys) По умолчанию Рекомендуется ~' net/ipv4/tcp_fin_timeout 180 30 net/ipv4/tcp_keepalive_time 7200 1800 net/core/netdev_max_backlog 300 1024 fs/filejnax 4096 16384 fs/inode_max 16384 65536 Л Для того чтобы настроить параметры для системы Linux, примените коман- Лв ду оболочки echo к соответствующей переменной в файловой системе /ргос. Общее описание этой процедуры приведено в разделе 14.11. Эти изменения можно сделать постоянными, выполнив команду sysctl или поместив соот- ветствующие команды echo в сценарий оболочки, который выполняется во время загрузки. Например, для того чтобы изменить значение тайм-аута FIN в протоколе TCP, мож- но выполнить следующую инструкцию. linux$ sudo sh -с "echo 30 > /ргос/sys/net/ipv4/tcp__fin__timeout"15 Для настройки сетевых параметров в системах Solaris и HP-UX используется soiaris команда ndd. Реализация системы HP-UX хорошо задокументирована, и ко- fXfft манда ndd -h (справка) дает точное описание каждой переменной, диапазона ее значений и значения, заданного по умолчанию. В системе Solaris команда ndd интерпретирует знак вопроса как попытку обратиться к документации, но перед знаком вопроса необходимо поставить обратную косую черту (ndd \?), чтобы защитить эту команду от оболочки. К сожалению, команда ndd в систе- ме Solaris просто перечисляет настраиваемые переменные, а не описывает их. Например, чтобы изменить значение тайм-аута FIN в системе HP-UX с помощью команды ndd, необходимо выполнить следующую команду. hp-ux$ sudo ndd -set tcp__fin__what__ timeout 30000 Единица тайм-аута для команды ndd задается в миллисекундах, поэтому указано чис- ло 30000, а не 30. В системе Solaris эта переменная называется tcp_f in_wait_2__f lush- interval. Интересно, что в справочной системе не указано никаких единиц измерения... но поисковая машина Google знает о них! Фактически этими единицами измерения яв- ляются миллисекунды, причем значение по умолчанию равно 675000. Более подробно команда ndd описана в разделах 14.13 (для системы Solaris) и 14.14 (для системы HP-UX). • Система AIX для настройки параметров сети использует команду по. Ин- струкция sudo по -L перечисляет настраиваемые переменные с указанием их минимального, максимального и текущего значений наряду с единицами их измерения. Если вы хотите, что изменения стали постоянными, используй- те команду по с флагом -р. В этом случае ваши изменения сохранятся после перезагрузки. 15 Если вы попытаетесь выполнить эту команду в виде sudo echo 30 > /ргос/sys/net/ ipv4/tcp__fin^timeout", то просто получите сообщение “permission denied”, потому что обо- лочка попытается открыть результирующий файл до выполнения команды sudo. Команда sudo должна применяться и к команде echo, и к перенаправлению. Следовательно, необходимо создать корневую подоболочку, в которой выполняется вся команда: sudo sh -с "echo...".
Глава 20. Электронная почта 853 Например, для задания параметра FIN_WAIT протокола TCP используется такая ко- манда. aix# sudo по -р -о tcp__finwait2=60 Единицей измерения этого параметра является половина секунды, поэтому значение 60 соответствует рекомендуемым 30 секундам. Команда по описана в разделе 14.15. 20.13. Сбор статистических данных, ТЕСТИРОВАНИЕ И ОТЛАДКА Конфигурация, основанная на применении препроцессора ш4, в определенной сте- пени тестируется автоматически. Низкоуровневая отладка, в основном, не требуется. Единственное, что невозможно контролировать при помощи флагов отладки, — это смысловые ошибки. В процессе подготовки главы мы обнаружили несколько по- добного рода ошибок в конфигурационных файлах. Иногда, к примеру, вызывалось средство без сопутствующего ему макроса (в частности, активизировалось средство masquerade envelope, но не включался режим маскирования адресов с помощью ма- кроса MASQUERADE AS). Или конфигурация программы sendmail не соответствовала настройкам брандмауэра, который определял, какую почту разрешается пропускать. Нельзя проектировать почтовую систему саму по себе. Ее необходимо согласовать с имеющимися записями MX базы данных DNS и настройками брандмауэра. Мониторинг очереди С помощью команды mailq (эквивалент команды sendmail -bp) можно просма- тривать состояние сообщений, помещенных в очереди. Сообщение могут помещаться в очередь после доставки или при неудачной попытке доставки. Команда mailq выводит на печать отчет о файлах /var/spool/mqueue в любой заданный момент. Результат позволяет определить, почему сообщение могло быть за- держано. Если выясняется, что в системе увеличивается поток почтовых сообщений, системный администратор может отследить попытки программы sendmail разобрать этот завал. По умолчанию существует две очереди: для сообщений, полученных через порт 25, и для сообщений, полученных через порт 587 (очередь подачи для клиентов). Клиентскую очередь можно увидеть с помощью команды mailq -Ас. Ниже приведен типичный результат работы команды mailq. В отчете указано, что доставки ожидают три сообщения. $ sudo mailq /var/spool/mqueue (3 requests) -----Q-ID-----—Size—---------Q-Time-------------------Sender/Recipient k623gYYk008732 23217 Sat Jul 1 21:42 MAILER-DAEMON 8BITMIME (Deferred: Connection refused by agribusinessonline.com.) <Nimtz@agribusinessonline.com> k5ULkAHB032374 279 Fri Jun 30 15:46 <randy@atrust.com> (Deferred: Name server: k2wireless.com.: host name lookup fa) <relder@k2wireless.com> k5UJDm72023576 2485 Fri Jun 30 13:13 MAILER-DAEMON (reply: read error from mx4.level3.com.) <lfinistObbnplanet.com>
854 Часть II. Работа в сети Если вы считаете, что разбираетесь в ситуации лучше, чем программа sendmail, или просто хотите, чтобы программа sendmail попыталась немедленно повторить по- пытку доставки сообщений, попавших в очередь, можете заставить обработчик очереди выполнить команду sendmail -q. Если вы используете команду sendmail -q -v, то программа sendmail показывает результаты для каждой попытки доставки, что часто оказывается полезным для отладки. Программа sendmail повторяет доставку каждому обработчику очереди по истече- нии заданного интервала (как правило, каждые 30 минут). Журнальная регистрация Программа sendmail регистрирует сообщения об ошибках и своем состоянии через систему Syslog. Это делается от имени средства mail на уровнях от debug до crit. Все сообщения помечаются строкой “sendmail”. Изменить эту установку можно с помощью флага командной строки -L, что довольно удобно, если отлаживается одна из копий программы, в то время как остальные копии продолжают нормально работать. Ш Подробнее о системе Syslog рассказывалось в главе 11. Опция confLOG LEVEL, заданная в командной строке или в файле конфигурации, определяет уровень важности, который программа sendmail примет в качестве порого- вого. Высокие пороговые значения соответствуют низким уровням важности и обеспе- чивают регистрацию большего объема информации. В табл. 20.17 показано приблизительное соответствие между уровнями журнальной регистрации в программе sendmail и уровнями важности Syslog. Таблица 20.17. Соотношение между пороговыми уровнями программы sendmail и уровнями важности Syslog Порог Й S'//'! в ж г 0 Регистрация отключена 1 alert или crit 2 crit 3 err или warning 4 notice 5-11 info >=12 debug Напомним, что сообщение, зарегистрированное в системном журнале на конкретном уровне, относится как к этому уровню, так и ко всем находящимся выше уровням. Файл /etc/syslog.conf определяет окончательный пункт назначения каждого сообщения. Местоположения, заданные по умолчанию, показаны в табл. 20.18.16 Несколько программ могут обрабатывать регистрационные файлы sendmail, созда- вая конечные продукты, которые варьируются от простых количественных и текстовых таблиц (mreport) до сложных веб-страниц (Yasma). У системного администратора мо- жет возникнуть необходимость или желание ограничить доступ к этим данным или, по крайней мере, проинформировать пользователей о сборе данных о них. Например, про- 16 Было бы отлично, если бы кто-нибудь предпринял попытку стандартизации этих беспоря- дочных и, на первый взгляд, бессмысленных различий в сценариях, чтобы обеспечить их пере- носимость.
Глава 20. Электронная почта 855 грамма Yasma (Yet Another Sendmail Log Analizer) позволяет скрывать имя пользователя, которому адресована почта, попавшая в отчет. Таблица 20.18. Местоположения регистрационных журналов программы sendmail Система , • <( Ubuntu SUSE Red Hat Solaris HP-UX AIX /var/log/mail.log /var/log/mail /var/log/maillog /var/log/syslog и /var/adm/messages /var/adm/syslog/mail.log /var/log/mail 20.14. Почтовый агент Exim Агент транспорта и доставки почты Exim был написан в 1995 году Филипом Хейзелом из Кембриджского университета и распространен под универсальной общедоступной лицензией GNU. Текущий выпуск, версия 4.71 Exim, появился в конце 2009 года. В интерактивном доступе находятся тонны документации о программе, кроме того, было опубликовано несколько книг, написанных автором программного обеспечения. Запросы в поисковой системе Google о почтовом сервере Exim часто приводят к уста- ревшим, а иногда и вообще неприемлемым ответам, поэтому в первую очередь следует обращаться к официальной документации. В дистрибутивный пакет входит документ о спецификации и конфигурации (doc/spec. txt), состоящий из более чем 400 страниц. Этот документ также доступен на сайте exim. org в виде файла PDE Он представляет собой исчерпывающий справочник по программе Exim, который неукоснительно об- новляется с каждым новым выпуском. Существует два подхода к конфигурации постового сервера Exim: Debian и альтерна- тивный. Операционная система Debian использует препроцессор т4 и управляет своим собственным набором списков рассылки для поддержки пользователей. Мы не будем рассматривать расширения конфигурации, характерные для системы Debian. Начиная с выпуска 4.70 почтовый сервер Exim прекратил поддержку технологии DomainKeys (предшественницы DKIM) и по умолчанию в настоящее время предусма- тривает поддержку технологии DKIM. В реальных условиях обе системы могут и долж- ны сосуществовать, но система DKIM является стандартом IETF и в конце концов за- менит систему DomainKeys. Почтовый сервер Exim похожа на программу sendmail тем, что он реализован как единственный процесс, выполняющий все почтовые операции. Однако его авторы отка- зались от исторического багажа программы sendmail (поддержки устаревших форматов адресов, необходимости получать почту для узлов, не находящихся в Интернете, и т.д.). После компиляции в сочетании с инструментом для сканирования содержимого, посто- вый сервер Exim взаимодействует с популярными сканерами спама и вирусами, такими как SpamAssassin и ClamAV. Контроль правил реализован с помощью списков доступа, ко- торые могут принимать или отклонять сообщения или передавать их внешнему программ- ному обеспечению для сканирования. Доступ к фильтрам пользователей обеспечивается посредством записей в пользовательских файлах . forward. Многие аспекты функцио- нирования почтового сервера Exim определяются во время компиляции, при этом ориен- тирами являются база данных почтового сервера Exim и форматы хранения сообщений.
856 Часть II. Работа в сети Основные рабочие инструменты в почтовом сервере Exim называются маршрутиза- торами и транспортными средствами. Оба они относятся к общей категории “драйве- ров”. Маршрутизаторы решают, как сообщения должны быть переданы, а транспортные средства выбирают способ доставки. Маршрутизаторы — это упорядоченный список адресов, которые следует проверить, а транспортные средства — неупорядоченный на- бор способов доставки. Инсталляция почтового сервера EXIM Последнюю версию дистрибутивного пакета можно загрузить с сайта exim.org или, если ваш сайт работает под управлением системы Linux, из вашего любимого репози- тария пакетов. Место, где следует инсталлировать программу, идентификаторы пользо- вателей и другие параметры указаны в файлах README и src/EDITME. Файл EDITME со- держит более 1000 строк, которые по большей части представляют собой комментарии к процессу компиляции; требуемые изменения помечены. После редактирования сохра- ните файл как .. /Local/Makefile или . . /Local/Makef±1е-имя_ОС (если в одном и том же каталоге вы создаете конфигурации для разных операционных систем), а затем выполните команду make. Ниже перечислены несколько важных переменных (по нашему мнению) и предла- гаемые значения (по мнению разработчиков почтового сервера Exim) из файла EDITME. Первые пять строк являются обязательными, остальные только рекомендуются. BIN_DIRECTORY=/usr/exim/bin SP00L_DIRECT0RY=/var/spool/exim CONFIGURE_FILE=/usr/exim/configure SYSTEM_ALIASES_FILE=/etc/aliases EXIM_USER=ref:exim ROUTER_ACCE PT=ye s ROUTER_DNSLOOKUP=yes R0UTER_IPLITERAL=yes ROUTER_MANUALROUTE=yes ROUTER_QUERYPROGRAM=yes ROUTER_REDIRECT=yes TRANSPORT_APPENDFILE=yes # Место для исполняемого модуля exim # Каталог для почтовой очереди # Файл конфигурации программы Exim # Место для файлов псевдонимов # Пользователь программы EXIM # Драйверы маршрутизатора TRANSPORT_AUTOREPLY=yes TRANSPORT_PIPE=yes TRANSPORT_SMTP=yes SUPPORT_MAILDIR=yes SUPPORT_MAILSTORE=yes SUPPORT_MBX=yes LOOKU P_DBM=ye s LOOKUP_LSEARCH=yes LOOKUP_DNS DB=yes LOOKUP_CDB=yes USE_DB=yes DBMLIB=-ldb WITH_CONTENT_SCAN=yes EXPERIMENTAL_SPF=yes CFLAGS += -I/usr/local/include LDFLAGS += -lspf2 LOG_FILE_PATH=/var/log/exim_%slog # Драйверы транспорта # Разрешенные форматы почтовых ящиков # Системы управления базами данных # Метод последовательного поиска # Разрешает почти все поиски в DNS # Константа Дана Бернштейна для поиска # Использовать Berkeley DB (из README) # (из файла README) # Включает сканирование содержимого # через списки ACL # Включает поддержку SPF, нужна libspf2 # Из www.libspf2.org # Файлы журнала: file, syslog или оба
Глава 20. Электронная почта 857 LOG_FILE_PATH=syslog LOG_FILE_PATH=syslog:/var/log/exim_%slog EXICYCLOG_MAX=10 # Количество сохраненных файлов журнала # равно 10 Если вы собираетесь использовать маршрутизаторы и транспортные средства, то их следует скомпилировать в код. В настоящее время, которое характеризуется большими объемами доступной памяти, их можно использовать все вместе. Некоторые пути, заданные по умолчанию, являются нестандартными: например, бинарный файл в каталоге /usr/exim/bin и файл PID в каталоге /var/spool/exim. Эти параметры можно изменить в соответствии со своим инсталлированным программным обеспечением. Существует около десяти доступных систем управления базами данных, включая MySQL, Oracle, CDB17 и LDAP. Если вы хотите выбрать систему LDAP, то должны ука- зать переменную ldap lib type, которая сообщит программе Exim о том, что вы ис- пользуете библиотеку LDAP (вариантами являются системы Netscape, Solaris и разные версии системы OpenLDAP). Кроме того, вы должны указать путь для включения фай- лов и библиотек системы LDAP. В файле EDITME хранится информация о любых зависимостях, которые могут пона- добиться при выборе базы данных. В комментариях о зависимостях, которые сопрово- ждают каждую запись, есть фраза “(from README)”, в которой указан не файл src/ EDITME, а именно README. Файл EDITME имеет много дополнительных параметров безопасности, которые по- зволяют активизировать дополнительные возможности, такие как SMTP AUTH, TLS, SASL, РАМ, а также параметры управления владением файлом и разрешениями доступа к нему. Некоторые возможности программы Exim можно отключить на этапе компиля- ции, чтобы ограничить последствия ее взлома злоумышленниками. До завершения инсталляции мы рекомендуем прочитать файл EDITME полностью. Это даст вам приятное ощущение, что вы управляете выполнением программы посред- ством конфигурационного файла. Высокоуровневый файл README содержит много ин- формации о деталях, специфичных для операционных систем, которые иногда полезно включать в файл EDITME. Модифицировав файл EDITME и инсталлировав его в каталог Local/Makef ile, вы- полните команду make на вершине дистрибутивной иерархии, а затем инструкцию sudo make install. На следующем этапе необходимо протестировать исполняемый модуль exim и убедиться, что он доставляет почту так, как ожидается. Полезная тестовая доку- ментация содержится в файле doc/spec. txt. Убедившись, что почтовый сервер Exim работает правильно, свяжите модуль /usr/ sbin/sendmail с модулем exim, чтобы почтовый сервер Exim мог эмулировать тради- ционный интерфейс командной строки для обмена информацией с почтовой системой, используемой многими почтовыми агентами. Кроме того, следует сделать так, чтобы мо- дуль exim выполнялся во время загрузки. Загрузка почтового сервера Exim На компьютере, выполняющем роль концентратора почты, модуль exim обычно запускается во время загрузки в режиме демона и работает непрерывно, прослушивая порт 25 и принимая сообщения в рамках протокола SMTP. 17 CDB — это неизменяемая база данных Дана Бернштейна; она хорошо масштабируется.
858 Часть II. Работа в сети Детали загрузки операционной системы описаны в разделе 3.6. Как и программа sendmail, почтовый сервер Exim может иметь несколько режимов работы, и при за- пуске с разными флагами она выполняет разные функции. Флаги режима почтового сервера Exim похожи на флаги режима программы sendmail, потому что разработчики модуля exim очень стараются обеспечить совместимость при вызове почтовых агентов и других инструментов. Некоторые из наиболее распространенных флагов перечислены в табл. 20.19. Таблица 20.19. Распространенные флаги командной строки модуля exim флаг / ~ J?-"' \ ‘ - 7 - bd Запускается в режиме демона и прослушивает соединения на порту 25 - bf или -bF Запускается в пользовательском режиме или в режиме тестирования системного фильтра - bi Перестраивает хешированные псевдонимы (эквивалентен команде newaliases) - bp Выводит на печать почтовую очередь (эквивалентен команде mailq) - bt Включает режим тестирования адресов -bv Проверяет синтаксические ошибки в конфигурационном файле -^-категория Запускается в режиме отладки; очень гибкая конфигурация, учитывающая категории -q Запускает обработчик очереди (эквивалентен команде runq) Любые ошибки, существующие в конфигурационном файле, можно обнаружить на этапе синтаксического анализа с помощью команды exim -bv, но некоторые ошибки можно выявить только на этапе выполнения. Распространенная ошибка — неправильно расположенные скобки. Все нюансы, связанные с флагами и параметрами команды exim, включая обшир- ную информацию об отладке, можно найти на соответствующей справочной странице. Утилиты почтового сервера Exim Дистрибутивный пакет программы Exim включает в себя набор утилит, облегчающих слежение, отладку и проверку инсталляции. Ниже приведен список с кратким описани- ем каждой из этих утилит. Более подробная информация о них изложена в документации. • exiwhat — перечисляет выполняемые процессы программы Exim • exiqgrep — выполняет поиск в очереди • exiqsumm — создает отчет об очереди • exigrep — просматривает основной журнал • exipick — ищет сообщения по заданным критериям • exicyclog — чередует регистрационные файлы • eximstats — извлекает статистические показатели из журнала • exim_checkaccess — проверяет доступность заданного IP-адреса • exim_dbmbuild — создает файл DBM • exinext — извлекает информацию о повторных попытках • exim_dumpdb — распечатывает базу подсказок • exim_tidydb — очищает базу подсказок • exim_f ixdb — исправляет базу подсказок
Глава 20. Электронная почта 859 • exim_lock — блокирует файл почтового ящика • exilog — визуализирует регистрационные файлы на нескольких серверах Еще одна утилита, которая входит в пакет Exim, называется eximon. Она представ- ляет собой приложение для системы X Windows, которое выводит на экран состояние программы Exim, состояние ее очереди и остаток регистрационного файла. Как и основ- ной дистрибутивный пакет, она создается с помощью редактирования хорошо коммен- тированного файла EDITME в каталоге exim_monitor и выполнения команды make. Параметры, заданные по умолчанию для утилиты eximon, подобраны очень удачно, поэтому конфигурирование этого приложения обычно не вызывает затруднений. Кроме того, конфигурирование и управление очередью можно осуществлять с помощью гра- фического интерфейса утилиты eximon. Язык конфигурации программы Exim Рассматриваемый здесь язык конфигурации программы Exim (точнее, языки: один для фильтров, другой для регулярных выражений и так далее) напоминает довольно старый (разработанный в 1970-х годах) язык Forth.18 При первом чтении конфигурации программы иногда трудно отличить ключевые слова и имена параметров, которые явля- ются фиксированными в языке Exim, от имен переменных, определенных системными администраторами. Для того чтобы решить эту проблему, мы поставили перед именем каждой переменной префикс шу_. Несмотря на то что программа Exim рекламируется как легкая для конфигурирования и хорошо документированная, ее довольно сложно освоить. Раздел спецификации “Как программа Exim получает и доставляет почту” требует от новичков больших усилий. Тем не менее в ней изложены все основные концепции, лежащие в основе системы. После присвоения стандартной переменной конкретного значения язык Exim иногда активизирует определенные действия. В нем есть около 120 стандартных переменных, значения которых можно изменять в результате одного из действий. Эти переменные можно включать в условные выражения. Выражение для вычисления инструкции if и подобных ей может напомнить обрат- ную польскую запись, характерную для времен расцвета калькуляторов Hewlett-Packard. Рассмотрим простой пример. В строке acl_smtp_rcpt = ${if ={25}{$interface_port} \ {acl_check_rcpt} {acl_check_rcpt_submit} } установка параметра acl smtp rcpt вызывает реализацию списка управления досту- пом для каждого пользователя (т.е. выполнение команды SMPT RCPT). Значение, при- своенное этому параметру, может быть равным acl check rcpt или acl_check_rcpt__ submit, в зависимости от того, имеет ли переменная $interface_port значение 25. Мы не будем углубляться в детали языка конфигурации программы Exim, лишь по- советуем читателям обратиться к обширной документации. В частности, обратите вни- мание на раздел продолжения строки в спецификации программы Exim. Файл конфигурации программы Exim Поведением программы Exim во время выполнения управляет файл конфигурации, который обычно называется /usr/exim/configure. Его имя представляет собой одну 18 Для экспертов в компьютерных науках заметим, что этот язык является полным по Тьюрингу; в переводе для простых смертных это значит “мощный и сложный”.
860 Часть IL Работа в сети из обязательных переменных, задаваемых в файле EDITME и компилируемых в бинар- ный код. Файл конфигурации src/configure. default, поставляемый по умолчанию, сопро- вождается подробными комментариями и хорошо подходит для новичков. Мы рекомен- дуем не слишком далеко отклоняться от этого файла, пока вы не освоитесь с парадигмой Exim и не научитесь создавать более сложные конфигурации для специальных ситуаций. Разработчики программы Exim хорошо продумали поддержку наиболее распространенных ситуаций и создали вполне разумные конфигурации, предусмотренные по умолчанию. Рекомендуем также не изменять имена переменных, использованных в файле кон- фигурации, заданном по умолчанию, поскольку именно их ожидают увидеть в списках рассылки люди, которые будут отвечать на ваши вопросы о конфигурации. Программа exim выводит сообщения в поток и прекращает работу, если в вашем файле конфигурации есть синтаксическая ошибка. Однако она не выявляет все синтак- сические ошибки немедленно, поскольку не обращается к переменным, пока в них нет потребности. Порядок записей в файле конфигурации не совсем произвольный: раздел глобальных параметров конфигурации должен существовать и быть первым. Все остальные разделы являются необязательными и могут следовать в любом порядке. Перечислим некоторые разделы. • Глобальные параметры конфигурации (обязательны) • acl — списки управления доступом, фильтрующие адреса и сообщения • authenticators — раздел для параметров команды SMPT AUTH или протокола аутентификации TLS • routers — упорядоченная последовательность, предназначенная для определения места назначения сообщения • transports — определения драйверов, предназначенных для фактической доставки • retry — настройки правил для решения проблем, связанных с сообщениями • rewrite — правила перезаписи глобальных адресов • local scan — ловушка для спама Каждый раздел, за исключением первого, начинается с инструкции begin имя- раздела, например begin acl. Инструкции end имя-раздела не существует; призна- ком конца раздела является инструкция begin следующего раздела. Отступы между раз- делами облегчают чтение, но для программы Exim значения не имеют. Некоторые инструкции конфигурации присваивают имена объектам, которые впо- следствии будут использованы для управления потоками сообщений. Эти имена должны начинаться с буквы и содержать только буквы, цифры и символ подчеркивания. Если первым символом, отличающимся от разделителей строки, является символ #, то вся остальная часть строки считается комментарием. Это значит, что вы не можете поме- стить комментарий в строку, в которой помещается инструкция; он не будет распознан как комментарий, поскольку его первый символ не является символом #. Программа Exim позволяет включать файлы в любое место файла конфигурации. Су- ществует две формы включения файлов. .include absolute-path .include_if_exists absolute-path
Глава 20. Электронная почта 861 Первая форма генерирует ошибку, если файла нет. Несмотря на то что включение файлов позволяет сохранять небольшой объем конфигурационного файла, за время су- ществования сообщения они считываются несколько раз, поэтому может быть лучше просто включить их содержимое прямо в файл конфигурации. Глобальные параметры В разделе глобальных параметров задается множество данных, включая операцион- ные параметры (пределы, размеры, тайм-ауты, свойства почтового сервера на указанном узле), определения списков (локальных узлов, локальных узлов для перенаправления, удаленных доменов для перенаправления) и макросы (имя узла, контакт, местоположе- ние, сообщения об ошибках, банер SMTP). Параметры Параметры устанавливаются с помощью следующей синтаксической конструкции. имя_параметра = значение [я] Здесь значения могут быть булевыми или строчными, целыми или десятичными чис- лами, а также временными интервалами. Допускается также несколько значений, в этом случае они разделяются двоеточиями. Использование двоеточия в качестве разделителя создает проблему, потому что в адресах IPv6 оно является частью адреса. Решить эту проблему можно путем удваи- вания количества двоеточий, но намного проще и удобнее для чтения переопределить символ разделения и задать его равным < во время присвоения параметру его значения. Например, в следующих строках задаются значения параметра localhost interfaces, содержащие IPv4- и 1Ру6-адреса локального узла. local_interfaces = 127.0.0.1 : ::::1 local_interfaces = <; 127.0.0.1 ; ::1 Вторая форма, в которой в качестве разделителя используется точка с запятой, явля- ется более удобной для чтения и менее уязвимой для ошибок. Существует огромное количество параметров — в предметном указателе докумен- тации их более 500. А мы говорили, что программа sendmail была слишком сложной! Большинство параметров имеет вполне разумные значения по умолчанию, и все пара- метры имеют информативные имена. Для того чтобы легко находить новый параметр, целесообразно скопировать файл doc/spec. txt из дистрибутивного пакета в свой при- вычный текстовый редактор. Мы не собираемся описывать все параметры, а упомянем лишь те из них, которые встречаются в наших примерах. Списки Программа Exim использует четыре вида списков, которые объявляются с помощью ключевых слов hostlist, domainlist, addresslist и localpartslist. Ниже при- ведены два примера использования ключевого слова hostlist. hostlist my_relay_list = 192.168.1.0/24 : myfriend.example.com hostlist my_relay_list = /usr/local/exim/relay_hosts.txt Члены списка могут быть перечислены непосредственно в строке или загружены из файла. Если они указываются непосредственно в строке, то разделяются двоеточиями. Существует до 16 именованных списков каждого типа. В примерах, приведенных выше,
862 Часть II. Работа в сети мы включили все компьютеры в локальной сети /24 и указали конкретное имя локаль- ного компьютера. Символ @ может быть членом списка; он означает имя локального узла и помогает написать единственный обобщенный конфигурационный файл, который будет приме- няться на всех компьютерах вашей сети. Не менее полезным является обозначение @ [ ], которое означает все IP-адреса, прослушиваемые программой Exim; иначе говоря, все IP-адреса локального узла. Для того чтобы сослаться на список, следует просто поставить символ + перед его именем, если хотите сравнивать его члены, или !+, если хотите сравнивать элементы, не являющиеся членами списка; например, +my_relay_list. Между знаком + и именем списка пробела быть не должно. Списки могут содержать ссылки на другие списки, а знак ! означает отрицание. Списки, содержащие ссылки на переменные (например, $variable_name), замедляют обработку, потому что по умолчанию программа Exim не может кешировать результаты сравнений по списку. Макрос Макросы можно использовать для определения параметров, сообщений об ошиб- ках и т.д. Грамматический разбор макросов очень примитивен, поэтому вы не можете определить макрос, имя которого является подмножеством другого макроса, не получив непредсказуемых результатов. Синтаксис макроса выглядит следующим образом. MACRO_NAME = остальная часть строки Например, в первой из приведенных ниже строк определяется макрос с именем ALIAS QUERY, который выполняет поиск записи о псевдониме пользователя в базе дан- ных MySQL. Вторая строка демонстрирует использование макроса для выполнения ре- ального поиска, результат которого хранится в переменной с именем data. ALIAS_QUERY = \ select mailbox from user where login = ’${quote_mysql:$local_part}'; data = ${lookup mysql{ALIAS_QUERY}} Имена макросов не обязательно набирать только прописными буквами, но они должны начинаться с прописной буквы. Однако соглашение, по которому макросы со- стоят только из прописных букв, повышают ясность текста. Файл конфигурации может содержать директиву if def, вычисляющую макрос. Система использует ее, чтобы опре- делить, включать или нет фрагмент конфигурационного файла. Поддерживаются все возможные формы инструкции if def; все они начинаются с точки. ACL (списки управления доступом) Списки управления доступом фильтруют адреса входящих сообщений и либо при- нимают их, либо отклоняют. Программа Exim разделяет адреса входящих сообщений на локальную часть, соответствующую пользователю, и доменную, соответствующую доме- ну получателя. Списки управления доступом можно применять на разных стадиях обмена информа- цией по протоколу SMTP: HELO, MAIL, RCPT, DATA и т.д. Обычно список управления доступом требует строгого следования протоколу SMTP на стадии HELO, проверяет от- правителя и его домен на стадии MAIL, проверяет получателя на стадии RCPT и скани- рует содержимое сообщения на стадии DATA.
Глава 20. Электронная почта 863 Для того чтобы определить, какой список управления доступом должен применяться после каждой команды в протоколе SMTP, используется множество параметров с имена- ми, имеющими формат acl_smtp_команда. Например, параметр acl_smtp_rcpt озна- чает, что список управления доступом должен применяться к каждому адресу, указан- ному как получатель данного сообщения. Списки управления доступом можно задать в разделе acl в файле конфигурации, в файле, на который ссылается параметр acl smtp^команда, или в командной строке. “ Ниже приведен пример списка управления доступом my acl check rcpt. Его мож- но вызвать, присвоив это имя параметру acl_smtp_rcpt в разделе глобальных пара- метров в файле конфигурации. Если этот список управления доступом отвергает адрес, указанный в команде RCPT, то сервер отправителя должен отступить и больше не пы- таться отправлять сообщения на этот адрес. Другой параметр списка управления досту- пом — acl smtp data — применяется к сообщению после его получения, например для сканирования его содержимого. begin acl my_acl_check_rcpt: accept hosts = : control = dkim_disable_verify deny message = Restricted characters in address domains - +local_domains local_parts = Л[.] : л.*[@%!/|] deny message = Restricted characters in address domains = !+local_domains local_parts = л[./|] : л.*[@%!] : A.*/\\.\\./ accept local_parts = postmaster domains « +local_domains require verify = sender accept hosts = +relay_from_hosts control = submission control = dkim_disable_verify accept authenticated = * control = submission control = dkim_disable_verify require message = Relay not permitted domains = +local_domains : +relay_to_domains require verify = recipient accept Этот список управления доступом, заимствованный из документации к программе Exim, по умолчанию заканчивается командой accept; вы можете изменить свое реше- ние и сделать так, чтобы список управления доступом по умолчанию отклонял сообще- ние, как это обычно делают брандмауэры. Этому списку управления доступом по умол- чанию назначено имя aclcheckrcpt; вероятно, это имя изменять не следует (тем не
864 Часть II. Работа в сети менее мы изменили его, чтобы продемонстрировать, что оно задается вами, а не фикси- руется заранее параметрами конфигурации программы Exim). Первая строка, содержащая раздел accept и одно двоеточие, представляет собой пу- стой список. Пустой список удаленных узлов применяется в ситуациях, когда локаль- ный пользовательский почтовый агент (MUA) подает сообщение на стандартный вход транспортного агента. Если проверяемый адрес соответствует данному условию, список управления доступом принимает адрес и отключает проверку подписи DKIM, которая по умолчанию включена. Если же адрес не соответствует данному разделу address, то управление переходит к следующему разделу в определении списка. Первая строка конфигурации deny предназначена для сообщений, поступающих на ваши локальные домены. Она отклоняет любой адрес, в котором локальная часть (имя пользователя) начинается с точки или содержит специальные символы @, %, !, / или |. Вторая строка deny применяется к сообщениям, посланным во внешний мир вашими пользователями. Она также не допускает использование некоторых специальных симво- лов и их комбинаций в качестве части адреса, поскольку это свидетельствует о том, что ваши компьютеры были заражены вирусом или другими вредоносными программами. В прошлом такие адреса использовались спамерами для запутывания списков управления доступом или для создания проблем в системе безопасности. В целом, если вы хотите использовать выражения $local_parts (например, в каче- стве пользовательского имени получателя) в имени каталога (для хранения почты или просмотра файла автоответчика, например), будьте очень осторожны, чтобы ваши спи- ски управления доступом, отфильтровывающие любые специальные символы, не при- вели к непредвиденным последствиям. (В этом примере выполняется поиск последо- вательности символов /. ./, которые могут создать проблемы, если имя пользователя является частью имени пути.) Следующий раздел accept гарантирует, что почта, посланная администратору элек- тронной почты, всегда будет доставляться, если она была послана в локальный домен; это облегчает отладку. Строка require проверяет, можно ли вернуть сообщение о недоставке, но проверка, относится только к домену отправителя.19 Если пользовательское имя отправителя было подделано, то сообщение о недоставке может породить новое сообщение о недоставке. В этом месте проверку можно усилить, вызвав другую программу, но некоторые сайты рассматривают такие вызовы как злонамеренные действия и могут внести ваш почтовый сервер в черный список или в список серверов с плохой репутацией. Следующий раздел accept проверяет узлы, через которые разрешается выполнять ретрансляцию, т.е. локальные узлы, подающие почту в систему. Эта строка означает, что программа exim должна действовать как агент представления почтовых сообщений и исправлять любые недостатки в заголовках при поступлении сообщений от пользова- тельского агента. Адрес отправителя не проверяется, потому что многие пользователь- ские агенты сбиваются с толку ошибочными возвратами. (Это приемлемо только для локальных машин, которые выполняют ретрансляцию на интеллектуальный узел, а не во внешние домены.) Верификация подписи DKIM отключена, поскольку эти сообще- ния отправляются вашими пользователями или их коллегами по ретрансляции. Последний раздел accept относится к локальным узлам, выполняющим аутентифи- кацию с помощью протокола SMTP AUTH. Эти сообщения снова обрабатываются как представления от пользовательских агентов. 19 Раздел require означает “deny, если не совпало”.
Глава 20. Электронная почта 865 Затем мы проверяем домен адресата, который указан в заголовке письма и должен содержаться либо в нашем списке local domains, либо в списке relay to_domains, в котором перечислены домены, имеющие право на ретрансляцию. (Списки этих доменов определяются в другом месте.) Письмо с адресом, который не входит ни в один из этих списков, порождает особое сообщение об ошибке. Проверка подписи DKIM снова от- ключена. Итак, если все наши сформулированные выше предположения были удовлетворены и ни одно из более тонких правил accept или deny не было нарушено, мы верифици- руем получателя и принимаем сообщение. В эту категорию попадает большинство со- общений, поступающих из Интернета. В приведенный выше пример мы не включили сканирование черных списков. Для до- ступа к черным спискам следует использовать один из примеров, описанных в файле кон- фигурации, предоставленном по умолчанию, или что-нибудь наподобие следующего кода. deny condition = ${if isip4 {$sender_host_address}}' I authenticated = * !hosts = +my_whitelist_ips •dnslists = list.dnswl.org domains = +local_domains verify = recipient message = You are on RBL $dnslist_domain: $dnslist_text dnslists = zen.spamhaus.org logwrite = Blacklisted sender [$sender_host_address] \ $dnslist_domain: $dnslist_text В переводе на обычный язык этот фрагмент означает, что если сообщение соответ- ствует всем следующим критериям, то оно отклоняется с сообщением о пользователь- ской ошибке и регистрируется в журнале (также вместе с сообщением о пользователь- ской ошибке). • Сообщение поступило с 1Ру4-адреса (некоторые списки неправильно обрабатыва- ют 1Ру6-адреса). • Сообщение не ассоциировано с аутентифицированным сеансом SMTP. • Сообщение поступило от отправителя, которого нет в локальном белом списке. • Сообщение поступило от отправителя, которого нет в глобальном (из Интернета) белом списке. • Сообщение адресовано корректному локальному получателю. • Узел отправителя занесен в черный список сайта zen. spamhaus. org. Переменные dnslist text и dnslist domain задаются путем присваивания пара- метру dnslists, который выполняет переключение поиска по черным спискам. Этот раздел deny должен размещаться сразу после проверки необычных символов в адресах. Рассмотрим еще один пример списка управления доступом, который отклоняет сооб- щение, поступившее от удаленного сайта, неправильно ответившего на команду HELO. acl_check_mail: deny message = 503 Bad sequence of cmds - must send HELO/EHLO first condition = ${if !def:sender_helo_name} accept Программа Exim решает проблему “болтуна” (более специальный случай сайта, “не- правильно отвечающего на команду HELO”) с помощью параметра smtp_enforce_sync, который включается по умолчанию.
866 Часть II. Работа в сети Сканирование содержимого на этапе применения списков управления доступом Программа Exim поддерживает мощное сканирование содержимого в нескольких точках на пути сообщения внутри почтовой системы: на этапе применения списков уп- равления доступом (после команды SMTP DATA), во время доставки с помощью пара- метра transport-filter или функции local scan после выполнения всех проверок списков управления доступом. Для поддержки сканирования необходимо выполнить компиляцию данного модуля в систему Exim с помощью переменной WITH_CONTENT_ SCAN в файле EDITME; по умолчанию она закомментирована. Этот параметр наделяет списки управления доступом дополнительными мощью и гибкостью, добавляя два но- вых параметра конфигурации: spamd_address и av__scanner. Сканирование на этапе проверки списков управления доступом позволяет отклонять сообщения на лету с помощью обмена информацией между транспортным агентом и узлом отправителя. Сообщение никогда не будет принято к доставке, поэтому сообще- ние о недоставке не генерируется. Это очень хороший способ отклонения сообщений, поскольку он позволяет избежать обратной рассылки спама, вызванного сообщениями о недоставке, по поддельным адресам отправителей. Сканирование вирусов Для сканирования вирусов сначала следует задать тип сканера и его параметры в переменной av scanner в разделе глобальных параметров в файле конфигурации. В табл. 20.20 перечислены сканеры, допустимые в текущей версии программы Exim, и их соответствующие спецификации av_scanner. Таблица 20.20. Антивирусные сканеры, известные программе exim aveserver путь-к_сокету Демон сканера Касперского 5 clamd: ip-порта или путь-к-сокету ClamAV по протоколу TCP или локальный сокет cmdline: путь found-regex name-regex Обобщенный интерфейс командной строки drweb: ip-адрес порта или путь-к-сокету Демон сканера DrWeb (said, com) f secure: путь-к-. f sav-файлу Демон сканера F-Secure (f-secure. com) kavdaemon: путь-к-сокету Демон сканера Касперского, версия 4 sophie: путь-к-сокету Интерфейс Sophie для сканера Sophosа а См. clanfield, inf o/sophie. Этот сканер задан по умолчанию (путь/var/run/sophie). Задав переменную av scanner, можно использовать условие malware в списке уп- равления доступом, которое проверяет содержимое сообщений после выполнения ко- манды DATA в ходе обмена информацией по протоколу SMTP. Рассмотрим пример, взя- тый из документации к программе Exim. deny message = This message contains malware ($malware_name) demime = * malware = * Раздел malware вызывает сканер вирусов, если передаваемое значение равно true (что в данном примере выполняется всегда). Если включен параметр demime и сообще- ние содержит приложение, закодированное по стандарту MIME, то программа exim де- кодирует приложение, чтобы сделать его доступным для антивирусного сканера.
Глава 20. Электронная почта 867 Однако большинство сканеров может выполнить это декодирование самостоятельно. Для того чтобы избежать дублирования при решении этой задачи, раздел demime следует включать, только если это необходимо для антивирусного сканера. Такое дублирование не вызывает ошибки, но расходует ресурсы и замедляет обработку почты. Сканирование спама Для сканирования спама агент Exim использует программу SpamAssassin, которая обычно принимает сообщения на ТСР-порт 783, но может также использовать сокет локального домена. Задавая параметры соединения в файле конфигурации программы exim, присвойте какое-нибудь значение переменной spamd address. Этим значением может быть либо IP-адрес и номер порта, разделенные пробелом, либо абсолютный путь сокета локального домена. Можно также одновременно задавать до 32 пар “адрес/порт”, чтобы использовать несколько экземпляров утилиты SpamAssassin. Присвоив имя пользователя переменной spam, вызовите утилиту SpamAssassin из списка управления доступом, связанного с командой SMTP DATA. Если в качестве пользователя указано имя nobody, то программа SpamAssassin использует универсаль- ный профиль сканирования, в противном случае — профиль, связанный с указанным вами пользователем (если такой профиль существует).20 Строки deny message = This message was classified as spam spam = nobody означают использование системного профиля спама, установленного по умолчанию. Просто поместить инструкцию spam в файл конфигурации недостаточно; необходимо присвоить определенное значение переменной spam. Поскольку программа SpamAssassin работает медленно, а большинство сообщений спама являются короткими, необходимо проверять размер и сканировать только неболь- шие сообщения. Рассмотрим пример. deny message = This message was classified as spam condition = ${if < {$message_size}{10K}} spam = nobody С помощью программы SpamAssassin можно решать более сложные задачи; все дета- ли описаны в спецификации программы Exim. Аутентификаторы Аутентификаторы (authenticators) — это драйверы, взаимодействующие с последова- тельностью “вызов/ответ” команд SMTP AUTH и идентифицирующие механизм аутен- тификации, приемлемый для клиента и сервера. Программа Exim поддерживает четыре механизма. • AUTH-CRAM-MD5 (RFC2195). • AUTH CYRUS SASL для использования программного обеспечения Cyrus IMAP. • AUTH PLAINTEXT, включающий макросы PLAIN и LOGIN. • auth spa, поддерживающий механизм аутентификации Secure Password Authen- tication компании Microsoft. 20 На первый взгляд, требование задавать имя пользователя обеспечивает гибкость. Однако, поскольку сканирование осуществляется после выполнения команды DATA, а не RCPT, сообще- ние уже связано со своим получателем. Если же получателей несколько, то неизвестно, какой про- филь спама следует использовать.
868 Часть II. Работа в сети Когда агент exim получает электронную почту, он действует как сервер SMTP AUTH. Когда он посылает электронную почту, является клиентом. Параметры, появляющиеся в определениях экземпляров аутентфикатора, сопровождаются префиксами server_ или client , позволяющими задавать разные конфигурации, в зависимости от роли, кото- рую играет агент Exim. Аутентификаторы используются в списках управления доступом, как показано в од- ном из примеров, приведенных выше. accept authenticated = * Ниже приведен пример, демонстрирующий клиентский и серверный механизмы LOGIN. В этом простом примере используются фиксированные имя пользователя и па- роль, что приемлемо для небольших организаций, но, вероятно, это не следует рекомен- довать для крупных сетей. begin authenticators my_client_fixed_login: driver - plaintext public_name = LOGIN client_send = : myusername : mypasswd my_server_fixed_login: driver = plaintext public_name = LOGIN server_advertise_condition = ${if def:tis_cipher} server_prompts = User Name : Password server_condition = ${if and {{eq{$authl}{имя_пользователя}} \ {eq{$auth2}{пароль}}}} server_set_id = $authl Данные для аутентификации могут поступать из многих источников: LDAP, РАМ, / etc/passwd и т.д. Раздел server advertise condition в указанном фрагменте кода предотвращает открытую пересылку по линии связи паролей почтовых клиентов по тре- бованию протокола TLS (через STARTTLS или SSL). Если вы хотите, чтобы програм- ма exim действовала аналогично, будучи клиентский системой, используйте параметр client_condition в разделе client, тоже вместе с параметром tis_cipher. Детальное описание всех возможных параметров аутентификации программы Exim и примеры их использования можно найти в документации. Маршрутизаторы Маршрутизаторы обрабатывают адреса электронной почты, либо перезаписывая их, либо переприсваивая транспортному агенту и посылая в пункт назначения. Конкретный маршрутизатор может иметь несколько экземпляров с разными параметрами. Вы указываете последовательность маршрутизаторов. Сообщение начинает свой путь с первого маршрутизатора и проходит по списку, пока сообщение не будет принято или отклонено. Принимающий маршрутизатор обычно передает сообщения драйверу транс- порта. Маршрутизаторы обрабатывают как входящую, так и исходящую корреспонден- цию. Их можно считать чем-то вроде подпрограмм в языке программирования. Маршрутизатор может возвращать любые из следующих уведомлений о статусе со- общения. • accept — маршрутизатор принимает адрес и передает его драйверу транспорта.
Глава 20. Электронная почта 8б9 • pass — данный маршрутизатор не может обработать указанный адрес; управление передается следующему маршрутизатору. • decline — маршрутизатор решает не обрабатывать адрес; следующий маршрути- затор, пожалуйста! • fail — адрес является неправильным; маршрутизатор ставит его в очередь для ге- нерации сообщения о недоставке. • defer — оставляет сообщение в очереди для последующей обработки. • error — обнаружена ошибка в спецификации маршрутизатора; сообщение откла- дывается. Если сообщение получило от всех маршрутизаторов в очереди уведомления pass или decline, оно возвращается отправителю как письмо, имеющее немаршрутизируемый адрес. Если сообщение удовлетворяет всем предусловиям для маршрутизатора и маршрути- затор закончил работу, выполнив инструкцию no more, то это сообщение не передается никаким дополнительным маршрутизаторам, независимо от того, какой статус оно полу- чило у текущего маршрутизатора. Например, если ваш удаленный SMTP-маршрутизатор выполнил предусловие domains = ! +local_domains и установил параметр nojnore, то следующему маршрутизатору в последовательности отправляются только сообщения, адре- сованные локальным пользователям (т.е. сообщения, нарушающие предусловие домена). Маршрутизаторы имеют много параметров; наиболее распространенными являются параметры предусловий или условий отказов, возвращаемых сообщений об ошибках и используемых драйверов транспорта. В следующих разделах подробно описываются маршрутизаторы accept, dnslookup, manualroute и redirect. Снипеты конфигурации основаны на предположении, что агент exim выполняется на локальном компьютере в домене example. com. Все эти сни- петы довольно просты; если вы захотите использовать более изощренные маршрутиза- торы, обратитесь к документации. Маршрутизатор accept Этот маршрутизатор помечает адрес как приемлемый и передает соответствующее сообщение драйверу транспорта. Ниже приведен пример экземпляров маршрутизатора accept с именами localusers (для доставки локальной почты) и save_to_f ile (для отправления сообщения в архив). localusers: driver = accept domains = example.com check_local_user transport = my_local_delivery save_to_file: driver = accept domains = dialup.example.com transport = batchsmtp_appendfile Экземпляр маршрутизатора с именем localusers проверяет, совпадает ли домен- ная часть адреса доставки с именем домена example. com и является ли локальная часть адреса регистрационным именем локального пользователя. Если оба условия выпол- нены, маршрутизатор передает сообщение экземпляру драйвера транспорта с именем my local delivery, определенному в разделе транспорта. Экземпляр save to f ile
870 Часть II. Работа в сети предназначен для абонентов автоматической телефонной линии; он добавляет сообще- ние в файл, указанный в определении транспорта batchsmtp_appendfile. Маршрутизатор dnslookup Как правило, маршрутизатор dnslookup используется для исходящих сообщений. Он ищет запись MX о домене отправителя и передает сообщение драйверу транспорта SMTP для доставки. Ниже приведен экземпляр маршрутизатора с именем remoteusers. remoteusers: driver = dnslookup domains - 1+example.com transport = my_remote_delivery Q Более подробно пространство частных адресов RFC1918 описано в разделе 14.4. Код dnslookup ищет записи MX об адресате. Если их нет, он проверяет запись А. В итоге, данный экземпляр маршрутизатора может запрещать доставку сообщений на определенные IP-адреса; например, частные адреса RFC 1918 не могут маршрутизиро- ваться в Интернет. Больше информации об этом можно найти в описании параметра ignore_target_hosts option. Маршрутизатор manualroute Гибкий драйвер manual route может посылать электронную почту куда угодно. Ин- формация о маршрутизации может быть представлена в виде таблицы правил соответ- ствия для домена получателя (route list) или отдельного правила, которое применя- ется для всех доменов (route data). Ниже приведены два экземпляра маршрутизатора manualroute. Первый экземпляр реализует концепцию “интеллектуального узла”, в ко- торой все исходящие сообщения посылаются центральному “интеллектуальному” узлу для обработки. Этот экземпляр называется smarthost и применяется ко всем доменам получателей, не указанным (используется символ !) в списке local domains. smarthost: driver = manualroute domains = !+local_domains transport = remote_snmp route_data = smarthost.example.com Экземпляр маршрутизатора firewall, приведенный ниже, использует протокол SMTP для отправки входящих сообщений узлам, находящимся внутри брандмауэра (возможно, после сканирования их на спам и вирусы). Он ищет данные о маршрутизации для каж- дого домена получателя в базе данных CDB, содержащей имена локальных узлов. (Для того чтобы иметь возможность использовать базу данных CDB, сборку программы Exim следует проводить с параметром LOOKUP_CDB.) firewall: driver = manualroute transport = remote-smtp route_data = ${lookup{$domain} cdb {/internal/host/routes}} Маршрутизатор redirect Драйвер redirect перезаписывает адрес, используя псевдонимы из системного фай- ла aliases или пользовательского файла ~/. forward. Обычно он не присваивает пере-
Глава 20. Электронная почта 8М записанный адрес транспорту, а оставляет эту работу другим маршрутизаторам, находя- щимся в цепочке. Первый экземпляр system aliases, приведенный ниже, ищет псевдонимы мето- дом последовательного перебора (lsearch) в файле /etc/aliases. Это удобно, если файл aliases небольшой, но если он огромный, то метод последовательного перебора следует заменить поиском в базе данных. Второй экземпляр с именем forwardfile сна- чала проверяет, что почта адресована локальному пользователю, а затем просматривает пользовательский файл . forward. system_aliases: driver = redirect data = ${lookup{$local_part} lsearch {/etc/aliases}} user_forward: driver = redirect check_local_user file = $home/.forward no_verify Параметр check local user гарантирует, что получатель является корректным локальным пользователем. Параметр no verify означает, что проверка правильности адреса, на который перенаправляется сообщение, не нужна, следует просто выполнить поставку. Фильтрация пользователей с помощью файлов forward Программа Exim позволяет не только перенаправлять сообщения, используя файлы . forward, но и фильтровать их, основываясь на содержимом пользовательского файла . forward. Она поддерживает свою собственную фильтрацию, а также фильтрацию ме- тодом решета (Sieve filtering), являющуюся стандартом ТЕТЕ Если первая строка пользо- вательского файла . forward выглядит как #Exim filter или #Sieve filter то последующие команды фильтрации (их около 15) можно использовать для выработки решения, куда следует доставить сообщение. Фильтрация на самом деле не подразумева- ет доставки сообщения, она просто выясняет пункт назначения. Рассмотрим пример. #Exim filter if $header_subject: contains SAGE or $header_subject: contains sysadmin then save $home/mail/sage-sysadmin endif Для того чтобы управлять тем, что пользователи могут делать в своих файлах . forward, а чего они делать не могут, используется множество параметров . forward. Имена этих параметров начинаются с префиксов forbid_ или allow . Важно предотвратить запуск пользователями оболочек, загрузку библиотек в бинарные коды или использование встро- енного интерпретатора языка Perl, если они не должны этого делать. Производя обнов- ление почтовой системы, проверьте новые параметры forbid*, чтобы убедиться, что пользователи не имеют возможности экспериментировать со своими файлами . forward.
872 Часть II. Работа в сети Транспортные механизмы Маршрутизаторы решают, куда должны следовать сообщения, а транспортные меха- низмы выполняют их фактическое перемещение в пункт назначения. Локальные транс- порты обычно добавляются в файл, передаются локальной программе или обмениваются информацией по протоколу LMTP с серверами IMAP. Удаленные транспорты обменива- ются информацией со своими партнерами в Интернете по протоколу SMTP. В агенте Exim существует пять транспортных механизма: appendfile, lmtp, smtp, autoreply и pipe; мы опишем транспортные механизмы appendfile и smtp. Транспорт autoreply обычно используется для отправки сообщений автоответчика, а транспорт pipe передает сообщения на вход команд через канал UNIX. Как и при рабо- те с маршрутизаторами, необходимо определить экземпляры транспортов, причем жела- тельно иметь несколько экземпляров транспорта одного и того же типа. Порядок важен для маршрутизаторов, но не для транспортных механизмов. Транспортный механизм appendfile Драйвер appendfile хранит сообщения в формате mbox, mbx, Maildir или mailstore в заданном файле или каталоге. Компилируя программу Exim, необходи- мо включать соответствующие форматы почтового ящика; по умолчанию они заком- ментированы в файле EDITME. В следующем примере определен транспорт my local- delivery (экземпляр транспорта appendfile), который упоминался в определении экземпляра маршрутизатора localusers в одном из предыдущих примеров. my_local_delivery: driver = appendfile file = /var/mail/$local_part delivery_date_add envelope_to_add return_path_add group = mail mode = 0660 Строки *_add добавляют заголовки в сообщение. Разделы group и mode гарантиру- ют, что транспортный агент может записывать данные в файл. Транспортный механизм smtp Это основной компонент всей почтовой системы. Здесь мы определили два экзем- пляра — для стандартного SMPT-порта (25) и для порта подачи почты (587). my_remote_delivery: driver = smtp my_remote_delivery_port587: driver = smtp port = 587 headers_add = X-processed-by: MACRO_HEADER port 587 Второй экземпляр, my_remote_delivery_port587, задает порт и указывает, что в сообщение должен быть добавлен заголовок, включающий индикацию исходяще- го порта. Кроме того, где-то в файле конфигурации должен быть определен макрос MACRO HEADER.
Глава 20. Электронная почта 873 Конфигурация retry В файле конфигурации должен существовать раздел retry, иначе программа Exim никогда не будет повторять попытку доставить почту, которая не была доставлена с пер- вого раза. Можно указать три временных интервала, каждый из которых длиннее пред- ыдущего. После истечение последнего интервала сообщения будут отправлены обратно отправителю как недоставленные. В инструкциях retry для обозначения минут, часов, дней и недель используются суффиксы in, h, d и w. Для разных узлов и доменов можно задавать разные интервалы. Вот как выглядит раздел retry. begin retry * * F, 2h, 15m; F, 24h, lh; F, 4d, 6h Этот пример означает следующее: “Для любого домена доставку почты на временно недоступный адрес следует повторять каждые 15 минут в течение двух дней, каждые де- сять часов в течение следующих 24 часов, а затем каждые 6 часов через 4 дня и в заклю- чение отправить сообщение обратно как недоставленное”. Конфигурация перезаписи Раздел перезаписи в файле конфигурации начинается словами begin rewrite. Он используется для исправления адресов, а не для перенаправления сообщений. Например, его можно использовать для исходящих адресов. • Для того чтобы точно указать, что сообщение исходит из вашего домена, а не от индивидуальных узлов. • Для отображения имен пользователей в стандартном формате, например Имя. Фамилия. Перезапись не следует применять для адресов входящей почты. Функция локального сканирования Если вы хотите еще более точно настроить программу exim, например, чтобы филь- тровать самые современные и самые распространенные вирусы, можете написать функ- цию на языке С, реализующую ваш собственный алгоритм сканирования, и инстал- лировать ее в разделе local_scan файла конфигурации. Детали и примеры описаны в документации программы Exim. Сочетание программ amavisd и Exim Для того чтобы настроить программу exim так, чтобы посылать всю почту, предна- значенную для вашего домена, программе amavisd сканирования на вирусы и спам, создайте первый маршрутизатор в файле конфигурации, как показано ниже. amavis: no_verify_recipient driver = manualroute condition = ${if or {eq {$interface_port} {10025} \ {eq {$received_protocol} {scanned-ok} } } {0} {1} } domain = local_domains transport = amavis route_list = * localhost byname self = send
874 Часть II. Работа в сети Строка condition означает, что сообщения, исходящие из порта 10025, не должны перенаправляться программе amavisd. Это порт, на который возвращаются сообщения от программы amavisd после сканирования, поэтому эти сообщения не должны отправ- ляться обратно программе amavisd, чтобы не возник замкнутый круг. Транспортный механизм amavis настраивается следующим образом. amavis: driver = smtp port = 10024 allow_localhost Кроме того, в начало файла конфигурации необходимо добавить строку local_interfaces = 0.0.0.0.25 : 127.0.0.1.10025 чтобы приказать программе exim принимать сообщения с любых адресов, если они по- ступили через порт 25, и от локальных узлов, если они поступили через порт 10025, ко- торый является портом возврата сообщений для программы amavisd. Эта конфигурация переводит все сканирование в автономный режим, поэтому со- общения о недоставке в ответ на выявление вирусов и спама сами по себе могут создать обратную рассылку спам. Вероятно, лучше поместить инструкцию amavis чуть ниже в упорядоченном списке маршрутизаторов и предоставить программе Exim возможность использовать богатый язык списков управления доступом для проверки относительно коротких сообщений. Еще лучше использовать конструкцию $ {run...}, предусмотрен- ную в программе exim, чтобы заставить сканер amavisd выполнять проверку в опера- тивном режиме. Кроме того, встроенные возможности сканирования в программе exim несколько снижают конкурентоспособность программы amavisd. Регистрация По умолчанию программа Exim записывает три разных регистрационных файла: главный журнал, журнал отказов и журнал тревоги. Каждая запись в журнале содержит время ее создания. Местоположение регистрационных файлов задается в файле EDITME (до компиляции программы exim) или в файле конфигурации времени выполнения с помощью параметра log file path. По умолчанию файлы регистрации хранятся в каталоге /var/spool/exim/log. Параметр log f ile path может принимать до двух значений, разделенных двоето- чием. Каждое значение должно быть либо ключевым словом syslog, либо абсолют- ным путем со встроенными символами %, вместо которых подставляются имена main, reject и panic. Например, инструкция log_file_path = syslog : /var/log/exim_%s устанавливает, что в качестве регистрационных файлов должны использоваться систем- ный журнал (с функцией “mail”) и файлы exim_main, exim_re ject и eximjpanic в ка- талоге /var/log. Программа Exim передает записи журнала main в системный журнал в качестве первоочередной информации, записи reject — в качестве первоочередных сообщений, а записи panic — в качестве первоочередных сигналов. Журнал main содержит по одной строке для поступления и доставки каждого со- общения. Отчет об информации, содержащейся в этом журнале, можно сгенерировать с помощью сценария eximstats на языке Perl, включенного в дистрибутивный пакет Exim. Записи из журнала reject хранят информацию о сообщениях, которые были отклонены из-за нарушения правил, — злонамеренные программы, спам и пр. Этот журнал содержит итоговую строку для сообщения из журнала main, а также исходные
Глава 20. Электронная почта 875 заголовки отклоненных сообщений. Если правила были изменены, проверьте журнал reject, чтобы убедиться, что все в порядке. Журнал panic предназначен для регистрации серьезных ошибок программного обе- спечения; программа exim записывает в него информацию непосредственно перед тем, как завершить работу. Если проблемы не возникли, журнал panic существовать не дол- жен. Попросите утилиту cron проверить, существует ли файл panic, устраните про- блему, вызвавшую тревогу, а затем удалите этот файл. Программа exim заново создаст его, если снова возникнет тревожная ситуация. При отладке можно увеличить объем и расширить набор типов регистрируемых данных с помощью параметра log selector. Рассмотрим пример. log_selector = +smtp_connection +snmp_incomplete_transaction +... Категории регистрируемых данных могут затем включаться или исключаться с по- мощью механизма log selector, описанного в спецификации программы Exim в раз- деле “Log files”. Существует примерно 35 возможностей, включая +а11, которая реально переполнит информацией ваши диски! Кроме того, программа exim хранит временный регистрационный файл для каждого обработанного сообщения. Он называется по идентификатору сообщения и находится в каталоге /var/spool/exim/msglog. Если возникают проблемы с конкретным пунктом назначения, следует проверить информацию в этом каталоге. Отладка Программа Exim имеет мощные средства для отладки. Вы можете управлять объемом информации, которую хотите видеть для каждой настраиваемой возможности. Команда exim -d заставляет программу exim переключиться в режим отладки, в котором ода получает высокий приоритет и не позволяет делать свои копии. К параметру -d мож- но добавить дополнительные категории отладки, вставляя символы + или - перед на- званием категории. Например, параметры -d+expand+acl предусматривают обычный вывод информации об отладке, который сопровождается дополнительными деталями, касающимися расширений строк и интерпретации списков управления доступом. (Эти две категории являются самыми проблемными.) Для отладочной информации можно настроить более 30 категорий; их полный список находится на соответствующей спра- вочной странице. При отладке почтовой системы обычно запускают почтовый транспортный агент на нестандартном порту, а затем обращаются к нему с помощью команды telnet. На- пример, для того чтобы запустить программу exim в режиме демона, прослушивающего порт 26, и включить вывод информации об отладке, можно использовать следующую инструкцию. $ sudo exim -d -оХ 26 -bd Затем можно применить команду telnet к порту 26 и набрать команды SMTP, пыта- ясь воспроизвести проблемы, решение которых следует отладить. В качестве альтернативы можно использовать команду swaks, которая вступит в об- мен информацией с протоколом SMTP. Эта команда запускает сценарий на языке Perl, ускоряющий и облегчающий отладку протокола SMTP. Инструкция swaks —help выводит на экране короткое описание, а полную информацию можно найти на сайте j etmore.org/j ohn/code/#swaks. Если ваши регистрационные файлы делают тайм-аут примерно каждые 30 секунд, следует подозревать проблемы в системе DNS. Тайм-ауты длительностью 5 секунд могут
876 Часть II. Работа в сети быть тайм-аутами запроса identd. (Демон identd в прошлом предназначался для иден- тификации реального отправителя почтового сообщения, однако поскольку его было очень легко обмануть, он больше не используется.) 20.15. Почтовый агент Postfix Постфикс — популярная альтернатива программе sendmail. Вице Венема (Wietse Venema) начал работу над проектом Postfix в 1996 году, когда проводил годичный творче- ский отпуск в Исследовательском центре им. Т. Дж. Уотсона компании IBM (Т. J. Watson Research Center), и до сих пор активно работает над ним. Целью разработки програм- мы Postfix является не только безопасность (хотя это ее первоочередная и самая главная цель!), но и реализация политики распространения открытого программного обеспече- ния, высокое быстродействие, надежность и гибкость. Все основные дистрибутивные пакеты системы Linux включают Postfix, а начиная с версии 10.3 система Mac OS X по умолчанию оснащается почтовой системой Postfix, а не sendmail. 03 Более подробно регулярные выражения описаны в разделе 2.3. О системе Postfix следует знать два самых важных факта: во-первых, она поставляет- ся в практически работоспособном виде (простейшие файлы конфигурации состоят из одной-двух строк) и, во-вторых, эффективно использует ассоциативные массивы регу- лярных выражений для фильтрации почты, особенно в сочетании с библиотекой PCRE (Perl Compatible Regular Expression). Система Postfix совместима с программой sendmail в том смысле, что файлы aliases и . forward системы Postfix имеют тот же формат и семантику, что и аналогичные файлы в системе sendmail. Система Postfix поддерживает протокол ESMTP. Кроме того, поддерживаются вирту- альные домены и фильтация спама. Для перезаписи адресов система Postfix использует поиск в таблицах, которые мо- гут быть записаны в обычных файлах или в форматах Berkeley DB, DBM, LDAP, NIS, Netlnfo и SQL. Кроме того, система Postfix поддерживает протокол почтового фильтра программы sendmail, поэтому ее функционирование можно легко настроить с помощью множества открытых почтовых фильтров (внешних программ, решающих специальные задачи в ходе сеанса SMTP; см. раздел 20.6). Архитектура системы Postfix. Система Postfix состоит из нескольких небольших взаимодействующих программ, посылающих сообщения по сети, получающих сообщения, выполняющих локальную доставку почты и т.д. Взаимодействие между ними осуществляется через сокеты локаль- ных доменов или именованные каналы FIFO. Эта архитектура довольно сильно отлича- ется от архитектуры программ sendmail и Exim, в которых основную работу выполняет большая монолитная программа. Запуск системы Postfix и слежение за всеми ее процессами выполняет программа master. В ее конфигурационном файле, master.cf, перечислены все вспомогатель- ные программы, а также информация о том, как они должны запускаться. Значения, по умолчанию установленные в этом файле, удовлетворяют большую часть потребностей пользователей, так что изощряться не обязательно. В основном, приходится отключать программы, например smtpd, которые клиент не должен прослушивать на порту SMTP. Самые важные серверные программы, вовлеченные в доставку электронной почты, показаны на рис. 20.4.
Глава 20. Электронная почта 877 Рис. 20.4. Серверные программы системы Postfix Получение почты Программа smtpd получает почту, поступающую в систему через сервер SMTP. Она также проверяет, имеют ли право клиенты, установившие соединение, отправлять по- чту, которую они пытаются доставить. Если электронная почта послана локально с по- мощью программы /usr/lib/sendmail, то файл записывается в каталог /var/spool/ postfix/maildrop. Этот каталог периодически сканируется программой pickup, об- рабатывающей любой найденный новый файл. Вся входящая почта проходит через программу cleanup, которая добавляет пропу- щенные заголовки и перезаписывает адреса в соответствии с таблицами canonical и virtual. Прежде чем вставить сообщение в очередь входящих сообщений, программа cleanup передает его программе trivial-rewrite, которая выполняет небольшое ре- дактирование адресов, например добавляет почтовый домен к не полностью заданным адресам. Управление почтовыми очередями ожидания Программа gmgr управляет пятью очередями, содержащими почту, ожидающую до- ставки. • incoming — поступающая почта • active — доставленная почта • deferred — почта, доставка которой завершилась неудачей • hold — почта, заблокированная в очереди администратором • corrupt — почта, которую невозможно прочитать или проанализировать Менеджер очереди обычно выбирает следующее сообщение для обработки, руко- водствуясь простой стратегией FIFO, но помимо нее он также поддерживает сложный алгоритм приоритетного обслуживания, который среди всей массы сообщений отдает предпочтение сообщениям, направленным избранным получателям. Для того чтобы не перегружать узел, предназначенный для получения почты, осо- бенно после его выхода из строя, система Postfix использует алгоритм медленного пуска, управляющий скоростью доставки почты. Отложенная почта получает временную метку о повторной доставке, которая имеет экспоненциальное затухание, чтобы не затрачивать ресурсы на недоставленные сообще- ния. Избежать излишних попыток доставить почту, которую невозможно доставить, по- зволяет кеш статуса.
878 Часть II. Работа в сети Отправка сообщений Программа qmgr с помощью программы trivial-rewrite решает, куда следует по- слать сообщение. Вместо решений, принимаемых программой trivial-rewrite, мож- но использовать поиск в таблицах (transport maps). Доставка почты удаленным узлам через сервер SMTP выполняется программой smtp. Программа lmtp доставляет почту, используя протокол LMTP (Local Mail Transfer Protocol), определенный в документе RFC2033. Протокол LMTP основан на протоколе SMTP, но был модифицирован так, что почтовый сервер не обязан управлять почтовой очередью. Этот обработчик почты очень полезен для доставки сообщений на почтовые серверы, такие как Cyrus IMAP. Программа local предназначена для локальной доставки электронной почты. Она находит адреса в таблице aliases и следует инструкциям, указанным в файлах полу- чателя . forward. Сообщения пересылаются на другой адрес, передаются внешней про- грамме для обработки или сохраняются в почтовых папках пользователя. Программа virtual доставляет почту в “виртуальные почтовые ящики”, т.е. в по- чтовые ящики, не связанные с локальной учетной записью в системе Linux, но имею- щие корректные адреса. В заключение программа pipe выполняет доставку посредством внешних программ. Безопасность Система Postfix обеспечивает безопасность на нескольких уровнях. Большинство серверных программ системы Postfix могут выполняться в окружении, созданном с по- мощью команды chroot. Это отдельные программы, не имеющие отношений типа “предок-потомок”. Ни одна из них не имеет механизма setuid. Каталог maildrop запол- няется группой postdrop, для которой программа postdrop установила идентификатор setgid. Впечатляет тот факт, что ни в одной версии системы Postfix еще не обнаружены де- фекты, которые можно было бы использовать дистанционно. Команды и документация системы Postfix Взаимодействие пользователя с системой обеспечивают несколько утилит, запускае- мых из командной строки. • sendmail, mailq, newaliases — выполняет замены, совместимые с системой sendmail. • postfix — запускает и останавливает почтовую систему (должна запускаться из корня). • postalias — создает, модифицирует и ставит в очередь таблицы псевдонимов.. • postcat - выводит на печать содержимое файлов очереди.. • postconf — выводит на печать и редактирует главный файл конфигурации main. cf. • postmap — создает, модифицирует или ставит в очередь таблицы поиска.. • postsuper —управляет почтовыми очередями.. Дистрибутивный пакет Postfix содержит набор справочных страниц, описывающих все программы и их параметры. Документация, размещенная на сайте postfix.org,
Глава 20. Электронная почта 879 объясняет, как конфигурировать разные аспекты программы Postfix и управлять ими. Эти документы также входят в дистрибутивный пакет Postfix и находятся в каталоге README^FILES. Конфигурация системы Postfix Файл main.cf — .главный конфигурационный файл системы Postfix. Файл master, cf конфигурирует серверные программы. Он также определяет разные таблицы поиска, на которые ссылается файл main. cf, и поддерживает разные типы служебных отобра- жений. Справочная страница postconf(5) описывает каждый параметр, заданный в фай- ле main.cf. Существует также программа postconf, которая с помощью команды man postconf позволяет получить справочную страницу, заменяющую страницу postconf(5). Для того чтобы получить правильную версию справочной страницы, следует использовать команду man -s 5 postconf (соответственно, man 5 postconf в системах HP-UX и AIX). Язык конфигурирования системы Postfix выглядит как ряд комментариев sh и ин- струкций присваивания. В определении одной переменной можно ссылаться на другие переменные с помощью префикса $. Определения переменных заносятся в память сразу, как только они обнаруживаются в файле конфигурации; они не раскрываются, пока не будут использованы, и в это время могут производиться любые подстановки. Можно создавать новые переменные, присваивая им значения. При выборе имен следует быть осторожным, чтобы не создать конфликт с существующими переменными конфигурации. Все файлы конфигурации системы Postfix, включая таблицы поиска, интерпретируют строки, начинающиеся с пробела, как продолжение предыдущей строки. Это позволяет создавать очень удобные для чтения файлы конфигурации, но при этом новую строку приходится начинать с первой позиции. Что должно находиться в файле main.cf В файле main. cf .можно задать более 500 параметров. Однако для среднестатисти- ческого сайта необходимы только некоторые из них. Автор системы Postfix настоятельно рекомендует включать в свои конфигурации только те параметры, которые имеют зна- чения, не заданные по умолчанию. Таким образом, если в будущем значение параметра, заданное по умолчанию, изменится, ваша конфигурация учтет новое значение автома- тически. Образец файла main. cf, поставляемый в дистрибутивном пакете, содержит много закомментированных параметров, а также короткое описание. Исходную версию файла лучше всего оставить в качестве ориентира. Начните создание собственной конфигура- ции с пустого файла, чтобы ваши установки не затерялись среди многочисленных ком- ментариев. Основные установки Начнем с самой простой конфигурации: пустого файла. Как это ни удивительно, это вполне допустимая конфигурация системы Postfix. Результатом такой конфигурации яв- ляется почтовый сервер, доставляющий электронную почту локально внутри того же са- мого домена, в котором находится локальная хост-система, и посылающий все сообще- ния на нелокальные адреса непосредственно на соответствующий удаленный сервер.
880 Часть II. Работа в сети Еще одна простая конфигурация называется “нулевым клиентом”; иначе говоря, си- стема, не выполняющая локальной доставки никаких электронных сообщений и пере- направляющая внешную почту на предназначенный для этого центральный сервер. Для реализации этой конфигурации определим несколько параметров: параметр my domain, задающий доменную часть имени узла, и myorigin, представляющий собой имя почто- вого домена, добавляемое в не полностью заданные адреса. Если эти два параметра со- впадают, то можно написать, например, следующие строки. mydomain = cs.Colorado.edu myorigin = $mydomain Еще один параметр, который необходимо определить, — mydestination, который задает локальные почтовые домены. Если в адресе получателя сообщения имя почто- вого домена совпадает со значением параметра mydestination, сообщение доставля- ется с помощью программы local соответствующему пользователю (в предположении, что не найдены ни релевантный псевдоним, ни файл . forward). Если в параметре mydestination указаны имена нескольких доменов, то все они считаются псевдонима- ми одного и того же домена. Для нулевого клиента локальная доставка не предусмотрена, поэтому этот параметр должен оставаться пустым. mydestination = В заключение, параметр relayhost означает, что система Postfix должна посылать все нелокальные сообщения на указанный узел, а не непосредственно в их заданные явно пункты назначения. relayhost = [mail.cs.colorado.edu] Квадратные скобки означают, что система Postfix должна интерпретировать указан- ную строку как имя узла (запись А в DNS ), а не как имя домена (запись MX в DNS). Поскольку нулевые клиенты не должны получать почту от других систем, в кон- фигурации нулевого клиента осталось только закомментировать строку smtpd в файле master.cf. Это изменение не позволяет системе Postfix вообще запускать программу smtpd. Итак, с помощью всего нескольких строк мы определили полнофункционально- го нулевого клиента! Для “реального” почтового сервера необходимо задать немного больше параметров, а также некоторые таблицы отображений. Эти темы рассмотрим в следующих подраз- делах. Использование утилиты post conf. Утилита postconf — это удобный инструмент, помогающий конфигурировать си- стему Postfix. Если запустить ее без аргументов, она выводит на печать все параметры, которые она сконфигурировала к данному моменту. Если в качестве аргумента указать конкретный параметр, утилита postconf выведет на печать его значение. Флаг -d заставляет утилиту postconf выводить значения параметров, заданные по умолчанию, а не текущие значения, указанные в конфигурации. Рассмотрим пример. $ postconf mydestination mydestination = $ postconf -d mydestination mydestination = $myhostname, localhost.$mydomain, localhost Еще один полезный флаг -п заставляет утилиту postconf выводить только те пара- метры, которые отличаются от заданных по умолчанию. Если вам необходима справка
Глава 20. Электронная почта 881 по списку рассылок в системе Postfix, именно эту информацию следует указать в вашем электронном письме. Таблицы поиска Многие аспекты функционирования системы Postfix зависят от использования та- блиц поиска, которые могут отображать ключи в значения или реализовать простые списки. Например, настройки по умолчанию для таблицы alias maps имеют следую- щий вид. alias_maps = dbm:/etc/mail/aliases, nisimail.aliases Источники данных задаются с помощью обозначения тип:путь. Обратите внимание на то, что конкретная таблица одновременно использует два разных источника инфор- мации: базу данных dbm и ассоциативный массив NIS. Множественные значения мож- но разделять запятыми, пробелами или и тем, и другим. Доступные источники данных перечислены в табл. 20.21; команда postconf -m также выводит эту информацию. Таблица 20.21. Источники информации для таблиц поиска в системе Postfix —— ' <' ' Г' -Л--МЛ. 1 1 ."Л Ът .. -У.'. WIMII _____—.-......................................................„...t........... dbm/sdbm Обычные файлы баз данных dbm или gdbm cidr Сетевые адреса в формате CIDR hash/btree Хеш-таблицы Berkeley DB или файл В-дерева (эквивалент dbm) Idap mysql nis Служба каталогов LDAP База данных MySQL Служба каталогов NIS pcre pgsql Регулярные выражения, совместимые с языком Perl База данных PostgreSQL proxy Доступ через сервер proxymap, например, чтобы избежать использования команды chroot regexp static unix Регулярные выражения POSIX Возвращает значение, указанное как путь, независимо от ключа Файлы /etc/passwd и /etc/group; использует синтаксис NISа а unix:passwd.byname — это файл passwd, a unix:group.byname — файл group. Типы dbm и sdbm следует использовать только для обеспечения совместимости с обычной таблицей псевдонимов программы sendmail. Berkeley DB (hash) — более современная реализация; она безопаснее и быстрее. Ее совместимость — это не пробле- ма, используйте следующие инструкции. alias_database - hash:/etc/mail/aliases alias_maps = hash:/etc/mail/aliases Параметр alias database задает таблицу, которая перестраивается с помощью ко- манды newaliases и должна соответствовать таблице, заданной параметром alias_ maps. Причина, по которой используются два параметра, заключается в том, что табли- ца alias maps может содержать источники, не являющиеся базами данных, например mysql или nis, которые не требуют перестройки. Все таблицы баз данных (dbm, sdbm, hash и btree) представляют собой текстовые файлы, которые компилируются в эффективный бинарный формат, предназначенный для поиска. Синтаксис этих текстовых файлов похож на синтаксис файлов конфигура-
882 Часть II. Работа в сети ции тем, что в них также используются комментарии и продолжения строк. Записи за- даются как простые пары “ключ/значение”, разделенные пробелами, за исключением таблиц псевдонимов, в которых используются двоеточия после ключей, чтобы обеспе- чить совместимость с программой sendmail. Например, следующие строки являются характерными для таблицы псевдонимов. postmaster: david, tobias webmaster: evi В следующем примере задается таблица доступа для ретрансляции почты от любого клиента, имя узла которого заканчивается строкой cs. Colorado. edu. .cs.colorado.edu OK Текстовые файлы компилируются в бинарный формат с помощью команд postmap (для обычных таблиц) и postalias (для таблиц псевдонимов). Спецификация таблицы (включая ее тип) должна передаваться как первый аргумент. Рассмотрим пример. $ sudo postmap hash:/etc/postfix/access Команда postmap может также запрашивать значения в таблице поиска (нет совпа- дения — нет вывода на экран). $ postmap -q ЫаЫа hash: /etc/postfix/access $ postmap -q .cs.colorado.edu hash:/etc/postfix/access OK Локальная доставка Программа local доставляет почту локальным получателям. Кроме того, она обра- батывает локальные псевдонимы. Например, если параметр mydestination задан равным cs. Colorado. edu, а почта поступает на адрес evi@cs. Colorado. edu, то программа local сначала проверяет та- блицы alias maps, а затем рекурсивно заменяет все соответствующие записи. Если в таблице нет соответствия псевдонимов, программа local просматривает файл . forward в рабочем каталоге пользователя evi и следует инструкциям, заданным в этом файле, если он существует. (Синтаксис совпадает с правой частью таблицы псевдони- мов.) В заключение, если файл . forward не найден, то электронное сообщение достав- ляется в локальный почтовый ящик пользователя evi. По умолчанию программа local записывает данные в файлы, имеющие формат mbox и находящиеся в каталоге /var/mail. Эти настройки можно изменить с помощью параметров, указанных в табл. 20.22. Таблица 20.22. Параметры для доставки почты в локальный почтовый ящик ___________ (задаются в файле main.cf) Параметр% ______________________________________________ mail_spool_directory Доставляет почту в центральный каталог, обслуживающий всех пользователей home_mailbox mailbox_command mailboX—transport recipient delimiter Доставляет почту в каталог -пользователь по заданному относительному пути Доставляет почту с помощью внешней программы, обычно procmail Доставляет почту с помощью службы, определенной в файле master.cfа Разрешает расширенные имена (см. описание ниже) а Этот параметр взаимодействует с почтовыми серверами, такими как Cyrus imapd.
Глава 20. Электронная почта 883 Параметры mail_spool_directory и home_mailbox обычно генерируют почтовые ящики в формате mbox, но они также могут создавать почтовые ящики Maildir. Для того чтобы сделать это, необходимо добавить косую черту в конце имени пути. Если параметр recipient-delimiter равен + , то почта, адресованная evi+whatever@cs. Colorado. edu, принимается для доставки на учетную запись evi. С помощью этой функциональной возможности пользователь может создавать специ- альные адреса и сортировать свою почту по адресу получателя. Система Postfix снача- ла пытается выполнить поиск по полному адресу, и только если поиск оказался безу- спешным, она разбирает дополнительные компоненты и “возвращается” к базовому адресу. Система Postfix также ищет соответствующий файл пересылки . forward+vTo_ угодно для дальнейшей обработки псевдонимов. Виртуальные домены Есть три возможности организовать почтовый домен на почтовом сервере Postfix. • Указать домен в параметре mydestination. Доставка выполняется, как описано выше: псевдонимы раскрываются и почта доставляется на соответствующие учет- ные записи. • Указать домен в параметре virtual alias domains. Это позволяет оснастить домен собственным пространством адресов, которое не зависит от системных учетных записей пользователей. Все адреса внутри домена должны отображаться (с помощью ассоциативных массивов) во внешние реальные адреса. • Указать домен в параметре virtual_mailbox_domains. Как и в случае параметра virtual alias domains, домен имеет собственное пространство имен. Все по- чтовые ящики должны находиться в указанном каталоге. Домен можно указать только в одном из трех указанных параметров. Решение следует хорошенько обдумать, потому что от него зависят многие элементы конфигурации. Мы уже описывали применение метода mydestination. Рассмотрим остальные возможности. Псевдонимы виртуальных доменов Если домен указан как значение параметра virtual alias domains, то почта, на- правляемая в этот домен, будет приниматься системой Postfix и должна направляться реальному получателю либо на локальном компьютере, либо где-то еще. Перенаправление адресов в виртуальный домен должно определяться в таблице по- иска, указанной в параметре virtual_alias_maps. Записи этой таблицы в левой части содержат адрес виртуального домена, а в правой — реальный адрес получателя. Не полностью заданное имя в правой части интерпретируется как локальное имя пользователя. Рассмотрим следующий пример из файла main. cf. myorigin = cs.colorado.edu mydestination = cs.colorado.edu virtual_alias_domains = admin.com virtual_alias_maps = hash:/etc/mail/admin.com/virtual В файле /etc/mail/admin.com/virtual могут содержаться следующие строки. postmaster@admin.com evi, david@admin.com david@admin.com david@schweikert.ch evi@admin.com evi
884 Часть II. Работа в сети Почта, направляемая на адрес evi@admin. com, будет перенаправлена на адрес evi@ cs. Colorado. edu (добавлен параметр myorigin) и в итоге будет доставлена в почто- вый ящик пользователя evi, потому что имя домена cs. Colorado. edu указано как зна- чение параметра mydestination. Определения могут быть рекурсивными: правая часть может содержать адреса, ко- торые в дальнейшем определяются в левой части. Обратите внимание на то, что правая часть может быть только списком адресов. Если необходимо выполнить внешнюю про- грамму или использовать подстановку файлов с помощью инструкции : include:, то нужно перенаправить почту на псевдоним, который впоследствии может быть раскрыт в соответствии с потребностями пользователя. Для того чтобы хранить всю информацию в одном файле, можно присвоить параме- тру virtual alias domains имя той же таблицы поиска, которая задана параметром virtual alias maps, и внести в эту таблицу специальную запись, которая отмечала бы этот файл как псевдоним виртуального домена. В файле main. cf соответствующие строки выглядели бы следующим образом. virtual_alias_domains = $virtual_alias_maps virtual_alias_maps = hash:/etc/mail/admin.com/virtual Файл /etc/mail/admin. com/virtual содержал бы следующие данные. admin.com notused postmaster@admin.com evi, david@admin.com Правая часть записи для почтового домена (admin. com) на самом деле никогда не используется; наличия имени admin. com в этой таблице в качестве независимого поля уже достаточно для того, чтобы система Postfix рассматривала его как псевдоним вирту- ального домена. Виртуальные почтовые домены Домены, перечисленные в списке значений параметра virtual_mailbox_domains, аналогичны локальным доменам, но список пользователей и их соответствующие по- чтовые ящики должны управляться независимо от системных учетных записей пользо- вателей. Параметр virtual_mailbox_maps указывает на таблицу, в которой перечислены все корректные пользователи в домене. Соответствующее отображение имеет следующий вид. user@domain /path/to/mailbox Если имя пути заканчивается косой чертой, почтовые ящики хранятся в формате Maildir. Значение параметра virtual mailbox base всегда является префиксом за- данных путей. Часто возникает необходимость заменить псевдонимом некоторые адреса в виртуаль- ных почтовых доменах. Для этого следует использовать параметр virtual alias map. Рассмотрим полный пример. В файле main. cf virtual_mailbox_domains = admin.com virtual_mailbox_base = /var/mail/virtual virtual_mailbox_maps = hash:/etc/mail/admin.com/vmailboxes virtual_alias_maps = hash:/etc/mail/admin.com/valiases имеется ссылка на файл /etc/mail/admin.com/vmailboxes, который может содер- жать следующую запись. evi@admin.com nemeth/evi/
Глава 20. Электронная почта 885 Файл /etc/mail/admin. com/valiases может содержать следующую строку. postmaster@admin.com evi@admin.com Отображения виртуальных псевдонимов можно применять даже к адресам, которые не являются псевдонимами виртуальных доменов. Отображения виртуальных псевдо- нимов позволяют перенаправлять любой адрес от любого домена независимо от типа домена (канонического, виртуального псевдонима или виртуального почтового ящика). Поскольку пути к почтовому ящику могут находиться только в правой части отобра- жения виртуального почтового ящика, использование этого механизма является един- ственным способом задать псевдоним для такого домена. Управление доступом Почтовые серверы должны ретранслировать почту для третьих лиц только со сторо- ны доверенных клиентов. Если почтовый сервер перенаправляет почту от неизвестных клиентов на другие серверы, то возникает так называемая открытая ретрансляция (open relay), а это плохо. Более подробно открытая ретрансляция описана в разделе 20.10. К счастью, система Postfix по умолчанию не допускает открытой ретрансляции. На самом деле она имеет довольно строгие настройки, установленные по умолчанию; их приходится скорее смягчать, чем ужесточать. Управление доступом для транзакций SMTP конфигурируется в системе Postfix с помощью “списков ограничения доступа”. Параметры, указанные в табл. 20.23, управляют тем, что следует проверять на разных этапах сеанса SMTP. Таблица 20.23. Параметры системы Postfix для ограничения доступа в рамках протокола SMTP Параметр smtpd_client_restrictionsq smtpd-helO—restrictions smtpd_sender_restrictions smtpd_recipient_restrictions smtpd_data_restrictions smtpd_etrn_restrictions По запросу на соединение К команде ELO/EHLO (начало сессии) К команде MAIL FROM (спецификация отправителя) К команде RCPT ТО (спецификация получателя) К команде DATA (тело почты) К команде ETRNа а Это специальная команда, используемая для пересылки сообщений в очереди. Наиболее важным параметром является smtpd recipient restrictions, посколь- ку управление доступом легче всего реализовать, если адрес получателя известен и можно определить, локальный он или нет. Все другие параметры из табл. 20.23 в конфи- гурации, заданной по умолчанию, остаются пустыми. По умолчанию параметр smtpd_ recipient_restrictions имеет следующее значение. smtpd_recipient_restrictions - permit_mynetworks, reject_unauth_destination Каждое из указанных ограничений проверяется по очереди, пока не будет принято определенное решение о том, что делать с почтой. Общие ограничения перечислены в табл. 20.24. С помощью этих ограничений можно проверить все, а не только специфическую ин- формацию наподобие адреса отправителя в параметре smtpd sender restrictions. Следовательно, для простоты, можно наложить все ограничения, используя только один
886 Часть II. Работа в сети параметр, которым должен быть параметр smtpd_recipient_restrictions, посколь- ку только он позволяет проверять все (за исключением части DATA). Таблица 20.24. Общие ограничения доступа в системе Postfix check_client_access Проверяет адрес узла клиента, просматривая таблицу поиска check_recipient_access Проверяет почтовый адрес получателя, просматривая таблицу поиска permit_mynetworks Предоставляет доступ адресам, перечисленным в списке mynetworks re j ect unauth dest inat ion Отклоняет почту для нелокальных получателей; отменяет ретрансляцию Параметр smtpd_recipient restriction позволяет также проверять ретранслиру- емую почту. Ограничения, заданные параметром reject unauth destination, следует сохранить и с осторожностью выбирать “разрешающие” ограничения, предшествующие ему. Таблицы доступа Каждое ограничение возвращает одно действие, указанное в табл. 20.25. Таблицы доступа используются в ограничениях check_client access и check_recipient_ access для выбора действия, зависящего от адреса клиентского узла или адреса получа- теля соответственно. Таблица 20.25. Действия для таблицы доступа Д^ЙСТВЙ|к,;- 4пп текст Возвращает код временной ошибки 4nn и сообщение text 5пп текст Возвращает код постоянной ошибки 5пп и сообщение text DEFER_IF_PERMIT Если результатом оценки ограничения является действие permit, изменяет его на временную ошибку DEFER_IF_REJECT Если результатом оценки ограничения является действие reject, изменяет его на временную ошибку DISCARD Принимает сообщение, но скрытно удаляет его DUNNO Делает вид, что ключ не был найден; проверяет дальнейшие ограничения FILTER транспорт:пункт_ назначения Пропускает почту через фильтр транспорт: пункт_назначения? HOLD Блокирует почту в очереди OK Принимает почту PREPEND заголовок Добавляет заголовок в сообщение REDIRECT адрес Перенаправляет данное сообщение на конкретный адрес REJECT Отклоняет почту WARN сообщение Заносит указанное сообщение в регистрационный журнал аСм. ниже раздел, посвященный борьбе со спамом и вирусами в системе Postfix. В качестве примера предположим, что мы хотим разрешить ретрансляцию для всех компьютеров в домене cs. Colorado. edu и отправку сообщения списку внутренней рассылки newsletter@cs. Colorado. edu только доверенным клиентам. Эти правила можно реализовать с помощью следующих строк в файле main. cf.
Глава 20. Электронная почта 887 smtpd_recipient_restrictions = permit_mynetworks check_client_access hash:/etc/postfix/relaying_access reject_unauth_destination check_recipient_access hash:/etc/postfix/restricted_recipients Обратите внимание на то, что запятые являются необязательными, если указан спи- сок значений параметра. В файл /etc/postfix/relaying_access следует внести следующую строку. .cs.colorado.edu ОК В файл /etc/postfix/restricted_recipients следует внести такую строку. newsletter@cs.colorado.edu REJECT Internal list Текст, следующий за словом REJECT, является необязательной строкой, которая по- сылается клиенту вместе с кодом ошибки. Он сообщает отправителю, почему сообще- ние было отклонено. Аутентификация клиентов и шифрование Для пользователей, отправляющих сообщения из дома, обычно проще всего направ- лять исходящую почту через домашний почтовый сервер интернет-провайдера, незави- симо от адреса отправителя сообщения. Большинство интернет-провайдеров доверяют своим непосредственным клиентам и разрешают ретрансляцию. Если эта конфигурация невозможна или используется система Sender ID или SPF, то следует убедиться, что мо- бильные пользователи, находящиеся вне сети, могут быть авторизованы для представле- ния сообщений демону smtpd. Решить эту проблему можно, используя механизм SMTP AUTH непосредственно на уровне SMTP. Для этого систему Postfix необходимо скомпилировать с библиотекой SASL. Затем эту функциональную возможность можно конфигурировать следующим образом. smtpd_sasl_auth_enable = yes smtpd_recipient_restrictions = permit_mynetworks permit_sasl_authenticated Вам также понадобится поддержка зашифрованных соединений, чтобы избежать от- правки паролей открытым текстом. Добавьте в файл main. cf строки, похожие на сле- дующие. smtpd_tls_security_level = may smtpd_tls_auth_only = yes smtpd_tls_loglevel = 1 smtpd_tls_received_header = yes smtpd_tls_cert_file = /etc/certs/smtp.pem smtpd_tls_key_file = $smtpd_tls_cert_file smtpd_tls_protocols = !SSLv2 Необходимо также поместить правильно подписанный сертификат в файл /etc/ certs/smtp.pem. Кроме того, рекомендуется подключить шифрование на исходящие соединения SMTP. smtp_tls_security_level = may smtp_tls_loglevel = 1
888 Часть II. Работа в сети Борьба со спамом и вирусами Система Postfix имеет много функциональных возможностей, помогающих блокиро- вать подозрительную электронную почту. Один класс защитных функциональных воз- можностей предназначен для строгой реализации протокола SMTP. Законопослушный почтовый сервер должен следовать протоколу, но отправители спама и вирусов часто спешат и пренебрегают этим требованием, тем самым выдавая себя. К сожалению, не- исправные обработчики почты, обеспечивающие легитимность такой почте, все еще су- ществуют, поэтому такой метод нельзя считать панацеей. Следует тщательно выбирать ограничения и отслеживать регистрационные файлы. Перечислим некоторые основные функциональные возможности, относящиеся к данной категории. • reject non fqdn * — отклоняет сообщения, не имеющие полностью опреде- ленного домена отправителя (sender), домена получателя (recipient) или име- ни узла HELO/EHLO (hostname). • reject unauth pipelining — прекращает сеанс, если клиент не ждет, чтобы увидеть статус команды до обработки. • re j ect unknown sender domain — отклоняет сообщения с нераспознанным до- меном отправителя. Система Postfix возвращает сообщение о временной ошибке, потому что эта проблема может быть результатом временного сбоя системы DNS. • re j ect_unknown_reverse_client_hostname — отклоняет сообщения от узлов> не имеющих обратных записей DNS. 1 • smtpd helo required — запрашивает команды HELO/EHLO в начале обмена' информацией (параметр, принимающий значение yes или по). • strict rf c821_envelopes — требует правильного синтаксиса для адресов элек-! тронной почты в командах MAIL FROM и RCPT ТО (параметр, принимающий значения yes или по). Все перечисленные выше параметры не являются ограничениями. Мы вызываем их, включая их имена в параметры smtpd_helo_restrictions (reject_non_fqdn_*) или smtpd client restrictions (другие). Для проверки ограничения до включения его в процесс (настоятельно рекомендуем), вставьте ограничение warn if reject перед ним, чтобы преобразовать эффект от прямого отказа принимать почту в предупреждения^ Черные списки Вы можете заставить систему Postfix сравнивать входящие сообщения с черным спи- ском, основанным на системе DNS; подробнее эта процедура описана в разделе 20.10. Для того чтобы воспользоваться этой функциональной возможностью, используется ограничение reject rbl client с указанным адресом сервера DNS, с которым прово- дится сверка. Аналогичная функциональная возможность reject rhsbl sender про- веряет имя домена в адресе отправителя, а не имя узла клиента. Пример борьбы со спамом В следующем примере продемонстрирована относительно полная конфигурация из файла main. cf, предназначенная для борьбы со спамом. strict_rfc821_envelopes = yes smtpd_helo_required = yes
Глава 20. Электронная почта 889 smtpd_recipient_restrictions = rej ect_unknown_sender_domain rej ect_non_fqdn_sender rej ect_non_fqdn_recipient permit_mynetworks permit_sasl_authenticated check_client_access hash:/etc/postfix/relaying_access rej ect_unauth_destination reject_unauth_pipelining reject_unknown_reverse_client_hostname reject_rbl_client zen.spamhaus.org permit Обратите внимание на то, что мы поместили некоторые ограничения перед параме- тром permit mynetworks. Это позволяет проверить, посылают ли собственные клиен- ты правильно отформатированные сообщения. Это простой способ найти ошибки кон- фигурации. Заключительное действие permit задается по умолчанию и приведено явно лишь для наглядности. Программы SpamAssassin и procmail Система Postfix поддерживает работу программы SpamAssassin и других аналогичных фильтров. Общая информация об этих инструментах приведена в разделе 20.6. Программу procmail можно запустить из пользовательских файлов . forward, но это сложный и уязвимый для ошибок способ запуска. Лучше поместить в файл main.cf следующую строку. mailbox_command = /usr/bin/procmail -a "$EXTENSION" Система Postfix впоследствии использует программу procmail для доставки почты вместо записи сообщений непосредственно в почтовую очередь. Аргументы программы procmail содержат расширение адреса (фрагмент, следующий за знаком +); впослед- ствии к ним можно обращаться с помощью программы procmail, указывая ссылку $1. Демоны политики В системе Postfix 2.1 реализован механизм для делегирования управления доступом внешним программам. Эти программы, именуемые демонами политики (policy daemons), получают всю информацию, которую система Postfix имеет о сообщении, и возвращают одно из действий, перечисленных в табл. 20.25. Серые списки — одна из более интересных функциональных возможностей, кото- рую можно реализовать с помощью демона политики. Более подробную информацию о серых списках и ситуациях, в которых они могут понадобиться, можно найти в раз- деле 20.6. Фильтрация содержимого Система Postfix может использовать регулярные выражения для проверки заголовков и тел электронных сообщений, используемых как контрабанда. Она также передает со- общения другим программам, например специализированным программам для борьбы со спамом или антивирусным приложениям. Проверки заголовка и тела выполняются в реальном времени в ходе приема сообще- ния по протоколу SMTP. В случае совпадения каждое проверяемое регулярное сообще- ние вызывает действие, указанное в табл. 20.25. Например, строка header_checks - regexp:/etc/postfix/header_checks
890 Часть II. Работа в сети в файле main. cf в сочетании со строкой из файла /etc/postf ix/header_checks /ASubject: reject-me/ REJECT You asked for it приведет к отказу от приема любого сообщения, тема которого начинается со слов “reject-me”. Несмотря на то что поддержка регулярных выражений всегда работает от- лично, в контексте обработки электронных сообщений она имеет несколько недостат- ков. В частности, она неэффективна для борьбы со спамом и фильтрации вирусов. Фильтрация содержимого с помощью программы amavisd Промышленная фильтрация вирусов, как правило, осуществляется с помощью про- граммы amavisd (см. раздел 20.6), которая написана на языке Perl и связывает про- граммное обеспечение почтового сервера с одним или несколькими антивирусными приложениями. Такие фильтры конфигурируются параметром content filter про- граммы, который заставляет программу Postfix передавать все входящие сообщения ука- занной службе. Кроме настройки параметра content f ilter, системный администра- тор должен модифицировать несколько существующих записей в файле master .cf и добавить несколько новых. Система Postfix и программа amavisd взаимодействуют друг с другом посредством стандартных протоколов SMTP и LMTP. Система Postfix посылает почту для анализа программе amavisd посредством протокола LMTP. Программа amavisd сканирует ее и посылает обратно в систему Postfix в рамках протокола SMTP на альтернативный порт, доступный только для локального компьютера, на котором отключено сканирование со- держимого (чтобы избежать замкнутого круга). Ожидая почту, поступающую из Интернета, программа amavisd обычно прослуши- вает порт 10024, а для системы Postfix предназначен резервный nojyr 10025. Для обра- ботки исходящей почты и отделения ее от входящей почты необходимо использовать специальный порт для программы amavisd, например 10026. Входящая почта может вернуться в систему Postfix через тот же порт возврата, что и исходящая почта. Конфигурация, описанная ниже, представляет собой настройку “очереди с после- дующей обработкой” (post queue), которая сканирует почту после того, как она окажется в почтовой очереди системы Postfix. Если вы хотите реализовать сканирование на лету (in-line scanning), при котором почта сканируется в процессе первоначального диалога с клиентом по протоколу SMTP, запустите вспомогательную программу amavisd-milter, позволяющую присоединить программу amavisd как почтовый фильтр. На стороне программы amavisd необходимо убедиться, что ее конфигурация содер- жит следующие строки. (Эта конфигурация использует разные порты для исходящих и входящих сообщений.) $inet_socket_port = [10024,10026]; $notify_method = 'smtp:[127.0.0.1]:10025’; $forward_method = 'smtp:[127.0.0.1]:10025'; $interface_policy{'10026'} = 'ORIGINATING'; $policy_bank{'ORIGINATING'} = { originating => 1, # indicates client is ours }; Почтовый агент Postfix необходимо настроить на отправку почты программе amavisd. Файл README. Postfix в дистрибутивном пакете amavisd-new включает около 20 строк готовой конфигурации, которые можно поместить в файл /etc/postfix/ master. cf, чтобы программа amavisd была доступной и могла посылать почту обрат-
Глава 20. Электронная почта 891 но системе Postfix. Мы не повторяем их здесь; просто скопируйте их из файла README и вставьте в файл /etc/postfix/master.cf. Для того чтобы заставить систему Postfix посылать почту программе amavisd на ска- нирование, добавьте в файл main. cf следующую строку. content_filter = amavisfeed:[127.0.0.1]:10024 Для того чтобы отличать входящую почту от исходящей, конфигурацию придется немного усложнить. Вместо директивы, приведенной выше, необходимо использовать следующую модификацию ограничения smtpd_recipient_restrictions (изменения выделены полужирным шрифтом). smtpd_recipient_restrictions = rej ect_unknown_sender_domain rej ect_non_fqdn_sender rej ect_non_fqdn_recipient check_sender_access regexp: /etc/postfix/ tag_as__or iginating. re permit_mynetworks permit_sasl_authenticated check__sender__access regexp: /etc/postfix/tag__as—foreign. re check_client_access hash:/etc/postfix/relaying_access reject_unauth_destination rej ect_unauthjpipelining reject_unknown_reverse_client_hostname reject_rbl_client zen.spamhaus.org permit Затем поместите в файл tag_as_or iginating. re строку /Л/ FILTER amavisfeed:[127.0.0.1]:10026 и добавьте в файл tag_as_foreign. re следующую строку. /Л/ FILTER amavisfeed:[127.0.0.1]:10024 Почта от внешних узлов соответствует ограничению tag__as_foreign. re, которое заставляет систему Postfix фильтровать почту, посылая ее на порт 10024. Вся почта соот- ветствует ограничению tag as originating. re, а для почты, поступающей от внеш- них узлов, применяются ограничения, в именах которых содержится слово foreign. Отладка Если в системе Postfix возникает проблема, в первую очередь следует проверить ре- гистрационные файлы. Ответы на возможные вопросы, скорее всего, найдутся в этих файлах; просто надо их поискать. Каждая программа в системе Postfix обычно создает регистрационную запись для каждого обработанного сообщения. Например, ниже при- веден пример регистрационных записей для исходящего сообщения. Aug 18 22:41:33 nova postfix/pickup: 0Е4А93688: uid=506 from=<dws@ee.ethz.ch> Aug 18 22:41:33 nova postfix/cleanup: 0E4A93688: message-id= <20040818204132.GA11444@ee.ethz.ch> Aug 18 22:41:33 nova postfix/qmgr: 0E4A93688: from=<dws@ee.ethz.ch>, size=577,nrcpt=l (queue active) Aug 18 22:41:33 nova postfix/smtp: 0E4A93688: to=<evi@ee.ethz.ch>,relay=tardis.ее.ethz.ch[129.132.2.217], delay=0, status=sent (250 Ok: queued as 154D4D930B) Aug 18 22:41:33 nova postfix/qmgr: 0E4A93688: removed
892 Часть II. Работа в сети Легко видеть, что интересующая нас информация разбросана по нескольким стро- кам. Обратите внимание на то, что идентификатор 0Е4А93688 встречается на каждой строке: система Postfix присваивает идентификатор очереди сразу, как только сообщение поступает в почтовую систему, и никогда не изменяет его. Следовательно, при поиске регистрационных записей об истории сообщения в первую очередь следует определить идентификационный номер сообщения в очереди. Узнав его, легко применить команду grep ко всем релевантным записям. Система Postfix делает подробные записи о замеченных ею проблемах. Однако иногда трудно найти важные строки среди тысяч сообщений о нормальном состоянии. В этом слу- чае целесообразно использовать некоторые инструменты, перечисленные в разделе 11.5. Просмотр очереди Еще одно место, где следует искать решение проблем, — почтовая очередь. Как и в системе sendmail, команда mailq выводит на печать содержание очереди. Его можно использовать, для того чтобы выяснить причину задержки сообщения. Полезным инструментом является также сценарий qshape, который поставляется с последними версиями системы Postfix. Он демонстрирует суммарные статистические показатели о содержании очереди. Его вывод выглядит следующим образом. $ sudo qshape deferred Т 5 10 20 40 80 160 320 640 1280 1280+ TOTAL 78 0 0 0 7 3 3 2 12 2 49 expn.com 34 00000 0 0 9 0 25 chinabank, ph 500011 1 2 0 0 0 prob-helper.biz 300000 0 0 0 0 3 Сценарий qshape создает отчет о заданной очереди (в данном случае об очереди от- ложенных сообщений), упорядоченной по доменам получателя. В столбцах отчета ука- зывается, сколько минут релевантное сообщение провело в очереди. Например, в отчете видно, что 25 сообщений, направленных в домен expn. сот, провели в очереди более 1280 минут. Все пункты назначения в данном примере вызывают подозрения, что со- общения были посланы автоответчиком в ответ на спам. / Сценарий qshape также создает отчет в соответствии с доменами отправителей, если он запущен с флагом -s. Мягкий рикошет Если параметр sof t bounce установлен равным yes, система Postfix посылает со- общения о временных ошибках вместо сообщений о постоянных ошибках, таких как “пользователь неизвестен” или “ретрансляция запрещена”. Этот параметр предоставля- ет отличную возможность для тестирования; он позволяет отслеживать местонахождение сообщения после изменения конфигурации без риска потери законной электронной по- чты. В этом случае любой отказ в конце концов приводит к повторной попытке доставки. Не забудьте отключить эту функциональную возможность, когда закончите тестиро- вание, иначе попытки доставки отвергнутой почты будут повторяться снова и снова. Тестирование управления доступом Легче всего проверить ограничения управления доступом, попытавшись послать со- общение с внешнего узла и посмотрев, что произойдет. Это хороший тест, но он не охва- тывает специальные условия, например, когда почта поступает из домена, в котором у вас нет учетной записи.
Глава 20. Электронная почта 893 Система Postfix 2.1 внедрила расширение протокола SMTP, который называется XCLIENT и имитирует представление из другого места. Эта функциональная возмож- ность по умолчанию отключена, но с помощью следующей строки конфигурации из файла main. cf вы можете включить ее для соединений, исходящих из локального узла. smtpd_authorized_xclient_hosts = localhost Сеанс тестирования может выглядеть примерно так. $ telnet localhost 25 Trying 127.0.0.1... Connected to localhost. Escape character is ,Л]'. 220 tardis.ee.ethz.ch ESMTP Postfix XCLIENT NAME=mail. cs. Colorado. edu ADDR=192.168.1.1 250 Ok HELO mail. cs. Colorado. edu 250 tardis.ee.ethz.ch MAIL FROM: <evi@Colorado .edu> 250 Ok RCPT TO: <david@Colorado.edu> 554 <david@colorado.edu>: Relay access denied 20.16. Конфигурация механизма DKIM Наше описание технологии DKIM не сосредоточено в одной главе. Вступительный материал содержится в главе о системе DNS (раздел 17.8), а также в разделе 20.8. Здесь мы сосредоточимся на деталях, связанных с использованием технологии DKIM в элек- тронной почте как с помощью внешнего инструмента amavisd, так и непосредствен- но в сочетании с системами sendmail, Exim и Postfix. Системы sendmail и Postfix для реализации технологии DKIM используют почтовые фильтры; система Exim делает это непосредственно. Реализация технологии DKIM в системе Exim является новой (конец 2009 года) и остается не до конца отработанной. Технология DKIM: DomainKeys Identified Mail Технология DKIM — это новая надежда на правильную идентификацию организации отправителя. При широком развертывании она способна резко ограничить возможности злоумышленников для подделки домена отправителя. Тогда почта от вашего банка мо- жет быть действительно почтой, посланной вашим банком, или, по крайней мере, клас- сифицироваться как почта, которая не является фишингом или спамом. Технология DKIM вытесняет прежнюю систему DomainKeys; она использует крип- тографию с открытым ключом (с ключами, хранящимися в системе DNS), чтобы позво- лить получателям проверять как источник сообщения, так и его целостность. Это ста- новится важным в глобальном мире, где так много сделок совершается в электронном виде. Система DKIM также не позволяет отправителю отрицать, что это он отправил сообщение; так называемый отказ от авторства. Реализация системы DKIM имеет две стороны: та, которая подписывает исходящую почту, когда она покидает ваш сайт, и та, которая проверяет подписи входящей почты в момент ее поступления. Первая операция должна выполняться концентратором исходящей почты непосред- ственно перед тем, как почта покинет ваш сайт (после всех внутренних переписываний и сканирования содержания). Вторая операция, верификация, должна выполняться сразу
894 Часть II. Работа в сети после получения сообщения, перед добавлением другого инструмента сканирования или изменения заголовков. На сайте sendmail. org есть много удобных и универсальных инструментов, кото- рые могут использоваться любым программным обеспечением, реализующим техноло- гию DKIM. Первым является мастер ADSP, принимающий имя домена и генерирующий соответствующие текстовые ADSP ТХТ , которые вы должны добавить в систему DNS, чтобы реализовать технологию DKIM.21 Второй инструмент — это верификатор, с по- мощью которого можно проверить свои настройки после завершения приготовлений к работе. Детали технологии DKIM и ресурсных записей ADSP изложены в разделе 17.8. Они до сих пор остаются текстовыми, хотя в будущем будут преобразованы в тип собствен- ной базы данных о ресурсах DNS. Программы OpenSSL и amavisd содержат код для ге- нерации ключей DKIM. Кроме того, различные пакеты почтовых фильтров DKIM также содержат сценарии для генерации ключей. Настроив конфигурацию вашего почтового транспортного агента так, чтобы он гене- рировал подписи DKIM, вы можете послать сообщение по адресу sa-test@sendmail. net, чтобы проверить, что все работает правильно. Сервер пришлет вам сообщение, в котором укажет, какие функции безопасности он распознал. Если у вас есть учетная за- пись в системе Gmail, то проверить эти возможности можно, послав сообщение само- му себе. Щелкнув на ссылке “show details”, вы раскроете подписанное поле. Вы може- те также попросить систему Gmail выполнить команду “Show original” в выпадающем меню. Эта команда показывает исходное сообщение со всеми его заголовками, включая подпись DKIM. Почтовые фильтры DKIM Программное обеспечение для реализации технологии DKIM изначально было раз- работано корпорацией Sendmail, Inc., для того, чтобы использовать его как почтовый фильтр при взаимодействии с транспортным агентом программы sendmail. Существует две версии этого кода: оригинальная, DKIM-milter; и альтернативная, OpenDKIM. Оба пакета доступны с исходным кодом на сайте sourceforge. net и в скомпилирован- ном виде в разных репозиториях пакетов. Мы проиллюстрируем версию для программы sendmail под названием DKIM-milter v2.8.3. Этот пакет содержит программу dkim-filter, почтовый фильтр, создающий и про- веряющий подписи, и несколько утилит для отладки и отслеживания эксплуатации. Ниже приведен список этих утилит. • dkim-f ilter — генерирует и верифицирует подписи DKIM. • dkim-genkey — генерирует пары ключей и требуемые записи DNS. • dkim- stats — создает отчеты на основе статистических данных, собранных ути- литой dkim-f ilter. • dkim-testkey — проверяет, имеют ли ключи правильный формат и являются ли они доступными. • dkim-testssp — проверяет запись ADSP (которая ранее называлась SSP). 21 Не публикуйте записи ADSP, пока система подписи исходящих сообщений на будет нала- жена и не станет правильно работать, иначе другие сайты не будут принимать вашу электронную почту.
Глава 20. Электронная почта 895 На первом этапе настройки пакета DKIM-milter необходимо создать специальную учетную запись пользователя и группы для своих собственных файлов, связанных с тех- нологией DKIM. Для обеих записей следует использовать имя “dkim”. При этом необ- ходимо убедиться, что учетная запись имеет ограниченную оболочку, например /bin/ false. Утилита dkim-genkey генерирует пару ключей DKIM. Домен, для которого предна- значен ключ, задается с помощью флага -d, а селектор (т.е. имя ключа) — с помощью флага -s. По умолчанию они имеют значения example. com и “default”. Флаг -г огра- ничивает использование ключа только подписанием электронной почты, а флаг -t означает, что вы тестируете систему DKIM. Ключи сохраняются в отдельных файлах: селектор.private (для закрытого ключа) и селектор, txt (для текстовой записи DNS, содержащей открытый ключ). Например, инструкция $ dkim-genkey -г -d example.com -s email генерирует пару ключей в файлах email .private и email. txt, находящихся в теку- щем каталоге. Инсталлируйте закрытый ключ где-нибудь, например, в каталоге /etc/mail/dkim/ keys. Установите режим каталога /etc/mail/dkim равным 600 и примените команду chown (рекурсивно) к пользователю и группе dkim. Добавьте запись TXT системы DNS в соответствующий зонный файл, введите порядковый номер зоны и пошлите сигнал вашему серверу имен. После окончания проверки всей системы можно добавить запись ADSP, но раньше этого делать не следует. Запустите утилиту dkim-testkey, чтобы проверить правильность ключей. Эта ути- лита не создает вывода, если все в порядке, поэтому молчание в данном случае — дей- ствительно золото. На следующем этапе необходимо задать конфигурацию утилиты dkim-filter для ее использования в качестве почтового фильтра. Создайте файл /etc/mail/dkim. conf, владельцем которого является пользователь и группа dkim. Ниже приведен пример, по- заимствованный из статьи T.J. Nelson Setting up DKIM with Sendmail. Canonicalization simple Domain mail.example.com KeyFile /etc/mail/dkim/keys/email.key.pern MTA MSA PidFile /var/run/dkim-filter.pid Selector email Socket inet:8891@localhost SignatureAlgorithm rsa-shal Syslog Yes UserID dkim X-Header Yes Mode sv InternalHosts /etc/mail/dkim-internal-hosts Общий формат записей в файле dkim. conf имеет следующий вид. параметр значение Символ # означает начало комментария. Дистрибутивный пакет содержит хорошо прокомментированный пример конфигурации dkim-filter.conf.sample, включа- ющий описание переменных и их значения, заданные по умолчанию. На справочной странице dkim-filter.conf можно найти еще более подробное описание.
896 Часть II. Работа в сети При настройке конфигурации центрального почтового концентратора строка Domain должна содержать список полностью определенных имен доменов, предназначенных для подписи, разделенных запятыми, или имя файла, в котором содержится этот список. Параметр KeyFile задает местоположение закрытого ключа, используемого для подписи сообщений. Предполагается, что первая часть имени этого файла представля- ет собой селектор (в данном случае “email”). Строка МТА содержит список имен транс- портных агентов, чья почта всегда должна подписываться, а не верифицироваться. Она аналогична части Name параметра DAEMON_O PT IONS в конфигурации программы sendmail. Спецификация Socket идентифицирует прослушивающий сокет TCP; в данном слу- чае он прослушивает порт 8891 на локальном узле. Параметр SignatureAlgorithm мо- жет принимать значения rsa-shal или rsa-sha256; второе значение задается по умол- чанию, но, поскольку этот алгоритм является относительно новым, его поддерживают не все транспортные агенты. Параметр X-Header указывает, что dkim-filter должен добавить строку заголовка в каждое сканируемое сообщение. Параметр Mode может иметь значение s (для подписи), v (для верификации) или sv (для обоих режимов). Параметр internalHosts должен ссылаться на файл, содержащий список узлов, ис- ходящая почта которых должна быть подписана. Узлы должны быть перечислены с пол- ностью определенными именами. Несколько параметров конфигурации позволяют облегчить отладку. К ним относятся параметры MilterDebug, LogWhy и SyslogSuccess. Некоторые из них генерируют так называемую регистрационную информацию, которую после отладки следует отключить. Другие параметры указывают, что делать с сообщениями, подписи которых не могут быть верифицированы: On-Default, On-BadSignature, On-DNSError, On-Security, On-InternalError и On-NoSignature. Каждый из них принимает значения reject, tempfail, accept и discard. Система допускает гибкую конфигурацию и имеет много параметров (более 80), ко- торые описаны на справочной странице dkim-filter .conf. Конфигурация DKIM в программе amavisd-new Для использования технологии DKIM в программе amavisd-new необходимо иметь модуль Mail: : DKIM версии 0.33 или выше, написанный на языке Perl. Если такого мо- дуля нет, загрузите его с сайта CPAN. Вы должны сгенерировать пару ключей, включить режим верификации и подписи DKIM, указать файл, содержащий закрытый ключ, и за- дать некоторые параметры подписи. Программа amavisd может генерировать ключи для системы DKIM самостоятельно. $ amavisd genrsa /var/db/dkim/example, com-email, key. pern Еще одним аргументом программы amavisd является имя файла, в котором хранятся ключи. Поскольку он содержит и закрытый, и открытый ключи, лучше всего проверить разрешения и убедиться, что этот файл невозможно прочитать извне и несанкциониро- ванный доступ к нему закрыт. Следующий фрагмент конфигурации был немного изменен по сравнению с разделом документации amavisd-new под названием “Bits and pieces.” В этом примере мы пред- полагаем, что домен вашего сайта называется example. com и что вы используете селек- тор “email” для своих ключей. $enable_dkim_verification = 1; $enable_dkim_signing = 1;
Глава 20. Электронная почта 897 dkim_key('example.com', 'email', '/vaг/db/dkim/example.com-email.key.pern'); @dkim_signature_options_bysender_maps = ( { '.'=>{ ttl => 21*24*3600, c => 'relaxed/simple' } } ); Omynetworks = qw(127.0.0.0/8 10.0.0.0/8 172.16.0.0/12 192.168.0.0/16); Строка с параметрами подписи DKIM позволяет заменить дескрипторы, заданные по умолчанию и хранящиеся в ассоциативном массиве. Подписи могут иметь 13 разных значений дескрипторов. Многие дескрипторы, такие как дескриптор d, который задает домен отправителя, устанавливаются автоматически. Важным дескриптором является s, который задает селектор, предназначенный для использования при запросе у системы DNS открытого ключа для верификации подписи. В данном примере мы заменили зна- чение параметра ttl, задающего срок действия ключа, с 30 дней на 21. Некоторые де- скрипторы становятся важными при ретрансляции почты (например, через списки рас- сылки), если вы хотите сохранить возможность подписания таких сообщений. Присвоив булевы значения ассоциативному массиву signed header fields, мож- но задать поля заголовков, которые должны быть включены в подпись. Например, ин- струкции $signed_header_fields{'received'} = 0; $signed_header_fields{'sender'} = 1; $signed_header_fields{'to'} = 1; $signed_header_fields{'cc'} = 1; исключают заголовок Received (Получено), но включают Sender (Отправитель), То (Кому) и Сс (Копии). Значения, заданные по умолчанию, вероятно, подойдут для боль- шинства сайтов. Для тестирования конфигурации можно использовать инструкции amavisd showkeys и amavisd testkeys. Команда showkeys выводит на печать открытый ключ, который необходимо добавить в зонный файл для домена example. com. (Не забудьте изменить порядковый номер зоны и отправить сигнал вашему серверу имен!) Команда testkeys проверяет как процесс подписания, так и тот факт, что ваш ключ был опубли- кован в системе DNS. Технология DKIM в системе sendmail Используя почтовые фильтры (для оперативной фильтрации, описанной в разде- ле 20.6) или дублирующий сервер в сочетании с программой amavisd, можно реали- зовать технологию DKIM для программы sendmail. Здесь мы опишем использование почтовых фильтров DKIM для подписания и верификации сообщений. Примитивы masquerade as и genericstable конфигурации программы sendmail переписывают заголовки, поэтому эти примитивы должны быть реализованы до добав- ления любых подписей DKIM, в противном случае подпись станет недействительной. Для поддержки технологии ОЙМ системный администратор должен скомпилиро- вать программу sendmail с поддержкой почтовых фильтров, иметь доступ к библиоте- кам OpenSSL и Berkeley DB и инсталлировать пакет DKIM-milter (который можно най- ти на сайте sourceforge. net). Библиотека OpenSSL используется для генерирования ключей. Следует добавить ее в свою зону DNS, как указано в разделе 17.8, или исполь- зовать утилиту dkim-genkey, как показано выше. В данном примере наш домен называется example.com. Мы выбрали селектор “email” и сохранили наш закрытый ключ в файле email .private, а открытый ключ — в файле email .key .pem. Проверить ключи можно с помощью утилиты dkim-testkey. $ dkim-testkey -d example.com -k /var/db/dkim/email .key.pem -s ma
898 Часть II. Работа в сети Если все в порядке, утилита dkim-testkey не выведет никаких результатов. Добавьте в конфигурационный файл sendmail .тс программы sendmail строку INPUT MAIL_FILTER ('dkim-filter', 'S=inet:8891@localhost’) и повторите сборку файла sendmail. cf (с помощью инструкций . /Build sendmail. cf; sudo make install-cf). Затем заново запустите программу sendmail и утилиту dkim-filter. Технология DKIM в системе Exim Выпуск Exim 4.70 (конец 2009 года) добавил естественную поддержку технологии DKIM и перестал поддерживать технологию DomainKeys компании Yahoo!. Ожидается, что набор его функциональных возможностей будет расширяться по мере исправления ошибок и приобретения опыта работы с технологией DKIM. Поддержка технологии DKIM в системе Exim включена по умолчанию. Для того что- бы ее отключить, установите значение DlSABLE_DKIM=yes в файле Local/Makefile, а затем соберите и заново инсталлируйте пакет. Реализация системы Exim подписывает исходящие сообщения в конфигурации транспортного протокола SMTP и верифицирует входящие сообщения с помощью но- вого списка управления доступом acl_smtp_dkim. Концентраторы могут отключать ве- рификацию подписей на сообщениях, которые они ретранслируют на локальные узлы, установив для этих сообщений параметр dkim_disable__verify. Подписание исходящих сообщений Первое действие при реализации технологии DKIM — генерация криптографических ключей с помощью библиотеки OpenSSL (см. раздел 17.8). Для транспортного протокола SMTP необходимо определить несколько новых параметров системы Exim. Эти параме- тры могут включать переменные, которые должны раскрываться при вызове транспорта. Список параметров подписей, связанных с технологией DKIM, приведен в табл. 20.26. Таблица 20.26. Параметры подписей DKIM в системе Exim Параметр ' к® dkim_domain строка да Подписываемый домен dkim_selector строка да Селектор ключа (имя) dkim_private_key строка да Закрытый ключ или файл, который его содержит dkim_canon строка нет Метод канонизации: simple или relaxed dkim_strict строка нет Если true, то из-за ошибок в подписи сообщение возвращается в очередь dkim_sign_headers строка нет Заголовок для включения в подпись Первые три параметра являются обязательными и должны быть заданы в конфигу- рации; остальные параметры носят факультативный характер. По умолчанию для кано- низации (dkim canon) используется метод relaxed, сообщения, вызывающие ошибки в подписях, посылаются без подписей (dkim strict), а система Exim для подписи ис- пользует список заголовков RFC4871 (dkim sign headers). Обязательные параметры не требуют дополнительных объяснений, но в сложном сайте, содержащем несколько реальных и виртуальных доменов, их настройка требует определенного опыта.
Глава 20. Электронная почта 899 Верификация входящих подписанных сообщений Входящие почтовые сообщения, подписанные по технологии DKIM, проверяются с помощью списка управления доступом acl smtp dkim. Этот список вызывает каж- дую подпись и возвращает один из нескольких кодов. • попе — сообщение не подписано. • invalid — подпись невозможно верифицировать (ключ недоступен или некор- ректен). • fail — подпись не прошла верификацию заголовка, тела или и того, и другого. • pass — подпись является корректной. Статус сообщения записывается в переменную $dkim_verify_status, а инфор- мация об ошибках — в переменную $dkim_verif у reason. Существует много других дескрипторов вида $dkim_nepeMeHHan, предоставляющих доступ к разным полям под- писи и позволяющих реализовать специальную политику (например, маркировку сооб- щений от сайта gmail. com, которые не имеют подписей, или отказ от приема сообще- ний от сайта paypal. com, которые не поддаются верификации). Законченный пример Следующий пример позаимствован из настроек системы DKIM, предложенных Филом Пенноком.22 Она содержит определения параметра acl_process_dkim для ве- рификации подписей, а также маршрутизатора и транспорта (dnslookup signed и remote dksign соответственно) для создания реальных подписей. Эта конфигурация позволяет подписывать несколько доменов и использовать не- сколько ключей, чтобы осуществлять их смену. Этот файл хранится в формате CDB и отображает ключи вида “example.ofg” в значения вида “6200912.” Селектор ключа называется dyyyymm, где d — это просто первая буква слова “date” (дата), уууу - это год, в котором был сгенерирован ключ, а шт - месяц, в котором он был сгенерирован. Файлы с ключами называются rsa. private, селектор .домен и хра- нятся в каталоге ключей, определенном макросом DKKEY_DIR. Убедитесь, что этот ката- лог доступен для системы exim и не доступен для всего остального мира. # ####### macros to define the directories for databases and keys CONFIG_DIR - path_to_config_dir DKKEY_DIR = path_to_key_dir # ####### main section: define the domains to sign and required DKIM acl domainlist dksign_domains = cdb;CONFIG_DIR/dk.selector.cdb acl_smtp_dkim - acl_process_dkim # ####### ACL section: verify signature on incoming mail, add a header acl_process_dkim: warn !dkim_status = none add_header = :at_start:X-DKIM-Report: $dkim_verify_status \ ${if !eq{$dkim_verify_status}{pass}{$dkim_verify_reason }{}} \ (Signer=$dkim_cur_signer) (Testing=$dkim_key_testing) ######## Router section: put just before "dnslookup" router, sign nonlocal dnslookup_signed: driver = dnslookup 22 Фил является активным участником группы рассылки для пользователей системы Exim.
900 Часть II. Работа в сети domains = !+local_domains transport = remote_dksign condition = ${if match_domain{$sender_address_domain} \ {+dksign_domains}} no_verify ######## Transport section: does the actual signing remote_dksign: driver = smtp dkim_domain = $sender_address_domain dkim_selector = ${lookup {$sender_address_domain} \ cdb{CONFIG_DIR/dk.selector.cdb} {$value}fail} dkim_private_key = DKKEY_DIR/rsa.private.$dkim_selector.$dkim_domain dkim_strict = 1 В результате применения этих фрагментов исходящие сообщения будут подписы- ваться, входящие сообщения, имеющие подпись, будут верифицироваться, а затем к ним будет добавляться заголовок отчета системы DKIM. Ниже приведен пример такого заголовка. X-DKIM-Report: pass (Signer=gmail.com) (Testing=0) Если вы собираетесь отказываться от приема или каким-то образом обрабатывать со- общения, подписи которых не были верифицированы, эти правила следует дополнить. Строка no_verify в строке маршрутизатора относится не к верификации подписей DKIM, а к верификации адреса получателя; в данном маршрутизаторе этот параметр от- ключен, зато в следующем маршрутизаторе dnslookup он включен. Нет никакого смыс- ла делать это дважды. Технология DKIM в системе Postfix Технология DKIM реализована в системе Postfix с помощью пакета DKIM-milter, описанного выше. Сгенерируйте свою пару ключей и проверьте их с помощью утилиты dkim-testkey; скомпилируйте файл dkim-f ilter. conf на основании примера из дис- трибутивного пакета, а затем укажите системе Postfix, чтобы она использовала утилиту dkim-filter. В файле main.cf, после всех параметров почтовых фильтров, добавьте следующие строки. smtpd_milters = inet:localhost:8891 non_smtpd_miIters = inet:localhost:8891 milter_protocol = 2 milter_default_action = accept Теперь необходимо лишь запустить утилиту dkim-filter и повторно запустить си- стему postfix. 20.17. Интегрированные почтовые системы В настоящее время существует много интегрированных почтовых систем: от свободно распространяемых систем с открытым кодом до дорогих коммерческих продуктов. Все делают намного больше, чем просто принимают и отправляют электронную почту. Обыч- но они предусматривают следующие функции для организации групп и конференций. • Управление адресной книгой и списком контактов • Управление календарем и расписанием
Глава 20. Электронная почта 901 • Списки рассылки и доски объявлений • Мгновенная передача сообщений • Шифрование SSL/TLS • Архивирование и автоматическое резервирование • Поддержка мобильных устройств (BlackBerry, iPhone, etc.) Большинство этих мегапакетов содержит описание конфигурации графического поль- зовательского интерфейса, которое в некоторой степени может заменить собой чтение этой главы. (Возможно, этот раздел следовало бы поместить не в конец, а в начало главы.) Многие системы предназначены для вытеснения программы Microsoft Exchange. Некоторые программы достойны отдельного упоминания. • Citadel (citadel. org) — это открытый пакет для электронной почты и программ- ного обеспечения совместной работы (groupware), предусматривающий контракт на поддержку. • Zimbra (zimbra. com) занимает промежуточное положение между программами с открытым кодом и коммерческими системами. Существует ее полнофункциональ- ная коммерческая версия и упрощенная версия, открытая и бесплатная. • Kerio MailServer (kerio. com) — это коммерческая система, которая, подобно си- стеме Zimbra, лицензируется для каждого пользователя. Для крупных организаций эта система может стоить дорого. • Communigate Pro (communigate. com) внедряет поддержку аудио- и видеофайлов в обычный пакет для электронной почты и программного обеспечения совместной работы и предусматривает либо традиционное безлимитное лицензирование, либо лицензирование для каждого пользователя. Существуют также аппаратные устройства, предназначенные для реализации функ- ций электронной почты, которые обычно являются частью систем FreeBSD UNIX или Linux. Заслуживают также внимания устройства IronPort Series компании Cisco, а также модели от компаний Sophos и Clearswift. Эти устройства обычно выполняют фильтрацию вирусов и спама, а затем передают сообщения программе Microsoft Exchange для доставки. 20.18. Рекомендуемая литература Для того чтобы не смешивать все ссылки в один список, мы упорядочили их по транспортным агентам и темам. Общие вопросы по борьбе со спамом • Clayton R. Good Practice for Combating Unsolicited Bulk Email. — RIPE/Demon Internet, 2000, ripe.net/ripe/docs/ripe-206.html. Этот документ предназначен для интернет-провайдеров. Он содержит много ин- формации о правилах и полезные описания технических вопросов. • Field J. MailScanner: A User Guide and Training Manual. — University of Southampton Department of Electronics, 2007. • McDonald A. SpamAssassin: A Practical Guide to Configuration, Customization, and Integration. — Packt Publishing, 2004.
902 Часть II. Работа в сети • Schwartz A. SpamAssassin. — Sebastopol, CA: O’Reilly Media, 2004. • Wolfe P., Scott C., Erwin M. The Anti-Spam Tool Kit. — Emeryville, CA: Osborne, 2004. Литература по программе sendmail Costales B., Assmann C., Jansen G., Shapiro G. Sendmail, 4th Edition. —Sebastopol, CA: O’Reilly Media, 2007. Эта книга представляет собой внушительный том о конфигурации программы sendmail размером более 1300 страниц. Она содержит руководство системного адми- нистратора, а также полный список библиографических ссылок. Кроме того, существует электронный вариант этой книги. В коллектив авторов входят два ключевых разработ- чика программы sendmail (Claus и Greg), что является гарантией технической коррект- ности и авторитетности книги. В разделе Sendmail Installation and Operation Guide изложе- ны инструкции по инсталляции и хорошее описание файла конфигурации. Файл с этим разделом можно найти в подкаталоге doc/op дистрибутивного пакета sendmail. Этот документ является достаточно полным, и в сочетании с файлом README из каталога cf он дает конкретное представление о системе sendmail. Сайты sendmail.org, sendmail.org/~ca и sendmail.org/~gshapiro содержат документы, ответы на вопросы и справочные материалы по программе sendmail. Литература о системе Exim • Hazel Р. The Exim SMTP Mail Server: Official Guide for Release 4, 2nd Edition. — Cam- bridge, UK: User Interface Technologies, Ltd., 2007. • Hazel P. Exim: The Mail Transfer Agent. — Sebastapol, CA: O’Reilly Media, 2001. • Meers J. Getting started with EXIM. — exim-new-users. co. uk, 2007. Спецификация системы Exim представляет собой определяющий документ о ее конфигурации. Он является исчерпывающим и обновляется с появлением каждой новой версии. Текстовая версия включена в файл doc/spec. txt из дистрибутив- ного пакета, а соответствующий файл PDF доступен на сайте exim.org. Кроме того, на этом веб-сайте можно найти несколько справочных документов. Литература о системе • Blum R. Postfix. — Sams Publishing, 2001. • Dent K.D. Postfix: The Definitive Guide. — Sebastopol, CA: O’Reilly Media, 2003. • Hildebrandt R., Koetter P. The Book of Postfix: State of the Art Message Transport. — San Francisco, CA: No Starch Press, 2005. Эта книга посвящает читателя во все тонкости конфигурации системы Postfix, даже в сложных средах. Авторы являются активными членами сообщества поль- зователей системы Postfix и регулярно участвуют в почтовых рассылках группы пользователей Postfix. К сожалению, эта книга не переиздается, но ее можно при- обрести в букинистических магазинах. • Страница postfix. org/SOHO_README. html представляет собой справочное ру- ководство по использованию системы Postfix дома или в офисах небольших ком- паний.
Глава 20. Электронная почта 903 Документы RFC Текущими версиями документов RFC821 и RFC822 являются документы RFC5321 и RFC5322. В них определен протокол SMTP и форматы сообщений и адресов для элек- тронной почты в Интернете. Документы RFC5335 и RFC5336 посвящены вопросам интернационализации адресов электронной почты. Существует около 90 документов RFC, связанных с электронной почтой. Их слиш- ком много, чтобы перечислять в этой книге. Все эти документы можно найти на сайте rfc-editor.org с помощью поисковой машины. 20.19. Упражнения 20.1. Кратко объясните разницу между пользовательским агентом (MUA), агентом до- ставки (DA) и агентом доступа (АА). Затем объясните разницу между почтовым транспортным агентом (МТА) и почтовым агентом передачи (MSA). 20.2. Проверьте почтовую очередь на вашем локальном почтовом сервере? Есть ли там сообщения без управляющих файлов или управляющие файлы без сообщений? Какое самое старое сообщение вы нашли в очереди? (Это действие требует прав суперпользователя.) 20.3. Объясните, что такое запись MX. Почему записи MX важны для доставки почты? Приведите пример, в котором неверно сконфигурированная запись MX может привести к отказу от доставки почты. 20.4. Определите схему почтовой службы на вашем сайте и нарисуйте диаграмму в сти- ле рис. 20.2. Где находится входящая почта, прошедшая сканирование на спам и вирусы? Что скажете об исходящей почте? 20.5. Сравните использование файла /etc/mail/aliases с использованием сервера LDAP или базы данных MySQL для хранения почтовых псевдонимов. Какие преи- мущества и недостатки имеет каждый из этих механизмов? 20.6. ★ Дайте краткое описание следующих заголовков сообщений. Какой путь прой- дет электронная почта? Кому она адресована и кому была доставлена? Как долго она находилась в пути? Delivered-To: sailingevi@gmail.com Received: by 10.231.143.81 with SMTP id tl7csl75323ibu; Mon, 28 Dec 2009 20:15:20 -0800 (PST) Received: by 10.231.157.131 with SMTP id b3mr2134004ibx.19.1262060119841; Mon, 28 Dec 2009 20:15:19 -0800 (PST) Return-Path: <garth@grsweb.us> Received: from mail-relay.atrust.com (mail-relay.atrust.com [63.173.189.2]) by mx.google.com with ESMTP id 12sil9092249iwn.27.2009.12.28.20.15.19; Mon, 28 Dec 2009 20:15:19 -0800 (PST) Received-SPF: neutral (google.com: 63.173.189.2 is neither permitted nor denied by best guess record for domain of garth@grsweb.us) clientip= 63.173.189.2; Authentication-Results: mx.google.com; spf=neutral (google.com: 63.173.189.2 is neither permitted nor denied by best guess record for domain of garthOgrsweb.us) smtp.mail=garth@grsweb.us
904 Часть II. Работа в сети Received: frommout.perfora.net (mout.perfora.net [74.208.4.194]) by mail-relay.atrust.com (8.12.11/8.12.11) with ESMTP id nBT4FI9rO17821 for <evi@atrust.com>; Mon, 28 Dec 2009 21:15:19 -0700 Received: from grsweb.us (wolverine.dreamhost.com [75.119.201.185]) by mrelay.perfora.net (node=mrusl) with ESMTP (Nemesis) id OMaORD- lNgKS52KT9-00LeuN; Mon, 28 Dec 2009 23:15:17 -0500 Date: Mon, 28 Dec 2009 20:15:13 -0800 From: UNIX and Linux System Administration Handbook <garth@grsweb.us> Reply-То: garth@grsweb.us To: eviOatrust.com Cc: garth@grsweb.us Message-Id: <4b398251bllab_e92383578b2d9b036fOwolverine.tmail> Subject: New comments on Printing Mime-Version: 1.0 Content-Type: text/html; charset=utf-8 X-Provags-ID: V01U2FsdGVkX18pouiYXif/bVfh+D9wFXMr24TahAzDNZqM+jA04iLR7S4 olDXRpXlrbQMblNoZf5jO6edc+WIGC8Fi4hd5Akl5vBARASOFQYxNJWea9 8SyQg== X-Spam-Status: No, hits=-99.3 required=4.0 tests=BAYES_30,HTML_20_30, MIME_HTML_ONLY,USER_IN_WHITELIST version=2.55 X-Spam-Level: X-Spam-Checker-Version: SpamAssassin 2.55 (1.174.2.19-2003-05-19-exp) 20.7. ★ Какие последствия возникают из-за включения в черный список сайта spamhaus. org или аналогичной службы? Что следует делать, если выяснилось, что ваш сайт попал в черный список? Сначала опишите действия, которые позво- ляют не попасть в черные списки. 20.8. ★ Если ваш сайт позволяет использовать программу procmail и вы имеете раз- решение от локального системного администратора группы, настройте ваш файл конфигурации программы procmail так, чтобы проиллюстрировать, как програм- ма procmail может разрушить систему безопасности. 20.9. АА Исследуйте текущую конфигурацию транспортного агента на вашем сайте. Какие специальные функциональные возможности транспортного агента в нем используются? Есть ли проблемы в вашей конфигурации? Как улучшить эту кон- фигурацию? 20.10. АА Найдите спам в вашем почтовом ящике и проверьте заголовки. Укажите при- знаки подделанной почты. Затем запустите какую-нибудь программу, описанную в главе, например SpamAssassin, и проанализируйте результаты ее работы. Как вы распознали подделанные заголовки? Опишите спам и представьте ваши выводы об отправителе, корректности перечисленных узлов и другие факты, свидетельствую- щие о нарушениях. Упражнения, связанные с программой sendmail 20.11. Опишите утилиту smrsh и способ ее использования, вместо утилиты /bin/sh? Если утилита smrsh применяется на вашем сайте, укажите, какие про- граммы разрешается запускать в качестве обработчика очереди? Являются ли какие-нибудь из этих программ небезопасными?
Глава 20. Электронная почта 905 20.12. Напишите небольшой файл /etc/mail/aliases, демонстрирующий три разных вида псевдонимов. Кратко опишите, что делает каждая строка в этом файле и чем она может быть полезной. 20.13. ★ Перечислите префиксы для файлов в каталоге почтовой очереди и объясните, что означает каждый из них. Почему следует удалять одни файлы из очереди и по- чему большой ошибкой было бы удалять другие? Как могут некоторые префиксы использоваться для отладки ошибок в конфигурации программы sendmail? 20.14. ★ Объясните назначение каждого макроса препроцессора т4. Если макрос встав- ляет файл, кратко опишите, какое содержимое должен иметь такой файл. a) VERSIONID б) OSTYPE В) DOMAIN Г) MAILER д) FEATURE 20.15. ★ Объясните, как задать конфигурацию сервера sendmail, чтобы он принимал электронную почту как для вашего домена, так и для виртуального домена. Раз- решите виртуальному домену ретранслировать почту на почтовые ящики, находя- щиеся за пределами сайта. Упражнения, связанные с системой Exim 20.16. Возьмите список управления доступом для команды SMTP RCPT, продемон- стрированный в разделе 20.14, и измените значение параметра deny, заданного умолчанию, на противоположное, разрешив тем самым использование одинако- вых адресов. 20.17. ^Версии 4.70 и более поздние не поддерживают технологию DomainKeys, отдавая предпочтение технологии DKIM. Упростите пример настройки системы DKIM, продемонстрированный в разделе 20.16, так чтобы она поддерживала только один домен и один ключ подписи. Затем добавьте несколько правил, например реги- страцию неподписанной почты, поступающей от сайтов Gmail или Yahoo!, или от- каз от приема писем, не прошедших верификацию, если они поступили от систе- мы PayPal или вашего банка. 20.18. ★ Объясните, как настроить конфигурацию сервера Exim, чтобы он прини- мал почту как для вашего собственного домена, так и для виртуального домена. Разрешите виртуальному домену ретранслировать почту на почтовые ящики, на- ходящиеся за пределами сайта. 20.19. ★ Проанализируйте фрагменты конфигурации в документе spec.txt из дистри- бутивного пакета Exim и попробуйте включить некоторые из них в вашу конфи- гурацию. Включите подробную регистрацию для каждого действия, которое вы предпринимаете, и проверьте регистрационные файлы, чтобы убедиться, что вы получили желаемый результат. Упражнения, связанные с системой Postfix 20.20. Попробуйте настроить “нулевого клиента”, т.е. почтовую систему, которая только посылает почту и не может получать ее. Убедитесь, что порт 25 закрыт.
906 Часть II. Работа в сети 20.21. Задайте конфигурацию системы Postfix так, чтобы она аутентифицировала ваш сайт для вашего провайдера или сервера компании (даже Gmail!); используйте следующие параметры. smtp_sender_dependent_authentication sender_dependent_relayhost_maps smtp_sasl_auth_enable smtp_sasl_password_maps 20.22. Как вы думаете, почему система Postfix поддерживает так много типов отображе- ний? 20.23. Для чего используется отображение рсге? Может ли быть полезным для почтовых систем подстановка значений? Необходимо ли использовать команду postmap для компиляции отображений рсге? 20.24. Найдите описание параметра recipient delimiter в документации (справочная страница postconf). Для чего он может использоваться? 20.25. ★ Объясните, как настроить конфигурацию системы Postfix, чтобы она прини- мала почту как для вашего собственного домена, так и для виртуального домена. Разрешите виртуальному домену ретранслировать почту на почтовые ящики, на- ходящиеся за пределами сайта.
Глава 21 Управление сетями Поскольку при объединении компьютеров в сети число связей между ними увели- чивается, в сетях, как правило, усугубляются все имеющиеся проблемы. Как гласит на- родная мудрость, “работа в сети — это когда вы не можете выполнить свое задание из-за отказа компьютера, о котором никогда не слышали”. Управление сетями — это, прежде всего, искусство и наука поддержания их в работо- способном состоянии. Сюда обычно входят следующие задачи: • поиск неисправностей в сетях, шлюзах и важных серверах; • разработка схем уведомления администратора о наличии проблем; • общий мониторинг сети с целью распределения нагрузки в ней и планирования ее дальнейшего расширения; • документирование и визуализация работы сети; • управление сетевыми устройствами с центральной станции. В отдельном сегменте сети вряд ли стоит внедрять формальные процедуры управле- ния сетью. Достаточно провести тщательное тестирование сети после ее прокладки и время от времени проверять уровень нагрузки. Сломается — почините. По мере роста сети процедуры управления должны становиться все более автомати- зированными. В сети, где несколько подсетей объединяются посредством коммутаторов или маршрутизаторов, решение административных задач можно автоматизировать с по- мощью сценариев и простейших программ. Если используются глобальные или сложные локальные сети, подумайте об инсталляции станций управления сетью со специальным программным обеспечением. В некоторых случаях усложнение системы управления сетью диктуется необходимо- стью обеспечения надежности. Часто бывает так, что возникновение проблемы в сети приводит к полной остановке работы. Если подобные задержки недопустимы, лучше приобрести и установить высококлассную корпоративную систему управления сетью.
908 Часть II. Работа в сети К сожалению, даже самая лучшая система не поможет предупредить все проблемы. Важно иметь хорошо документированную схему сети и высококвалифицированный об- служивающий персонал, способный справляться с неизбежными сбоями. 21.1. Поиск НЕИСПРАВНОСТЕЙ В СЕТЯХ Существует несколько хороших инструментов, позволяющих искать неисправности в сети на уровне TCP/IP. Большинство из них выдает низкоуровневую информацию, поэтому для того, чтобы пользоваться ими, нужно хорошо понимать принципы работы протоколов TCP/IP и маршрутизации. С другой стороны, источником проблем в сети могут служить и ошибки в работе та- ких высокоуровневых протоколов, как DNS, NFS или HTTP. Прежде чем приступать к чтению этой главы, прочтите главы 14 и 15. В этом разделе мы рассмотрим общую стратегию поиска неисправностей, после чего перейдем к знакомству с основными инструментами этого поиска: утилитами ping, traceroute, netstat, tcpduxnp и Wireshark. Команда arp, которая также предназначе- на для поиска неисправностей в сети, здесь не описывается; о ней рассказывалось раз- деле 14.6. Когда в сети возникает неисправность, появляется желание побыстрее все устранить. Не торопитесь! Важно обдумать подход к решению проблемы, избегая необдуманных действий. Наибольшая ошибка заключается во внесении плохо спланированных изме- нений в несправную сеть. Прежде чем “набрасываться” на собственную сеть, примите во внимание следующие принципы. • Вносите пошаговые изменения в конфигурацию сети, тщательно проверяя ре- зультаты, чтобы убедиться в совпадении полученного эффекта с ожидаемым. Изменения, которые не дали нужного результата, должны отменяться. • Документируйте возникшую ситуацию и все вносимые в нее изменения. • Проблемы могут носить временный характер, поэтому начните с поиска релевант- ной информации с помощью утилит, таких как sar и nmon. • Начните с “края” системы или сети и продвигайтесь по ключевым ее компонен- там, пока не доберетесь до источника неисправности. Например, начните с ис- следования сетевой конфигурации клиентского компьютера, затем проверьте фи- зическое соединение клиента с сетью, сетевое оборудование и, наконец, сетевые аппаратные средства сервера и его программную конфигурацию. • Будьте в курсе событий. Сетевые проблемы оказывают влияние на многих людей: пользователей, провайдеров, системных администраторов, инженеров по телеком- муникациям, сетевых администраторов и т.д. Постоянный контакт с другими спе- циалистами позволит вам не мешать друг другу при решении проблемы. • Работайте в команде. Многолетний опыт показывает, что люди совершают меньше глупых ошибок, если им оказывают поддержку. • Помните о многоуровневой структуре сетевых средств. Начните с верхнего или нижнего уровня и последовательно продвигайтесь по стеку протоколов, проверяя их работу. Последнее замечание заслуживает более подробного рассмотрения. Как указывалось в разделе 14.2, в семействе протоколов TCP/IP определяются уровни абстракции, на ко-
Глава 21. Управление сетями 909 торых функционируют различные компоненты сети. Например, протокол HTTP зависит от протокола TCP, который, в свою очередь, основан на протоколе IP, а последний взаи- модействует с протоколом Ethernet, работоспособность которого зависит от целостно- сти сетевого кабеля. Можно существенно уменьшить время поиска неисправности, если предварительно понять, средства какого уровня ведут себя неправильно. Проходя стек протоколов уровень за уровнем (вверх или вниз), проверяйте следующее. • Есть ли физическое соединение и светится ли индикатор связи? • Правильно ли сконфигурирован сетевой интерфейс? • Отображаются ли в таблицах маршрутизации адреса других компьютеров? • Есть ли брандмауэр на вашем локальном компьютере? • Если брандмауэр есть, проходят ли через него ICMP-пакеты утилиты ping и от- веты? • Находит ли команда ping узел localhost (127.0.0.1)? • Находит ли команда ping другие компьютеры локальной сети по IP-адресам? • Правильно ли сконфигурирована служба DNS?1 • Находит ли команда ping другие компьютеры локальной сети по именам? • Находит ли команда ping компьютеры в другой сети? • Работают ли высокоуровневые сетевые утилиты, такие как telnet или ssh? • Вы правда проверили брандмауэры? Определив, на каком уровне возникает проблема, не спешите с выводами. Подумайте сначала, как отразятся последующие проверки и вносимые изменения на других сетевых службах и компьютерах. 21.2. Команда ping: проверка доступности компьютера Команда ping удивительно проста, но во многих случаях ее оказывается вполне до- статочно. Она посылает ICMP-пакет ECHO_REQUEST конкретному компьютеру и ждет ответа. Команду ping можно применять для проверки работоспособности отдельных ком- пьютеров и сегментов сети. В обработке ее запроса участвуют таблицы маршрутизации, физические компоненты сетей и сетевые шлюзы, поэтому для достижения успешного результата сеть должна быть в более или менее рабочем состоянии. Если команда не ра- ботает, можно быть совершенно уверенным в том, что более сложные средства тем более не функционируют. Однако это правило неприменимо в сетях, где брандмауэры блоки- руют эхо-запросы ICMP. Убедитесь в том, что брандмауэр не препятствует работе коман- 1 Если компьютер загружается очень медленно, зависает при загрузке или при попытке уста- новить связь посредством утилиты telnet, вероятнее всего, служба DNS функционирует неверно. В системах Solaris и Linux используется очень сложный подход к разрешению имен, конфигурация которого задана в файле /etc/nsswitch.conf. В других системах особый интерес представляет Демон кеширования службы имен (nscd). Если он дает сбой или имеет неправильную конфигу- рацию, это сказывается на поиске имен. По мере развития протокола IPv6 выяснилось, что мно- гие маршрутизаторы DSL выполняют функции службы по перенаправлению DNS, которые про- сто игнорируют запросы на записи DNS для IPv6 (АААА). Эта “оптимизация” вызывает длинные простои при выполнении запросов на распознавание имен. Для проверки правильности работы вашего распознавателя и сервера имен используйте команду getend (например, getend hosts google. com).
910 Часть II. Работа в сети ды ping, прежде чем подозревать, что зондируемый компьютер игнорирует эту команду. В конце концов, отключите на короткое время брандмауэр для проверки работоспособ- ности сети. Если сеть находится в плохом состоянии, вероятно, система DNS работает непра- вильно. Упростите ситуацию, используя числовые IP-адреса при выполнении утилиты ping, и примените параметр -п, чтобы предотвратить обратный поиск IP-адресов, по- скольку при этом также генерируются DNS-запросы. Если утилита ping используется для проверки выхода в Интернет, необходимо про- верить брандмауэр. Некоторые хорошо известные сайты отвечают на пакеты ping, а другие — нет. Например, оказалось, что сайт google. com отвечает на такие запросы. Большинство версий команды работает в бесконечном цикле, если не задан аргумент “число пакетов”. В системе Solaris команда ping -s обеспечивает расширенный вывод, а в других системах это происходит по умолчанию. Для того чтобы прервать работу ко- манды, нажмите <Ctri+C>. Приведем пример. linux$ ping beast PING beast (10.1.1.46): 56 data bytes 64 bytes from beast (10.1.1.46): icmp_seq=0 ttl=54 time=48.3 ms 64 bytes from beast (10.1.1.46): icmp_seq=l ttl=54 time=46.4 ms 64 bytes from beast (10.1.1.46): icmp_seq=2 ttl=54 time=88.7 ms ЛС --- beast ping statistics --- 3 packets transmitted, 3 packets received, 0% packet loss, time 2026ms rtt min/avg/max/stddev = 46.490/61.202/88.731/19.481 ms Информация о компьютере beast включает его IP-адрес, порядковый номер ответ- ного ICMP-пакета и полное время прохождения пакета. Полученные результаты свиде- тельствуют о том, что компьютер beast работает и подключен к сети. Порядковый номер ICMP-пакета — особенно ценный элемент информации. Нарушение последовательности свидетельствует об удалении пакетов. Обычно они со- провождаются сообщениями о каждом пропущенном пакете. Несмотря на то что протокол IP не гарантирует доставку пакетов, пакеты будут про- падать только в том случае, если сеть перегружена. Потерю пакетов следует обязательно выявлять, потому что этот факт иногда скрывается протоколами более высокого уровня. Может показаться, что сеть функционирует нормально, хотя на самом деле она работает гораздо медленнее, чем должна, причем не только из-за повторной передачи пакетов, но и из-за “накладных расходов”, требуемых для выявления и обработки пропавших паке- тов соответствующими протоколами. В случае исчезновения пакетов сначала выполните команду traceroute (описана ниже) для выяснения маршрута, по которому пакеты следуют к компьютеру-адресату. Затем посредством команды ping проверьте все промежуточные шлюзы, через которые пролегает маршрут, и узнайте, на каком этапе теряются пакеты. Для того чтобы точно диагностировать проблему, следует отправить такое количество пакетов, которое по- зволит получить статистически достоверные результаты. Неисправность сети находится на участке между последним шлюзом, для которого количество потерянных пакетов не больше некоторой заданной величины, и шлюзом, при обращении к которому количе- ство потерянных пакетов превышает эту величину. Полное время прохождения пакетов, сообщаемое командой ping, дает представле- ние об общей скорости передачи пакета по сети. Колебания этого значения, как прави- ло, не являются признаком проблем. Иногда пакеты задерживаются на десятки и сотни
Глава 21. Управление сетями 911 миллисекунд без видимой причины — просто так работают протокол IP и сама операци- онная система Linux. Но все-таки следует ожидать, что полное время прохождения па- кетов будет более-менее постоянным, за некоторыми исключениями. Большинство со- временных маршрутизаторов ограничивает скорость выдачи ответов на ICMP-запросы, т.е. маршрутизатор может задержать ответ на пакет команды ping в связи с общим огра- ничением трафика протокола ICMP. Команда ping позволяет задать размер посылаемого эхо-пакета. Если передается па- кет, размер которого превышает значение MTU для данной сети (в частности, 1500 байт в сети Ethernet), включается режим принудительной фрагментации. Это позволяет вы- являть ошибки передачи данных в самом кабеле и другие низкоуровневые ошибки, на- пример проблемы, связанные с перегрузкой сети или виртуальной частной сетью. В системах семейства Linux желательный размер пакета в байтах задается с помощью флага -s. # ping -S 1500 cuinfo.cornell.edu В системах Solaris, HP-UX и AIX достаточно просто указать желательный размер па- кета в конце команды ping. # ping cuinfo.cornell.edu 1500 Помните, что даже простая команда вроде ping может повлечь драматические по- следствия. В 1998 году так называемая атака Ping of Death (Смертельный Ping) вызва- ла сбой большого количества UNIX- и Windows-систем. Эта атака началась с отправки чрезмерно большого ping-пакета. Когда фрагментированный пакет был собран заново, он заполнил весь буфер получателя и привел к сбою компьютера. Опасность повторения атаки Ping of Death давно устранена, но некоторые изъяны, связанные с использованием утилиты ping, все еще существуют. Во-первых, сложно отличить неисправность сети от неисправности сервера, поль- зуясь только этой командой. Потеря эхо-пакетов означает лишь, что что-то работает неправильно. Во-вторых, успешно выполненная команда ping не позволяет получить информа- цию о состоянии исследуемого компьютера. Эхо-запросы обрабатываются в стеке про- токола IP и не требуют, чтобы на зондируемом компьютере выполнялся серверный про- цесс. Получение ответа гарантирует только то, что компьютер включен и ядро системы функционирует. Для проверки работы отдельных служб, таких как HTTP и DNS, следует применять высокоуровневые средства. 21.3. Инструмент SmokePinc: сбор статистики В РАБОТЕ КОМАНДЫ PINC ВО ВРЕМЕНИ Как указывалось выше, даже исправная сеть иногда теряет пакеты. С другой стороны, сети не должны постоянно терять пакеты, даже если уровень потерь невелик, поскольку последствия для пользователей могут быть непропорционально серьезными. Поскольку высокоуровневые пакеты часто продолжают функционировать даже при потере пакетов, вы можете не заметить потери пакетов, пока не станете активно их отслеживать. Для этой цели можно использовать утилиту SmokePing — программу с открытым исходным кодом, написанную Тобиасом Ойтикером (Tobias Oetiker) для отслеживания простоев сети. Программа SmokePing посылает несколько ping-пакетов на целевой узел через регулярные интервалы времени. Кроме того, она демонстрирует результаты отеле-
912 Часть II. Работа в сети живания каждого соединения через веб-узел и может посылать сигналы, когда возникает неблагоприятная ситуация. Копию программы можно загрузить с сайта oss. oetiker. ch/smokeping. На рис. 21.1 представлен график, построенный программой Smoke Ping. На верти- кальной оси отложены среднее время прохождения ping-пакеты (секунды), а на горизон- тальной — даты, в которые проходили ping-пакетов (номера недель). Сплошная черная линия, от которой поднимаются серые пики, означает среднее время прохождения паке- тов; сами пики представляют собой время прохождения отдельных пакетов. Поскольку серые пики всегда находятся сверху средней линии, подавляющее большинство пакетов должно проходить по сети за время, близкое к среднему, и с очень небольшой задерж- кой. Это типичная ситуация. 70 Ш * 60 m ‘ 50 ш (Л 1 1 •° 40 п) 20 m ; 10 в I о 1---------------------------------------------------------------------------------------------< Week 13 Week 14 Week 15 Week 16 Week 17 Week IB Week 19 Median rtt: 37,0 ms avg 52 1 ms wax 25,7 ms Min 40.6 ns now 5 3 ms sd 70 airi/s packet loss: 0.06 % avg 7.93 % мах 0.00 % min 0001 now loss color: B0 1/20 12/26 3/20 4/20 110/20 19/20 probe: 20 ICW1 Echo Pings (56 Bytes) every 300s end: Tue May 12 02 33 2009 ME ST Puc. 2LL Пример графика, построенного программой Smoke Ping Ступенчатая форма средней линии означает, что базисная линия времени прохожде- ния пакетов к данному узлу несколько раз изменялась на протяжении периода наблюде- ний. Наиболее вероятно, что к этому узлу ведут несколько маршрутов или что на самом деле он представляет собой совокупность нескольких узлов, имеющих одно и то же имя DNS, но разные IP-адреса. 21.4. Команда traceroute: трассировка IP-пакетов Команда traceroute, написанная Ваном Джейкобсоном (Van Jacobson), позволя- ет выявлять последовательность шлюзов, через которые проходит IP-пакет на пути к пункту назначения. Эта команда есть во всех современных операционных системах.2 Синтаксис ее вызова прост. traceroute имя_компьютера У этой команды очень много параметров, большинство которых в повседневной ра- боте не применяется. Как обычно, имя_компьютера может быть задано как имя DNS или IP-адрес. Команда выдает список узлов, начиная с первого шлюза и заканчивая пунктом назначения. Например, на нашем компьютере jaguar проверка узла nubark дает следующие результаты. 2 Она есть даже в системе Windows, но в ней она называется tracert (если догадаетесь, поче- му, получите дополнительные баллы по истории).
Глава 21. Управление сетями 913 % traceroute nubark traceroute to nubark (192.168.2.10), 30 hops max, 38 byte packets 1 lab-gw (172.16.8.254) 0.840ms 0.693ms 0.671ms 2 dmz-gw (192.168.1.254) 4.642ms 4.582ms 4.674ms 3 nubark (192.225.2.10) 7.959ms 5.949ms 5.908ms Эти результаты говорят о том, что для попадания с компьютера jaguar на узел nubark пакеты должны сделать три перехода. Кроме того, они содержат информацию о шлюзах, через которые проходят пакеты. Показано также полное время прохождения пакетов для каждого шлюза — проведено по три замера для каждого перехода. Обычно количество переходов от одного узла Интернет к другому составляет более 15, даже если два сайта расположены через дорогу. Команда traceroute работает путем записи искусственно заниженного значения в поле TTL (Time То Live — время жизни, или предельное число переходов) отправляемо- го пакета. Когда пакет приходит на очередной шлюз, его значение TTL уменьшается на единицу. Если шлюз обнаруживает, что значение TTL стало равным нулю, он удаляет пакет и возвращает узлу-отправителю специальное ICMP-сообщение: “Время жизни па- кета истекло”. Ш Более подробную информацию об обратном поиске имен в системе DNS можно найти в разделе 17.8. У первых трех пакетов команды traceroute значение TTL равно 1. Первый шлюз, получивший пакет (в нашем примере это lab-gw), обнаруживает, что его время жиз- ни истекло. Тогда он удаляет пакет и посылает компьютеру jaguar указанное ICMP- сообщение, в поле отправителя которого записан IP-адрес шлюза. Команда traceroute обращается к службе DNS и по имеющемуся адресу находит имя шлюза. Для получения данных о следующем шлюзе посылается очередная группа пакетов, поле TTL которых равно 2. Первый шлюз маршрутизирует эти пакеты и уменьшает значение TTL на единицу. Второй шлюз удаляет пакеты и генерирует описанные выше ICMP-сообщения. Этот процесс продолжается до тех пор, пока пакеты не достигнут нужного компьютера; значение TTL при этом будет равно числу переходов. Большинство маршрутизаторов посылает свои ICMP-сообщения через тот интерфейс, который является “ближайшим” к узлу-отправителю (т.е. имеет наименьшую метрику стоимости). Если, наоборот, запустить команду traceroute на узле-получателе, чтобы узнать маршрут к исходному компьютеру, то, скорее всего, будет получен другой список IP-адресов, соответствующий тому же набору маршрутизаторов. Иногда весь набор шлю- зов оказывается совершенно другим; такая конфигурация называется асимметричной. Для каждого значения TTL команда traceroute посылает три пакета, что иногда приводит к интересным результатам. Если промежуточный шлюз распределяет трафик по нескольким маршрутам, то пакеты могут возвращаться разными компьютерами. В та- ком случае команда traceroute сообщает обо всех полученных ответах. Рассмотрим пример, в котором посредством команды traceroute определяется маршрут с компьютера в Швейцарии к домену caida. org в суперкомпьютерном центре Сан-Диего (San Diego Supercomputer Center).3 linux$ traceroute caida.org traceroute to caida.org (192.172.226.78), 30 hops max, 46 byte packets 1 gw-oetiker.init7.net (213.144.138.193) 1.122 ms 0.182 ms 0.170 ms 2 rlzurl.core.init7.net (77.109.128.209) 0.527 ms 0.204 ms 0.202 ms 3 rlfral.core.init7.net (77.109.128.250) 18.279 ms 6.992 ms 16.597 ms 3 Мы удалили несколько цифр в дробной части миллисекунд, чтобы сделать строки короче.
914 Часть II. Работа в сети 4 rlamsl.core.init7.net (77.109.128.154) 19.549 ms 21.855 ms 13.514 ms 5 rllonl.core.init7.net (77.109.128.150) 19.165 ms 21.157 ms 24.866 ms 6 rllaxl.ce.init7.net (82.19-7.168.69) 158.232 ms 158.224 ms 158.271 ms 7 cenic.laap.net (198.32.146.32) 158.349 ms 158.309 ms 158.248 ms 8 dc-lax-core2—lax-peerl-ge.cenic.net (137.164.46.119) 158.60 ms * 158.71 ms 9 dc-tus-aggl—lax-core2-10ge.cenic.net (137.164.46.7) 159 ms 159 ms 159 ms 10 dc-sdsc-sdsc2—tus-dc-ge.cenic.net (137.164.24.174) 161 ms 161 ms 161 ms 11 pinot.sdsc.edu (198.17.46.56) 161.559 ms 161.381 ms 161.439 ms 12 rommie.caida.org (192.172.226.78) 161.442 ms 161.445 ms 161.532 ms Эти строки свидетельствуют о том, что пакеты долго путешествовали внутри сети Init Seven. Иногда по именам шлюзов можно догадаться об их географическом местополо- жении. Сеть Init Seven раскинулась от Цюриха (zur) до Франкфурта (fra), Амстердама (ams), Лондона (Ion) и, наконец, до Лос-Анджелеса (lax). В этом месте пакеты достиг- ли сайта cenic. net, который доставил пакеты на узел caida. org внутри сети супер- компьютерного центра Сан-Диего (sdsc) в городе Ла Хойя (La Jolla)4, шт. Калифорния. На восьмом переходе вместо одного из значений времени отображается звездочка. Это означает, что на один из отправленных пакетов не был получен ответ. Такая ситуа- ция может быть вызвана перегрузкой сети, но это не единственное возможное объяс- нение. Команда traceroute использует низкоприоритетные ICMP-пакеты, которые отбрасываются многими маршрутизаторами, отдающими предпочтение “реальному” трафику. Появление нескольких звездочек в выводе команды traceroute не является причиной для беспокойства. Если для какого-то шлюза отображаются все три звездочки, значит, от него не было получено ни одного сообщения. Вероятнее всего, шлюз просто выключен. Правда, ино- гда шлюз конфигурируют таким образом, чтобы он игнорировал устаревшие пакеты. В этом случае пакеты благополучно перейдут на следующий шлюз. Другой возможной причиной появления звездочек может быть то, что ответные пакеты от шлюза возвраща- ются слишком долго и команда traceroute перестает ожидать их прибытия. Некоторые брандмауэры полностью блокируют передачу ICMP-сообщений о пакетах с истекшим временем жизни. Если маршрут пролегает через один из таких брандмауэ- ров, команда traceroute не сможет получить информацию о шлюзах, находящихся за ним. Однако она узнает общее число переходов до пункта назначения, так как отправ- ляемые эхо-пакеты пройдут весь маршрут. Некоторые брандмауэры могут также блокировать исходящие UDP-пакеты, кото- рые команда traceroute посылает для инициирования ICMP-ответов. В этом случае команда не выдаст никакой полезной информации. Если ваш брандмауэр не дает вы- полнить команду traceroute, убедитесь, что его конфигурация открывает порт 33434- 33534 и допускает пакеты ICMP ECHO (тип 8). Медленная передача данных не всегда свидетельствует о неисправности сети. Не- которые сети действительно имеют большую задержку, особенно если в них использу- ется технология UMTS/EDGE/GRPS. Ярким примером являются беспроводные сети. Медлительность может быть также следствием перегрузки сети. Определить это можно по нелогичному значению полного времени прохождения пакета. Иногда можно увидеть символы ! N вместо значения времени. Это говорит о том, что соответствующий шлюз вернул сообщение о “недостижимости” сети, т.е. он не знает, куда посылать пакет. Сообщения о “недостижимости” узла или протокола помечаются как ! н или ! р соответственно. Шлюз, от которого получено одно из указанных сообще- ний, является последним в цепочке и обычно имеет проблемы с маршрутизацией (воз- 4 Пригород Сан-Диего. — Примеч. ред.
Глава 21. Управление сетями 915 можно, они вызваны разрывом связи): либо его статические маршруты заданы неверно, либо протоколы динамической маршрутизации не могут определить правильный марш- рут для передачи пакета получателю. Если команда traceroute не работает (или работает слишком медленно), это мо- жет быть вызвано превышением тайм-аута при попытках узнать имя компьютера в DNS. Возможно, на компьютере не функционирует служба DNS. В таком случае воспользуй- тесь командой traceroute -п. Флаг -п отменяет поиск имен, и только этот способ иногда позволяет все же выполнить команду traceroute в поврежденных сетях. Для выполнения команды traceroute необходимо иметь права суперпользователя. Чтобы обычный пользователь могут выполнить эту команду, она должна быть инстал- лирована с установленным битом setuid. В некоторые дистрибутивные пакеты системы Linux команда traceroute включается без установленного бита setuid. В зависимости от окружения и потребностей, бит setuid можно включить снова или предоставить заин- тересованным пользователям доступ к этой команде с помощью команды sudo. В последние годы появилось несколько утилит, аналогичных команде traceroute, которые могут проходить через брандмауэры, блокирующие ICMP-пакеты. Обзор этих инструментов можно найти на странице tinyurl. com/y99qh6u на сайте РЕТТКВ Wiki. Нам особенно понравилась утилита mtr, которая имеет интерфейс, похожий на интер- фейс утилиты top, и работает, как утилита traceroute. Очень хорошо сделано! В зависимости от вида маршрутизации, иногда полезно посмотреть на свой сайт с точки зрения внешнего мира. Несколько веб-служб для отслеживания маршрутов позво- ляют выполнять функции, обратные утилите traceroute, не выходя из браузера. Томас Кернен (Tomas Kemen) поддерживает список этих служб на сайте traceroute. org. 21.5. Команда netstat: получение информации о состоянии СЕТИ Команда netstat выдает различную информацию о состоянии сетевого программ- ного обеспечения, включая статистику сетевых интерфейсов, данные о маршрутизации и таблицы соединений. Никакого объединяющего звена во всех этих информационных блоках нет, просто они касаются функционирования сети. Команду netstat можно сравнить с “кухонным сливом” сетевых инструментов — она отражает много сетевой информации, которая не появляется больше нигде. Мы рассмотрим пять наиболее распространенных вариантов использования коман- ды netstat, а именно: • проверка состояния сетевых соединений; • анализ конфигурации интерфейсов; • изучение таблицы маршрутизации; • проверка таблицы маршрутизации; • получение статистических данных о различных сетевых протоколах. Контроль состояния сетевых соединений Команда netstat -i демонстрирует конфигурацию и состояние каждого сетевого интерфейса узла и данные соответствующих счетчиков трафика. Результаты обычно вы- водятся в виде таблицы, структура которой зависит от операционной системы.
916 Часть II. Работа в сети soians solaris$ netstat -i Name Mtu Net/Dest lo0 8232 loopback elOOOgl 1500 host-ifl el000g2 1500 host-if2 Address Ipkts localhost 319589661 host-ifl 369842112 host-if2 93141891 lerrs 0 0 0 Opkts 319589661 348557584 121107161 Oerrs . 0 : 0 0 Collis Queue 0 0 0 0 0 0 E3 hp-ux$ netstat -i Name Mtu Network lanO 1500 192.168.: loO 32808 loopback A 10. Address . 0 hpuxl1 hpuxll.atrust.< 20m Ipkts lerrs Opkts 2611259 0 2609847 Oerrs 0 Coll 0 aix$ netstat Name Mtu en3 1500 епЗ 1500 loO 16896 loO 16896 loO 16896 -i Network link#2 192.168.: link#l 127 : :1 10 Address ZoneID 0.11.25.39.e0.b6 IBM loopback 0 Ipkts lerrs 41332 0 41332 0 1145121 0 1145121 0 1145121 0 Opkts Oerrs 14173 3 14173 3 1087387 0 1087387 0 1087387 0 Coll 0 0 0 0 0 linux$ ifconfig -а ethO Link encap:EthernetHWaddr 00:15:17:4c:4d:00 inet addr:192.168.0.203Bcast:192.168.0.255Mask:255.255.255.0 inet6 addr: fe80::215:17ff:fe4c:4d00/64 Scope:Link UP BROADCAST RUNNING MULTICASTMTU:1500Metric:1 RX packets:559543852 errors:0 dropped:62 overruns:0 frame:0 TX packets:457050867 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:478438325085 (478.4 GB)TX bytes:228502292340 (228.5 GB) Memory:b8820000-b8840000 ethl Link encap.-EthernetHWaddr 00:15:17: 4c: 4d: 01 BROADCAST MULTICASTMTU:1500Metric:1 RX packets:0 errors:0 dropped:0 overruns:0 frame:0 TX packets:0 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:0 (0.0 B)TX bytes:0 (0.0 B) Memory:b8800000-b8820000 lo Link encap:Local Loopback inet addr:127.0.0.IMask:255.0.0.0 inet6 addr: ::1/128 Scope:Host UP LOOPBACK RUNNINGMTU:16436Metric:1 RX packets:1441988 errors:0 dropped:0 overruns:0 frame:0 TX packets:1441988 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:0 RX bytes:327048609 (327.0 MB)TX bytes:327048609 (327.0 MB)
Глава 21. Управление сетями 917 Этот узел имеет два сетевых интерфейса: один предназначен для регулярного тра- фика, а второй в настоящее время не используется (он не имеет IP-адреса и не отмечен меткой UP). Команды RX packets и ТХ packets сообщают количество пакетов, полу- ченных интерфейсом и прошедших через него после загрузки компьютера. В разделах, предназначенных для подсчета ошибок, регистрируются многие виды ошибок, и обычно в них можно увидеть небольшие числа. Количество ошибок не должно превышать 1% от связанных с ними пакетов. Если уровень ошибок выше, сравните его с уровнем ошибок на соседних компьютерах. Большое количество ошибок на отдельном компьютере свидетельствует о проблеме с интерфейсом или соединением. Высокий уровень ошибок почти наверняка означает проблему с окружением или сетью. Одна из наиболее частых причин большого количе- ства ошибок заключается в том, что несоответствие скорости работы платы Ethernet или дуплекса вызывает сбой при автоопределении. Несмотря на то что коллизия — это разновидность ошибки, программа nestat под- считывает ее отдельно. Поле с заголовком Collisions содержит количество коллизий, зарегистрированных при отправке пакетов. На основе этого числа можно вычислить процент исходящих пакетов (ТХ packets), вызвавших коллизию. В коммутированной сети с полнодуплексными связями, т.е. в современных версиях плат Ethernet, коллизий быть не должно, даже если сеть перегружена. Если обнаружены коллизии, значит, произошло нечто серьезное. Кроме того, следует проверить, что по- ток управления поступает на ваши коммутаторы и маршрутизаторы, особенно если ваша сеть содержит связи с разными скоростями. Причинами сетевых проблем часто становятся дешевые компоненты настольного се- тевого оборудования, например коммутатор с временной проводкой, который следует заменить. Отслеживание состояния сетевых соединений Если программа netstat запущена без аргументов, она выводит на экран состояние активных TCP- и UDP-портов. Неактивные (“прослушивающие”) серверы, ожидающие соединения, как правило, скрываются, но вы можете увидеть их, выполнив команду netstat -а.5 Результаты ее работы выглядят следующим образом. linux$ netstat -a Active Internet : connections (servers and established) Proto Recv-Q Send-Q Local Address ForeignAddress State tcp 0 0 *:Idap *. * LISTEN tcp 0 0 *:mysql *. * LISTEN tcp 0 0 *:imaps *. * LISTEN tcp 0 0 bull:ssh dhcp-32hw:4208 ESTABLISHED tcp 0 0 bull:imaps nubark:54195 ESTABLISHED tcp 0 0 bull:http dhcp-30hw:2563 ESTABLISHED tcp 0 0 bull:imaps dhcp-18hw:2851 ESTABLISHED tcp 0 0 *:http *. * LISTEN tcp 0 0 bull:37203 baikal:mysql ESTABLISHED tcp 0 0 *: ssh *. * LISTEN 5 В отчете показаны также соединения для “сокетов доменов UNIX”, но поскольку они не от- носятся к работе сети, мы их не обсуждаем.
918 Часть н. Работа в сети Этот отчет сильно сокращен; например, здесь не показаны соединения сокетов UDP и UNIX. В этом отчете упомянуты входящее SSH-соединение, два входящих IMAPS- соединения, одно входящее HTTP-соединение, исходящее MySQL-соединение и группа портов, прослушивающих остальные соединения. Адреса представлены в формате имя_компьютера. служба, где служба — это номер порта. Для известных служб порты указаны в символическом виде (соответствия между номерами портов и их именами определены в файле /etc/services). При наличии оп- ции -п все адреса отображаются в числовом виде. Помните: когда служба DNS не функ- ционирует, команда netstat будет выполняться очень медленно, если не указать флаг -п. В колонках Send-Q и Recv-Q показывается, сколько запросов находится во входя- щих и исходящих очередях на данном компьютере. На другом конце соединения раз- меры очередей могут быть иными. Желательно, чтобы эти значения были близки к нулю и не были ненулевыми постоянно. Конечно, если команда netstat запускается через сетевой терминал, для ее соединения размер исходящей очереди, скорее всего, никогда не будет равен нулю. Состояние соединения определено только для протокола TCP. Протокол UDP не проверяет факт установления соединения. Наиболее распространенные состояния тако- вы: ESTABLISHED (установлено) — для активных соединений, LISTEN (ожидание) — для серверов, ожидающих поступления запросов (при отсутствии опции -а обычно не по- казываются), TIME WAIT (ожидание закрытия) — для соединений, находящихся в про- цессе закрытия. Эта информация полезна, главным образом, для устранения проблем на высоком уровне, если, конечно, базовые сетевые средства работают нормально. Команда netstat позволяет проверить правильность настройки серверов и диагностировать определенные виды нарушений связи, особенно при работе с протоколом TCP. Например, если соеди- нение находится в состоянии SYN SENT, то это означает наличие процесса, который пы- тается установить контакт с несуществующим или недоступным сервером. Если команда netstat сообщает о большом количестве соединений, находящихся в состоянии SYN WAIT, то компьютер, очевидно, не в состоянии обработать имеющееся число запросов на установление соединений. Такая ситуация может быть вызвана огра- ничениями системного ядра или даже злонамеренными попытками вызвать перегрузку. 03 Информация о настройке ядра приводилась в главе 13. Идентификация прослушивающих сетевых служб Один из наиболее часто возникающих вопросов, связанных с безопасностью, звучит так: “Какие процессы на данном компьютере прослушивает сеть в ожидании входящих соединений?” Команда netstat -а показывает все порты, активно прослушивающие соединения (любой TCP-порт в состоянии LISTEN и потенциально любой UDP-порт), но на загруженной машине эти линии могут оказаться затерянными в шуме установлен- ных ТСР-соединений. ДВ системе Linux для выявления только прослушивающих портов следует ис- пользовать команду netstat -1. Кроме того, можно добавить флаг -р, что- бы идентифицировать специфичные процессы, связанные с каждым прослу- шивающим портом.6 Пример, продемонстрированный ниже, описывает три обычные службы (sshd, sendmail и named) и одну необычную. 6 В системах UNIX, не поддерживающих флаг -р, эту и другую информацию можно получить с помощью команды Isof, описанной в разделе 6.2.
Глава 21. Управление сетями 919 linux$ netstat -Ip tcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN 23858/sshd tcp 0 0 0.0.0.0:25 0.0.0.0:* LISTEN 10342/sendmail udp 0 0 0.0.0.0:53 0.0.0.0:* 30016/named udp 0 0 0.0.0.0:962 0.0.0.0:* 38221/mudd Служба mudd с идентификатором PID 38221 прослушивает UD-порт 962. Если вы не знаете, что такое служба mudd, уточните в справочной системе. Для безопасности полезно смотреть на компьютеры с точки зрения внешнего поль- зователя, запускающего сканер порта. Для этого очень полезна команда nmap (см. раз- дел 22.8). Проверка таблицы маршрутизации Команда netstat -г отображает таблицу маршрутизации ядра. Следующие резуль- таты получены на компьютере, который имеет два сетевых интерфейса. redhat$ netstat -г -п Kernel IP routing table Destination Gateway Genmask Flags MSS Window irtt Iface 192.168.1.0 0.0.0.0 255.255.255.0 U 0 0 0 ethl 192.168.2.0 0.0.0.0 255.255.255.0 U 0 0 0 ethO 127.0.0.0 0.0.0.0 255.0.0.0 U 0 0 0 lo 0.0.0.0 192.168.1.254 0.0.0.0 UG 0 0 0 ethO Пункты назначения и шлюзы могут быть представлены доменными именами либо IP-адресами. Флаг -п задает вывод IP-адресов. В колонке Flags отображаются флаги, характеризующие маршрут: U (up) — актив- ный, G (gateway) — шлюзовой, Н (host) — узловой (связан с конкретным адресом, а не се- тью). Флаг D (не показан) обозначает маршрут, полученный в результате переадресации по протоколу ICMP. Флаги Син, стоящие вместе, обозначают маршрут к компьюте- ру, проходящий через промежуточный шлюз. Остальные поля содержат статистические данные о маршруте: текущее число TCP-соединений по этому маршруту, количество от- правленных пакетов и имя используемого интерфейса. 03 0 таблицах маршрутизации рассказывалось в разделе 14.5. Рассмотренный вариант команды netstat полезен для проверки правильности та- блицы маршрутизации. Особенно важно убедиться в наличии и корректности стандарт- ного маршрута. Он обозначается в виде адреса со всеми нулями (0.0.0.0) или словом default. Стандартный маршрут может не существовать, но такая конфигурация крайне нетипична. Просмотр статистических данных функционирования различных сетевых протоколов Команда netstat -s отображает содержимое всевозможных счетчиков, используе- мых в сетевых программах. Информация разбивается на разделы в соответствии с про- токолами: IP, ICMP, TCP и UDP. Ниже показаны отдельные фрагменты листинга ко- манды netstat -s, полученного на компьютере-шлюзе; они отредактированы, чтобы остались только наиболее интересные данные.
920 Часть II. Работа в сети 1р: 671349985 total packets received О forwarded 345 incoming packets discarded 667912993 incoming packets delivered 589623972 requests sent out 60 dropped because of missing route 203 fragments dropped after timeout Проверьте, что ни один пакет не был потерян или забракован. Некоторые входящие пакеты могут быть забракованы, но быстрое увеличение этого показателя обычно озна- чает уменьшение объема памяти или другую проблему, связанную с ресурсами. Icmp: 242023 ICMP messages received 912 input ICMP message failed. ICMP input histogram: destination unreachable: 72120 timeout in transit: 573 echo requests: 17135 echo replies: 152195 66049 ICMP messages sent 0 ICMP messages failed ICMP output histogram: destination unreachable: 48914 echo replies: 17135 В этом примере количество эхо-запросов в разделе входа соответствует количеству эхо-ответов в разделе выхода. Обратите внимание на то, что сообщение “destination un- reachable” может генерироваться даже в том случае, когда все пакеты явно допускают перенаправление. Неисправные пакеты в конец концов достигнут шлюза, который их отвергнет, и со- общение об ошибках будет отправлено обратно по цепочке шлюзов. Тер: 4442780 active connections openings 1023086 passive connection openings 50399 failed connection attempts 0 connection resets received 44 connections established 666674854 segments received 585111784 segments send out 107368 segments retransmited 86 bad segments received. 3047240 resets sent Udp: 4395827 packets received 31586 packets to unknown port received. 0 packet receive errors 4289260 packets sent Рекомендуем определить приемлемые диапазоны этих показателей, чтобы можно было сразу же распознать ненормальное состояние сети.
Глава 21. Управление сетями 921 21.6. Проверка функционирования ИНТЕРФЕЙСА В РЕАЛЬНОМ ВРЕМЕНИ Хороший способ обнаружить сетевые проблемы — посмотреть, что происходит пря- мо сейчас. Сколько пакетов было послано за последние пять минут через данный ин- терфейс? Сколько байтов? Происходили ли коллизии или другие ошибки? Ответить на все эти вопросы можно, наблюдая за функционированием сети в реальном времени. Для этого были разработаны разные инструменты. В системе Solaris в командную строку netstat -i можно добавить интервал SOiariS в секундах и значение счетчика. solaris$ netstat -i 2 3 input elOOOg output input (Total) output packets errs packets errs colls packets errs packets errs colls 17861 0 26208 0 0 17951 0 26298 0 0 4 0 2 0 0 4 0 2 0 0 1 0 1 0 0 1 0 1 0 0 В системах HP-UX и AIX используется единственное число, которое задает интервал (в секундах), за который следует собрать статистические показатели. • $ netstat -i 2 (lan0)-> input packets output packets (Total)-> input packets output packets 9053713 9052513 10115002 10113803 8 8 8 8 22 22 22 22 9 9 9 9 Команда netstat в системе Linux не имеет параметра, задающего интервал, поэтому в системе Linux мы рекомендуем использовать совершенно другой инструмент: утилиту sar. (Утилита sar рассматривается в разделе 29.4 с точки зрения общего мониторинга системы.) В большинстве дистрибутивных па- кетов утилита sar по умолчанию не инсталлируется, но всегда доступна как дополнительная функциональная возможность. Пример, продемонстрирован- ный ниже, содержит отчеты, которые формируются каждые две секунды в те- чение одной минуты (т.е. 30 отчетов). Аргумент DEV представляет собой лите- ральное ключевое слово, а не обозначение устройства или имя интерфейса. redhat$ sar -n DEV 2 30 17:50:43 IFACE rxpck/s txpck/s rxbyt/s 17:50:45 lo 3.61 3.61 263.40 17:50:45 ethO 18.56 11.86 1364.43 17:50:45 ethl 0.00 0.00 0.00 txbyt/s rxcmp/s txcmp/s rxmcst/s 263.40 0.00 0.00 0.00 1494.33 0.00 0.00 0.52 0.00 0.00 0.00 0.00 Этот пример получен на компьютере, работающем под управлением операционной системы Red Hat, с двумя сетевыми интерфейсами. Вывод содержит как моментальные, так и средние данные об использовании интерфейса в байтах и пакетах. Совершенно очевидно, что второй интерфейс (ethl) не используется вообще. В первых двух столбцах приведены моменты времени, в которые были сделаны из- мерения, а также имена сетевых интерфейсов. Следующие два столбца содержат количе- ство полученных и переданных пакетов соответственно.
922 Часть II. Работа в сети Столбцы rxbyt/s и txbyt/s, вероятно, являются самыми полезными, поскольку содержат информацию о реально используемой пропускной способности. Последние три столбца состоят из статистических показателей о сжатых (rxcmp/s, txcmp/s) и многоадресных (rxmcst/s) пакетах. Команда sar -n DEV особенно полезна для отслеживания источников ошибок. Команда ifconfig может предупредить о существовании проблем, но не способна со- общить, является ли ошибка следствием постоянной низкоуровневой проблемы или кратковременного, но катастрофического события. В таком случае для того, чтобы понять, что происходит, необходимо наблюдать за работой сети в течение некоторого времени и при разных условиях загруженности. Попробуйте выполнить команду ping с загрузкой большого по размеру пакета, а затем просмотрите отчет о результатах вы- полнения команды sar -n DEV. 21.7. Анализаторы пакетов Программы tcpdump и Wireshark относятся к классу утилит, известных как анализа- торы пакетов. Они следят за трафиком в сети и регистрируют либо выводят на экран пакеты, удовлетворяющие заданным критериям. Например, можно перехватывать все пакеты, посылаемые на какой-то компьютер или с него, либо TCP-пакеты, относящие- ся к конкретному сетевому соединению. Анализаторы пакетов полезны как для решения известных проблем, так и для выяв- ления абсолютно новых. Важно время от времени запускать эти программы и проверять, нормально ли обрабатывается сетевой трафик. Поскольку анализаторы должны уметь перехватывать пакеты, которые локальный компьютер обычно не получает (или на которые не обращает внимания), базовые се- тевые аппаратные средства должны разрешать доступ к каждому пакету. Это характерно для широковещательных технологий, в частности Ethernet, а также для большинства со- временных локальных сетей. Анализаторы пакетов должны иметь доступ к низкоуровневому трафику, поэтому их работе могут мешать коммутаторы, одной из функций которых является препятствие распространению “ненужных” пакетов. Однако с помощью анализаторов удается полу- чить полезную информацию даже в коммутируемых сетях. Можно, к примеру, обнару- жить проблемы, затрагивающие широковещательные и групповые пакеты. Объем вы- даваемой информации зависит от модели коммутатора. Ш О коммутаторах рассказывалось в разделе 16.1. Аппаратный интерфейс должен не только иметь возможность получать доступ ко всем сетевым пакетам, но и содержать механизм, обеспечивающий передачу этих па- кетов вверх на программный уровень. Ведь обычно адреса пакетов проверяются на ап- паратном уровне, а ядру предоставляются лишь широковещательные/групповые пакеты и те, которые адресованы данному компьютеру. В беспорядочном режиме (promiscuous mode) интерфейс позволяет ядру получать все сетевые пакеты, даже если они предна- значены для других компьютеров. Анализаторы понимают многие форматы пакетов, используемые стандартными де- монами, и часто могут отображать содержимое пакетов в удобном для восприятия виде. Это облегчает пользователю анализ сеанса между двумя программами. Существуют ана- лизаторы, которые, кроме заголовка пакета, выводят и его содержимое в текстовом виде, что полезно при исследовании протоколов верхних уровней.
Глава 21. Управление сетями 923 Некоторые из этих протоколов пересылают информацию (в том числе и пароли) по сети в незашифрованном виде, поэтому следует заботиться о сохранении конфиденци- альности пользовательских данных. С другой стороны, ничто так не подчеркивает не- обходимость шифрования, как вид паролей, пересылаемых в открытом виде в сетевом пакете. В связи с тем что анализатору необходим доступ к пакетам на самом низком уров- не, он должен запускаться от имени пользователя root. Подобное ограничение снижает шансы обычных пользователей получить доступ ко всему сетевому трафику, но на самом деле этот барьер можно преодолеть. Во многих организациях анализаторы пакетов уда- лены с большинства компьютеров с целью уменьшения риска злоупотребления этими программами. Если такая мера невозможна, следует проверять интерфейсы системы, чтобы они не работали в “беспорядочном” режиме без ведома или согласия администра- тора. В Linux интерфейс, работающий в “беспорядочном” режиме, помечается в выводе команды ifconfig флагом PROMISC. В системах семейства Linux факт, что интерфейс был переключен в “беспорядочный режим”, также записывается в журнал ядра. Утилита tcpdump: стандартный анализатор Замечательный анализатор пакетов tcpdump, написанный Ваном Якобсоном (Van Jacobson), входит в состав большинства дистрибутивов Linux. Он уже давно считается промышленным стандартом, и другие анализаторы читают и/или записывают файлы трассировки в формате tcpdump, который в настоящее время называется libpcap. По умолчанию утилита tcpdump использует первый найденный ею сетевой интер- фейс. Если она выбрала не тот интерфейс, то посредством опции -i следует задать нуж- ный. В случае неисправности службы DNS или если необходимо видеть адреса компью- теров, воспользуйтесь опцией -п. Эта опция имеет большое значение, так как медленная работа DNS может привести к удалению пакетов еще до того, как они будут проанали- зированы утилитой tcpdump. Опция -v позволяет получить более детальное описание каждого пакета, а самые подробные результаты выдаются при задании опции -w. Если указана опция -w, утилита сохраняет перехваченные пакеты в файле. Для чтения пакетов из файла предназначена опция -г. Отметим, что команда tcpdump -w по умолчанию сохраняет только заголовки па- кетов. Это сделано для уменьшения размеров распечаток, но при этом можно потерять наиболее полезную и релевантную информацию. Поэтому, если вы уверены, что, кроме заголовков, вам нужна дополнительная информация, используйте флаг -s со значени- ем, которое равно 1056 (фактические значения зависят от максимального размера пакета (MTU)), чтобы иметь возможность проанализировать весь пакет. В качестве примера рассмотрим укороченный вариант распечатки, полученной на машине nubark. Спецификация фильтра host bull ограничивает вывод пакета на экран только информацией, относящейся к машине bull, которая может быть как ис- точником, так и получателем. $ sudo tcpdunp host bull 12:35:23.519339 bull.41537 > nubark.domain: A? atrust.com. (28) (DF) 12:35:23.519961 nubark.domain > bull.41537: A 66.77.122.161 (112) (DF) Первый пакет свидетельствует о том, что компьютер bull послал компьютеру nubark запрос на поиск домена atrust. com в системе DNS. Ответом является IP-адрес машины, связанной с этим именем, т.е. 66.77.122.161. Обратите внимание на временную метку в левой части строки и на то, что команда tcpdump понимает протокол на уровне
924 Часть II. Работа в сети приложения (в данном случае DNS). Номер порта на компьютере bull является про- извольным и записывается в виде числа (41537), но поскольку номер порта на сервере хорошо известен (53), команда tcpdump выводит его символическое имя domain. Анализаторы пакетов могут порождать огромные массивы информации, неподъем- ные не только для человека, но и для операционной системы. Для того чтобы избежать перегрузки сети, утилита tcpdump позволяет задавать сложные фильтры. Например, сле- дующий фильтр собирает только входящий веб-трафик из одной подсети. $ sudo tcpdump src net 192.168.1.0/24 and dst port 80 Справочная страница утилиты tcpdump содержит несколько хороших примеров сложных фильтров, а также список примитивов.7 Система Solaris содержит анализатор, работающий так же, как tcpdump. Он soiaris называется snoop. Дистрибутивные пакеты систем HP-UX, AIX и большин- ства систем семейства Linux не содержат таких утилит. solaris$ snoop Using device /dev/el000g0 (promiscuous mode) nubark -> Solaris TCP D=22 S=58689 Ack=2141650294 Seq=3569652094 Len=0 Win=15008 Options=<nop,nop,tstamp 292567745 289381342> nubark -> Solaris TCP D=22 S=58689 Ack=2141650358 Seq=3569652094 Len=0 Win=15008 Options=<nop,nop,tstamp 292567745 289381342> ? -> (multicast) ETHER Type=023C (LLC/802.3), size = 53 bytes Если вы используете зоны Solaris, обратите внимание на то, что утилита snoop рабо- тает правильно, только если вы устраняете проблему в локальной зоне. Утилиты Wireshark и TShark: усовершенствованный вариант tcpdump Утилита tcpdump появилась довольно давно, но в последнее время все более по- пулярным становится новый открытый пакет под названием Wireshark (который ранее назывался Ethereal). Пакет Wireshark активно совершенствуется и содержит больше функциональных возможностей, чем большинство коммерческих приложений. Это не- обычайно мощный инструмент анализа, который должен входить в инструментальный набор каждого эксперта. Кроме того, он незаменим при обучении. Пакет Wireshark содержит как пользовательский графический интерфейс (wireshark), так и интерфейс командной строки (tshark). В системе Linux он ин- сталлируется автоматически. Администраторы системы UNIX должны посетить сайт wireshark.org, на котором хранится открытый код и множество скомпилированных модулей. Программа Wireshark может читать и записывать файлы слежения в форматах, ис- пользуемых многими другими анализаторами пакетов. Еще одна удобная функциональ- ная возможность заключается в том, что одним щелчком мыши можно выбрать любой пакет в сеансе TCP и попросить программу Wireshark заново собрать (соединить вместе) данные, включенные во все пакеты, находящиеся в потоке. Эта возможность полезна, если вы хотите проверить данные, переданные в ходе полного TCP-обмена, например, какое соединение было использовано для передачи сообщения об ошибке по сети. 7 Если ваши требования, касающиеся фильтрации, превосходят возможности утилиты tcpdump, обратите внимание на утилиту ngrep (ngrep. sourceforge.net), которая может филь- тровать пакеты в соответствии с их содержимым.
Глава 21. Управление сетями 925 Фильтры перехвата программы Wireshark функционально идентичны фильтрам ути- литы tcpdump, поскольку программа Wireshark использует ту же самую библиотеку libpcap. Тем не менее следует быть внимательным: важный нюанс заключается в том, что программа Wireshark имеет дополнительную функцию “фильтры дисплея”, которая влияет на внешний вид данных, а не содержание, перехваченное анализатором. Фильтр дисплея имеет более мощный синтаксис, чем библиотека libpcap, поддерживаемая в момент перехвата. Фильтры дисплея похожи на фильтры библиотеки libpcap, но они не совпадают с ними. Программа Wireshark имеет встроенные дешифраторы для многих сетевых протоко- лов, включая многочисленные протоколы, используемые для реализации сетей хранения данных. Она преобразует пакет в структурированное информационное дерево, в котором каждый бит информации описан на английском языке. На рис. 21.2 показан перехват DNS-запроса и ответа на него в программе Wireshark. file Edit yiew fio Rapture Analyze Statistics tdelp В V « Ш Ш H X ® ы 4 * Ф 7 £ Bit Gt О ’ 0filter: h ip »ddr\q ZL3 144 13Э 134 yxi ip жИг is5 238 ▼ | ф Expression.., Д £lewI Apply > Fnaa 52 (IM byt«« on urt, 159 byt»» c«ptur*d( t> Etlwmot П, Srt TjranCoap_47 4f 2f (90 «9 81 47 4f 2f), Ost 2/1с«1С<ж_а2 91 м (ее 11 cb. «2 SI t> Internet Protocol, Src 213 144 133.194 (213 144 133 194). Opt 195 238 24 152 (195 238 24 152) t> User OwtaQraa Protocol, Src Port down (53), Ost Port 32B1G (32819) v Dornin Nnm Systee (гжаропм) |Г1М □ 000343000 seconds] Puc. 2L2. Пара DNS-пакетов в программе Wireshark В таблице, расположенной в верхней части рисунка, указаны два пакета. Первый пакет представляет собой запрос на пересылку на DNS-сервер, а второй пакет являет- ся полученным ответом. Выбран пакет запроса, поэтому в среднем окне показана его структура. В нижнем окне пакет представлен в виде набора байтов. Раскрытый раздел дерева демонстрирует данные, содержащиеся в пакете. Содержание пакета в виде байтов также может представлять интерес, потому что иногда он содер- жит фрагменты, которые могут подсказать, что именно произошло. Сканировать текст особенно удобно, когда нет встроенного анализатора текущего протокола. Справочное меню программы Wireshark содержит массу примеров, с которыми можно начинать ра- ботать. Экспериментируйте!
926 Часть II. Работа в сети Следует сделать одно предупреждение, касающееся программы Wireshark: несмотря на множество прекрасных функциональных возможностей, она еще требует многолет- ней доработки с точки зрения безопасности. Запустите текущую версию, но не остав- ляйте ее работать постоянно на важных компьютерах; программа Wireshark может стать потенциальным проводником для атаки. 21.8. Служба Netalizr Института ICSI Мы рассмотрели несколько инструментов для отладки сети и анализа сетевой кон- фигурации. Но даже при самом тщательном мониторинге полезно иметь инструмент, который время от времени будет просматривать вашу сеть. Netalyzr — это служба, пре- доставляемая Международным институтом компьютерных наук из Беркли (International Computer Science Institute at Berkeley), которая представляет собой полезную альтерна- тиву. Для ее использования просто зайдите на сайт netalyzr.icsi.berkeley.edu (об- ратите внимание на то, что буква ‘е’ пропущена специально), включив в вашем браузере поддержку языка Java. Служба Netalyzr проверяет ваше интернет-соединение разными способами. Очень полезно иметь доступ к вашей сети как изнутри (через программу Java, выполняемую в вашем браузере), так и с серверов института ICSI. На рис. 21.3 показан отчет службы Netalyzr для рабочей станции в частной сети, сое- диненной с внешним миром связью DSL. Служба Netalyzr отлично устанавливается, но имеет небольшие проблемы с веб-сервером Apache (тем не менее блокирование неверно составленных HTTP-запросов может оказаться полезным). Полный отчет состоит из разделов, содержащих информацию о IP-соединениях, полосе пропускания, простоях, буферизации, обработке фрагментированных пакетов и других аспектах. Особенно сильны тесты для выявления аномалий в системе DNS и протоколе HTTP. 21.9. Протоколы управления сетями Усложнение и разрастание сетей за последние 20 лет вызвало потребность в разра- ботке средств управления сетями. Поставщики операционных систем и разработчики стандартов подходили к решению этой задачи самыми разными способами. Наиболее значительным результатом стало появление ряда стандартных протоколов управления сетевыми устройствами и множества высокоуровневых программных средств, в которых эти протоколы используются. Протоколы управления сетями определяют стандартные методы зондирования какого-либо устройства с целью выявления его сетевых соединений, конфигурации и общего состояния. Кроме того, протоколы позволяют модифицировать часть этой ин- формации, чтобы можно было стандартизировать управление различными устройствами на сетевом уровне и осуществлять это управление с центральной станции. Самым распространенным протоколом управления, используемым в сетях TCP/IP, является SNMP (Simple Network Management Protocol — простой протокол управления сетями). Несмотря на название, этот протокол достаточно сложный. Он определяет ие- рархическое пространство имен для объектов управления и методы чтения/записи дан- ных, относящихся к этим объектам, на каждом узле иерархии. Он также определяет спо- соб, которым управляемые сущности (“агенты”) посылают сообщения о происходящих событиях (“прерывания”) станциям управления.
Глава 21. Управление сетями 927 TheicsiNetalyzr Beta Result Summary adsl-133-194.dsl.init7.net / 213.144.133.194 Rewarded at 12 33 EDT (16:33 UTG)an Sat, August 08 2009 Permalink Transcrpt. Noteworthy Events Minor Aberrations !• Network packet buffering may be excessive 4 • An HTTP proxy was detected based on added or changed HTTP traffic 4 • The detected HTTP proxy blocks malformed HTTP requests 4 Address-based Tests NAT detection: NAT Detected Yourglobal IP address is 21 3 144 1 33.194 while your local one is 192 168 0,203, You are behind a NAT. Your local address is in unroutable address space. ' Your NAT renumbers TCP source ports sequentially. The fallowing graph shows connection attempts on the X-axis and theircorresponding source ports on the Y-axis. 36677i , . • 36668*-*------—------------------- Puc. 2L3. Отчет службы Netalyv Протокол SNMP действительно является простым; самая сложная часть находится над протокольным уровнем и заключается в соглашениях по организации пространства имен и по форматированию элементов данных на узле иерархии. Протокол SNMP ши- роко поддерживается разработчиками программного обеспечения. Существует и ряд других стандартов управления сетями. Многие из них созда- ны организацией DMTF (Distributed Management Task Force — рабочая группа по раз- работке распределенных систем управления), которая реализовала такие концепции, как WBEM (Web-Based Enterprise Management — система управления предприятием на основе веб-технологий), DMI (Desktop Management Interface — интерфейс управления компьютером) и CIM (Conceptual Interface Model — концептуальная модель интерфей- са). Некоторые из этих концепций, в частности DMI, приняты рядом известных фирм- производителей и могут служить полезным дополнением (а иногда и заменой) протоко- лу SNMP. В настоящее время, однако, основным средством управления сетями остается все же SNMP. Поскольку SNMP — абстрактный протокол, для его использования нужны программа-сервер (“агент”) и программа-клиент (“менеджер”). (Как ни странно, сер- верная сторона SNMP является управляемым элементом, а клиентская — управляю- щим.) Клиентом может быть как простая утилита, работающая в режиме командной строки, так и выделенная станция управления, на мониторе которой в графическом виде отображается сеть вместе со всеми неполадками.
928 Часть II. Работа в сети Выделенные станции управления сетью являются главной причиной существования самих протоколов управления. Большинство программных продуктов позволяет стро- ить не только логическую, но и топографическую модель сети. Обе модели выводятся на экран, при этом постоянно отображается текущее состояние каждого сетевого компонента. Подобно тому, как график может показать скрытый смысл, заложенный в заполнен- ной числами странице, так и станция управления сетью способна обобщить и предста- вить состояние крупной сети в форме, приемлемой для человека. Другим способом та- кую информационную сводку получить практически невозможно. Основное преимущество протокола SNMP в том, что абсолютно все типы сетевых аппаратных средств выводятся на один уровень. Linux-системы в основном похожи друг на друга, чего нельзя сказать о маршрутизаторах, шлюзах и остальных низкоуровневых компонентах. При использовании протокола SNMP все они начинают “общаться” на одном языке и могут зондироваться, сбрасываться в начальное состояние и конфигури- роваться с центральной станции. Очень удобно, когда есть один согласованный интер- фейс, применимый ко всем сетевым устройствам. 21.10. SNMP: простой протокол управления сетями Когда в начале 90-х годов протокол SNMP впервые появился на рынке, возникла своеобразная “золотая лихорадка”. Сотни компаний выпустили собственные пакеты управления по протоколу SNMP. Кроме того, многие поставщики аппаратных и про- граммных средств стали включать в свои продукты SNMP-агенты. Большинство компо- нентов сетевого аппаратного обеспечения, предназначенных для производства (а не для домашнего использования), в настоящее время содержат агенты SNMP. Прежде чем погрузиться в дебри SNMP, заметим, что терминология, употребляемая в этой области, одна из самых бестолковых и невразумительных. Стандартные назва- ния объектов и концепций SNMP будут активно уводить читателей от понимания их назначения, так что запаситесь терпением. У людей, ответственных за такое положение вещей, следует отобрать клавиатуру. Структура протокола SNMP В SNMP данные организованы иерархически, причем структура иерархии жестко определена. Это делает пространство имен универсальным и расширяемым, по крайней мере теоретически. Большие его области оставлены для перспективного использования; дополнения, создаваемые поставщиками операционных систем, локализуются в опреде- ленных диапазонах во избежание конфликтов. Для формирования пространства имен используются так называемые базы управляющей информации (Management Information Base, MIB). Это структурированные текстовые файлы, которые содержат описания дан- ных, доступных по протоколу SNMP. Ссылки на конкретные переменные, описываемые в базе данных, называются идентификаторами объектов (Object Identifier, OID). В переводе на человеческий язык это означает всего лишь, что протокол SNMP определяет иерархическое пространство имен переменных, хранящих “интересные” па- раметры системы. Иерархия SNMP напоминает иерархию имен файловой системы. Только в качестве символа-разделителя используется точка, а каждому узлу иерархии присваивается не имя, а номер. Для облегчения ссылок узлам присваиваются также текстовые имена, но схема именования выходит за рамки самой иерархии и определяется на высоком уровне. (Это похоже на связь между именами компьютеров и их IP-адресами.)
Глава 21. Управление сетями 929 К примеру, идентификатор OID, соответствующий показателю общего времени ра- боты системы, выглядит так: 1.3.6.1.2.1.1.3. В текстовом виде его можно записать сле- дующим образом. iso.org.dod.intemet.mgmt.mib-2.system.sysUpTime Верхние уровни иерархии SNMP носят искусственный характер и обычно не содер- жат полезных данных. По сути, интересная информация начинает появляться только на уровне iso.org.dod.internet.mgmt (вчисловом виде — 1.3.6.1.2). Основная административная база данных SNMP для протоколов TCP/IP (MIB-I) обеспечивает доступ к наиболее важным управляющим данным: информации о системе, ее интерфейсах, преобразовании адресов и протоколах (IP, ICMP, TCP, UDP и др.). В до- кументе RFC1213 описана новая, более полная версия этой базы: MIB-П. Большинство SNMP-серверов поддерживает базу MIB-П. В табл. 21.1 приведена выборка узлов иерар- хии из пространства имен MIB-II. Таблица 21.1. Некоторые идентификаторы из базы MIB-II ою* ' ‘ Oi л .Ллй/ *. . . ЬЛ.М.-ч, system.sysDescr строка Информация о системе: производитель, модель, тип ОС и т.д. system.sysLocation строка Физическое местонахождение компьютера system.sysContact строка Информация о владельце компьютера system.sysName строка Имя системы (обычно это полное DNS-имя) interfaces.ifNumber целое Количество имеющихся сетевых интерфейсов interfaces.ifTable таблица Таблица с информацией о каждом интерфейсе ip.ipForwarding целое 1, если система является шлюзом, иначе 2 ip.ipAddrTable таблица Таблица данных IP-адресации (маски и т.д.) ip.ipRouteTable таблица Системная таблица маршрутизации icmp.icmpInRedirects целое Число полученных директив переадресации протокола ICMP icmp.icmpInEchos целое Число полученных эхо-пакетов tcp.tcpConnTable таблица Таблица текущих ТСР-соединений udp.udpTable таблица Таблица с информацией о UDP-сокетах, через которые серверы ожидают прием запросов а Относительно узла iso.org.dod.internet.mgmt.mib-2. Помимо основной административной базы данных, существуют базы для различных типов аппаратных интерфейсов и протоколов. Имеются также базы данных по отдель- ным поставщикам и конкретным изделиям. База MIB — это лишь соглашение об именовании управляющих данных. Для того чтобы эта схема заработала, ее необходимо подкрепить программой-агентом, которая будет обеспечивать соответствие содержимого SNMP-переменных текущему состоянию устройства. Код для основной базы MIB (в настоящее время MIB-II) поставляется с большинством SNMP-агентов Linux. Некоторые агенты разрешают подключать допол- нительные базы данных. Агенты SNMP — сложные существа, имеющие общие проблемы с безопасностью. Не следует полагаться на агентов, которых поставщики предоставляют в готовом виде. Ра- зумнее скомпилировать и инсталлировать текущую версию агента NET-SNMP (см. далее).
930 Часть II. Работа в сети Операции протокола SNMP В пространстве имен SNMP определено всего четыре базовые операции: get (про- читать), get-next (прочитать следующий), set (записать) и trap (прерывание). Операции get и set — это базовые операции чтения и записи данных на узле иерар- хии, который определяется конкретным значением OID. Операция get-next использу- ется для последовательного прохода по базе MIB, а также для чтения таблиц. Прерывание (операция trap) — это неожиданное уведомление клиента о том, что на сервере произошло нестандартное событие. Определен ряд стандартных прерываний, в том числе уведомления вида “я только что включился”, сообщения об отказах и восста- новлении сетевых каналов, а также сообщения, связанные с различными проблемами маршрутизации и аутентификации. Широко применяются и нестандартные прерывания, например для отслеживания значений требуемых SNMP-переменных. Если эти значе- ния выходят за границы установленного диапазона, выдается соответствующее сообще- ние. Способ определения получателей таких сообщений зависит от реализации агента. Поскольку сообщения SNMP потенциально могут изменять информацию о конфи- гурации компьютера, необходим какой-то механизм защиты. Простейшая защита осно- вана на концепции группового имени (community name). Для тех, кто не страдает кос- ноязычием, поясним: на языке разработчиков протокола это синоним слова “пароль”. Доступу только для чтения соответствует один пароль, простите, групповое имя, а до- ступу для записи — другой. Несмотря на то что многие организации продолжают использовать общепринятую строковую аутентификацию имени и пароля, версия 3 протокола SNMP включает ме- тоды управления доступом с высокой степенью безопасности. Их настройка требует до- полнительной работы, но снижение риска стоит этого. Если по каким-то причинам вы не можете использовать версию 3 протокола SNMP, по крайней мере выберите строку имени и пароля, которую сложно угадать. RMON: база MIB для дистанционного мониторинга База RMON (remote monitoring — дистанционный мониторинг) накапливает данные о общих характеристиках сети (т.е. тех, которые не относятся к конкретному устрой- ству). Сетевые анализаторы, или “зонды”, могут собирать информацию о загруженности и производительности сети. Полезные данные группируются, подвергаются статистиче- ской обработке и доставляются на центральную станцию управления для анализа и гра- фического воспроизведения. Многие зонды имеют буферы для перехваченных пакетов и могут работать подобно утилите tcpdump. База RMON формально описана в документе RFC1757, который был принят в каче- стве чернового стандарта в 1995 году. Она разделяется на девять “групп RMON”. Каждая группа хранит собственный набор статистических данных. Если сеть достаточно боль- шая и имеет много глобальных соединений, необходимо рассмотреть возможность при- обретения зондов для снижения SNMP-трафика через глобальные соединения. При на- личии итоговых статистических данных отпадет необходимость в дистанционном сборе первичных данных. Многие коммутаторы и маршрутизаторы поддерживают базы RMON и хранят в них собственные статистические данные.
Глава 21. Управление сетями 931 21.11. Агент NET-SNMP После публикации первой версии стандарта SNMP в университете Карнеги-Меллона (Carnegie Mellon University) и Массачусетсском технологическом институте (MIT) были разработаны реализации протокола. Университетская реализация протокола SNMP была более полной и быстро стала стандартом де-факто. После прекращения разработ- ки SNMP-продуктов в университете Карнеги-Меллона работу продолжили специалисты Калифорнийского университета в Дэвисе. Когда код системы стабилизировался, она была передана для дальнейшего сопровождения компании SourceForge. В настоящее время пакет называется NET-SNMP. Этот пакет теперь считается официальной бесплат- ной реализацией протокола SNMP для систем UNIX и Linux. Последнюю версию пакета можно получить на веб-узле net-snmp. sourceforge. net. В состав пакета входят SNMP-агент, несколько утилит командной строки и даже би- блиотека для разработки SNMP-приложений. Ниже рассмотрим работу самого агента, а об утилитах поговорим чуть позже. Как и в других реализациях протокола, агент NET-SNMP собирает данные о локаль- ном компьютере и предоставляет их SNMP-менеджерам по сети. По умолчанию инстал- лируются базы MIB, содержащие статистические данные об использовании сетевых ин- терфейсов, памяти, дисков и центрального процессора. Возможности агента достаточно велики, так как он способен запустить любую Linux-команду и представить ее выходные данные в качестве SNMP-ответа. Это позволяет посредством протокола SNMP осущест- влять мониторинг событий, происходящих в системе. По умолчанию агент инсталлируется под именем /usr/sbin/snmpd. Обычно он за- пускается на этапе начальной загрузки системы и считывает параметры конфигурации из файлов, находящихся в каталоге /etc/snmp. Наиболее важный из этих файлов на- зывается snmpd. conf; он содержит большинство конфигурационных параметров и опи- сание множества доступных методов сбора данных. При разработке пакета его авторы полагали, что пользователи будут редактировать только файл snmpd. local. conf. Но на практике приходится хотя бы один раз изменять и файл snmpd. conf, чтобы отключить те методы сбора данных, использование которых не планируется. Сценарий configure пакета NET-SNMP позволяет задать используемый по умолча- нию журнальный файл и ряд других локальных параметров. С помощью опции -1, ука- зываемой при вызове демона snmpd, можно выбрать другой журнальный файл, а благода- ря опции -s журнальные сообщения направляются в систему Syslog. Перечень наиболее важных опций демона snmpd приведен в табл. 21.2. Мы рекомендуем всегда задавать оп- цию -а. При поиске неисправностей удобно применять опции -V, -d и -D, которые по- зволяют получать более детальную информацию о происходящих в системе событиях. Таблица 21.2. Опции демона snmpd пакета NET-SNMP ОпЦМ -1 файл -а -d -V -D -h Направление журнальной информации в указанный файл Регистрация адресов всех SNMP-соединений Регистрация содержимого каждого SNMP-пакета Включение режима подробного описания событий Регистрация отладочной информации Отображение аргументов демона snmpd
932 Часть II. Работа в сети Окончание табл. 21.2 Опция Назначение . - -3^ -н Отображение директив конфигурационного файла -А Добавление данных в журнальный файл, а не его перезапись -S Направление журнальной информации в систему Syslog Следует заметить, что существует большое количество полезных модулей, написан- ных на языках Perl для SNMP, Ruby и Python. Их можно найти в соответствующих репо- зиториях. 21.12. Программы управления сетями Мы начнем этот раздел с рассмотрения простейших SNMP-инструментов: команд пакета NET-SNMP. С их помощью удобно проверять значения конкретных идентифи- каторов OID. Затем познакомимся с программой Cacti, которая строит графики измене- ния SNMP-переменных, и системой мониторинга событий Nagios. В завершение приво- дятся рекомендации относительно того, на что следует обращать внимание при покупке коммерческих систем. Команды пакета NET-SNMP Даже если система поставляется с собственным SNMP-сервером, для полноценного администрирования понадобится скомпилировать и инсталлировать семь клиентских команд пакета NET-SNMP (табл. 21.3). Таблица 21.3. Команды пакета NET-SNMP snmpdelta snmpdf Контролирует изменения SNMP-переменных во времени Контролирует изменение дискового пространства на удаленном компьютере по протоколу SNMP snmpget snmpgetnext snmpset snmptable snmptranslate snmptrap snmpwalk Запрашивает у агента значение SNMP-переменной Запрашивает значение следующей переменной последовательности Передает агенту значение SNMP-переменной Запрашивает таблицу значений SNMP-переменных Осуществляет поиск идентификаторов OID и их описаний в базе MIB Генерирует сообщение о прерывании Просматривает базу MIB начиная с заданного идентификатора OID Перечисленные команды чрезвычайно удобно использовать в сценариях. Например, часто требуется сценарий, в котором данные, полученные командой snmpget, каждые несколько минут сохраняются в текстовом файле. (Составить такой график позволит де- мон cron; см. главу 9.) Примечательна также команда snmpwalk. Начав с указанного идентификатора OID (или, по умолчанию, с начала базы MIB), она выполняет в цикле запрос get-next. В результате формируется полный список доступных идентификаторов OID и их значе- ний. Команда snmpwalk особенно полезна, если необходимо обнаружить новые иденти- фикаторы и организовать их мониторинг.
Глава 21. Управление сетями 933 Ниже приведен сокращенный пример работы команды snmpwalk на узле tuva. Строка имени и пароля имеет вид “secret813community”, а флаг -vl означает простую аутентификацию. $ snmpwalk -с secrete13community -vl tuva SNMPv2-MIB::sysDescr.О = STRING: Linux tuva.atrust.com 2.6.9-11.ELsmp #1 SNMPv2-MIB::sysUpTime.0 = Timeticks: (1442) 0:00:14.42 SNMPv2-MIB::sysName.0 = STRING: tuva.atrust.com IF-MIB::ifDescr.l = STRING: lo IF-MIB::ifDescr.2 = STRING: ethO IF-MIB::ifDescr.3 = STRING: ethl IF-MIB::ifType.1 = INTEGER: softwareLoopback(24) IF-MIB::ifType.2 = INTEGER: ethernetCsmacd(6) IF-MIB::ifType.3 = INTEGER: ethernetCsmacd(6) IF-MIB::ifPhysAddress.1 = STRING: IF-MIB::ifPhysAddress.2 = STRING: 0:11:43:d9:le:f5 IF-MIB::ifPhysAddress.3 = STRING: 0:11:43:d9:le:f6 IF-MIB::ifInOctets.1 - Counter32: 2605613514 IF-MIB::ifInOctets.2 = Counter32: 1543105654 IF-MIB::ifInOctets.3 = Counter32: 46312345 IF-MIB::ifInUcastPkts.1 = Counter32: 389536156 IF-MIB::ifInUcastPkts.2 = Counter32: 892959265 IF-MIB::ifInUcastPkts.3 = Counter32: 7712325 В этом примере команда отобразила основную информацию о системе и статисти- ческие данные о работе ее сетевых интерфейсов: loO, ethO и ethl. В зависимости от поддерживаемых агентом баз MIB, вывод команды snmpwalk может содержать сотни строк. Сбор и накопление данных протокола SNMP Сетевые данные лучше всего оценивать визуально и с учетом временной перспекти- вы. Важно иметь возможность отслеживать и изображать графически показатели произ- водительности, но выбор конкретного программного обеспечения не является критиче- ски важным. Одним из наиболее популярных пакетов для сбора и графического отображения дан- ных о протоколе SNMP был пакет MRTG, написанный Тоби Отикером. Большая часть пакета MRTG была написана на языке Perl. Он может регулярно запускаться демоном cron и собирать данные от любого источника SNMP. Каждый раз при запуске програм- мы записываются новые данные и создаются новые графические изображения. Еще одним полезным инструментом в этой области является пакет RRDtool, также написанный Тоби Ойтикером. Это набор прикладных программ для хранения и графиче- ского отображения показателей производительности. Все ведущие инструменты для мо- ниторинга основаны на пакете RRDtool, включая нашего фаворита — программу Cacti. Программа Cacti, доступная на сайте cacti. net, обладает несколькими привлека- тельными функциональными возможностями. Во-первых, используя пакет RRDtool как основу, она собирает данные мониторинга в статических базах данных, не требующих технического обслуживания. Программа Cacti собирает столько данных, сколько требу- ется для построения желаемых графиков. Например, программа Cacti может сохранять по одной выборке каждую минуту в течение дня, каждый час в течение недели и каждую неделю в течение года. Эта схема позволяет собирать важную информацию без хранения незначительных деталей и без затрат времени на управление базами данных.
934 Часть II. Работа в сети Во-вторых, программа Cacti может записывать и изображать в графическом виде любую переменную SNMP, а также любые другие показатели производительности. Пользователь может свободно собирать любые данные, которые его интересуют. В соче- тании с агентом NET-SNMP программа Cacti генерирует данные об истории функцио- нирования практически любой системы или сетевого ресурса. На рис. 21.4 приведено несколько примеров графиков, построенных с помощью программы Cacti. Эти графики демонстрируют среднюю загрузку сервера в течение не- скольких недель, а также суточный трафик сетевого интерфейса. WWW - Load Average week 28 week 29 week 30 ’ week 31 week 32 Week 33 week 34 week 35 From 2009/08/28 22:51:02 TO 2009/08/28 22:51:02 □ 1 Minute Average Current: 0.75 □ 5 Minute Average current: 0.50 15 Minute Average Current: 0.39 H0U-S2-SW6S09-2 - Traffic - 1/1 02:00 04:00 os:oo os:oo 10:00 12:00 i4:oo 16;oo 18:oo 20:00 22:00 □ inbound Current: 3.94 M Average: 7.85 M Maximum: 12.83 M Total in; 674.89 GB outbound Current: 3.88 M Average: 6,30 M Maximum: 9.20 м Total Out: 541.56 GB Puc. 21.4. Пример графика, построенного программой Cacti Программа Cacti имеет простую конфигурацию, использующую средства веб, а так- же встроенные возможности пакета RRDtool, например небольшой объем технического обслуживания и прекрасные графические функции. Посетите домашнюю страницу па- кета RRDtool rrdtool. org и обратите внимание на ссылки на текущие версии пакетов RRDtool и Cacti, а также десятки других инструментов для мониторинга. Nagios: событийная служба мониторинга Служба Nagios специализируется на составлении отчетов об ошибках в реальном времени. Она содержит набор сценариев для обеспечения работы средств мониторинга всех форм и размеров, а также имеет широкие функциональные возможности для мони- торинга протокола SNMP. Возможно, ее главным преимуществом является модульная, легко настраиваемая система конфигурации, позволяющая записывать пользователь- ские сценарии мониторинга любых мыслимых показателей. Несмотря на то что служба Nagios не поможет определить, насколько повысилась пропускная способность сети за последний месяц, она может оповестить вас, когда ваш веб-сервер выйдет из строя.
Глава 21. Управление сетями 935 Дистрибутивный пакет Nagios содержит надстройки для слежения за типичными проблемными точками. Пользователь может создавать новые мониторы на языке Perl или даже на языке С, если чувствует в себе силы. Для уведомления об ошибках дистри- бутивный пакет может посылать электронные сообщения, генерировать веб-отчеты и использовать модемы коммутируемых линий передачи. Как и надстройки мониторинга, все они легко настраиваются. Кроме отсылки уведомлений об отключении систем в реальном времени, служба Nagios хранит архив ретроспективных данных. Она имеет несколько мощных интерфей- сов для генерации графических отчетов о трендах доступности и производительности работы сети. Многие организации используют службу Nagios для измерения степени со- ответствия показателей заданным уровням обслуживания; на рис. 21.5 показана доступ- ность DNS-сервера. State History For Service 'DNS' On Host 'nsl6' Tue Aug 29 08:04:33 2006 to Tue Sep 5 08:04:33 2006 State Bieakdowns 0k : C96.8272!) 6d 18h 40м 12s Warning : (0.0002!) Od Oh 0m 0s Unknown : (0.0002!) Od Oh Ora 0s Critical : (3.1732!) Od 5h 19m 48s Indeterminate: (0.000Z) Od Oh Om 0s Puc. 21.5. График показателя доступности сервера, построенный службой Nagios Система Nagios очень хорошо работает с сетями, состоящими менее чем из тысячи компьютеров и устройств. Ее легко настраивать и расширять. Кроме того, она имеет множество мощных функциональных возможностей, таких как резервирование, удален- ный мониторинг и эскалация уведомлений. Если вы не можете себе позволить приоб- рести коммерческое программное обеспечение для мониторинга сети, мы настоятель- но рекомендуем обратить внимание на систему Nagios. Более подробную информацию можно найти на сайте nagios.org. Совершенный пакет для мониторинга: поиски продолжаются При исследовании пакетов для управления сетями в ходе редактирования нашей книги мы обнаружили, что в этой области на протяжении последнего десятилетия происходит активная деятельность. Однако большинство пакетов для регистрации и графического отображения информации по-прежнему используют пакет RRDtool. Высококачественный стандарт наподобие редакторов vi или emacs пока не появился. Две хорошо финансируемые компании, использующие модель “открытый источник плюс” (Ground-Work Open Source и Zenoss), приступили к разработке пакетов для управ-
936 Часть и. Работа в сети ления сетями, подкрепив ее серьезной рекламой и отшлифованными интерфейсами. В этой традиционной области программного обеспечения их конкурентами стали паке- ты Munin (munin.pro jects. linpro. no) и collectd (collectd. org). Пакет Munin особенно популярен в скандинавских странах. Он основан на остро- умной архитектуре, в которой есть надстройки не только для сбора данных, но и для уведомления системы о способе их представления. Пакет collectd написан на языке С, чтобы обеспечить высокое быстродействие и мобильность программ. Он работает даже на крошечных системах, не имея проблем с производительностью и не требуя дополнительной поддержки. Во время редактирова- ния книги пакет collectd поставлялся с 70 надстройками для сбора данных. Коммерческие системы сетевого управления Сотни компаний продают программное обеспечение для управления сетями, и каж- дую неделю на рынке появляются новые продукты. Мы не будем рекомендовать кон- кретные продукты (за время подготовки книги к печати все может измениться), а по- пробуем сформулировать требования к системе управления сетью. Возможность получения различных видов данных. Для систем управления сетью важно уметь получать данные не только по протоколу SNMP. Многие программы позволяют принимать данные от большинства других сетевых служб, например выполнять SQL- запросы, обращаться к DNS и веб-серверам. Качество пользовательского интерфейса. Дорогостоящие системы обычно позво- ляют выбирать между имеющимся графическим интерфейсом или веб-интерфейсом. Программы, разработчики которых учитывают конъюнктуру рынка, поддерживают XML-шаблоны для форматирования данных. Важно, чтобы интерфейс позволял пред- ставлять информацию в наглядном и понятном виде. Стоимость. Некоторые программы имеют завышенную цену. Пакет OpenView компа- нии Hewlett-Packard является одним из наиболее дорогостоящих, но в то же время од- ним из самых распространенных. Для многих компаний престижно, что их сети управ- ляются высококачественной коммерческой системой. Если для вашей организации это не так важно, обратите внимание на бесплатное программное обеспечение, в частности программы Cacti и Nagios. Автоматическое обнаружение узлов. Многие системы обладают способностью “обна- руживать” сеть. Посылая широковещательные эхо-пакеты, выполняя SNMP-запросы, просматривая таблицы маршрутизации и обращаясь к службе DNS, они могут иденти- фицировать все компьютеры и устройства в сети. Как правило, данная функция реали- зована достаточно хорошо, но не всегда удается получить точные результаты в сложных сетях или сетях с брандмауэрами. Средства отчета. Многие программы способны посылать предупреждения по элек- тронной почте, выдавать сообщения на пейджеры и автоматически генерировать уве- домления для популярных систем обнаружения ошибок. Убедитесь в том, что выбран- ная платформа позволяет гибко настраивать систему отчетности. Никто не знает, какие устройства появятся в ближайшие годы. Возможности конфигурирования. Некоторые производители в своих разработках пошли гораздо дальше простого мониторинга и выдачи сообщений. Их продукты по- зволяют управлять конфигурацией компьютеров и устройств. Например, система Cisco Works посредством специального интерфейса разрешает пользователю не только прове- рять состояние маршрутизатора по протоколу SNMP, но и менять его конфигурацию.
Глава 21. Управление сетями 957 Поскольку данные о конфигурации устройства необходимы для глубокого анализа сете- вых проблем, мы предполагаем, что в будущем большинство программ будет располагать средствами изменения конфигурации сетевых компонентов. 21.13. Протокол NetFlow: мониторинг соединений Широко известна способность протокола SNMP регистрировать объем трафика, проходящего через интерфейс. Однако если вас интересует не только объем трафика, но и его тип и пункты назначения, протокол SNMP становится практически бесполезным. Для того чтобы выяснить дополнительные детали, можно запустить анализатор из на- бора инструментов системы UNIX, но эту возможность нельзя реализовать для конкрет- ного маршрутизатора. Для того чтобы решить эту проблему, поставщики маршрутизаторов предложили свои собственные инструменты. Самым популярным среди них стал протокол NetFlow компании Cisco. Протокол NetFlow отслеживает каждое соединение по семи ключам: источник и IP- адрес получателя, источник и номер порта назначения, протокол (TCP, UDP и т.д.), тип службы (ToS) и логический интерфейс. Эти метаданные в сочетании с дополнительной информацией, такой как количество пакетов и байтов, можно послать любой подходя- щей программе для сбора данных. Наиболее распространенными являются версии протокола NetFlow v5 и v7, которые часто объединяются, потому что они по существу одинаковы, за исключением того, что версия v7 имеет дополнительное поле (маршрутизатор источника). Версия v7 использу- ется коммутаторами Cisco Catalyst. В настоящее время все более популярной становится версия 9. Ее шаблонная природа обеспечивает высокую гибкость. Маршрутизатор NetFlow может посылать собранные метаданные соответствующему получателю, например пакету cf lowd, разработанному организацией CAIDA. Если се- тевое соединение сильно загружено, эта конфигурация порождает огромный объем дан- ных, для хранения которого необходима большая дисковая память, и анализатор, спо- собный решить поставленную задачу. В качестве такого анализатора можно использовать пакет FlowScan, разработан- ный Дэйвом Плонка (Dave Plonka). К сожалению, он до сих пор не обновлен, но по- прежнему работает хорошо. Его можно найти на сайте net. doit. wise. edu/~plonka/ FlowScan. Мониторинг данных протокола NetFlow с помощью утилит nfdump и NfSen Рассмотрим еще одну пару полезных инструментов для сбора и анализа данных про- токола NetFlow — утилиты nfdump (nfdump. source forge .net; разработана Петером Хаагом (Peter Haag)) и NfSen (nf sen. source forge. net). Коллектор (nfcapd) записы- вает данные протокола NetFlow на диск для дальнейшей обработки утилитой nfdump. Утилиты nfcapd и nfdump предназначены для версий v5/v7 и v9. Для поддержки протокола IPv6 следует использовать версию v9; версии 5 и 7 его не поддерживают. Утилита nfdump работает почти так же, как и утилита tcpdump (см. раздел 21.7). Она имеет аналогичный синтаксис фильтра, адаптированный для данных протокола NetFlow. Иокие форматы вывода позволяют настраивать внешний вид записей. Встроенные ге-
938 Часть II. Работа в сети нераторы отчетов демонстрируют N активных пользователей8 (talkers) вашей сети и другую полезную информацию. Следующий (немного сжатый) отчет утилиты nfdump показывает, какие IP-адреса и сети составляют трафик, какие порты в настоящий момент являются наиболее актив- ными и т.п. Параметры -s ip/flows запрашивают информацию о IP-адресах всех ис- точников или пунктов назначения, упорядоченных по объему потока. Параметры -п 10 ограничивают вывод десятью пунктами. linux$ nfdump -М /data/nfsen/profiles-data/live/upstream -г 2009/07/28/12/nfcapd.200907281205 -n 10 -s ip/flows Top 10 IP Addr ordered by flows: Date first seen Durat'n IP Addr Flows Pkts Bytes PPS bps bpp 2009-07-28 12:02 467.596 192.168.96.92 27873 67420 3.8 M 144 67347 58 2009-07-28 12:02 462.700 192.168.96.107 18928 43878 4.7 M 94 85522 112 2009-07-28 12:02 464.443 192.168.96.198 17321 45454 3.5 M 97 63884 81 2009-07-28 12:02 454.299 172.16.152.40 11554 29093 1.3 M 64 23996 46 2009-07-28 12:02 362.586 192.168.97.203 6839 11104 1.2 M 30 28883 117 2009-07-28 12:02 393.600 172.16.220.139 4802 12883 618384 32 12568 48 2009-07-28 12:02 452.353 192.168.96.43 4477 5144 554709 11 9810 107 2009-07-28 12:02 456.306 192.168.96.88 3416 6642 697776 14 12233 105 2009-07-28 12:02 459.732 192.168.96.108 2544 25555 3.2 M 55 58478 131 2009-07-28 12:02 466.782 192.168.96.197 2143 24103 5.3 M 51 94988 229 Summary: total flows: 98290, total bytes: 311.6 M, total packets: 759205, avg bps: 5.3 M, avg pps: 1623, avg bpp: 430 Time window: 2009-07-28 12:02:12 - 2009-07-28 12:09:59 Total flows processed: 98290, skipped: 0, Bytes read: 5111164 Sys: 0.310s flows/second: 317064.5 Wall: 0.327s flows/second: 300366.1 Поскольку данные протокола NetFlow хранятся на диске, их можно несколько раз анализировать с помощью разных наборов фильтров. Еще одна удобная функциональ- ная возможность утилиты nf dump позволяет объединять входящие и исходящие потоки в один двунаправленный поток. Утилита Nf Sen — это веб-интерфейс для данных протокола NetFlow, который до- полняет утилиту nfdump и, следовательно, сочетает графические возможности со всеми функциями утилиты nfdump. Она отображает данные трех разных категорий: потоки, пакеты и байты. Утилита NfSen не только строит графики, но и позволяет просматри- вать их, указывать на интересующие пики графика и исследовать отдельные потоки. Для уточнения внешнего вида данных можно применять любые фильтры утилиты nfdump. Сочетание удобного графического пользовательского интерфейса для просмотра данных с функциями утилиты nfdump делает программу NfSen мощным инструментом. Утилита NfSen позволяет сохранить пользовательский фильтр и настройки внешнего вида отчета в виде профиля, который легко использовать в будущем. Например, можно определить профиль, отслеживающий трафик для вашей зоны DMZ, веб-сервера или клиентской сети. Профили также делают утилиту NfSen ценным инструментом для работы групп, обе- спечивающих безопасность сети, поскольку они могут легко определять разновидность проблемы или сетевого трафика. Например, на рис. 21.6 показан отчет об исследовании атак на основе отказа в обслуживании типа “SYN flood”. 8 “Активный пользователь” — это термин протокола NetFlow, обозначающий устройство, соз- дающее сетевой трафик.
Глава 21. Управление сетями 939 Profile: SYN.flood ProflMjtfo: Тяг.ыляг, Мил мМЫ Кар: миг Start: Маг 22 ХМ - «МО К8Т ОМ: Маг 22 ХМ > 22:55 ЕЭТ Select Display. Q) (Т) (д) (V) ( » ) (~м~) t^ 200843-224745 Ud 200843-224745 Packets Traffic #Lm Scale 0 Stacked О Log Scale О Line Puc. 21.6. Профиль “SYNflood” для утилиты NfSen Исследование причин сбоя обычно проводится в течение ближайших часов и дней после инцидента, который его вызвал, но если данные протокола NetFlow были со- хранены, то можно легко создать профиль для предшествующего периода. Этот ретро- спективный анализ позволяет идентифицировать IP-адреса, вовлеченные в атаку, и от- следить другие узлы, на которые она могла повлиять. Можно также настроить утилиту NfSen так, чтобы она следила за потоком в нерабочие часы и посылала сигналы тревоги в случае возникновения определенных ситуаций. Настройка протокола NetFlow для маршрутизатора Cisco router Приступая к работе с протоколом NetFlow, необходимо сконфигурировать свое се- тевое устройство так, чтобы оно посылало данные протокола NetFlow утилите nf capd. В этом разделе мы рассмотрим конфигурацию протокола NetFlow для маршрутизатора Cisco. Экспорт данных протокола NetFlow включен для каждого интерфейса. ios# interface fastethernet 0/0 ios# ip route-cache flow Для того чтобы сообщить маршрутизатору, куда посылать данные протокола NetFlow, ВВеДите следующую команду. ios# ip flow-export nfcapd-hostname listen-port Параметры, указанные ниже, разбивают долговременные потоки на пятиминутные сегменты. Пользователь может выбрать любой сегмент длиной от 1 до 60 минут, но их Длина должна быть равной периоду ротации файлов утилиты nfdump, которая по умол- Чанию равна пяти минутам, или меньше его. ios# ip flow-export version 5 x°s# ip flow-cache timeout active 5
940 Часть II. Работа в сети В маршрутизаторе Catalyst 6500/7600, кроме обычного экспорта данных протокола NetFlow, необходимо включить параметр NDE (NetFlow Data Export). Для этого необходимо выполнить следующие команды. ios# mis flow ip interface-full ios# mis flow ipv6 interface-full ios# mis nde sender version 5 На загруженном маршрутизаторе можно предусмотреть многочисленные простои ма- леньких потоков. ios# mis aging fast time 4 threshold 2 ios# mis aging normal 32 ios# mis aging long 900 При этом обычная конфигурация протокола NetFlow все равно необходима, вклю- чая применение команд ip flow ingress или ip route-cache flow к каждому ин- терфейсу, так что потоки могут переключаться не только самим маршрутизатором, но и программным обеспечением. Для версии NetFlow v9 конфигурация может быть еще длиннее. В зависимости от версии операционной системы , пользователь может задавать свой шаблон. С появлени- ем технологии Flexible NetFlow (FNF), среда NetFlow стала еще более сложной. 21.14. Рекомендуемая литература Википедия содержит прекрасный (хотя и неполный) обзор протокола SNMP со ссылками на документы RFC. Это хорошая отправная точка. Mauro D., Schmidt К. Essential SNMP (2nd Edition) ~ Sebastopol, CA: O’Reilly Media, 2005. Simple Web. SNMP and Internet Management. — Сайт simple web. org. Могут оказаться полезными и перечисленные ниже документы RFC. Вместо назва- ний мы приводим краткое описание их содержимого, так как названия представляют собой не вполне понятный набор модных словечек и жаргона SNMP. • RFC1155 — Characteristics of the SNMP data space (data types, etc.) (Характеристики пространства имен SNMP (типы данных и т.д.)). • RFC 1156 — MIB-I definitions (description of the actual OIDs) (Определения базы MIB-I (описание идентификаторов OID)). • RFC1157 — Simple Network Management Protocol (Протокол SNMP). • RFC 1213 — MIB-II definitions (OIDs) (Определения базы MIB-II (описание иден- тификаторов OID)). • RFC3414 — User-based Security Model for SNMPv3 (Модель безопасности, опреде- ленная пользователем для протокола SNMPv3). • RFC3415 — View-based Access Control Model for SNMPv3 (Модель управления до- ступом на основе представления для протокола SNMPv3). • RFC3512 — Configuring devices with SNMP (Конфигурирование устройство в рам- ках протокола SNMP (лучшее обозрение)). • RFC3584 — Practical coexistence between different SNMP versions (Практическое со- существование разных версий протокола SNMP). • RFC3954 — Cisco Systems NetFlow Services Export Version 9.
Глава 21. Управление сетями 941 21.15. Упражнения 21.1. При поиске источника проблемы в сети, команда netstat -rn выдает показан- ные ниже результаты. В чем проблема и с помощью какой команды ее можно устранить? Destination Gateway Genmask F. 128.138.202.0 0.0.0.0 255.255.255.0 U 127.0.0.0 0.0.0.0 255.0.0.0 U 255.0.0.0 Flags MSS Window irtt Iface 40 0 0 ethO 40 0 0 lo 21.2. ★ Напишите сценарий, который будет контролировать заданную группу компью- теров и сообщать администратору по электронной почте, если какой-нибудь ком- пьютер не реагирует на эхо-запросы в течение заданного времени. Не задавайте список компьютеров, почтовый адрес и величину интервала времени в тексте сце- нария. 21.3. ★ Поэкспериментируйте с изменением сетевой маски одного из компьютеров ло- кальной сети. Продолжит ли компьютер нормально работать? Все ли компьюте- ры доступны в сети? Можно ли с других компьютеров получить доступ к нему? Поддерживается ли широковещательный режим (т.е. запросы протокола ARP и пакеты DHCP)? Объясните полученные результаты. (Необходим доступ с правами суперпользователя.) 21.4. ★ Воспользуйтесь командой traceroute для обнаружения маршрутов в своей сети. а) сколько переходов требуется сделать на пути к серверу? б) присутствуют ли маршрутизаторы между компьютерами, на которых у вас есть учетные записи? в) можно ли обнаружить узкие места в сети? г) есть ли в сети компьютеры с несколькими IP-адресами? 21.5. АА Составьте базу MIB, содержащую все переменные, которые вам как ад- министратору Linux может понадобиться запрашивать или устанавливать. Предусмотрите возможность расширения этой базы данных. 21.6. АА Воспользуйтесь утилитами wireshark или tshark для перехвата трафика перечисленных ниже протоколов. В случае протокола TCP укажите начальные и конечные пакеты. (Необходим доступ с правами суперпользователя.) a) ARP; б) эхо-запросы и эхо-ответы протокола ICMP; в) SMTP; г) FTP и FTP-DATA; Д) DNS; е) Samba; ж) SSH. 21.7. АА Настройте программу Cacti на отображение графика пакетов, посылаемых ло- кальному маршрутизатору и получаемых от него. Необходимо, чтобы агент SNMP опрашивал маршрутизатор; для этого следует узнать SNMP-имя маршрутизатора.
942 Часть II. Работа в сети 21.8. ★★ Напишите сценарий, в котором используется пакет RRDtool для слежения за сетевым трафиком аналогично команде netstat -i, и создайте веб-страницу с помощью команды rrdcgi, демонстрирующую результаты. Если вы никогда не работали с пакетом RRDtool, это упражнение, вероятно, займет несколько часов. Дерзайте! Это стоит затраченных усилий, поскольку вы поймете, чем хороши та- кие сценарии, а освоение пакета RRDtool поможет вам правильно настроить его для эффективного управления сетью.
глава 22 Безопасность Несмотря на все попытки Голливуда, защита компьютерных сетей остается тяжелым и недооцененным занятием, далеким от гламура. Дисциплина системного администрато- ра — следствие суровой необходимости; если системы UNIX и Linux обслуживают конфи- денциальные данные и управляют важными процессами, мы обязаны их защитить. Такая защита требует ресурсов: как времени работы системного администратора, так и специального оборудования. К сожалению, многие организации не вкладывают нуж- ные инвестиции в эту область, пока не произойдет несчастный случай. В ноябре 1988 года, когда Роберт Моррис-младший (Robert Morris, Jr.) выпустил в Интернет своего первого “червя”, мы впервые столкнулись с реальной опасностью все- мирного масштаба. До того момента Интернет переживал “век невинности”. Вопросы безопасности, заботившие администраторов, звучали, в основном, так: “А что, если...? . Серьезным происшествием считалась поимка пользователя, узнавшего пароль админи- стратора и прочитавшего чужую почту (часто не по злому умыслу, а просто для самоу- тверждения). “Червь” Морриса привел к потере тысяч часов рабочего времени системных адми- нистраторов, зато бдительность пользователей Интернета возросла на порядок. Все мы просто еще раз вспомнили народную мудрость: чем выше заборы, тем добрее соседи. В результате появился ряд прекрасных инструментальных средств для системных адми- нистраторов (и была основана организация, предназначенная для борьбы с сетевым вре- дительством). В настоящее время взлом систем безопасности стал распространенным явлением. Как показало совместное исследование Института компьютерных наук (CSI Computer Science Intitute) и ФБР “Computer Crime and Security Survey”1, проведенное в 2008 году, 1 Это исследование проводится каждый год, а отчет о нем публикуется на сайте gocsi. com.
944 Часть II. Работа в сети среднегодовые потери опрошенных организаций вследствие взломов систем безопас- ности составляли 234 тыс. долл. Большинство крупных организаций регистрируют по крайней мере одну попытку серьезного взлома системы безопасности в год. Решить эту проблему не так просто, как кажется. Безопасность нельзя купить в ма- газине или заказать в сервис-центре. Соответствующие коммерческие продукты и услу- ги могут быть частью предлагаемого решения для конкретной организации, но это не панацея. Достижение приемлемого уровня безопасности требует огромного терпения, постоянной бдительности, немалых знаний и упорства. Это касается не только админи- страторов, но и всех пользователей и управляющего персонала. Системный администратор несет личную ответственность за безопасность системы и степень образованности пользователей в данном вопросе. Он должен знать современные технологии защиты, быть подписчиком соответствующих групп новостей и нанимать экспертов в области компьютерной безопасности, если его знаний оказывается недо- статочно для решения возникшей проблемы. 22.1. Безопасна ли система UNIX Конечно, нет! Ни UNIX, ни Linux, ни какая-либо другая операционная система, управляющая сетью, не являются безопасными операционными системами. Для соз- дания абсолютно непробиваемой защиты придется изолировать2 компьютер от всех устройств доступа (и, возможно, поместить его в специальную комнату, стены которой не пропускают электромагнитное излучение). Кто может себе это позволить? Кое-что для повышения надежности системы, разумеется, сделать можно. Но иде- альная безопасность все же недостижима, ибо в модели безопасности Linux есть не- сколько фундаментальных изъянов, которые невозможно преодолеть. • Операционная система UNIX ориентирована, прежде всего, на удобство примене- ния, что отнюдь не предполагает естественность и простоту ее защиты. Концепция этой системы заключается в обеспечении удобного манипулирования данными в сетевой многопользовательской среде. • Программное обеспечение для системы UNIX разрабатывается большим сообще- ством программистов. Все они имеют разную квалификацию, по-разному отно- сятся к своей работе и обладают различными знаниями о строении операционной системы и ее особенностях. Поэтому даже самые современные средства зашиты, выпущенные с самыми благими намерениями, могут приводить к появлению но- вых “дыр”. • Большинство административных функций реализовано за пределами ядра, где их можно проверять и модифицировать. Хакеры имеют широкий доступ в систему. С другой стороны, исходный код этих систем (т.е. Linux, Solaris и других) доступен каждому, и тысячи людей могут проверить каждую строку этого кода на предмет нали- чия ошибок. Считается, что это приводит к существенному повышению безопасности по сравнению с закрытыми операционными системами, где доступ к коду имеет лишь небольшое число разработчиков. Многие организации не торопятся устанавливать новые версии операционной си- стемы: либо по причине сложности локализации, либо потому, что они не заключили с поставщиком договор о сопровождении системы. Даже если производитель “заткнул” 2 Появление беспроводных сетей привело к возникновению новых проблем безопасности. В данном контексте “изолировать” означает “отключить сеть”.
Глава 22. Безопасность 945 маленькую дырочку в системе защиты, на устранение “лазейки” потребуется какое-то время. Может показаться, что по мере выявления и устранения брешей безопасность опера- ционных систем будет непрерывно повышаться, но, к сожалению, это не так. Сложность системного программного обеспечения стремительно растет, хакерская деятельность все больше приобретает черты организованной преступности, компьютеры оказываются все теснее связанными посредством Интернета. Война переходит в новые измерения, и, по- хоже, победителей не будет. Запомните такую формулу: 1 Безопасность = __—--------- 1,072 х Удобство Чем безопаснее система, тем труднее пользователям работать в ней. 22.2. Слабые места в системе защиты В последующих разделах будут рассматриваться некоторые наиболее распространен- ные проблемы, связанные с безопасностью, и стандартные контрмеры, позволяющие избежать этих проблем. Но прежде чем погрузиться в детали, необходимо взглянуть на ситуацию в целом и определить основные источники неприятностей. Человеческий фактор Пользователи (и администраторы) системы часто являются ее слабейшим звеном. Даже сейчас, когда образованность людей в области безопасности повысилась, беспеч- ные пользователи легко распространяют конфиденциальную информацию. Никакая технология не может защитить сеть от неосторожных пользователей, поэтому систем- ный администратор обязан информировать пользователей о существующих угрозах, и это обстоятельство станет частью системы безопасности. Эта проблема может проявляться в разных формах. Хакеры звонят своим жертвам и представляются легальными пользователями, попавшими в трудное положение, пытаясь проникнуть в сеть. Иногда сами системные администраторы неосторожно размещают конфиденциальную информацию на открытых форумах, описывая решения сложных проблем. Физические взломы возникают, например, когда внешне легальные сотрудни- ки отдела технического обслуживания проникают в телефонный монтажный шкаф. Термином “фишинг” (phishing) называют попытку сбора информации от пользова- телей с помощью обманных электронных сообщений, мгновенных сообщений и даже сообщений SMS. От фишинга особенно трудно защититься, поскольку сообщения часто содержат информацию, которая свидетельствует о знакомстве с жертвой и создает види- мость аутентичности. Использование человеческого фактора остается мощным хакерским приемом, ко- торому трудно противостоять. Ваша стратегия обеспечения безопасности должна пред- усматривать обучение новых сотрудников. Эффективно также распространять среди сотрудников информацию о телефонных атаках, физических проблемах, фишинге и правильном выборе паролей. Может показаться, что для того, чтобы противостоять попыткам использовать чело- веческий фактор, можно попытаться самому спровоцировать такую атаку. Однако сна- чала необходимо получить разрешение от менеджера. Если у вас не будет такого разре-
946 Часть II. Работа в сел шения, такие действия будут выглядеть подозрительно. Кроме того, они могут вызвать “шпиономанию” и обиду. Многие организации считают необходимым сообщить своим пользователям, что ад- министраторы ни при каких обстоятельствах не имеют права спрашивать у них пароли ни через электронные сообщения, ни через мгновенные сообщения, ни по телефону. О любой попытке узнать пароль с помощью этих средств следует сообщать в отдел ин- формационных технологий. Ошибки в программах За много лет в программном обеспечении (включая сторонние программы, как ком- мерческие, так и бесплатные) было выявлено несметное число ошибок, связанных с безопасностью. Используя незаметные программистские просчеты или контекстные зависимости, хакерам удавалось манипулировать системой по своему усмотрению. Основной программной ошибкой, одной из самых опасных по своим последствиям,, является переполнение буфера. Для хранения информации разработчики часто выделя- ют заранее определенный объем временной памяти, который называется буфером. Если программа не следит за размерами данных и контейнера, в котором они должны хра- ниться, то память, смежная с выделенной областью, рискует оказаться перезаписанной. Умелые хакеры могут ввести тщательно скомпонованные данные так, чтобы они приве- ли к краху программы или, в худшем случае, выполнили некий заданный код. К счастью, огромное количество случаев переполнения буферов, которое наблюду лось в последние годы, научило программистов бороться с этим. Несмотря на то что переполнение буфера остается сложной проблемой, она быстро распознается и исправ- ляется, особенно в приложениях с открытым кодом. Новейшие программные системы, такие как Java и .Net, содержат механизмы, автоматически проверяющие размеры дан- ных и предотвращающие переполнение буфера (правда, не всегда). Переполнение буфера является частным случаем более широкого класса проблем,, связанных с безопасностью программного обеспечения, который называется уязвимо-? стью проверки вводимых значений (input validation vulnerability). Почти все програм- мы принимают от пользователей вводимые данные (например, аргументы командной строки или формы HTML). Если программа обрабатывает эти данные без строгой про- верки соответствующего формата и содержания, то могут возникнуть неприятности; Рассмотрим следующий простой пример. #! /usr/bin/perl # Example user input validation error open (HTMLFILE, "/var/www/html/$ARGV[0] ’’) or die "trying\n"; while(<HTMLFILE>) {print; } close HTMLFILE; Вероятно, этот код должен выводить на печать содержимое некоего HTML-файла, находящегося в каталоге /var/www/html, который по умолчанию является корневым каталогом документов для веб-сервера Apache среди серверов системы Red Hat. Этот код получает от пользователя имя файла и включает его как часть аргумента команды open. Однако злоумышленник ввел в качестве аргумента строку /et/passwd и по- лучил в качестве ответа содержимое этого файла! Как администратор может предотвратить такой тип атак? Почти никак, по крайней мере, пока не будет найдена ошибка и создана соответствующая заплатка. По этой при- чине выпуск заплаток и бюллетеней, посвященных вопросам безопасности, является
Глава 22. Безопасность 947 важной частью работы системного администратора. Большинство дистрибутивных паке- тов системы Linux включает автоматизированные утилиты для создания заплаток, такие как yum в системе Red Hat и apt-get в системе Ubuntu. Система OpenSolaris также име- ет автоматизированные (и надежные) модификации, реализуемые посредством команды pkg image-update. Воспользуйтесь преимуществами этих утилит, чтобы уберечь ваш сайт от опасностей. Ошибки конфигурации Многие компоненты программного обеспечения можно сконфигурировать в режиме полной или частичной безопасности. К сожалению, поскольку программное обеспече- ние должно быть полезным и не должно раздражать пользователей, по умолчанию чаще всего принят второй вариант. Хакеры вламываются в системы, иезуитски эксплуатируя функциональные возможности, которые предоставлены разработчиками для удобства пользователей: учетные записи без паролей, глобальный совместный доступ к жестким дискам и т.д., и т.п. Один из типичных примеров уязвимости узлов является стандартная практика, ког- да системы семейства Linux загружаются, не требуя ввода пароля загрузчика. Загрузчик операционной системы GRUB можно настроить так, чтобы он во время инсталляции запрашивал пароль, но администраторы часто отказываются от этой возможности. Это упущение открывает возможность для физической атаки системы. Однако этот же при- мер демонстрирует необходимость балансирования между безопасностью и удобством. Запрос пароля означает, что при непроизвольной перезагрузке системы (например, при сбое электропитания) администратор должен физически присутствовать при повторном включении компьютера. Одна из наиболее важных задач, связанных с обеспечением безопасности систе- мы, — убедиться в том, что, заботясь о благополучии пользователей, вы случайно не от- крыли двери для хакеров. Такие проблемы проще обнаружить и устранить, чем другие, хотя их может быть очень много и не всегда очевидно, что именно следует проверять. Сканирование портов и уязвимых мест, описанное в главе, может помочь заинтересо- ванному администратору выявить проблему еще до ее возникновения. 22.3. Ключевые аспекты безопасности В этой главе рассматривается множество аспектов компьютерной безопасности. В идеале их все нужно учитывать. Системные администраторы, вероятно, должны про- читать эту главу несколько раз. Большинство операционных систем не поставляется с уже готовой защитой. Кроме того, настройка, которая осуществляется как во время инсталляции, так и после нее, из- меняет профиль безопасности новых систем. Администраторы должны укреплять новые системы, интегрировать в локальную среду и планировать их долговременную безопас- ную эксплуатацию. Когда к вам придет проверка, вы должны доказать, что следовали стандартной мето- дологии, особенно если эта методология соответствует общепринятым рекомендациям и передовым достижениям в вашей области промышленности. Для защиты новых систем мы используем технологическую карту. Системный адми- нистратор применяет стандартные меры по укреплению безопасности системы, а ад- министратор по вопросам безопасности проверяет, чтобы эти меры были приняты пра- вильно, и ведет системный журнал.
948 Часть II. Работа в сети Программные "заплаты" Оснащение операционной системы вновь разработанными программными “заплата- ми” является первейшей обязанностью системного администратора. Большинство си- стем конфигурируется так, чтобы иметь связь с репозиторием поставщика. В этом слу- чае установка программной “заплаты” сводится всего лишь к выполнению нескольких команд. В крупных сетях могут существовать локальные репозитории, являющиеся зер- калами репозитория поставщика. При установке программных “заплат” следует учитывать следующее. • Нужно составить расписание инсталляции программных “заплат” и строго его придерживаться. При составлении такого расписания необходимо учитывать его влияние на пользователей. Обычно достаточно выполнять ежемесячные обновле- ния; регулярность важнее срочности. Нельзя сосредоточиваться только на защите от вредоносных программ и игнорировать другие обновления. • Необходимо разработать план изменений, который учитывал бы влияние каждого набора “заплат”, предусматривал соответствующие этапы тестирования после ин- сталляции системы и описывал возможности отказа от внесенных обновлений при возникновении проблем. Этот план следует обсудить со всеми заинтересованными сторонами. • Необходимо понимать, какие заплаты подходят к данному окружению. Системные администраторы должны подписываться на специальные списки рассылки и бло- ки по вопросам безопасности, создаваемые поставщиками, а также принимать участие в работе форумов по вопросам безопасности, таких как Bugtraq. Ненужные службы Большинство систем поставляется с несколькими службами, которые запускаются по умолчанию. Отключите (и по возможности удалите) все ненужные службы, особенно если они реализованы в виде сетевых демонов. Для того чтобы обнаружить выполняе- мые службы, можно использовать команду netstat. Рассмотрим частичные результаты работы этой команды в системе Solaris. solaris$ netstat -an | grep LISTEN 111 * * 0 0 49152 0 LISTEN 32771 * * 0 0 49152 0 LISTEN 32772 * * 0 0 49152 0 LISTEN 22 * * 0 0 49152 0 LISTEN 4045 * * 0 0 49152 0 LISTEN Для обнаружения служб, использующих неизвестный порт, существует несколько приемов. В большинстве операционных систем эту задачу можно решить с помощью команд Isof или fuser. В системе Linux эти команды могут распознать идентификатор PID процесса, использующего данный порт. ubuntu$ sudo fuser 22/top 22/tcp: 2454 8387 ubuntu$ sudo Isof -i:22 COMMAND PID USER FD TYPE DEVICE SIZE NODE NAME sshd 2454 root 3u IPv4 5730 TCP * :ssh(LISTEN) sshd 2454 root 4u IPv6 5732 TCP * :ssh(LISTEN)
Глава 22. Безопасность 949 Выяснив идентификатор PID, с помощью команды ps можно идентифицировать конкретный процесс. Если данная служба не нужна, остановите ее и убедитесь, что она не будет заново стартовать во время загрузки системы. К сожалению, доступность команд Isof и fuser зависит от системы, и их реали- зации сильно отличаются друг от друга. Многим версиям этих инструментов недостает поддержки сетевых сокетов. Если утилиты Isof и fuser недоступны (или бесполезны), можно либо проверить “хорошо известные” порты для служб в файле /etc/service, либо запустить утилиту netstat без параметра -п, чтобы она выполнила эту проверку за вас. Некоторым сетевым протоколам присущ риск, которому подвергается безопасность системы. В этом случае она остается почти все время уязвимой. Например, программы FTP, Telnet и BSD “г” (rep, rlogin и rsh) используют ненадежную аутентификацию и ненадежные методы передачи данных. Они должны быть отключены во всех системах и заменены более безопасными программами, например программой SSH. Удаленная регистрация событий 03 Протокол syslog описан в главе 11. Механизм syslog направляет регистрационную информацию в файлы, списки поль- зователей и другие узлы сети. Попробуйте настроить узел, отвечающий за безопасность, так, чтобы он действовал как центральная регистрационная машина, анализирующая полученные события и выполняющая соответствующие действия. Единый централизо- ванный регистратор событий может получать сообщения от разных устройств и преду- преждать администраторов о важных событиях. Удаленная регистрация также предот- вращает перезапись или очистку регистрационных файлов во взломанных системах. Большинство систем поставляется сконфигурированными так, что механизм syslog включен по умолчанию, но для настройки удаленной регистрации необходимо выпол- нить дополнительное конфигурирование. Резервные копии Регулярное резервное копирование является важной частью системы безопасности любой сети. Оно входит в так называемую триаду ЦРУ и относится к категории “доступ- ность” (см. раздел 22.15). Убедитесь, что все части системы регулярно копируются и что эта информация хранится за пределами сайта. Если произойдет серьезный инцидент, связанный с безопасностью сети, вы сможете воспользоваться “надежным” источником информации и восстановить работу. Резервное копирование само по себе также может создавать угрозу безопасности. Украденная коллекция магнитных лент может уничтожить всю систему безопасности. Для хранения магнитных лент используйте огнеупорные сейфы, которые могут противо- стоять взлому, и применяйте шифрование. Рассматривая возможность заключения кон- тракта на хранение информации, попросите разрешения совершить экскурсию и лично убедиться в надежности хранилища. 03 Резервное копирование подробно описывается в главе 10. Вирусы и черви Системы UNIX и Linux имеют иммунитет от вирусов. Существует всего несколько вирусов (большинство из них носит чисто академический характер), которые могут за-
950 Часть IL Работа в сети разить системы UNIX и Linux, но ни один из них не способен нанести серьезный урон, в отличие от среды Windows, где это стало частым явлением. Тем не менее этот факт не снижает озабоченности поставщиков антивирусных программ — разумеется, если вы покупаете их продукт по специальной цене. Точная причина отсутствия вредоносных программ неясна. Некоторые утверждают, что система UNIX просто занимает слишком незначительную долю рынка настольных систем и поэтому не интересует авторов вирусов. Другие настаивают на том, что среда с контролем доступа, существующая в системе UNIX, ограничивает размер урона от само- распространяющихся червей или вирусов. Последний аргумент заслуживает внимания. Поскольку система UNIX ограничивает доступ исполняемых модулей на файловом уровне, непривилегированные пользовате- ли не могут инфицировать остальную среду. Если код вируса был запущен не из корня, его вред будет значительно ограничен. Следовательно, не нужно использовать корневую учетную запись для повседневной деятельности. Ш Более подробная информация о сканировании содержимого электронных сообщений приведена в главе 20. Как ни странно, одна из причин внедрения антивирусного программного обеспече- ния на серверах UNIX — стремление защитить работающие под управлением Windows компьютеры, существующие в вашей сети, от Windows-ориентированных вирусов. Почтовый сервер может сканировать входящую электронную почту на вирусы, а файло- вый сервер в поисках инфекции может сканировать общие файлы. Однако это решение должно быть дополнительным по отношению к антивирусной защите настольных си- стем, а не основным. Программа ClamAV, написанная Томашем Коймом (Tomasz Kojm), — это популяр- ная свободно распространяемая антивирусная программа для систем UNIX и Linux. Она широко используется в качестве полноценного антивирусного обеспечения, которое хранит сигнатуры тысяч вирусов. Новейшую версию этой программы можно загрузить с сайта clamav .net. Троянские программы Это программы, которые не выглядят программами. Примером является программа turkey, распространявшаяся в сети Usenet много лет тому назад. Эта программа утверж- дала, что способна нарисовать индейку на экране компьютера, но на самом деле удаляла файлы из рабочего каталога. Фрагменты троянских программ встречаются в основных пакетах программного обе- спечения до сих пор. Авторы программ sendmail, tcpdump, OpenSSH и nterBase даже опубликовали советы, касающиеся вредоносных программ, внедренных в их программ- ное обеспечение. Эти троянские программы обычно внедряют вредоносный код, ко- торый позволяет хакерам проникать в систему. К счастью, большинство поставщиков регулярно исправляют свои ошибки и публикуют соответствующие рекомендации раз в одну-две недели. Следите за списками рассылок по вопросам безопасности, посвящен- ными всем сетевым программным пакетам, которые выполняются на ваших узлах. Несмотря на большое количество проблем, возникших в области безопасности си- стем UNIX за последние несколько лет, следует отметить малое количество инцидентов, связанных с троянскими программами. В основном, это объясняется скоростью ком- муникаций через Интернет. Очевидные проблемы с безопасностью быстро выявляются и широко обсуждаются. Вредоносные пакеты не задерживаются надолго на хорошо из- вестных интернет-серверах.
Глава 22. Безопасность 951 Вы можете быть уверены, что любое выявленное вредоносное программное обе- спечение вызовет в Интернете широкое волнение. Поищите в системе Google имя про- граммного пакета, прежде чем его инсталлировать, и посмотрите, нет ли на первой стра- нице неприятных сообщений о нем. Руткиты Умелые хакеры пытаются скрывать свои следы и избегать разоблачения. Часто они рассчитывают продолжить использование вашей системы для нелегального распростра- нения программного обеспечения, зондирования других сетей или запуска атаки против других сетей. Для того чтобы оставаться незамеченными, они часто используют “рутки- ты” (“rootkits”). Троянские программы, внедренные в файлы, созданные фирмой Sony, используют возможности руткитов, чтобы скрыть себя от пользователей. Руткиты — это программы и заплатки, скрывающие важную системную информа- цию, например процесс, диск или сетевую активность. Они имеют много обличий и разную степень сложности — от простых замен приложения (как взломанные версии утилит 1s и ps) до модулей ядра, которые практически невозможно выявить. Для эффективного мониторинга системы и выявления внедренных руткитов суще- ствует специальное программное обеспечение, например OSSEC. Кроме того, разра- ботаны сценарии распознавания руткитов (такие, как chkrootkit, chkrootkit.org), сканирующие систему в поисках известных руткитов. Несмотря на существование программ, позволяющих системным администраторам удалять руткиты из взломанных систем, время, которое они вынуждены затрачивать на очистку систем, можно было бы сэкономить, сохранив данные, переформатировав диск и начав работу с нуля. Большинство современных руткитов знают о существовании про- грамм для их удаления и пытаются оказывать сопротивление. Фильтрация пакетов Если система подключается к сети, где есть выход в Интернет, необходимо, чтобы между этой системой и внешним миром стоял брандмауэр либо маршрутизатор, филь- трующий пакеты. В качестве альтернативы можно включить фильтрацию пакетов в ядре (описывается в разделе 22.11). Какой бы ни была реализация, фильтр должен пропускать через себя трафик только важнейших служб, выполняющих “полезную” работу в сети. Пароли Все мы любим простые правила. Вот одно из них: у каждой учетной записи должен быть пароль, который трудно угадать. Но даже самые лучшие пароли нельзя передавать через Интернет в текстовом виде. Поэтому, если в системе допускается удаленная реги- страция, следует применять SSH или какой-нибудь другой механизм аутентификации (см. раздел 22.10). Бдительность Для того чтобы быть уверенным в безопасности системы, следите за ее состоянием, сетевыми соединениями, таблицей процессов. Делать это нужно регулярно (желательно каждый день). Проблема всегда начинается с малого, а затем нарастает, как снежный ком, так что чем раньше будет обнаружена аномалия, тем меньшим окажется ущерб.
952 Часть II. Работа в сети Общие принципы защиты Эффективная система безопасности должна базироваться на здравом смысле. Она во многом напоминает борьбу с мышами в доме. Вот ряд правил, которые при этом следует соблюдать. Этими же правилами (в компьютерном варианте) можно с успехом руководствовать- ся при организации защиты Linux-систем. Вот как они звучат применительно к Linux. • Не оставляйте без присмотра файлы, которые могут представлять интерес для ха- керов и не в меру любопытных сослуживцев. Коммерческие тайны, персональные досье, бухгалтерские ведомости, результаты выборов и так далее — за всем этим нужен присмотр. Гораздо надежнее зашифровать данные, чем просто пытаться предотвратить к ним несанкционированный доступ. • В организации должен существовать порядок работы с конфиденциальной инфор- мацией. Некоторые рекомендации по этому поводу даны в главе 32. • Старайтесь, чтобы в системе не было мест, где хакеры могли бы закрепиться. Хакеры часто вламываются в одну систему, а затем используют ее как базу для взлома других систем. Иногда хакеры используют вашу сеть для сокрытия своих следов во время атаки реальной цели. Уязвимые службы с открытым доступом, ка- талоги, доступные для записи по протоколу FTP в анонимном режиме, групповые учетные записи, учетные записи с плохо подобранными паролями — вот основные уязвимые места. • Устанавливайте ловушки для обнаружения вторжений или попыток вторжения. Такие инструменты, как OSSEC, Bro, Snort и John the Ripper (описаны в разде- ле 22.8), помогут предупредить возможные проблемы. • Следите за отчетами, которые генерируются этими утилитами. Незначительная проблема, проигнорированная в отчете, к моменту получения следующего отчета может перерасти в катастрофу. • Учитесь защищать системы своими силами. Применяйте традиционные техноло- гии, обучайте пользователей, руководствуйтесь, в конце концов, здравым смыс- лом. В случае необходимости приглашайте специалистов со стороны, но при этом тщательно контролируйте их работу. • Постоянно следите за тем, не появились ли отклонения от нормального хода ра- боты системы. Обращайте внимание на все необычное, например на непонятные журнальные сообщения или изменение характера использования какой-либо учет- ной записи (резкий рост активности, работа в необычное время, использование учетной записи во время отпуска ее владельца). 22.4. Пароли и учетные записи пользователей Очень часто источником неприятностей является плохое управление паролями. По умолчанию в файлах /etc/passwd и /etc/shadow содержатся данные о том, кто может входить в систему и что он при этом имеет право в ней делать. Эти файлы представля- ют собой передовую линию защиты системы от захватчиков. Их нужно вести с особой тщательностью, стараясь не допускать ошибок и не загромождать файлы устаревшими данными. QJ Подробнее о файле passwd см. раздел 7.1.
Глава 22. Безопасность 953 Система UNIX позволяет пользователям выбирать свои собственные пароли, но, не- смотря на то, что это удобно, из-за этого возникает множество проблем, связанных с бе- зопасностью. Когда вы даете пользователям их регистрационные имена, должны также инструктировать их о правилах выбора паролей. Рекомендуется выбирать пароли не ме- нее чем из восьми символов, среди которых должны быть цифры, знаки препинания, а также прописные и строчные буквы. Бессмысленные сочетания символов, слогов, пер- вые буквы слов легко запоминаемой фразы — вот самые лучшие пароли. При этом легко запоминаемая фраза не должна быть одной из широко распространенных. Лучше при- думать свою собственную. Совет по выбору фраз приводился в разделе 4.3. Важно постоянно проверять (желательно ежедневно), чтобы каждая регистрацион- ная запись имела пароль. Записи в файле /etc/shadow, описывающие псевдопользо- вателей, таких как “демон”, которые владеют файлами, но никогда не регистрируются, должны быть отмечены звездочками или знаком восклицания в поле зашифрованного пароля. Эти символы не совпадают ни с одним паролем и тем самым предотвращают использование данной учетной записи. В организациях, использующих централизованную схему аутентификации, такую как LDAP или Active Directory, используется та же логика. Они требуют сложных паролей и блокируют учетные записи после нескольких неудачных попыток регистрации. Устаревание паролей В большинстве систем, использующих теневые пароли, можно реализовать меха- низм так называемого устаревания паролей, при котором пользователей заставляют пе- риодически менять пароли. На первый взгляд, это хорошая идея, однако ее практическая реализация влечет за собой определенные проблемы. Не всякому пользователю по душе периодически менять пароль, поскольку это сопряжено с запоминанием нового пароля. Обычно для пароля выбирается простое слово, которое легко вводится и запоминается, и когда приходит время замены, многие пользователи, не желая себя утруждать, опять берут предыдущий пароль. Таким образом, дискредитируется сама идея. Модули РАМ могут по- мочь выбрать сильные пароли, чтобы избежать описанной выше ситуации (раздел 22.5). JB В системе Linux процессом устаревания паролей управляет программа chage. ГЛ С ее помощью администраторы могут задавать минимальное и максимальное количество изменений пароля, дату истечения срока действия пароля, коли- чество дней до наступления даты истечения срока действия пароля, когда сле- дует заблаговременно предупредить пользователя, количество дней простоя, в течение которых учетные записи остаются заблокированными, и другие параметры. Следующая команда задает минимальное количество дней между изменениями пароля равным 2, максимальное количество изменений пароля равным 90, дату истечения срока действия пароля равной 31 июля 2010 года, а также то, что пользователя следует предупредить об истечении срока действия пароля за 14 дней. $ sudo chage -m 2 -М 90 -Е 2010-07-31 -W 14 ben Ш Более подробно процедура настройки параметров учетных записей описана в главе 7. Другие системы иначе реализуют механизм устаревания паролей, обычно не так де- тально. В системе Solaris параметры механизма устаревания паролей задаются в файле /etc/password. Устареванием паролей в системах семейства HP-UX управляет утилита smc, а в системе AIX оно настраивается в файле /etc/security/user.
954 Часть II. Работа в сети Групповые и совместно используемые учетные записи Опасно, если учетная запись используется несколькими людьми. Групповые реги- страционные имена (например, guest или demo) представляют собой удобную лазейку для хакеров, поэтому они запрещены во многих сетях федеральными законами, такими как HIPAA. Не допускайте этого в своей сети. Однако технические средства не могут предотвратить совместное использование пользователями паролей, поэтому в этом во- просе лучше всего вести разъяснительную работу. Пользовательские оболочки Теоретически можно установить в качестве оболочки для пользовательской учетной записи любую программу, включая пользовательский сценарий. На практике использо- вание оболочек, отличающихся от стандартных, таких как bash и tcsh, весьма опас- но. Еще опаснее беспарольные регистрационные имена, оболочкой которых является сценарий. Если у вас возникнет соблазн создать такое регистрационное имя, примените вместо него пару ключей SSH без пароля. Привилегированные учетные записи Единственная отличительная черта пользователя root состоит в том, что его иден- тификатор равен 0. Поскольку в файле /etc/passwd может быть несколько записей с таким идентификатором, существует и несколько способов входа в систему в качестве суперпользователя. * Один из способов, который хакеры, получив доступ к интерпретатору команд су- перпользователя, широко применяют для открытия “черного хода”, — редактирование: файла /etc/passwd. Поскольку такие команды, как who и w, работают с регистрацион- ным именем, хранящимся в файле /var/run/utmp, а не с идентификатором владельца' регистрационного интерпретатора, они не в состоянии разоблачить хакера, который выи глядит как рядовой пользователь, хотя на самом деле зарегистрирован в системе в каче-; стве суперпользователя. Не допускайте удаленную регистрацию суперпользователя даже через стан- soiaris дартную корневую учетную запись. Для того чтобы это запретить, следует с помощью оболочки OpenSSH установить в файле /etc/ssh/sshd_config параметр конфигурации PermitRootLogin равным No. Благодаря программе sudo (см. раздел 4.3) необходимость регистрироваться в каче- стве суперпользователя, даже с системной консоли, возникает редко. 22.5. Модули РАМ: украшение или ЧУДО АУТЕНТИФИКАЦИИ Аббревиатура РАМ означает “подключаемые модули аутентификации” (Pluggable Authentication Modules — РАМ). Эти модули освобождают программистов от необ- ходимости выполнять рутинные операции для реализации систем аутентификации. Концепция и термин были придуманы в компании Sun Microsystems (которая в настоя- щее время является частью компании Oracle) и описаны в 1996 году в статье, авторами которой были Самар (Samar) и Лаи (Lai) из компании SunSoft.
Глава 22. Безопасность 955 В далеком прошлом команды вроде login включали встроенный код аутентифика- ции, который предлагал пользователю ввести пароль, сравнил его с зашифрованной за- писью из файла /etc/shadow (на самом деле в настоящее время этот файл называется /etc/passwd) и делал вывод об их совпадении или несовпадении. Разумеется, другие команды (например, passwd) содержали такой же код. Не имея доступа к открытому коду, было невозможно изменить метод аутентификации, поэтому администраторы име- ли мало возможностей для управления настройками паролей (например, задавать пра- вила, описывающие правильные пароли) или не имели их вообще. Появление модулей РАМ в корне изменило положение дел. Модули РАМ поместили системные процедуры аутентификации в совместно ис- пользуемую библиотеку, которая может вызывать программу login и другие программы. Выделение функций аутентификации в отдельную подсистему облегчает интеграцию новых методов аутентификации и шифрования в компьютерную систему. Например, многофакторная аутентификация может поддерживаться без внесения изменений в про- граммы login и passwd. Для системного администратора выбор правильного уровня безопасности для аутен- тификации стал простой задачей конфигурирования. Программисты также полумили выгоду: они больше не обязаны писать сложный код для аутентификации и, что еще более важно, их системы аутентификации правильно реализуются с первой попытки. Модули РАМ могут аутентифицировать все виды деятельности: регистрацию пользова- телей, другие формы доступа к системе, использование защищенных веб-сайтов и даже конфигурирование приложений. Системная поддержка для моделей РАМ Все рассмотренные нами операционные системы содержат модули РАМ. Конфигурационная информация хранится в каталоге /etc/pam.d (Linux) или в файле /etc/pam.conf (Solaris, HP-UX и AIX). Форматы файлов конфигурации, в основном, совпадают, но в системах семейства UNIX вся информация хранится в одном файле, а в системах семейства Linux каждая служба или команда, использующая модули РАМ, имеет отдельный файл. С этой точки зрения поддержка модулей РАМ является практически универсальной, но если вы используете другой вариант системы UNIX и хотите проверить, использует ли ваша система модули РАМ, можно выполнить команду Idd /bin/login и увидеть, ссылаются ли исполняемые модули на совместно используемую библиотеку моделей РАМ libpam. Конфигурация модулей РАМ Файлы конфигурации модулей РАМ содержат по одной строке, каждая из которых представляет собой имя модуля РАМ, используемого в системе. Общий формат этих файлов имеет следующий вид. [служба] тип_модуля управляющий_флаг путь_к_модулю [аргументы] Поля разделяются пробелами. Системы Linux не используют поле служба или, точнее, они помещают каждую служ- бу в отдельный файл конфигурации и имя этого файла играет роль параметра служба, принятого в системе UNIX. Параметр служба может называть контекст аутентифика- ции, к которому относится строка конфигурации (например, login для обычных реги-
956 Часть II. Работа в сети страционных имен пользователей), или содержать ключевое слово other для установки системных параметров по умолчанию. Рассмотрим иллюстративный фрагмент конфигурации из системы Solaris; все поля путь_к_модулю являются относительными к каталогу /usr/lib/security. # login service login auth requisite pam_authtok_get.so.1 login auth required pam_dhkeys.so.1 login auth required pam_unix_cred.so.1 login auth required pam_unix_auth.so.1 login auth required pam_dial_auth.so.1 Отдельные модули РАМ имеют более тонкие настройки, чем просто “аутентифици- ровать пользователя”, поэтому в файле конфигурации модулей РАМ для каждой службы и каждого типа модуля может содержаться несколько строк. Серия строк для заданной службы и типа модуля называется стеком. Порядок, в котором модули перечисляются в файле конфигурации, имеет значение. Например, модуль, предлагающий пользователю ввести пароль, должен предшествовать модулю, проверяющему корректность пароля. Один модуль может передавать результаты своей работы другому модулю, изменяя параметры окружения или переменные РАМ. Поле тип_модуля может иметь значения auth, account, session или password. Модуль типа auth идентифицирует пользователя и может предоставлять ему право груп- пового доступа. Модуль типа account выполняет действия, не связанные с аутентифика- цией, например предоставляет доступ в зависимости от времени суток, ограничивает ко- личество одновременно работающих пользователей или количество портов, на которых может происходить регистрация. (Например, можно использовать модуль типа account для ограничения регистрации суперпользователя на консоли.) Действия, которые не- обходимо выполнить до или после того, как пользователь получит доступ к требуемой службе, например монтирование файловой системы, реализуются модулем типа session. Наконец, модуль типа password используется, когда пользователь должен ввести аутен- тификационную информацию (например, пароль или кодовое словосочетание). Поле управляющий_флаг определяет, как должны взаимодействовать модули, обра- зующие стек (табл. 22.1). Таблица 22.1. Управляющие флаги модулей РАМ Флаг Остановка в случае ошиб —ДЗДЛШ X iu 'J J 'i.i.hh < 1' i—i к 1 ки в случае успеха КоммеитаРии binding® Нет Да Похож на флаг sufficient, но только ошибка приводит к отказу всего стека include® - Включает другой файл конфигурации в данную точку стека optional Нет Нет Имеет значение, только если модуль единственный required Нет Нет Ошибка приводит со временем к отказу всего стека requisite Да Нет Так же как и required, но отказ стека наступает мгновенно sufficient Нет Да Неудачное название; см. пояснения в тексте Значение include используется только в системе Linux, значение binding — только в системе Solaris.
Глава 22. Безопасность 957 Если бы модуль РАМ мог просто возвращать код ошибки как только первый модуль в стеке потерпит неудачу, то система этих флагов была бы проще. К сожалению, систе- ма разработана так, что большинство модулей имеет шанс на выполнение независимо от успеха или сбоя других модулей, находящихся с ними на одном и том же уровне, и этот факт имеет определенные тонкости, связанные с потоком управления. (Это было сделано для того, чтобы хакеры не могли понять, какие модули РАМ в стеке вызывают отказ.) Модули required должны следовать один за другим; отказ одного из них гаранти- рует, что весь стек со временем даст сбой. Однако отказ модуля, помеченного флагом required, не приводит к немедленному сбою стека. Если вы хотите, чтобы сбой насту- пал моментально, вместо флага required используйте флаг requisite. Успех модуля типа sufficient немедленно прекращает работу стека. Однако окон- чательный результат работы стека не обязательно должен быть успешным, поскольку модуль типа sufficient не может компенсировать ошибку выполненного ранее мо- дуля типа required. Если ранее выполненный модуль типа required выдал ошибку, успешно выполненный модуль типа sufficient прекращает работу стека и возвращает ошибку в качестве итогового результата. Флаг binding в системе Solaris действует точно так же, как флаг sufficient, но отказ модуля типа binding гарантирует общий сбой стека. В противоположность этому, отказ модуля типа sufficient интерпретируется как ошибка модуля типа optional: он не влияет на окончательный результат, если стек не состоит из одного модуля. Дело ясное, что дело темное, не так ли? Для того чтобы еще больше усложнить си- туацию, в системе Linux предусмотрена параллельная система альтернативных управля- ющих флагов, которые теоретически можно использовать вместо перечисленных выше межсистемных стандартов. В общем, для того чтобы объяснить, что означают управ- ляющие флаги, необходимо несколько страниц. Однако мы не будем углубляться в эту тему, потому что конфигурации модулей РАМ довольно стереотипны. Вряд ли вы ста- нете писать что-то совершенно оригинальное. Мы упомянули некоторые детали только для того, чтобы дать вам представление о том, что имена управляющих флагов не соот- ветствуют их назначению. Если вы планируете изменить настройки безопасности вашей системы, сначала убедитесь, что вы правильно понимаете смысл параметров, и дважды перепроверьте это. (Конфигурации модулей РАМ не изменяют ежедневно. Как долго вы можете помнить разницу между флагами requisite и required?) Для простоты рассмотрим следующий фрагмент конфигурации из файла pam. conf в системе Solaris. # login service login auth requisite login auth required login auth required login auth required login auth required pam_authtok_get.so.1 pam_dhkeys.so.1 pam_unix_cred.so.1 pam_unix_auth.so.1 pam_dial_auth.so.1 Рассмотрим отдельные модули. Библиотечный модуль pam authtok get предлагает пользователю ввести свое имя (если оно еще не было введено) и пароль, а также хранить эти значения в токене аутен- тификации с именем PAM_AUTHTOK. Модуль pam dhkeys используется для аутентифи- кации вызова RPC (remote procedure call — удаленный вызов процедуры) для систем NIS или NIS+ и ищет ключи Диффи-Хеллмана, т.е. имя.
958 Часть II. Работа в сети Модуль pam unix cred устанавливает мандаты для аутентифицированного пользо- вателя, а модуль pam_unix_auth выполняет фактическую аутентификацию, проверяя, является ли значение, хранящееся в переменной PAM AUTHTOK, правильным паролем пользователя. В заключение, модуль pam dial auth аутентифицирует пользователя для доступа по коммутируемым телефонным линиям к содержанию файлов /etc/dialups и/etc/d_passwd. Один и тот же модуль может встречаться в разных конфигурационных файлах с раз- ными значениями тип_модуля. Это прекрасно; если реализации нескольких типов име- ют значительный объем общего кода, они часто объединяются в одну библиотеку. Подробный пример конфигурации системы Linux Д Система Linux хранит каждый набор строк конфигурации модулей РАМ, ссы- лающихся на одну и ту же службу, в отдельном файле, имя которого совпадает с именем службы. В остальном формат прежний, за исключением того, что поле служба больше не нужно. Например, ниже приведен файл /etc/pam.d/login из системы SUSE с включенны- ми файлами, которые раскрыты, чтобы сделать пример более связным. auth requisite pam_nologin.so auth [user_unknown=ignore success=ok ignore=ignore auth_err=die default=bad] pam_ securetty.so auth required pam_env.so auth required pam_unix2.so account required pam_unix2.so password requisite pam_pwcheck.so nullok cracklib password required pam_unix2.so use_authtok nullok session required pam_loginuid.so session required pam_limits.so session required pam_unix2.so session optional pam_umask.so session required pam_lastlog.so nowtmp session optional pam_mail.so standard session optional pam_ck_connector.so Стек auth содержит несколько модулей. В первой строке модуль pam nologin проверяет существование файла /etc/nologin. Если он существует, модуль немед- ленно прекращает регистрацию, если пользователь не является корневым. Модуль pam securetty гарантирует, что суперпользователь может регистрироваться только с терминалов, перечисленных в файле /etc/secure tty. В этой строке используется альтернативный синтаксис системы Linux, описанный на справочной странице рат. conf. В этом случае функционирование модуля аналогично реакции на флаг required. Модуль pam env устанавливает переменные окружения в файле /etc/security/pam_ env.conf, и наконец, модуль pam_unix2 проверяет мандаты пользователя, выполняя стандартную аутентификацию системы UNIX. Если один из этих модулей дает сбой, стек auth возвращает ошибку. Стек account содержит только модуль pam_unix2, который в данном контексте оценивает корректность самой учетной записи. Например, он возвращает ошибку, если учетная запись просрочена или пароль должен быть изменен. В последнем случае мо- дуль принимает от пользователя новый пароль и передает его модулям password.
Глава 22. Безопасность 959 Строка pam pwcheck проверяет устойчивость предложенных паролей, вызывая би- блиотеку cracklib. Она возвращает ошибку, если новый пароль не соответствует уста- новленным требованиям. Однако она допускает пустые пароли, потому что установлен флаг nullok. Строка pam_unix2 обновляет действующий пароль. В заключение модули session выполняют несколько рутинных процедур. Модуль pam loginuid устанавливает атрибут процесса ядра loginuid равным идентификатору пользователя, модуль pam limits считывает лимиты использования ресурсов из файла /etc/security/limits. conf и устанавливает соответствующие параметры процесса, чтобы ввести их в действие. Модуль pam_unix2 регистрирует доступ пользователя в си- стему, а модуль pam unmask устанавливает режим создания начального файла. Модуль pam lastlog выводит время последней регистрации пользователя, а модуль pam mail — сообщение, если пользователь получил новое электронное сообщение. В заклкн чение, модуль pam ck connector уведомляет демон ConsoleKit (системный демон, управляющий сеансами регистрации) о новой регистрации. В результате пользователь был успешно аутентифицирован, и модули РАМ вернули управление программе login. 22.6. Программы с установленным битом SETUID Программы, выполняемые с установленным битом SETUID (Set User ID — сме- на идентификатора пользователя), запускаются пользователем, который считается их владельцем. Например, программа passwd должна запускаться с привилегиями супер- пользователя, чтобы иметь возможность модифицировать файл /etc/shadow, когда пользователи изменят свои пароли. Основная информация об этой функциональной возможности изложена в разделе 4.1. Программы, выполняемые с установленным битом SETUID, особенно имеющие привилегии суперпользователя, являются источником проблем для безопасности систе- мы. Тем не менее программы этой категории, поставляемые вместе с операционными системами, являются безопасными, по крайней мере теоретически. Однако огрехи в за- щите обнаруживались в прошлом и, несомненно, будут обнаруживаться в будущем. Самый надежный способ уменьшения количества проблем, вызванных сменой иден- тификатора, — сведение к минимуму числа программ с установленным битом SETUID. Подумайте дважды, прежде чем инсталлировать такую программу, и вообще избегайте устанавливать этот бит для своих программ. Выполнение программ с установленными битами SETUID и SETGID (Set Group ID — смена идентификатора группы) можно отключать в отдельных файловых систе- мах с помощью опции nosuid команды mount. Это целесообразно делать в файловых системах, содержащих начальные каталоги пользователей или смонтированные из нена- дежных административных доменов. Полезно периодически сканировать диски на предмет выявления новых программ с установленным битом SETUID. Хакер, взломавший систему, вполне может создать собственный командный SETUID-интерпретатор, который облегчит ему последующий вход в систему. Ряд программ, описанных в разделе 22.7, позволяет обнаруживать такие файлы, но вполне подойдет и простая команда find. /usr/bin/find I -user root -perm -4000 -print | /bin/mail -s "Setuid root files" netadmin В данном случае пользователю netadmin по электронной почте посылается спи- сок всех файлов, принадлежащих пользователю root и имеющих установленный бит
960 Часть II. Работа в сети SETUID. (На практике может потребоваться более конкретная информация об искомых файловых системах.) 22.7. Эффективное использование команды chroot Системный вызов chroot ограничивает процесс конкретной библиотекой. Он за- крывает доступ к файлам, расположенным за пределами каталога, и тем самым смягчает последствия, которые могут возникнуть при его взломе. Команда chroot — это простая оболочка описанного выше системного вызова. Кроме того, некоторые демоны, представляющие угрозу для безопасности системы, имеют встроенную поддержку команды chroot и должны запускаться только в этом ре- жиме, который устанавливается в их конфигурационных файлах. Эксперты по вопросам безопасности иногда косо смотрят на использование коман- ды chroot в этом контексте, поскольку они считают, что неправильное использование или неверное понимание этой команды может создать у системных администраторов иллюзию безопасности. Они жалуются, что некоторые системные администраторы ис- пользуют команду chroot, чтобы избавить себя от хлопот, связанных с использованием других инструментов для обеспечения безопасности, например регулярного обновления программного обеспечения и пристального мониторинга. Эти утверждения не точны, и в любом случае их нельзя считать приговором команде chroot. Аналогичные высказывания звучали и в адрес брандмауэров, но лишь немногие эксперты осмелятся посоветовать удалить фильтры пакетов из вашей сети. При условии правильного использования в сочетании с другими средствами безопасности команда chroot достойна включения в арсенал инструментов для защиты сети (даже если это не входило в планы ее разработчиков). Перечислим сценарии, в которых целесообразно использовать команду chroot. • Допустим, что вы хотите запустить демона без привилегий суперпользователя, на- пример Apache или BIND в ограниченном поддереве файловой системы. Если де- мон окажется взломанным, то хакер будет ограничен поддеревом, поскольку дру- гих уязвимых мест нет и эскалация привилегий не произойдет. • Предположим, что вы хотите ограничить удаленных пользователей конкретной совокупностью файлов и команд. Однако команда chroot может защитить вас в указанных сценариях только при вы- полнении следующих условий. • Все процессы в окружении chroot запускаются без привилегий суперпользова- теля. Процессы, которые запускаются с привилегиями суперпользователя, всегда способны взломать окружение chroot. • Вы не запускаете программы, выполняемые с установленным битом setuid, с правами суперпользователя. • Окружение chroot соответствует современному уровню и является минимальным, т.е. содержит только исполняемые программы, библиотеки и конфигурационные файлы, необходимые для выполнения поставленной задачи. В эпоху совместно используемых библиотек и зависимостей между процессами соз- дание описанного выше окружения chroot становится непростой задачей. Некоторые сценарии, которые могут облегчить ее решение, содержатся в пакете JailKit (olivier. sessink.nl/jailkit).
Глава 22. Безопасность 961 22.8. Инструментальные средства защиты Для решения задач, упоминавшихся в предыдущих разделах, можно использовать свободно распространяемые программы. Ниже будут рассмотрены наиболее интересные из них. Команда nmap: сканирование сетевых портов Эта команда является сканером сетевых портов. Ее основное назначение — проверка указанных компьютеров на предмет того, какие TCP- и UDP-порты на них прослушива- ются серверными программами3. За большинством сетевых служб закреплены “извест- ные” порты, поэтому такая информация позволяет узнать, какие программы выполня- ются на компьютере. Запуск команды nmap — отличный способ узнать, как выглядит система в глазах того, кто пытается ее взломать. В качестве примера приведем отчет, выданный этой командой на самом обычном, относительно незащищенном компьютере. ubuntu$ nmap -sT ubuntu.booklab.atrust.com Starting Nmap 4.20 ( http://insecure.org ) at 2009-11-01 12:31 MST Interesting ports on ubuntu.booklab.atrust.com (192.168.20.25): Not shown: 1691 closed ports PORT STATE SERVICE 25/tcp open smtp 80/tcp open http 111/tcp open rpcbind 139/tcp open netbios-ssn 445/tcp open microsoft-ds 3306/tcp open mysql Nmap finished: 1 IP address (1 host up) scanned in 0.186 seconds Аргумент -sT сообщает команде nmap о необходимости подключиться к каждому TCP-порту на указанном узле4. Как только соединение устанавливается, команда nmap немедленно отключается, что це очень корректно, зато безболезненно для правильно написанного сетевого сервера. Как следует из примера, на узле ubuntu выполняются две службы, являющихся тра- диционными источниками проблем для безопасности системы: portmap (rpcbind) и почтовый сервер (smtp). Это наиболее вероятные места для атаки хакеров. Колонка STATE (состояние) содержит запись open (открыт) для портов, с которыми связаны серверы, closed (закрыт) для портов, с которыми не связан ни один сервер, за- пись unfiltered (нефильтруемый) для портов, пребывающих в неизвестном состоянии, и запись filtered (фильтруемый) для портов, доступ к которым невозможен из-за на- личия брандмауэра. Чаще всего встречаются нефильтруемые порты. Они отображаются только при АСК-сканировании. Вот, например, результат запроса к более защищенному коммерческому веб-серверу secure .booklab. atrust. com. 3 Как объяснялось в главе 14, порт — это нумерованный канал взаимодействия. IP-адрес иден- тифицирует весь компьютер, а комбинация IP-адреса и номера порта определяет конкретный сер- вер или сетевое соединение. 4 На самом деле по умолчанию проверяются только привилегированные (их номера меньше 1024) и “известные” порты. С помощью опции -р можно явно задать диапазон сканирования.
962 Часть II. Работа в сети ubuntu$ nmap -sT secure.booklab.atrust.com Starting Nmap 4.20 ( http://insecure.org ) at 2009-11-01 12:42 MST Interesting ports on secure.booklab.atrust.com (192.168.20.35): Not shown: 1691 closed ports PORT STATE SERVICE 25/tcp open smtp 80/tcp open http Nmap finished: 1 IP address (1 host up) scanned in 0.143 seconds В данном случае очевидно, что компьютер сконфигурирован на обработку электрон- ной почты по протоколу SMTP и работу с сервером HTTP. Брандмауэр блокирует доступ к остальным портам. Помимо стандартного опроса TCP- и UDP-портов, команда nmap способна про- верять порты “по-хакерски”, не устанавливая с ними реального соединения. В боль- шинстве случаев посылаются пакеты, которые похожи на пакеты из уже имеющегося TCP-соединения (это не квитирующие пакеты), а затем проверяются полученные в от- вет диагностические пакеты. Таким способом можно обойти брандмауэр или программу мониторинга сети, которая контролирует появление сканеров портов. Если в вашей ор- ганизации имеется брандмауэр (см. раздел 22.11), не поленитесь проверить его в разных режимах сканирования. Команда nmap обладает магической способностью угадывать, какая операционная система установлена на удаленном узле. Это делается путем анализа деталей реализации стека TCP/IP. Чтобы проверить работу команды nmap в этом режиме, воспользуйтесь опцией -О, например. ubuntu$ sudo nmap -sV -О secure.booklab.atrust.com Starting Nmap 4.20 ( http://insecure.org ) at 2009-11- 1 12:44 MST Interesting ports on secure.booklab.atrust.com (192.168.20.35) : Not shown: 1691 closed ports PORT STATE SERVICE VERSION 25/tcp open smtp Postfix smtpd 80/tcp open http lighttpd 1.4.13 Device type: general purpose Running: Linux 2.4.X|2.5.X|2.6.X OS details: Linux 2.6.16 - 2.6.24 Nmap finished: 1 IP address (1 host up) scanned in 8.095 seconds Эта возможность может оказаться весьма полезной при анализе состояния локаль- ной сети. К сожалению, она же является рабочим инструментом хакеров, которые могут определить тип атаки на основании известных слабых мест конкретных операционных систем или серверов. Не забывайте также, что большинство администраторов не приветствуют попыток сканирования сети и выяснения ее слабых мест, какими бы благородными ни были мо- тивы. Никогда не запускайте команду nmap в чужой сети без разрешения сетевого адми- нистратора. Nessus: сетевой сканер следующего поколения В 1998 году Рено Дерезон (Renaud Deraison) выпустил интересный пакет Nessus, в котором реализуются многие функциональные возможности сканера. Он использует бо- лее 31000 надстроек для проверки локальных и удаленных дефектов. Несмотря на то что
Глава 22. Безопасность 963 эта программа имеет закрытый код и является коммерческим продуктом, она свободно распространяется и для нее регулярно появляются новые надстройки. Это наиболее ши- роко распространенный и полный из доступных сканеров. Программа Nessus — это сетевой сканер, который ничему не доверяет. Вместо того чтобы предполагать, к примеру, будто все веб-серверы работают через порт 80, он ищет веб-серверы на любом порту, а затем анализирует их слабые места. Программа не дове- ряет даже номеру версии, о котором сообщает сам сервер, проверяя все известные сла- бые места, чтобы понять, насколько уязвим сервер. Для первого запуска программы Nessus требуется потратить немало усилий (необхо- димо установить много пакетов, которые не входят в стандартный дистрибутив), но ко- нечный результат того стоит. Система Nessus состоит из клиента и сервера. Сервер игра- ет роль базы данных, а клиент отвечает за графический пользовательский интерфейс. Серверы и клиенты могут работать на платформах UNIX или Windows. Одним из главных преимуществ программы Nessus является ее модульная структу- ра, позволяющая сторонним разработчикам добавлять собственные модули проверки. Благодаря активности сообщества ее пользователей, эта программа сможет быть полез- ной долгое время. John the Ripper: средство для выявления слабых паролей Один из способов пресечь использование плохих паролей заключается в том^ что- бы самостоятельно взломать пароль и заставить пользователя выбрать другой. John the Ripper — это сложная программа, разработанная компанией Solar Designer, которая ре- ализует разные алгоритмы взлома паролей в виде единого инструмента. Она заменила программу crack, которая была описана в предыдущем издании книги. Несмотря на то что большинство систем использует файл теневых паролей, чтобы скрыть зашифрованные пароли от публики, целесообразно проверять, что пароли поль- зователей являются устойчивыми ко взлому.5 Знание пароля пользователя может ока- заться полезным, потому что люди предпочитают все время использовать один и тот же пароль. Единственный пароль может обеспечить доступ к другой системе, зашифровать файлы, хранящиеся в рабочем каталоге, и открыть доступ к финансовым счетам в сети веб. (Не стоит и говорить, что использовать пароль таким способом очень глупо. Однако никто не хочет запоминать десять разных паролей.) Несмотря на свою внутреннюю сложность, программа John the Ripper весьма проста в использовании. Достаточно просто нацелить программу john на файл, подлежащий взлому, чаще всего /etc/shadow, и произойдет чудо. $ sudo ./john /etc/shadow Loaded 25 password hashes with 25 different salts (FreeBSD MD5 [32/32]) password (jsmith) badpass (tjones) В этом примере из теневого файла были считаны 25 уникальных паролей. После взлома пароля программа John выводит его на экран и сохраняет в файл john.pot. Этот вывод содержит пароль в левом столбце и регистрационное имя в скобках в правом столбце. Для просмотра паролей после завершения работы программы john, следует вы- полнить ту же самую команду с аргументом -show. 5 Особенно это относится к паролям системных администраторов, имеющих привилегии sudo.
964 Часть II. Работа в сети На момент написания книги самой новой версией программы John the Ripper была версия 1.7.З.4. Она доступна на сайте openwall. сот/john. Поскольку вывод програм- мы содержит взломанные файлы, его следует тщательно охранять и удалять сразу после проверки, убедившись, что пароли пользователей являются небезопасными. Как и для большинства других методов мониторинга безопасности, перед взломом паролей с помощью программы John the Ripper необходимо получить одобрение руко- водства. Команда hosts_access: управление доступом к узлу Брандмауэры сети являются первой линией защиты от доступа со стороны неавто- ризованных узлов, однако они не должны быть единственным средством защиты. Два файла, /etc/hosts.allow и /etc/hosts.deny, также являются оболочками прото- кола TCP, которые могут ограничивать доступ к службам для генерирования сетевых запросов. Файл hosts .allow содержит список узлов, которым разрешено соединять- ся с конкретной службой, а файл hosts. deny ограничивает доступ. Однако эти фай- лы управляют доступом только к службам, которые знают о существовании команды hosts_access, например к службам, управляемым демонами inetd, xinetd, sshd и некоторыми конфигурациями программы sendmail. В большинстве ситуаций разумно установить ограничения и разрешить доступ только к службам, играющим важную роль для указанных узлов. Мы рекомендуем отключить доступ, установленный по умолчанию в файле hosts. deny, с помощью одной строки. ALL:ALL Затем вы можете разрешить доступ в конкретных ситуациях с помощью файла hosts .allow. Следующая конфигурация разрешает доступ к системе SSH с узлов сети 192.168/16, а также к агенту sendmail отовсюду. sshd: 192.168.0.0/255.255.0.0 sendmail: ALL Формат записи в файле имеет вид служба: узел или служба: сеть. Соединения, кото- рым отказано в доступе, перечисляются в журнале syslog. Соединения, которым не был разрешен доступ к службе, немедленно закрываются. Большинство дистрибутивных пакетов системы Linux по умолчанию содержит файлы hosts. allow и hosts. deny, но, как правило, они пустые. Другие рассмотренные нами операционные системы после инсталляции предлагают использовать оболочки TCP. Bro: программная система для распознавания вторжения в сеть Открытая система Вго предназначена для распознавания вторжений в сеть (network intrusion detection system — NIDS). Она выполняет мониторинг сети и следит за подо- зрительной активностью. Эта система была написана Верном Паксоном (Vem Paxson) и доступна на сайте bro-ids. org. Система Bro проверяет весь трафик, поступающий в сеть и исходящий из нее. Она может функционировать в пассивном режиме, генерируя предупреждения о подозритель- ной активности, или в активном режиме, в котором она пресекает враждебные действия. Оба режима, скорее всего, потребуют внесения изменений в конфигурацию вашей сети. В отличие от других систем NIDS, система Вго отслеживает потоки трафика, а не просто сопоставляет образцы внутри отдельных пакетов. Это значит, что система Вго
Глава 22. Безопасность 965 может распознавать подозрительную активность, основываясь на информации о том, кто с кем говорит, даже не сравнивая никаких строк или шаблонов. Например, система Вго может решать следующие задачи. • Распознавать системы, использующие “мостики” (“stepping stones”), определяя корреляцию между входящим и исходящим трафиками. • Распознавать сервер, имеющий лазейку, инсталлированную для неожиданных ис- ходящих соединений сразу после входящего соединения. • Распознавать протоколы, выполняемые на нестандартных портах. • Сообщать о правильно угаданных паролях (и игнорировать неправильные догадки). Некоторые из этих функциональных возможностей требуют существенных систем- ных ресурсов, но система Вго имеет поддержку кластеризации, облегчающую управле- ние группами машин, распознающих вторжение. Система Вго имеет сложный язык конфигурации, требующий значительного опыта кодирования. К сожалению, в системе нет конфигурации, заданной по умолчанию, ко- торую было бы легко инсталлировать новичкам. Большинство сайтов требует умеренно- го уровня настройки. Система до некоторой степени поддерживается Группой сетевых исследований Международного института компьютерных наук (Networking Research Group of the International Computer Science Institute (ICSI)), но в большей степени она поддерживает- ся сообществом ее пользователей. Если вы ищете готовую коммерческую систему NIDS, то, вероятно, будете разочарованы системой Вго. Однако она может делать то, что не доступно коммерческим системам NIDS, и может служить дополнением или заменой коммерческого продукта. Snort: популярная программная система для распознавания проникновения в сеть Открытая система Snort предназначена для предотвращения и распознавания не- санкционированного проникновения в сеть; написана Марти Решем (Marty Roesch) и в настоящее время поддерживается коммерческой компанией Sourcefire (snort. org). Она де-факто стала стандартом для кустарных систем NIDS, а также основной для многих коммерческих реализаций систем NIDS с “управляемыми услугами”. Сама по себе система Snort распространяется как пакет с открытым кодом. Однако компания Sourcefire взимает плату за подписку на доступ к новейшим правилам рас- познавания. Большое количество платформ, созданных сторонними производителями, включают в себя или экспортируют систему Snort, причем некоторые из этих проектов являют- ся программами с открытым кодом. Ярким примером является проект Aanval (aanval. com), собирающий данные от многочисленных датчиков системы Snort на веб-консоль. Система Snort перехватывает пакеты из кабеля и сравнивает их с наборами правил, которые называются сигнатурами. Когда система Snort распознает событие, которое представляет интерес, она может предупредить системного администратора или устано- вить контакт с сетевым устройством и, помимо прочего, заблокировать нежелательный трафик. Несмотря на то что система Вго намного мощнее, система Snort намного проще и легче конфигурируется, благодаря чему является удачным выбором для стартовой плат- формы NIDS.
966 Часть II. Работа в сети OSSEC: система для распознавания вторжения в сеть на уровне узла Мучались ли вы бессонницей из-за опасения, что ваша система безопасности сети будет взломана? Не предполагали ли вы, что ваш рассерженный сотрудник может ин- сталлировать вредоносную программу в ваших системах? Если на один из этих вопросов вы ответили положительно, то подумайте над инсталляцией системы для распознавания проникновения на уровне узла (HIDS), такой как OSSEC. Система OSSEC — это свободное программное обеспечение, доступное в виде от- крытого кода по лицензии GNU (General Public License). Ее коммерческая поддерж- ка обеспечивается компанией Third Brigade (недавно приобретенной компанией Trend Micro). Система OSSEC имеет версии для систем Linux, Solaris, HP-UX, AIX и Windows. Она обеспечивает следующие функциональные возможности. • Распознавание руткитов. • Проверка целостности файловой системы. • Анализ регистрационных файлов. • Выдача сигналов по расписанию. • Активные реакции. Система OSSEC работает в заданной операционной системе и отслеживает ее актив- ность. Она может выдавать сигналы или предпринимать действия, предусмотренные на- бором правил, которые устанавливает пользователь. Например, система OSSEC может выполнять мониторинг операционных систем с целью выявления добавления неавто- ризованных файлов и посылать по электронной почте уведомления, похожие на при- веденное ниже. Subject: OSSEC Notification - courtesy - Alert level 7 Date: Fri, 15 Jan 2010 14:53:04 -0700 From: OSSEC HIDS <ossecm@courtesy.atrust.com> To: <courtesy-admin@atrust.com> OSSEC HIDS Notification. 2010 Jan 15 14:52:52 Received From: courtesy->syscheck Rule: 554 fired (level 7) -> "File added to the system." Portion of the log(s): New file ’/courtesy/httpd/barkingseal.com/html/wp-content/uploads/2010/01/hbird.jpg’ added to the file system. —END OF NOTIFICATION Таким образом, система OSSEC работает круглосуточно, следя за операционной си- стемой. Мы рекомендуем запускать эту систему на каждой операционной системе, одно- временно изменяя политику управления (см. главу 32). Основные принципы системы OSSEC Система OSSEC состоит из двух основных компонентов: менеджера (сервера) и аген- тов (клиентов). В сети нужен один менеджер, который необходимо инсталлировать пер- вым. Менеджер хранит базу данных для проверки целостности файловой системы, реги-
Глава 22. Безопасность 967 страционные журналы, события, декодеры, основные варианты конфигурации, а также записи об аудите системы для всей сети. Менеджер может соединяться с любым агентом OSSEC, независимо от его операционной системы. Менеджер также может отслеживать работу определенных устройств, которые не имеют специального агента OSSEC. Агенты работают в системах, которые подвергаются мониторингу, и сообщают ин- формацию менеджеру. Они имеют маленькую зону обслуживания и оперируют неболь- шим объемом привилегий. Большую часть конфигурации агент получает от менеджера. Соединение между сервером и агентом зашифровано и аутентифицировано. Для каждо- го агента менеджер должен создать отдельный ключ аутентификации. Система OSSEC классифицирует серьезность сигналов по уровням от 0 до 15; число 15 соответствует высшему уровню опасности. Инсталляция системы OSSEC Система OSSEC еще не стала частью основных дистрибутивных пакетов операци- онных систем UNIX и Linux, даже в качестве вспомогательного пакета. По этой причи- не вы должны загрузить пакет исходного кода в веб-браузер или инструмент, такой как wget, а затем собрать программу. $ wget http://ossec.net/files/ossec-hids-latest.tar.gz $ tar -zxvf ossec-hids-latest.tar .gz $ cd ossec-hids-* $ sudo ./install.sh Сценарий инсталляции спрашивает, какой язык вы предпочитаете (например, “еп” для английского) и какой тип инсталляции хотите выполнить — серверный, агент- ский или локальный. Если вы инсталлируете систему OSSEC в отдельной, персонально управляемой операционной системе, следует выбрать локальный тип инсталляции. В противном случае сначала следует выполнить инсталляцию сервера OSSEC в предназна- ченной для этого операционной системе, а затем инсталляцию агента во всех остальных системах, которые будут предметом мониторинга. Сценарий инсталляции тоже задает несколько дополнительных вопросов, например, по какому адресу посылать уведомле- ния и какие модули мониторинга следует подключить. После завершения инсталляции запустите chctcm^OSSEC с помощью следующей команды. server$ sudo /var/ossec/bin/ossec-control start Затем зарегистрируйте каждого агента у менеджера. Находясь на сервере, выполните следующую команду. server$ sudo /var/ossec/bin/manage__agents Вы увидите меню, которое будет выглядеть примерно так. **************************************** * OSSEC HIDS v2.3 Agent manager. * The following options are available: * *************************************** (A) dd an agent (A) . (E)xtract key for an agent (E) . (L)ist already added agents (L). (R)emove an agent (R). (Q)uit. Choose your action: A,E,L,R or Q:
968 Часть II. Работа в сети Выберите пункт А, чтобы добавить агента, а затем наберите имя и IP-адрес этого агента. Затем выберите пункт Е и извлеките ключ агента. Вот как это выглядит. Available agents: ID: 001, Name: linuxclientl, IP: 192.168.74.3 Provide the ID of the agent to extract the key (or ’\q' to quit) : 001 Agent key information for *001’ is: MDAyIGxpbnV4Y2xpZW50MSAxOTIuMTY4LjcOLjMgZ jk4YjMyYzlkMjg5MWJlMT В заключение зарегистрируйте в системе агента и выполните команду manage_ agents. agent $ sudo /var/ossec/bin/manage_agents Находясь на компьютере клиента, вы увидите меню с другими пунктами. **************************************** * OSSEC HIDS v2.3 Agent manager. * The following options are available: **************************************** (I)mport key from the server (I) . (Q)uit. Choose your action: I or Q: Выберите пункт I, а затем вырежьте и вставьте ключ, который был извлечен ранее. После того как добавите агента, вы должны заново запустить сервер OSSEC. Повторите процесс генерирования ключа, его извлечение и инсталляцию каждого агента, с кото- рым хотите установить связь. Конфигурация системы OSSEC После инсталляции и запуска системы OSSEC вы захотите настроить ее так, чтобы она выдавала достаточный объем информации, но не слишком большой. Большая часть конфигурации хранится на сервере в файле /var/ossec/etc/ossec.conf. Это XML- подобный файл, который подробно прокомментирован и вполне понятен, хотя и содер- жит десятки параметров. Чаще всего необходимо конфигурировать список файлов, которые следует игнори- ровать при проверке целостности (наличия изменений) файла. Например, если у вас есть приложение, записывающее свой регистрационный файл в каталог /var/log/ customapp.log, то вы можете добавить следующую строку в раздел <syscheck> этого файла. <syscheck> <ignore>/var/log/customapp.log</ignore> </syscheck> После того как внесете эти изменения и заново запустите сервер OSSEC, система OSSEC прекратит выдавать сообщения при каждом изменении регистрационного фай- ла. Многие параметры конфигурации системы OSSEC описаны в файле ossec.net/ main/manual/configuration-options. Для того чтобы запустить и настроить систему HIDS, требуется затратить много вре- мени и усилий. Но через несколько недель вы отфильтруете шум и система станет вы- давать ценную информацию об изменяющихся условиях в вашем окружении.
Глава 22. Безопасность 969 22.9. Мандатное управление доступом Мандатное управление доступом (Mandatory Access Control — МАС) представляет собой альтернативу традиционному механизму управления доступом в системе UNIX, который передает управление всеми разрешениями в руки администратора по безопас- ности. В противоположность стандартной модели, описанной в главах 4 и 6, система МАС не позволяет пользователям модифицировать никакие разрешения, даже для своих собственных объектов. Стратегия безопасности в системе МАС управляет доступом в соответствии со степе- нью конфиденциальности управляемого ресурса. Пользователям присваиваются опреде- ленные уровни доступа, образующие структурную иерархию. Пользователи могут читать и записывать информацию, относящуюся к их уровню доступа или более низкому^ ио не имеют доступа к объектам, имеющим более высокую степень конфиденциальности. Например, пользователь с уровнем доступа “секретный” не может читать документы, классифицированные как совершенно секретные. Хорошо реализованная стратегия системы МАС основывается на принципе мини- мальных привилегий (т.е. разрешает доступ только при необходимости), точно так как правильно спроектированные брандмауэры пропускают только знакомые службы и кли- ентов. Система МАС может предотвратить взлом системы через уязвимое программное обеспечение (например, из-за переполнения буфера), ограничивая область их влияния лишь несколькими конкретными ресурсами, необходимыми для данной программы. >*• Очевидно, что для реализации механизма МАС в операционных системах UNIX h Linux необходимо внести изменения в ядро. В рассмотренных нами системах семейства UNIX (Solaris, HP-UX и AIX) версии с внедренным механизмом МАС предоставляют- ся за дополнительную плату. Эти версии называются Solaris Trusted Extensions (бывшая Trusted Solaris), HP-UX Security Cotttamment и Trusted AIX соответственно. Если вы не работаете с секр^ЙйЙ^Г правительственными документами, то вряд ли вам понадобятся эти версии. Система Linux с усиленной системой безопасности (SELinux) Система SELinux (Security-enhanced Linux) — это вариант системы Linux, в котором реализован механизм МАС. Несмотря на то что в некоторых дистрибутивных пакетах эта система стала основной, она стала печально известной из-за трудностей в управле- нии и ошибок. Приведем безымянную цитату из страницы Википедии, посвященной ранней версии системы SELinux, в которой отражено отчаяние многих системных адми- нистраторов. “Как ни странно, несмотря на то, что система SELinux разрабатывалась для того, чтобы облегчать создание стратегий индивидуального управления доступом, специально приспособленных к способам и правилам хранения данных в организациях, вспомогатель- ные программные средства настолько скудны и неудобны, что поставщики преимуще- ственно ограничиваются консультациями, которые обычно принимают вид нарастаю- щих модификаций стандартных стратегий безопасности.” Несмотря на сложность в управлении системой SELinux, ее адаптация постепенно увеличивается, особенно в правительственных учреждениях, в которых приняты стро- гие правила безопасности. В рассмотренных нами примерах дистрибутивных пакетов
970 Часть II. Работа в сети системы Linux самую совершенную модель SELinux имел пакет Red Hat Enterprise Linux. Механизм SELinux доступен как вспомогательный пакет для систем Ubuntu и SUSE. Разработка стратегии — сложная тема. Для защиты нового демона, например, не- обходимо тщательно пронумеровать все файлы, каталоги и другие объекты, к которым другие объекты имеют доступ. Для сложного программного обеспечения, такого как sendmail или Apache httpd, эта задача может оказаться довольно сложной. По крайней мере одна компания предлагает трехдневный тренинг по разработке стратегий. К счастью, многие общие стратегии доступны в Интернете, и большинство дис- трибутивных пакетов имеет разумные решения, принятые по умолчанию. Их легко ин- сталлировать и конфигурировать для конкретной среды. Полноценный редактор стра- тегий, предназначенный для их легкой реализации, можно найти на сайте seedit. sourceforge.net. Механизм SELinux встроен в систему Red Hat Enterprise Linux начиная с версии 4. По умолчанию инсталляция системы RHEL включает готовую защиту SELinux. Конфигурацией системы SELinux управляет файл /etc/selinux/conf ig. Интерес представляют следующие строки. SELINUX=enforcing SELINUXTYPE=targeted Первая строка имеет три возможных значения: enforcing, permissive или disabled. Значение enforcing гарантирует применение загружаемых правил и за- прещает их нарушение. Значение permissive разрешает нарушать правила, но реги- стрирует нарушения в журнале с помощью системы syslog, что оказывается полезным для отладки. Значение disabled вообще отключает механизм SELinux. Параметр SELINUXTYPE означает тип применяемой стратегии. Система Red Hat реализует две стратегии: targeted, которая определяет дополнительный уровень безопасности для демонов, которых защищает система Red Hat6, и strict, которая защищает всю систе- му. Несмотря на доступность стратегии strict, в системе Red Hat она не поддержива- ется; ее ограничения настолько сильны, что системе их трудно применять. Стратегия targeted предоставляет защиту для важных сетевых демонов без влияния на систему в целом, по крайней мере, теоретически. Однако даже стратегия targeted не является идеальной. Если у вас есть проблемы со вновь установленным программным обеспече- нием, поищите в файле /var/log/messages сообщения об ошибках системы SELinux. Система SUSE использует реализацию механизма МАС, выполненную компа- • нией Novell и получившую имя АррАгтог. Однако в версии 11.1 система SUSE также включает основные функциональные возможности механизма SELinux. ©Система Ubuntu по умолчанию поставляется с механизмом АррАгтог. Пакеты SELinux для систем Ubuntu поддерживаются Расселом Кокером (Russell Coker), бывшим сотрудником компании Red Hat, разработавшим стратегии targeted и strict. 22.10. Системы криптографической защиты Большинство широко используемых в системах UNIX сетевых протоколов было соз- дано до широкого распространения Интернета и до изобретения современных крипто- графических систем. При проектировании многих протоколов о безопасности просто не 6 Защищаемыми демонами являются httpd, dhcpd, mailman, named, portmap, nscd, ntpd, mysqld, postgres, squid, winbindd и ypbind.
Глава 22. Безопасность 971 думали. Там же, где она якобы учитывалась, реализованные механизмы дискредитиру- ются передачей паролей в незашифрованном виде или отсутствием проверки на надеж- ность компьютера или порта, от которого поступил пакет. Сегодня эти протоколы эксплуатируются в кишащих хакерами крупных корпора- тивных локальных сетях и Интернете, где весь трафик открыт для прослушивания. Более того, любой может вмешаться в сетевой диалог. Как удостовериться в личности собеседника? Криптография — это решение многих проблем. Давным-давно существовала возмож- ность шифровать сообщения так, чтобы даже в случае перехвата их нельзя было прочи- тать, но это лишь одно из чудес криптографии. Такие разработки, как шифрование с открытым ключом и защитное хеширование, сделали возможным построение криптоси- стем, удовлетворяющих самым строгим требованиям. Тем, кого интересуют вопросы криптографии, рекомендуем обратиться к документу “RSA Labs’ Frequently Asked Questions about Today’s Cryptography” (rsa. com/rsalabs). Несмотря на название, это объемистый трактат, который можно загрузить в формате PDF. Этот документ не обновлялся с 2000 года, но большая часть его содержания все еще не потеряла актуальности. Кроме того, историю криптографии можно подробно изучить по книге Стивена Леви (Stephen Levy) Crypto. Kerberos: унифицированный подход к сетевой безопасности Система Kerberos, разработанная в Массачусетсском технологическом институте (MIT), ориентирована на решение задач, связанных с обеспечением безопасности ком- пьютерных сетей. Kerberos — это система аутентификации, предоставляющая “гаран- тию” того, что пользователи и служебные программы действительно являются теми, за кого себя выдают. Никаких дополнительных проверок и шифрования передаваемых данных не предусмотрено. Используя алгоритм DES, Kerberos создает вложенные наборы идентификаторов, на- зываемых билетами или мандатами. Мандаты передаются по сети с целью подтверждения личности пользователя и предоставления ему доступа к сетевым службам. В каждой орга- низации, где используется Kerberos, должен выделяться хотя бы один физически защищен* ный компьютер (называемый сервером аутентификации) для выполнения демона Kerberos. Этот демон выдает мандаты пользователям и служебным программам, требующим аутенти- фикации, на основании предъявляемых ими “удостоверений”, в частности паролей. По сути, Kerberos улучшает традиционную схему парольной защиты всего двумя спо- собами: пароли никогда не передаются по сети в незашифрованном виде и пользователи избавляются от необходимости многократно вводить пароли. Сообщество пользователей Kerberos может похвастаться одним из самых толко- вых и оригинальных документов, посвященных криптосистемам, — “Designing ап Authentication System: a Dialogue in Four Scene” (Проектирование системы аутентифика- ции: диалог в четырех актах) Билла Брайанта (Bill Bryant). Его будет интересно почитать любому, кто интересуется темой криптографии. Документ можно найти по адресу: web.mit.edu/kerberos/www/dialogue.html Лучше использовать Kerberos, чем вообще отказаться от средств защиты. К сожале- нию, Kerberos нельзя назвать полностью безопасной системой, а ее инсталляция и за- пуск — не самое приятное занятие. В то же время она не заменяет собой ни одну из про- грамм, описанных в данной главе.
972 Часть II. Работа в сети К сожалению, (хотя, возможно, вполне предсказуемо) система Kerberos, распростра- няемая как часть службы Active Directory системы Windows, использует запатентованные, недокументированные расширения. Как следствие, она плохо взаимодействует с тра- диционной версией системы. К счастью, модуль winbind позволяет системам UNIX и Linux взаимодействовать с версией системы Kerberos для службы Active Directory. Более подробную информацию о настройке системы Kerberos можно найти в разделе 30.9. PGP: высокая конфиденциальность Пакет PGP (Pretty Good Privacy), написанный Филом Циммерманом (Phil Zimmer- mann), содержит криптографические утилиты, ориентированные, в основном, на безо- пасность систем электронной почты. Он используется для шифрования данных, генери- рования сигнатур и проверки источников происхождения файлов и сообщений. 03 Более подробная информация о защите электронной почты приведена в разделе 20.6. Пакет PGP имеет интересную историю, которая включает в себя судебные иски, кри- минальные расследования и приватизацию фрагментов исходного пакета PGP. В настоя- щее время формат файла и протоколы PGP стандартизованы организацией IETF под име- нем OpenPGP, и уже существует несколько реализаций предложенного стандарта. Проект GNU обеспечивает превосходную, свободную и широко применяемую реализацию под на- званием GnuPG, которую можно найти по адресу gnupg. org. Для ясности, мы будем назы- вать эту систему просто PGP, даже если ее отдельные реализации имеют другие названия. Вероятно, PGP — наиболее популярная криптографическая программа. К сожале- нию, для того чтобы работать с ней в системе UNIX/Linux, нужно быть специалистом в области криптографии. Пакет PGP может оказаться полезным, но мы не рекоменду- ем заставлять пользователей работать с ним из-за нетривиальности процесса обучения. Гораздо удобнее использовать Windows-версию PGP, чем команду рдр с ее 52 различны- ми режимами работы. Программные пакеты, распространяемые через Интернет, часто содержат файл сиг- натуры PGP, подтверждающий их подлинность и целостность. Но проверить эти сигна- туры не так-то легко людям, не являющимся фанатиками PGP. Не потому, что процесс проверки сложен, а потому, что при использовании PGP истинная безопасность дости- гается только путем создания персональной коллекции открытых ключей тех людей, ко- торые были проверены напрямую. Загрузка дистрибутива с открытым ключом и файлом сигнатуры безопасна примерно в той же степени, что и загрузка одного дистрибутива. Некоторые почтовые клиенты, такие как Mozilla Thunderbird, имеют надстройки, обеспечивающие простой графический пользовательский интерфейс для зашифро- ванных входящих и исходящих сообщений. Программа Enigmail для клиента Mozilla Thunderbird может даже выполнять поиск баз открытых ключей в сети, если ключ для вашего получателя еще не был загеристрирован. Подробности можно найти на сайте enigmail.mozdev.org. SSH: безопасная оболочка Система SSH (Secure Shell) является безопасной заменой утилит rlogin, гср и telnet. Она использует криптографическую аутентификацию для подтверждения личности пользователя и шифрует любые соединения между двумя компьютерами. Протокол, используемый системой SSH, разрабатывался для противодействия ряду воз- можных атак. Он уже подробно описан в документах RFC4250—4256 и предложен орга- низацией IETFb качестве стандарта.
Глава 22. Безопасность 973 Пакет SSH трансформировался из свободно распространяемой открытой системы (SSH1) в коммерческий продукт с немного иным (более надежным) протоколом (SSH2). К счастью, сообщество разработчиков открытых систем взяло ситуацию под контроль и выпустило пакет OpenSSH (поддерживаемый операционной системой OpenBSD), в ко- тором реализованы оба протокола. Основными компонентами пакета SSH являются серверный демон sshd и две ути- литы пользовательского уровня: ssh предназначена для удаленной регистрации и scp — для копирования файлов. Среди остальных компонентов отметим команду ssh-keygen, генерирующую пары открытых ключей, и несколько утилит, необходимых для поддерж- ки безопасных серверов X Windows. Демон sshd способен аутентифицировать пользователей различными способами. Выбор остается за администратором. • Метод А. Если имя удаленного компьютера, с которого регистрируется пользо- ватель, указано в файле */. rhosts, ~/. shosts, /etc/hosts. equiv или /etc/ shosts. equiv, то пользователь автоматически получает доступ в систему без про- верки пароля. Подобная схема моделирует работу старого демона rlogind и, по нашему мнению, неприемлема для широкого применения. • Метод Б. В дополнение к методу А, демон sshd может применять шифрование с открытым ключом для проверки адреса удаленного компьютера. Для того что- бы это произошло, открытый ключ компьютера (генерируется при инсталляции пакета) должен находиться в файле /etc/ssh_known_hosts локального узла или в файле ~/. ssh/known_hosts пользователя. Если удаленный компьютер предо- ставляет соответствующий секретный ключ (обычно хранится в файле /etc/ssh_ host_key, который недоступен для чтения рядовым пользователям), то пользова- телю разрешается войти в систему без проверки пароля. Мы полагаем, что данный метод сильнее, чем метод А, но все же недостаточно безопасен. Если удаленный компьютер взломан, локальная система также окажет- ся под угрозой. • Метод В. Демон sshd может применять шифрование с открытым ключом для идентификации самого пользователя. На этапе регистрации пользователь должен иметь доступ к файлу своего секретного ключа и предоставить пароль для его де- шифровки. Ключ можно также создать без пароля, что является разумным реше- нием для автоматической регистрации из удаленных систем. Этот метод самый безопасный, но он утомляет пользователей. Кроме того, он де- лает невозможной регистрацию в системе мобильных пользователей, если толь- ко они не возят с собой копию файла с секретным ключом (возможно, на USB- ключе, который должен быть зашифрован). Если вы решили использовать пару ключей, широко используйте команду ssh -v в процессе поиска ошибок. • Метод Г. Наконец, демон sshd может просто попросить пользователя ввести свой регистрационный пароль. Это напоминает утилиту telnet, за исключением того, что пароль и все данные, передаваемые в ходе сеанса, подвергаются шифрованию. Основной недостаток этого метода заключается в том, что пароли оказываются относительно слабыми (часто их длина ограничена 8 символами) и есть готовые программы (например, crack) для взлома таких паролей. Тем не менее этот метод, как правило, лучше всего подходит для повседневного использования.
974 Часть II. Работа в сети Правила аутентификации задаются в файле /etc/sshd_config. Он уже заполнен разного рода конфигурационным, “мусором”, большую часть которого можно проигно- рировать. Параметры, касающиеся аутентификации, перечислены в табл. 22.2. Таблица 22.2. Параметры аутентификации, задаваемые в файле /etc/sshd_config Параметр' Метод* Поумол- чанию - Назначение RhostsAuthentication A no Разрешает регистрацию через файлы ~/.shosts, /etc/shosts.equiv и т.п. RhostsRSAAuthentication Б yes Разрешает регистрацию через файл ~/.shosts и другие, но также требует от компьютера предо- ставить ключ IgnoreRhosts А, Б no Задает игнорирование файлов ~/.rhosts и hosts, eq uiv6 IgnoreRootRhosts А, Б noB Запрещает аутентификацию пользователя root через файлы .rhosts и .shosts RSAAuthentication В yes Разрешает аутентификацию пользователей по ме- тоду шифрования с открытым ключом PasswordAuthentication Г yes Разрешает использование обычных регистрацион- ных паролей а Методы аутентификации, к которым относится параметр. 6 Файлы ~/.shosts и shosts.equiv продолжают использоваться. в По умолчанию равен значению параметра IgnoreRhosts. Рекомендуемая нами конфигурация, в которой разрешаются методы В и Г, но не А и Б, такова. RhostsAuthentication по RhostsRSAAuthentication по RSAAuthentication yes PasswordAuthentication yes Никогда не следует разрешать суперпользователю регистрироваться в удаленном ре- жиме. Доступ суперпользователя должен осуществляться только с помощью команды sudo. Для того чтобы установить этот режим, используйте следующий параметр. PermitRootLogin по Когда вы впервые устанавливаете соединение с новой системой посредством прото- кола SSH, вам предложат принять открытый ключ для доступа к удаленному узлу (ко- торый обычно генерируется в процессе инсталляции системы OpenSSH или сразу по- сле этого). Настоящий параноик может проверить его вручную, но большинство из нас слепо доверяют этому ключу и сохраняют его в файле ~/. ssh/known_hosts. Протокол SSH больше не вспоминает о серверном ключе, пока он не изменится. К сожалению, не- брежность пользователей по отношению к ключам новых систем делает их уязвимыми для атак злоумышленников, если ключ на самом деле был предоставлен системой хакера. Для устранения этого недостатка была изобретена запись DNS, получившая название SSHFP. В ее основе лежит предположение, что серверный ключ хранится в виде записи DNS. Когда клиент соединяется с неизвестной системой, протокол SSH ищет запись SSHFP, чтобы самостоятельно проверить ключ сервера, а не полагаться на пользователя. Утилита sshfp, доступная на сайте xelerance.com/software/sshfp, генериру- ет записи SSHFP DNS, либо сканируя удаленный сервер, либо выполняя анализ ранее
Глава 22. Безопасность 975 принятого ключа из файла known_hosts. (Разумеется, в любом случае предполагает- ся, что источник ключа известен и заслуживает доверия.) Использование этой утили- ты не представляет трудностей: для генерирования ключа на основе сканирования сети применяется флаг -s, а для анализа файла known__hosts — флаг -к (по умолчанию). Например, следующая команда генерирует BIND-совместимую запись SSHFP для до- мена Solaris.booklab.atrust.com. Solaris$ sshfp solaris.booklab.atrust.com solaris.booklab.atrust.com IN SSHFP 1 1 94a26278ee713a37f 6a78110f lad9bd... solaris.booklab.atrust.com IN SSHFP 2 1 7cf72d02e3d3fa947712bc56fd0e0a3i... Добавьте эти записи в зонный файл домена (будьте осторожны с именами и коман- дой $ORIGIN), перезагрузите домен и примените команду dig для верификации ключа. solaris$ dig solaris.booklab.atrust.com. IN SSHFP | grep SSHFP ; «» DiG 9.5.1-P2 «» solaris.booklab.atrust.com. IN SSHFP ; solaris.booklab.atrust.com. IN SSHFP solaris.booklab.atrust.com. 38400 IN SSHFP 1 1 94a26278ee713a37f6a78110f... solaris.booklab.atrust.com. 38400 IN SSHFP 2 1 7cf72d02e3d3fa947712bc56f... По умолчанию утилита ssh не проверяет записи SSHFP. Для того чтобы заставить ее сделать это, добавьте параметр VerifyHostKeyDNS в файл конфигурации /etc/ssh/ ssh_conf ig. Как и в большинстве случаев, связанных с использованием параметров клиента SSH, при первом обращении к системе вы можете также указать в командной строке аргумент-о "VerifyHostKeyDNS yes”. Утилита SSH имеет много вспомогательных функций, полезных для системных ад- министраторов. Одна из них позволяет безопасно туннелировать соединения TCP с по- мощью зашифрованного канала SSH, тем самым разрешая устанавливать соединения с небезопасными или защищенными брандмауэрами службами на удаленных сайтах. Эта функциональная возможность повсеместно предоставляется клиентам протокола и допу- скает простое конфигурирование. На рис. 22.1 показано типичное использование тунне- ля SSH. Этот рисунок должен помочь разобраться в принципах его функционирования. Рис. 22.1. Туннель SSH для RDP-соединения В этом сценарии удаленный пользователь желает установить RDP-соединение (уда- ленная настольная система) с системой Windows, входящей в корпоративную сеть. Доступ к этому узлу или порту 3389 блокируется брандмауэром, но поскольку пользо- ватель имеет доступ по протоколу SSH, он может маршрутизировать свое соединение через сервер SSH.
976 Часть II. Работа в сети Для того чтобы установить соединение через сервер SSH, пользователь должен заре- гистрироваться на удаленном сервере SSH с помощью команды ssh. В командной строке ssh он должен указать произвольный, но конкретный локальный порт (в данном случае 9989), на который утилита ssh должна перенаправить безопасный туннель к порту 3389 удаленной Windows-машины. (В стандартной реализации системы OpenSSH для этого до- статочно задать аргумент -Ълокалъный_порт:удаленный_узел'.удаленный_порт.) Все порты источника в данном примере помечены как случайные, потому что выбор произвольного порта, с которым необходимо установить соединение, производится программой. Для доступа к настольной Windows-машине пользователь должен открыть удаленного настольного клиента (в данном случае rdesktop) и ввести localhost:9989 как адрес серве- ра, с которым он хочет установить соединение. Локальная утилита ssh получит соедине- ние с портом 9989 и туннелирует трафик по существующему соединению через удаленный сервер sshd. В свою очередь, сервер sshd направляет соединение на узел Windows. Разумеется, туннели, подобные этим, также могут оказаться преднамеренными или непреднамеренными лазейками. Системные администраторы должны использовать тун- нели с осторожностью и обязаны следить за неавторизованным и неправильным ис- пользованием этой возможности пользователями. В последние годы протокол SSH стал целью регулярных атак на пароли методом перебора. Хакеры выполняют повторяющиеся попытки аутентификации как обычные пользователи, такие как root, joe или admin. Свидетельством таких атак являются реги- страционные записи о сотнях и тысячах неудачных попыток зарегистрироваться. Для защиты от этих атак лучше всего отключить аутентификацию паролей. Пока, похоже, хакеры сосредоточились на порте 22, поэтому эффективной контрмерой является пере- нос сервера SSH на другой порт. Однако история показывает, что защита по принципу “безопасность через неясность” (“security through obscurity”) редко бывает долговремен- ной. Проверка на ваших системах может выявить слабые пароли, которые могут быть взломаны с помощью прямого перебора. Пакет Stunnel Stunnel — это открытый пакет, написанный Михалом Тройнара (Michal Trojnara), ко- торый шифрует TCP-соединения аналогично протоколу SSH. Он использует протокол SSL (Secure Sockets Layer) для создания сквозных туннелей, передающих данные неза- шифрованной службе и обратно. Известно, что он хорошо работает с небезопасными службами, такими как Telnet, IMAP и POP. Демон stunnel работает как на клиентской, так и на серверной системе. Локальный демон stunnel обычно принимает соединения на традиционный порт службы (на- пример, порт 25 для протокола SMTP) и направляет их через протокол SSL к демону stunnel на удаленном узле. Демон stunnel на удаленном узле принимает соединение, расшифровывает входящие данные и направляет их на удаленный порт, на котором про- слушивается сервер. Эта система позволяет незашифрованным службам обеспечивать конфиденциальность и целостность данных, гарантируемые шифрованием, не требуя при этом никаких изменений в программном обеспечении. Достаточно только сконфи- гурировать клиентское программное обеспечение для поиска служб на локальной систе- ме, а не на сервере, который их предоставляет. Протокол Telnet является хорошим примером этого метода, потому что он состоит из простого демона, прослушивающего отдельный порт. Для того чтобы установить соеди- нение со службой Telnet с помощью утилиты stunnel, сначала необходимо создать сер-
Глава 22. Безопасность 977 тификат SSL. Утилита Stunnel не зависит от библиотеки SSL, поэтому это можно сделать в любой стандартной операционной системе; мы предпочитаем систему OpenSSL. Для генерирования сертификата необходимо выполнить следующую команду. server$ sudo openssl req -new -x509 -days 365 -nodes -out stunnel.pem -keyout stunnel.pem Generating a 1024 bit RSA private key .++++++ .................................++++++ writing new private key to 'stunnel.pem' You are about to be asked to enter information that will be incorporated into your certificate request. What you are about to enter is what is called a Distinguished Name or a DN. There are quite a few fields but you can leave some blank For some fields there will be a default value, If you enter '. the field will be left blank. Country Name (2 letter code) [GB]:US State or Province Name (full name) [Berkshire]:Colorado Locality Name (eg, city) [Newbury] :Boulder Organization Name (eg, company) [My Company Ltd]:Booklab, Inc. Organizational Unit Name (eg, section) [] : Common Name (eg, your name or server's hostname) []:server.example.com Email Address [] : Эта команда создает самоподписанный и беспарольный сертификат. С одной сто- роны, отсутствие пароля — это удобно (реальный человек не должен вводить пароль при каждом новом запуске утилиты stunnel), но, с другой стороны, возникает опреде- ленный риск нарушения системы безопасности. Защитите файл сертификата строгими ограничениями. Далее следует определить конфигурацию утилиты stunnel для сервера и клиента. Стандартный конфигурационный файл называется /etc/stunnel/stunnel.conf, но вы можете создать несколько конфигураций, если хотите установить несколько туннелей. cert = /etc/stunnel/stunnel.pem chroot = /var/run/stunnel/ pid = /stunnel.pid setuid = nobody setgid = nobody debug = 7 output = /var/log/stunnel.log client = no [telnets] accept = 992 connect =23 В конфигурации сервера есть несколько важных аспектов. Инструкция chroot огра- ничивает процесс stunnel каталогом /var/run/stunnel. Пути для вспомогательных файлов должны быть выражены либо в обычном системном пространстве имен, либо в пространстве имен, ограниченном командой chroot. Это зависит от точки, в которой они открываются. В данном случае файл stunnel .pid фактически расположен в ката- логе /var/run/stunnel. Раздел [telnets] содержит две инструкции: инструкция accept приказывает ути- лите stunnel принимать соединения на порту 992, а инструкция connect пропускает эти соединения через порт 23, т.е. через реальную службу Telnet.
978 Часть II. Работа в сети Конфигурация клиента является аналогичной. cert = /etc/stunnel/stunnel.pern chroot = /var/run/stunnel/ pid = /stunnel.pid setuid = nobody setgid = nobody debug = 7 output = /var/log/stunnel.log client = yes [telnets] accept =23 connect = server.example.com:992 Несколько директив являются обратными по отношению к конфигурации сервера. Инструкция client = yes приказывает программе выполнить инициацию соединений с помощью утилиты stunnel, а не принимать их. Локальная утилита stunnel прослу- шивает соединения на порту 23 и устанавливает соединения с сервером на порту 992. Имя узла в директиве connect должно совпадать с именем, указанным при создании сертификата. Утилиты s tunnel на клиентской и серверной сторонах могут запускаться без аргу- ментов командной строки. Если вы выполните команду netstat -ап, то увидите, что утилита stunnel на сервере ожидает соединений на порту 992, а клиентская утилита stunnel — на порту 23. Для доступа к туннелю пользователь должен просто применить команду telnet к локальному узлу. client$ telnet localhost 23 Trying 127.0.0.1. . . Connected to localhost (127.0.0.1) . Escape character is ,A] ’. Red Hat Enterprise Linux WS release 4 (Nahant Update 2) Kernel 2.6.9-5.EL on an i686 login: Теперь пользователь может безопасно регистрироваться, не опасаясь кражи пароля. Бдительный администратор может использовать оболочки протокола TCP для ограни- чения соединений на клиентском компьютере только локальным интерфейсом, чтобы не позволить внешним пользователям устанавливать безопасные соединения службы telnet с сервером! Утилита stunnel — одна из немногих программ, которая имеет встроенную поддержку оболочки и не требует использования команды tcpd для ограни- чения доступа. Инструкции по ее использованию можно найти на сайте stunnel. org. 22.11. Брандмауэры Помимо защиты отдельных компьютеров, можно предпринять меры для обеспече- ния безопасности на сетевом уровне. Основным инструментом сетевой защиты является брандмауэр, физическое устройство или часть программного обеспечения, не допускаю- щие нежелательные пакеты в системы или сети. Брандмауэры в настоящее время ис- пользуются всюду. Их можно обнаружить как в настольных компьютерах и серверах, так и в маршрутизаторах и корпоративном сетевом оборудовании.
Глава 22. Безопасность 979 Брандмауэры, фильтрующие пакеты Брандмауэр, фильтрующий пакеты, ограничивает виды трафика, проходящего че- рез интернет-шлюз (или через внутренний шлюз, разделяющий домены в пределах организации), основываясь на информации, извлеченной из заголовков пакетов. Это напоминает прохождение таможни, когда вы на своем автомобиле пересекаете грани- цу. Администратор указывает, какие целевые адреса, номера портов и типы протоколов являются допустимыми, а брандмауэр просто отбрасывает (в некоторых случаях также регистрирует) все пакеты, которые не соответствуют заданным критериям. В системах семейства Linux фильтрация пакетов осуществляется с помощью утилиты iptables, в системах Solaris и HP-UX — с помощью программы IPFilter, а в системе AIX — с помощью команды genf ilt. Подробно они будут рассмотрены чуть позже. Несмотря на то что эти инструменты способны выполнять сложную фильтрацию и значительно повышают степень безопасности, в целом мы разочарованы использовани- ем систем UNIX и Linux в качестве сетевых маршрутизаторов и особенно в качестве кор- поративных маршрутизаторов, играющих роль брандмауэров. Сложность универсальных систем снижает их защищенность и надежность по сравнению со специальными устрой- ствами. Для защиты корпоративных сетей лучше применять специальные брандмауэры, например устройства компании Check Point и Cisco. Принципы фильтрации служб Большинству “известных” служб назначается сетевой порт в файле /etc/services или его системно-зависимом эквиваленте. Демоны, которые реализуют соответствую- щие службы, постоянно опрашивают порты, ожидая поступления запросов на подклю- чение со стороны удаленных компьютеров7. В основном, такие порты являются “при- вилегированными”. Это значит, что их номера находятся в диапазоне от 1 до 1023 и что порты могут использоваться только процессами, работающими от имени пользователя root. Порты с номерами 1024 и выше являются непривилегированными. Фильтрация на уровне служб основана на предположении, что клиент (компью- тер, инициирующий соединение по протоколу TCP или UDP) будет использовать не- привилегированный порт для установления соединения с привилегированным портом сервера. Например, если компьютеру с адресом 192.108.21.200 нужно разрешить только входящие SMTP-соединения, то следует установить фильтр, который позволит посылать TCP-пакеты по этому адресу через порт 25 и отправлять TCP-пакеты с этого адреса че- рез любой порт8. Способ инсталляции такого фильтра будет зависеть от типа используе- мого маршрутизатора. Некоторые службы, например FTP, еще больше усложняют эту головоломку. При пересылке файла по протоколу FTP на самом деле устанавливается два соединения: для команд и для данных. Клиент инициирует командное соединение, а сервер — информационное.9 Следовательно, если необходимо получать файлы из Интернета по протоколу FTP, следует разрешить вход в систему через все непривилегированные ТСР- 7 Во многих случаях задачу ожидания берут на себя демоны inetd или xinetd. Подробнее об этом рассказывается в разделе 32.1. 8 Порт 25 — это порт SMTP, определенный в файле /etc/services. 9 Это относится к традиционному протоколу FTP, известному как “активный протокол FTP”. Некоторые системы поддерживают “пассивный протокол FTP”, в котором оба соединения ини- циируются клиентом.
980 Часть II. Работа в сети порты, так как неизвестно, какой из них будет использован для установления информа- ционного соединения. £□ Подробнее о конфигурировании FTP-сервера рассказывается в разделе 23.4. Это сводит на нет преимущества фильтрации пакетов, поскольку некоторые общеиз- вестные службы, печально известные своей незащищенностью, работают с непривиле- гированными портами (например, служба XI1 на порту 6000). Кроме того, любознатель- ные пользователи получают возможность запускать собственные служебные программы (например, сервер telnet на нестандартном и непривилегированном порту), к которым они и их друзья могут обращаться из Интернета. Самый безопасный способ использования фильтра пакетов — использовать протокол передачи данных SSH. В настоящее время в Интернете опубликован его черновик, но он уже широко используется и достиг достаточно высокой степени зрелости. Обычно он используется как компонент протокола SSH, обеспечивающего аутентификацию и шифрование. В отличие от протокола FTP, протокол SFTP использует только один порт и для команд, и для данных, разрешая парадокс фильтрации пакетов. Существует мно- го реализаций протокола SFTP. Мы рекомендуем использовать клиентскую утилиту ко- мандной строки SFTP, поставляемую в системе OpenSSH. Наиболее разумный способ решения проблем с протоколом FTP — разрешить вы- ход по протоколу FTP во внешний мир только с этого изолированного компьютера. Пользователи смогут регистрироваться на нем, когда им понадобится выполнять сете- вые операции, запрещенные во внутренней сети. Поскольку копирование всех пользо- вательских учетных записей на FTP-сервер противоречит сути административного деле- ния в организации, можно создавать учетные записи только по заявкам. Естественно, на FTP-сервере должен быть инсталлирован полный комплект средств защиты. В некоторых организациях, которые заботятся о безопасности, используется двух- ступенчатая фильтрация. Один фильтр в этой схеме подключен к Интернету как шлюз, а второй находится между этим шлюзом и остальной частью локальной сети. Идея со- стоит в том, чтобы оставить внешний шлюз относительно открытым, а внутренний — сделать очень консервативным. Если промежуточный компьютер административно от- делен от остальной части сети, появляется возможность реализовать различные службы Интернета с меньшим риском. Частично защищенная сеть обычно называется “демили- таризованной зоной” (DMZ). Наиболее безопасным способом использования фильтрации пакетов является на- стройка первоначальной конфигурации, которая не позволяет никаких входящих сое- динений. Затем можно постепенно ослабить фильтрацию, выяснив полезные службы, которые не работают, и перенеся все службы, доступные в Интернете, в демилитаризо- ваную зону. Брандмауэры, осуществляющие инспекцию пакетов с отслеживанием состояния соединений В основе инспекции пакетов с отслеживанием состояния соединений лежит концеп- ция, которую можно описать с помощью следующего примера. Представьте себе, что вы ищете террориста в переполненном аэропорту, внимательно прислушиваясь ко всем раз- говорам, происходящим вокруг вас, и понимая их содержание (на всех языках). Брандмауэ- ры, осуществляющие инспекцию пакетов с отслеживанием состояния соединений (stateful inspection firewalls), проверяют весь трафик, проходящий через них, и сравнивают его с те- кущей сетевой активностью в ожидании события, которое “должно” произойти.
Глава 22. Безопасность 981 Например, если пакеты, обмениваемые в ходе выполнения последовательности ко- манд протокола FTP, называют порт, который впоследствии должен использоваться для информационного соединения, то брандмауэр должен проверить, что информационное соединение произойдет именно на этом порту. Попытки удаленного сайта соединиться с другими портами заранее считаются фальшивыми и должны пресекаться. Так что же на самом деле предлагают разработчики под видом инспекции пакетов с учетом состояния протокола. Их продукты либо осуществляют мониторинг ограни- ченного количества соединений или протоколов, либо распознают конкретный набор “неблагоприятных” ситуаций. В этом нет ничего плохого. Очевидно, что из любой тех- нологии, способной распознавать аномалии трафика, можно извлечь пользу. Однако в данном случае важно помнить, что все эти обещания преимущественно являются лишь рекламным ходом. Насколько безопасны брандмауэры Фильтрация пакетов не должна быть основным средством защиты от хакеров. Это всего лишь вспомогательная мера. При наличии брандмауэра порой создается ложное впечатление, будто уровень безопасности является исключительно высоким. Если, до- верившись брандмауэру, ослабить бдительность на других “рубежах”, это отрицательно скажется на защищенности информации. Каждый компьютер необходимо защищать индивидуально и регулярно проверять с помощью таких средств, как Вго, Snort, Nmap, Nessus и OSSEC. Следует также обучать пользователей правилам безопасной работы в системе. В противном случае вы просто создадите внешне устойчивую, но крайне запутанную внутри систему. В идеале локальные пользователи должны иметь возможность подключаться к любой службе Интернета, но доступ к локальным службам со стороны интернет-узлов должен быть ограничен демилитаризованной зоной. Например, к серверу архивов может быть разрешен SFTP-доступ, а к почтовому серверу, получающему входящую почту, — доступ только по протоколу SMTP. Для того чтобы интернет-канал работал с максимальной эффективностью, советуем все же обратить основное внимание на удобство работы и доступность. В конце концов, сеть становится безопасной благодаря бдительности системного администратора, а не благодаря брандмауэру. 22.12. Особенности брандмауэров в системе Linux Обычно мы не рекомендуем использовать компьютер, работающий под управле- нием Linux (а также UNIX или Windows), в качестве брандмауэра, поскольку в целом операционная система не обеспечивает надлежащий уровень безопасности.10 Однако лучше инсталлировать усиленную систему Linux, чем вообще ничего, если речь идет о Домашнем компьютере или организации, бюджет которой не предусматривает покуп- ку оборудования соответствующего уровня. В любом случае локальный фильтр, такой как команда iptables, может оказаться превосходным инструментом для обеспечения безопасности. Устанавливая систему Linux в качестве брандмауэра, убедитесь, что она включа- ет самые последние обновления и “заплаты”, касающиеся брешей в системе защиты. 10 И все же многие сетевые устройства, например маршрутизаторы компании Linksys, в своих ядрах используют систему Linux и iptables.
982 Часть II. Работа в сети Компьютер, функционирующий в качестве брандмауэра, — идеальное место для практи- ческой проверки всех рекомендаций^ изложенных в этой главе. (В разделе 22.11 собраны сведения, касающиеся брандмауэров в целом. Читателям, не знакомым с концепцией брандмауэра, советуем предварительно прочитать приведенный там материал.) Правила, цепочки и таблицы В ядре Linux версии 2.4 появился новый механизм фильтрации пакетов — Netfilter. Контролирующая его работу команда iptables является “наследницей” более старой команды ipchains, которая использовалась в ядрах версии 2.2. В команде iptables применяется концепция упорядоченной цепочки правил, согласно которым проверяют- ся сетевые пакеты. Наборы цепочек образуют таблицы, предназначенные для обработки определенных видов трафика. К примеру, стандартная таблица для команды iptables называется filter. Цепочки правил этой таблицы используются для фильтрации сетевых пакетов. В таблице filter содержатся три стандартные цепочки: FORWARD, INPUT и OUTPUT. Каждый пакет, обра- батываемый ядром, поступает на проверку в одну цепочку. Правила в цепочке FORWARD применяются ко всем пакетам, которые поступают в один интерфейс и перенаправляются в другой. Правила в цепочках INPUT и OUTPUT предназначены для пакетов, адресованных локальному компьютеру или исходящих от него соответственно. Обычно этих трех цепочек вполне достаточно для фильтрации данных между двумя интерфейсами. В случае необходимости можно определять более сложные конфигурации. Помимо таблицы filter, существуют также таблицы nat и mangle. В первой со- держатся цепочки правил, предназначенные для управления системой NAT (Network Address Translation — трансляция сетевых адресов). Подробнее об этой системе расска- зывалось в разделе 14.4, а в разделе 14.12 приводился пример использования таблицы nat. В этом разделе мы воспользуемся цепочкой PREROUTING данной таблицы для филь- трации пакетов с поддельными IP-адресами. Таблица mangle содержит цепочки, предназначенные для модификации содержимо- го сетевых пакетов вне контекста системы NAT или механизма фильтрации пакетов. Эта таблица редко применяется в крупных системах, поэтому мы не будем ее рассматривать. Целевые директивы для правил В каждом правиле цепочки имеется целевая директива, определяющая, что следует делать с пакетами, подчиняющимися этому правилу. Если пакет прошел проверку, его судьба предрешена и другие проверки не выполняются. В качестве директивы разреша- ется указывать имя другой цепочки. Правила таблицы filter могут содержать следующие целевые директивы: ACCEPT, drop, REJECT, LOG, MIRROR, QUEUE, REDIRECT, RETURN и ULOG. Директива ACCEPT разре- шает пакету следовать своим маршрутом. Директивы DROP и REJECT запрещают пропу- скать пакет, но первая приводит к “безмолвному” удалению пакета, а вторая — к выдаче ICMP-сообщения об ошибке. Директива LOG позволяет следить за тем, какие правила применяются к пакетам, а директива ULOG включает режим расширенной регистрации. Директива REDIRECT перенаправляет пакеты прокси-серверу. Она удобна, когда весь трафик веб-узла должен проходить через кеширующую программу, такую как Squid. Ди- ректива RETURN объявляет конец пользовательской цепочки. Директива MIRROR меняет
Глава 22. Безопасность 983 местами IP-адреса отправителя и получателя перед отправкой пакета. Наконец, дирек- тива QUEUE передает пакеты локальным программам пользователя через модуль ядра. Настройка команды iptables в качестве брандмауэра Для того чтобы можно было использовать команду iptables, следует включить ре- жим перенаправления IP-пакетов и убедиться в том, что многочисленные модули ко- манды загружены в ядро. О том, как включить указанный режим, рассказывалось в раз- делах 13.3 и 14.12. Во всех дистрибутивах, где есть команда iptables, есть и сценарии загрузки ее модулей. В системе Linux брандмауэр обычно реализуется в виде последовательности команд iptables, содержащихся в одном из сценариев запуска системы. Отдельные команды iptables, как правило, имеют одну из следующих форм. iptables -F имя_цепочки iptables -Р имя_цепочки директива iptables -А имя_цепочки -i интерфейс - j директива В первом случае (-F) из цепочки удаляются все предыдущие правила. Во втором слу- чае (-р) задается стандартная директива цепочки. Мы рекомендуем по умолчанию использовать директиву DROP. В третьем случае (-А) заданное правило добавляется к цепочке. Если не указан флаг -t, команда применяется к цепочкам таблицы filter. Опция -i определяет интерфейс, для которого это правило действует. Опция - j задает директиву. Команда iptables понимает также ряд других опций (табл. 22.3). Таблица 22.3. Дополнительные флаги для фильтров команды iptables Опция Назначав -р протокол Соответствие протоколу: tcp, udp или icmp -s исходный_адрес Соответствие исходному IP-адресу узла или сети (допускается нотация CIDR) -d целевой_адрес Соответствие целевому IP-адресу узла или сети --sport номер_порта Соответствие номеру исходного порта (обратите внимание на двойной дефис) —dport номер_порта Соответствие номеру целевого порта (обратите внимание на двойной дефис) --icmptype тип Соответствие типу ICMP-сообщения (обратите внимание на двойной дефис) j Инверсия смысла опции -t Задает таблицу, к которой применяется команда (по умолчанию — filter) Полный пример Ниже мы детально разберем конкретный пример. Предполагается, что интерфейс ethl подключен к Интернету, а интерфейс ethO — к локальной сети. IP-адрес интер- фейса ethl равен 128.138.101.4, а интерфейса ethO — 10.1.1.254. В обоих случаях маска сети равна 255.255.255.0. В этом примере выполняется фильтрация пакетов без учета со- стояния для защиты веб-сервера с IP-адресом 10.1.1.2. Это стандартный метод защиты веб-серверов. В конце примера будет продемонстрирована фильтрация пакетов с учетом состояния для защиты настольных компьютеров. Нашим первым действием будет инициализация таблицы filter. Сначала все це- почки таблицы очищаются, после чего для цепочек INPUT и OUTPUT назначается стан- дартная директива drop. Как и в других подобных случаях, наиболее безопасная страте- гия заключается в удалении всех пакетов, которые не упомянуты явно.
984 Часть II. Работа в сети iptables -F iptables -Р INPUT DROP iptables -P FORWARD DROP Поскольку правила проверяются по порядку, поместим наиболее часто используемые вперед11. Первые правила цепочки forward разрешают устанавливать соединения с сете- выми службами по адресу 10.1.1.2. В частности, разрешаются протоколы SSH (порт 22), HTTP (порт 80) и HTTPS (порт 443). Самое первое правило пропускает все пакеты, ис- ходящие из внутренней сети. iptables -A FORWARD -i ethO -р ANY -j ACCEPT iptables -A FORWARD -d 10.1.1.2 -p tcp —dport 22 -j ACCEPT iptables -A FORWARD -d 10.1.1.2 -p tcp —dport 80 -j ACCEPT iptables -A FORWARD -d 10.1.1.2 -p tcp —dport 443 -j ACCEPT Единственный TCP-трафик, который может приниматься узлом, — это трафик про- токола SSH, с помощью которого можно управлять брандмауэром. Второе из показан- ных ниже правил разрешает трафик интерфейса обратной связи внутри брандмауэра. Наши администраторы начинают нервничать, если им не удается с помощью команды ping найти стандартный маршрут, поэтому третье правило пропускает ICMP-пакеты ECHO_REQUEST, имеющие локальный IP-адрес отправителя. iptables -A INPUT -i ethO -d 10.1.1.1 -p tcp —dport 22 -j ACCEPT iptables -A INPUT -i lo -d 127.0.0.1 -p ANY - j ACCEPT iptables -A INPUT -i ethO -d 10.1.1.1 -p icmp —icmp-type 8 -j ACCEPT Компьютеру, имеющему выход в Интернет, для нормальной работы необходимо, что- бы брандмауэр пропускал определенные типы ICMP-пакетов. Следующие восемь пра- вил пропускают минимальный набор ICMP-пакетов как на сам брандмауэр, так и в за- щищаемую им сеть. iptables -A INPUT -р icmp —icmp-type 0 -j ACCEPT iptables -A INPUT -p icmp —icmp-type 3 -j ACCEPT iptables -A INPUT -p icmp —icmp-type 5 -j ACCEPT iptables -A INPUT -p icmp —icmp-type 11 -j ACCEPT iptables -A FORWARD -d 10.1.1.2 -p icmp —icmp-type 0 -j ACCEPT iptables -A FORWARD -d 10.1.1.2 -p icmp —icmp-type 3 -j ACCEPT iptables -A FORWARD -d 10.1.1.2 -p icmp —icmp-type 5 -j ACCEPT iptables -A FORWARD -d 10.1.1.2 -p icmp —icmp-type 11 -j ACCEPT Теперь добавим правила в цепочку PREROUTING таблицы nat. Эти правила не связа- ны с фильтрацией пакетов, зато полезны для защиты от поддельных IP-адресов. Правила с директивой DROP не нужно дублировать в цепочках INPUT и FORWARDING, поскольку цепочка PREROUTING применяется ко всем пакетам, поступающим на брандмауэр. iptables -t nat -A PREROUTING -i ethl -s 10.0.0.0/8 -j DROP iptables -t nat -A PREROUTING -i ethl -s 172.16.0.0/12 -j DROP iptables -t nat -A PREROUTING -i ethl -s 192.168.0.0/16 -j DROP iptables -t nat -A PREROUTING -i ethl -s 127.0.0.0/8 -j DROP iptables -t nat -A PREROUTING -i ethl -s 224.0.0.0/4 -j DROP Наконец, завершим цепочки input и forward правилами, которые запрещают все пакеты, не упомянутые явно. Вообще-то, это уже было сделано с помощью команд iptables -Р, но директива LOG позволяет увидеть, кто к нам “стучится” из Интернета. 11 Следите за тем, чтобы стремление к повышению производительности не нарушало логику выполнения правил.
Глава 22. Безопасность 985 iptables -A INPUT -i ethl -j LOG iptables -A FORWARD -i ethl -j LOG При желании можно включить систему NAT, чтобы скрывать частные адреса, ис- пользуемые во внутренней сети. Подробнее об этом рассказывалось в разделе 14.12. Одной из наиболее интересных возможностей механизма Netfilter является филь- трация пакетов с учетом состояния. Вместо того чтобы пропускать входящий трафик определенных типов, брандмауэр пропускает трафик, выдаваемый в ответ на клиентские запросы. Показанная ниже простейшая цепочка разрешает всем пакетам покидать сер», но принимаются лишь те пакеты, которые поступают в рамках соединений, установлен- ных узлами нашей сети. iptables -A FORWARD -i ethO -р ANY -j ACCEPT iptables -A FORWARD -m state —state ESTABLISHED,RELATED -j ACCEPT Для того чтобы команда iptables могла отслеживать сложные сетевые сеансы, на- пример сеансы протоколов FTP и IRC, должны быть загружены определенные модули ядра. В противном случае команда просто не будет позволять устанавливать соответству- ющие соединения. Фильтрация пакетов с учетом состояния способна повысить безопас- ность системы, но она резко повышает и сложность управления сетью. Убедитесь в том, что она действительно нужна, прежде чем реализовать ее на брандмауэре. Для отладки цепочек правил, вероятно, лучше всего подходит команда iptables -L-Цг. Она сообщит, сколько раз для того или иного правила было найдено совпадение. Мы часто добавляем временные правила с директивой LOG, если хотим получить дополни- тельную информацию о проверке пакетов. Более сложные проблемы решаются с помо- щью анализатора пакетов, такого как tcpdump. 22.13. Модуль IPFilter для систем UNIX Большинство разработчиков системы UNIX не имеют собственного программного обеспечения для брандмауэров.12 Однако его достаточно легко добавить: технологию NAT и функции брандмауэра с отслеживанием состояния соединений для систем UNIX реализует открытый пакет IPFilter, разработанный Дарреном Ридом (Darren Reed). Система Solaris включает его по умолчанию. Кроме того, он доступен в виде надстроек для систем HP-UX, AIX и многих других, включая Linux. Пакет IPFilter можно испол^ зовать как загружаемый модуль ядра (что рекомендуется разработчиками) или включать в ядро статически. Пакет IPFilter является зрелым и полнофункциональным программным обеспечени- ем. Он имеет активное сообщество его пользователей и постоянно совершенствуется. Этот пакет способен отслеживать состояние соединений даже для протоколов без запо- минания состояния, таких как UDP и ICMP. Пакет IPFilter считывает правила фильтрации из файла конфигурации (обычно /etc/ipf .conf или /etc/ipf/ipf .conf), не заставляя пользователя выполнять не- сколько таких команд, как iptables. Рассмотрим простое правило, которое может встретиться в файле ipf. conf. block in all 12 Исключением является компания IBM. Система AIX включает отдельное программное обе- спечение для фильтрации пакетов IP Security, хотя оно не выполняет фильтрацию с учетом состоя- ния протокола. Для начала изучите справочную страницу genfilt.
986 Часть II. Работа в сети Это правило блокирует весь входящий трафик (т.е. сетевые команды, полученные системой) на всех сетевых интерфейсах. Определенно, это безопасно, но не слишком полезно! В табл. 22.4 перечислены некоторые возможные условия, которые могут упоминаться в правилах ipf. Таблица 22.4. Типичные условия ipf Условие 'QltlMNMk •' 1 ' on интерфейс Применяет правило к конкретному интерфейсу proto протокол Выбирает пакет в соответствии с протоколом: tcp, udp или icmp from ip—Источника Фильтрует по источнику: host, network или any to 1р_получателя Фильтрует по получателю: host, network или any port = номер_порта Фильтрует по имени порта (из /etc/services) или номеру8 flags флаг Фильтрует по флагам заголовка TCP icmp-type число Фильтрует по типу и коду ICMP keep state Сохраняет подробную информацию о сеансе; см. комментарии ниже а Можно использовать любой оператор сравнения: = <, >, <=, >=, etc. Пакет IPFilter оценивает правила в том порядке, в котором они представлены в фай- ле конфигурации. Последнее совпадение является привязкой. Например, входящие паке- ты, передаваемые через следующий фильтр, всегда проходят через него. block in all pass in all Правило block применяется ко всем пакетам, как и правило pass, но при этом пра- вило pass проверяется последним. Для того чтобы немедленно применить одно правило и пропустить остальные, следует использовать ключевое слово quick. block in quick all pass in all Промышленные брандмауэры обычно состоят из многих правил, поэтому для под- держания их эффективной работы важно свободно пользоваться ключевым словом quick. Без этого каждый пакет будет оценивать каждое правило, что приведет к нео- правданным затратам времени. Возможно, чаще всего брандмауэры используются для управления доступом к кон- кретной сети или узлу и контроля за их обращениями к другим сетям и узлам, часто по отношению к конкретному порту. Пакет IPFilter имеет мощный синтаксис для управле- ния трафиком на данном уровне детализации. В следующих правилах разрешается вхо- дящий трафик в сеть 10.0.0.0/24 на ТСР-порты 80 и 443 и UDP-порт 53. block out quick all pass in quick proto tcp from any to 10.0.0.0/24 port = 80 keep state pass in quick proto tcp from any to 10.0.0.0/24 port = 443 keep state pass in quick proto udp from any to 10.0.0.0/24 port = 53 keep state block in all Ключевые слова keep state заслуживают особого внимания. Пакет может отслежи- вать соединения, отмечая первый пакет в новом сеансе. Например, когда новый пакет поступает на порт 80 в узле 10.0.0.10, программа IPFilter делает запись в таблице состо- яний и пропускает пакет в сеть. Он также позволяет веб-серверу ответить, даже если
Глава 22. Безопасность 987 первое правило явно блокирует весь исходящий трафик. Ключевые слова keep state также полезны для устройств, которые не предоставляют никаких услуг, но обязаны инициировать соединения. Следующий набор правил разрешает любую передачу дан- ных, инициированную узлом 192.168.10.10. Он блокирует все входящие пакеты, за ис- ключением пакетов, связанных с соединениями, которые уже были инициированы. block in quick all pass out quick from 192.168.10.10/32 to any keep state Ключевые слова keep state относятся и к пакетам UDP и ICMP, но поскольку эти протоколы не запоминают состояния, их механизм довольно необычен: программа IPFilter разрешает ответы на UDP- и ICMP-пакет в течение 60 секунд после того, как входящий пакет был обнаружен фильтром. Например, если UDP-пакет, пришедший от узла 10.0.0.10 с порта 32000, адресован узлу 192.168.10.10 на порт 53, то ответ по прото- колу UDP от узла 192.168.10.10 будет разрешен в течение 60 секунд после прохождения через порт. Аналогично ICMP-эхо (ответ на команду ping) разрешается после того, как запрос эха был занесен в таблицу состояний. 03 Частные адреса и технология NAT описаны в разделе 14.4. Трансляция сетевых адресов (Network address translation — NAT) — это еще одна функциональная возможность, предлагаемая пакетом IPFilter. Система NAT позволяет крупной сети, использующей частные адреса RFC1918, соединяться с Интернетом с по- мощью небольшого набора интернет-маршрутизируемых IP-адресов. Устройство NAT отображает трафик, исходящий из частной сети, в один или несколько открытых адре- сов, посылает запросы через Интернет, а затем перехватывает ответы и переписывает их в терминах локальных IP-адресов. Для выполнения функций NAT пакет IPFilter использует ключевое слово шар (вме- сто pass и block). В следующем правиле трафик, исходящий из сети 10.0.0.0/24, ото- бражается в текущий маршрутизируемый адрес на интерфейсе elOOOgO. map elOOOgO 10.0.0.0/24 -> 0/32 Если адрес интерфейса elOOOgO, то фильтр должен быть перезагружен, поскольку может оказаться, что интерфейс elOOOgO арендует динамические IP-адреса по протоко- лу DHCP. По этой причине функциональные возможности NAT в пакете IPFilter лучше всего использовать на сайтах, имеющих статические адреса на интерфейсе, имеющем выход в Интернет. Правила пакета IPFilter являются гибкими и настраиваемыми. С помощью дополни- тельных возможностей, таких как макросы, их можно значительно упростить. Подроб- ности, относящиеся к этим дополнительным возможностям, можно найти на официаль- ном сайте IPFilter coombs. anu. edu. au/~ aval on. Пакет IPFilter включает несколько команд, перечисленных в табл. 22.5. Таблица 22.5. Команды пакета IPFilter Команда ... ; _ ipf Управляет списками правил и фильтров ipfstat Получает статистическую информацию о фильтрации пакетов ipmon Отслеживает зарегистрированную информацию о фильтре ipnat Управляет правилами NAT
988 Часть II. Работа в сети Среди команд, перечисленных в табл. 22.5, чаще всего используется команда ipf. Она получает на вход файл правил и добавляет правильно сформулированные правила в список фильтров в ядре. Если не указан аргумент -Fa, стирающий все существующие правила, команда ipf добавляет правила в конец фильтра. Например, для того чтобы стереть существующий набор фильтров в ядре и загрузить правила из файла ipf. conf, следует выполнить следующую команду. solaris$ sudo ipf -Fa -f /etc/ipf/ipf.conf Для управления доступом пакет IPFilter использует файлы псевдоустройств из ка- талога /dev, и по умолчанию только пользователь root может редактировать список фильтров. Мы рекомендуем не изменять разрешения, установленные по умолчанию, а для управления фильтром использовать команду sudo. При загрузке файла для отладки синтаксических ошибок и выявления других, свя- занных с конфигурацией, используйте флаг -v команды ipf. Пакет IPFilter изначально инсталлирован в ядре операционной системы soiaris Solaris, но перед использованием его необходимо активизировать с помощью следующей команды. solaris$ sudo svcadm enable network/ipfilter 22.14. Виртуальные частные сети В простейшем виде виртуальная частная сеть (Virtual Private Networks — VPN) — это специальный тип сетевого соединения, эмулирующего непосредственное подключение удаленной сети, даже если в действительности она находится за тысячу километров и скрыта за множеством маршрутизаторов. Для повышения безопасности соединение не только подвергается аутентификации в том или ином виде (обычно с использованием совместного секретного ключа, например пароля), но еще и шифруется. Это называется защищенным туннелем. Приведем пример ситуации, в которой сеть VPN оказывается очень удобной. Предположим, компания имеет офисы в нескольких городах: Чикаго, Боулдере и Майами. Если каждый офис подключен к локальному провайдеру Интернета, то по- средством виртуальных частных сетей компания может прозрачным образом (и, главное, весьма безопасно) соединить все офисы через такую ненадежную сеть, как Интерне/. Конечно, такого же результата можно достичь и за счет покупки выделенных линий, но это обойдется гораздо дороже. В качестве еще одного примера можно взять компанию, служащие которой выходят в сеть из дому. Наличие виртуальных частных сетей позволит служащим пользоваться преимуществами своих высокоскоростных и недорогих кабельных модемов и в то же время работать так, будто они непосредственно подключены к корпоративной сети. Благодаря удобству и популярности такого подхода, многие компании стали пред- лагать решения, связанные с сетью VPN. Функции поддержки VPN могут быть реализо- ваны в маршрутизаторе, в операционной системе и даже в специализированном сетевом устройстве. Если позволяет бюджет, рассмотрите коммерческие предложения, в избытке имеющиеся на рынке. Если же вы ограничены в средствах, обратитесь к пакету SSH, который позволяет организовать защищенные туннели (раздел 22.10).
Глава 22. Безопасность 989 Туннели IPSEC Те, кого интересует надежное и недорогое решение в области VPN, должны обра- тить внимание на IPSEC (Internet Protocol Security — механизм защиты протокола IP). Изначально он был реализован для протокола IPv6, но теперь доступен также и для IPv4. IPSEC — это одобренная организацией IETF система аутентификации и шифро- вания соединений. Практически все серьезные поставщики VPN-систем оснащают свои продукты по крайней мере режимом совместимости с IPSEC. Системы Linux, Solaris, HP-UX и AIX содержат поддержку технологии IPSec, встроенную в ядро. Для аутентификации и шифрования механизм IPSec использует сильные криптогра- фические алгоритмы. Аутентификация гарантирует, что пакеты приходят от легального отправителя и по дороге не были искажены, а шифрование предотвращает несанкцио- нированный просмотр содержимого пакета. В туннельном режиме система шифрует заголовок транспортного уровня, содержа- щий номера портов отправителя и получателя. К сожалению, этот механизм напрямую конфликтует со способом работы большинства брандмауэров. По этой причине в боль- шинстве современных реализаций по умолчанию используют транспортный режим, в котором шифруется только содержимое пакетов (т.е. передаваемые данные). Существует одна тонкость, связанная с туннелями IPSEC и параметром MTU переда- ваемых пакетов. Важно убедиться в том, что пакет, зашифрованный средствами IPSEC, не подвергается фрагментации при прохождении туннеля. Для этого может потребовать- ся снизить значение MTU для сетевых интерфейсов, расположенных перед туннелем (обычно подходит значение 1400 байт). Подробнее о параметре MTU рассказывалось В разделе 14.2. Так ли уж нужны виртуальные частные сети К сожалению, у виртуальных частных сетей есть и недостатки. Они позволяют орй- низовать достаточно надежный туннель через ненадежный канал связи между двумя ко- нечными точками, но они, как правило, не защищают сами конечные узлы. Например, если создать сеть VPN между корпоративной магистралью и домашним компьютером президента компании, то можно ненароком открыть удобную лазейку для 15-летнего вундеркинда, по ночам наведывающегося в папин кабинет. Хорошо, если он использует эту возможность лишь для игр по сети с одноклассниками. А если нет? Отсюда вывод: соединения, устанавливаемые через туннели VPN, следует рассматри- вать как внешние и предоставлять им дополнительные привилегии лишь в случае крайней необходимости, тщательно взвесив все за и против. Можно добавить в свод правил безо- пасности, принятый в организации, специальный пункт, касающийся работы в сети VPN. 22.15. Сертификация и стандарты Если содержание этой главы ошеломило вас, не беспокойтесь. Компьютерная безо- пасность — сложная и необъятная тема, которой посвящены бесчисленные книги, веб- сайты и журналы. К счастью, для оценки и организации существующей информации было сделано немало. Существуют десятки стандартов и сертификаций, и разумный ад- министратор должен их знать. Один из основных философских принципов информационной безопасности нефор- мально называется “триадой CIA”.
990 Часть II. Работа в сети Эта аббревиатура расшифровывается так. • Конфиденциальность (confidentiality) • Целостность (integrity) • Доступность (availability) Конфиденциальность означает секретность данных. Доступ к информации должен быть ограничен кругом лиц, которые имеют право ее знать. Аутентификация, контроль доступа и шифрование — это всего лишь несколько компонентов механизма обеспече- ния конфиденциальности. Если хакер взломает систему и украдет базу данных, содержа- щую персональную информацию о клиентах, то конфиденциальность будет нарушена. Целостность связана с аутентификацией информации. Технология обеспечения це- лостности данных обеспечивает их корректность и защиту от несанкционированных изменений. Она также связана с благонадежностью источников информации. Когда безопасный веб-сайт предоставляет подписанный SSL-сертификат, он подтверждает пользователю не только то, что информация посылается в зашифрованном виде, но и то, что его идентичность удостоверяется авторитетным источником сертификатов (та- ким как компания VeriSign или агентство Equifax). Целостность данных также гаранти- руют специальные технологии, например PGP и Kerberos. Доступность выражает идею о том, что информация должна быть доступной для авторизованных пользователей, когда они в ней нуждаются, но не хотят ее хранить. Перебои, вызванные не действиями злоумышленников, а административными ошибка- ми или сбоями электропитания, также относятся к этой категории проблем. К сожале- нию, доступность часто игнорируется, пока не возникнут проблемы. Принципы CIA следует учитывать при разработке, реализации и эксплуатации си- стем. Старая поговорка гласит: “Безопасность — это процесс”. Сертификации Описание принципов CIA, изложенное выше, представляет собой всего лишь крат- кое введение в более широкую тему, связанную с безопасностью. Крупные корпорации часто нанимают постоянных сотрудников, работа которых заключается в защите инфор- мации. Для того чтобы поддерживать высокую степень компетентности в этой области, эти профессионалы посещают тренинги и получают сертификаты. Если вам придется ра- ботать с некоторыми из этих сертификатов, приготовьтесь запомнить массу аббревиатура Одним из наиболее широко признанных сертификатов является CISSP (Certified Information Systems Security Professional — сертифицированный специалист по безопас- ности информационных систем). Этот сертификат выдается организацией (ISC)2, пол- ное название которой звучит так: International Information Systems Security Certification Consortium (попробуйте произнести это в десять раз быстрее!). Одной из главных осо- бенностей сертификата CISSP является представление организации (ISC)2 об “общей совокупности знаний” (“common body of knowledge — СВК), которая по существу пред- ставляет собой самые эффективные методы работы в области информационной безопас- ности. Комплекс СВК охватывает законодательство, криптографию, аутентификацию, физическую безопасность и многое другое. Это невероятно авторитетный сертификат в среде специалистов по безопасности. Недостатком сертификата CISSP является излишняя широта охвата и, как следствие, недостаток глубины знаний. В комплекс СВК входит много тем, которые необходимо изучить за короткое время! Для того чтобы решить эту проблему, организация (ISC)2 создала специальные программы CISSP, посвященные архитектуре, технике и управле-
глава 22. Безопасность 991 нию. Эти специализированные сертификаты придают глубину более общему сертифи- кату CISSP. Институт системного администрирования, сетей и безопасности (System Administration, Networking, and Security Institute — SANS Institute) в 1999 году создал на- бор сертификатов Global Information Assurance Certification (GIAC). Три дюжины разных экзаменов охватывают всю область информационной безопасности тестами, разделен- ными на пять категорий. Сертификаты ранжируются по сложности — от умеренного уровня GISF с двумя экзаменами до экспертного уровня GSE с 23-часовым экзаменом. Экзамены на получение сертификата GSE печально известны как самые трудные в дан- ной индустрии. Многие экзамены нацелены на техническое вопросы и требуют доволь- но большого опыта работы. В заключение упомянем мандат сертифицированного аудитора информационных систем (Certified Information Systems Auditor — CI SA), представляющий собой сертифи- кат специалиста по аудиту и процессам, связанным с информационной безопасностью. Курс обучения для получения этого сертификата сосредоточен на бизнес-процессах, процедурах, мониторинге и других вопросах управления. Некоторые специалисты счи- тают сертификат CISA промежуточным и приемлемым для сотрудников, занимающихся безопасностью в организациях. Одним из преимуществ этого сертификата является то, что для его получения достаточно сдать только один экзамен. Несмотря на то что сертификаты выдаются индивидуально, их признание в деловой среде невозможно отрицать. В настоящее время все больше компаний считают сертифи- кат признаком эксперта. Многие компании предлагают таким сотрудникам более высо- кую зарплату и продвигают их по карьерной лестнице. Если вы решили получить сертификат, убедите вашу организацию, чтобы она опла- тила ваше обучение. Стандарты безопасности Возрастающая роль информационных систем привела к появлению законов и указов правительства, регулирующих вопросы защиты конфиденциальной информации. Многие законодательные акты США, такие как HIPAA, FISMA, NERC CIP, и Sarbanes-Oxley Act (SOX), содержат разделы, посвященные информационной безопас- ности. Несмотря на то что иногда удовлетворение этих требований связано с большими затратами, они привлекли внимание к важным аспектам технологии, которые ранее иг- норировались. Ш Более широкое обсуждение промышленных и законодательных стандартов, влияющих на информационные технологии, приведено в разделе 32.9. К сожалению, эти законодательные акты содержат множество юридических терми- нов, которые иногда трудно понять. Большинство из них не содержит никаких указа- ний на то, как удовлетворить сформулированные требования. По этой причине, для того чтобы помочь администраторам выполнить требования закона, были разработаны стандарты. Эти стандарты не являются законодательными актами, но следование этим стандартам обычно обеспечивает согласование с законами. Поскольку сразу все стан- дарты выполнить бывает затруднительно, лучше всего сначала полностью реализовать какой-то один из них.
992 Часть II. Работа в сети ISO 27002 Стандарт ISO/IEC 27002 (бывший ISO 17799) является, вероятно, самым широко признанным в мире. Впервые он был введен в 1995 году как британский стандарт. Тогда он содержал 34 страницы и 11 разделов, которые охватывали широкий круг вопросов — от политических до вопросов физической безопасности и управления доступом. Каждый раздел имел цели, специфичные требования и рекомендации оптимальных практиче- ских решений. Этот документ стоит около 200 долл. Требования не носят технический характер и могут быть выполнены любой органи- зацией самым эффективным способом. С другой стороны, использование общих слов оставляло у читателя ощущение слишком большой гибкости. Критики жаловались на то, что недостаток специфики оставляет организации незащищенными перед атаками. Тем не менее, этот стандарт является одним из наиболее ценных документов в обла- сти информационной безопасности. Он создал мост над пропастью, пролегавшей между вопросами управления и техническими проблемами, и помог обеим сторонам миними- зировать риск. PCI DSS Стандарт Payment Card Industry Data Security Standard (PCI DSS) имеет совершенно другую природу. Он возник вследствие возрастающей потребности повысить безопас- ность обработки кредитных карточек после ряда драматических событий. Например, в июне 2005 года компания CardSystems Services International обнаружила “пропажу” но- меров 40 миллионов кредитных карточек. По оценкам Министерства национальной безопасности США (U.S. Department of Homeland Security) только в 2009 году из-за кражи персональной информации были по- теряны 49,3 млрд долл. Разумеется, не все эти потери могут быть напрямую связаны с потерей номеров кредитных карточек, но возрастающая бдительность разработчиков имела благоприятные последствия. ФБР даже связало поиск мошенников, ворующих номера кредитных карточек, с выявлением террористических групп. Этому способство- вали конкретные инциденты, происшедшие в Бали и мадридском метро. Стандарт PCI DSS является результатом совместных усилий компаний Visa и MasterCard, хотя в данный момент он поддерживается только компанией Visa. В отличие от стандарта ISO 27002, он находится в свободном доступе. Этот стандарт полностью сфокусирован на защите данных о владельцах кредитных карточек и имеет 13 разделов, определяющих требования к этой защите. Поскольку стандарт PCI DSS посвящен обработке карточек, он не является уни- версальным и не подходит для бизнеса, не имеющего дела с кредитными карточками. Однако компании, собирающие данные о кредитных карточках, обязаны строго следо- вать этому стандарту, чтобы избежать крупных штрафов и возможного уголовного пре- следования. Этот документ находится на сайте pcisecuritystandards. org. Документы NIST 800 Сотрудники организации National Institute of Standards and Technology (NIST) разра- ботали рад документов под названием Special Publication (SP) 800, в которых изложили результаты своих исследований, рекомендации и другую информацию, посвященную компьютерной безопасности. Эти документы часто используются для оценки соответ- ствия организаций, имеющих дело с правительственной информацией, требованиям
Глава 22. Безопасность 993 федерального закона США об управлении информационной безопасностью (Federal Information Security Management Act). Это открытые и доступные стандарты. Они имеют превосходное содержание и широко применяются в промышленности. Серия SP 800 содержит более 100 документов. Все они доступны на сайте csrc. nist .gov/publications/PubsSPs .html. Перечислим те из них, с которых целесоо- бразно начинать изучение стандартов, — NIST 800-12, An Introduction to Computer Security: The NIST Handbook; NIST 800-14, Generally Accepted Principles and Practices for Securing Information Technology Systems; NIST 800-34 Rl, Contingency Planning Guide for Information Technology Systems; NIST 800-39, Managing Risk from Information Systems: An Organizational Perspective; NIST 800-53 R3, Recommended Security Controls for Federal Information Systems and Organizations; NIST 800-123, Guide to General Server Security. Стандарт Common Criteria Документ Common Criteria for Information Technology Security Evaluation (известный под названием “Common Criteria”) — это стандарт, по которому оценивают уровень безопасности продукции информационных технологий. Эти рекомендации были уста- новлены международным комитетом, состоящим из представителей разных компаний и отраслей промышленности. Для ознакомления с этим документом и сертифицированными продуктами посетите сайт commoncriteriaportal. org. OWASP Open Web Application Security Project (OWASP) — это некоммерческая всемирная ор- ганизация, занимающаяся повышением безопасности прикладного программного обе- спечения. Она хорошо известна благодаря своему списку “top 10”, посвященному рискам веб- приложений и предназначенному для повышения бдительности разработчиков. Текущую версию этого списка и массу других материалов можно найти на сайте о wasp. org. 22.16. Источники ИНФОРМАЦИИ ПО ВОПРОСАМ ОБЕСПЕЧЕНИЯ БЕЗОПАСНОСТИ В битве за безопасность системы половина успеха — знание современных разрабо- ток в этой области. Если система оказалась взломанной, это вряд ли стало следствием применения технологической новинки. Скорее всего, маленькая брешь в броне системы широко обсуждалась в какой-нибудь телеконференции или группе новостей. Организация CERT В связи с бурной реакцией общественности на вторжение интернет-“червя”, соз- данного Робертом Моррисом-младшим (Robert Morris, Jr.) в 1988 году, организация DARPA (Defense Advanced Research Projects Agency — Управление перспективных иссле- довательских программ Министерства обороны США) учредила новую структуру: CERT (Computer Emergency Response Team — группа компьютерной “скорой помощи”). В ее обязанности входит сбор информации, касающейся компьютерной безопасности. До сих пор это наиболее известный консультативный орган, хотя со временем он стал весь- ма медлительным и бюрократичным. Более того, в самой организации сейчас настаива-
994 Часть II. Работа в сети ют на том, что ее название не означает ничего кроме “зарегистрированной служебной марки университета Карнеги-Меллона”. В средине 2003 года организация CERT заключила договор о партнерстве с Управ- лением компьютерной безопасности Министерства национальной безопасности США (Department of Homeland Security’s National Cyber Security Division, NCSD). Непонятно, к лучшему или к худшему, но новая организация изменила структуру списков рассылки. Объединенная организация под названием US-CERT предлагает четыре списка рас- сылки. Самым полезным среди них является “Technical Cyber Security Alerts”. Подпи- саться на любой из этих четырех списков рассылки можно на сайте forms . us-cert. gov/maillists. Сервер SecurityFocus.com и список рассылки BugTraq Сервер SecurityFocus. com специализируется на сборе новостей и различной ин- формации по вопросам безопасности. В новостях публикуются как общие обзоры, так и статьи, посвященные конкретным проблемам. Есть также обширная библиотека по- лезных документов, удобно отсортированных по тематике. Программный архив сервера содержит инструментальные средства для множества операционных систем. Программы снабжаются аннотациями и пользовательскими рей- тингами. Это наиболее глобальный и исчерпывающий из известных нам архивов подоб- ного рода. Список рассылки BugTraq — это форум для обсуждения проблем безопасности и путей их устранения. Для того чтобы подписаться на него, посетите страницу securityfocus. com/archive. Объем информации, рассылаемый по списку, может оказаться довольно значительным, и отношение “сигнал-шум” довольно плохое. На веб-узле также хранит- ся база данных с отчетами о рассмотренных в форуме BugTraq проблемах. Блог Брюса Шнайера Блог Брюса Шнайера (Bruce Schneier), посвященный вопросам безопасности, яв- ляется ценным и иногда забавным источником информации о компьютерной безопас- ности и криптографии. Кроме того, Шнайер является автором широко известных книг Applied Cryptography и Secrets and Lies, Информацию с его блога можно получать в виде ежемесячного бюллетеня под названием Grypto-Gram. Более подробную информацию вы найдете на сайте schneier.com/crypro-gram.html. Организация SANS SANS (System Administration, Networking, and Security Institute — институт системного и сетевого администрирования и проблем безопасности) — это профессиональная орга- низация, которая спонсирует конференции и обучающие семинары, посвященные во- просам безопасности, а также публикует различную информацию по данной тематике. Ее сайт sans. org является ценным информационным ресурсом, занимающим проме- жуточное положение между сайтами SecurityFocus и CERT; он не столь исчерпывающий, как первый, но и не такой скудный, как второй. Организация SANS рассылает по электронной почте ряд еженедельных и ежемесяч- ных бюллетеней, на которые можно подписаться на ее веб-узле.
Глава 22. Безопасность 995 Информационные ресурсы отдельных дистрибутивов Проблемы, касающиеся безопасности, очень влияют на репутацию, поэтому постав- щики операционных систем остро заинтересованы в том, чтобы помочь пользователям сделать свои системы безопасными. Многие крупные поставщики ведут собственные списки рассылки и публикуют в них бюллетени по вопросам безопасности. Эта же ин- формация часто доступна и на веб-узлах. Не редкость, когда защитные “заплаты” рас- пространяются бесплатно, даже если поставщики обычно взимают плату за программ- ную поддержку. В Интернете есть веб-порталы, например SecurityFocus.com, на которых содер- жится информация, касающаяся конкретных производителей, и имеются ссылки на по- следние официальные пресс-релизы. ©Разработчики системы Ubuntu поддерживают список рассылки, посвященный вопросам безопасности, по адресу: https://lists.ubintu.com/mailman/listinfo/ubuntu-security-announce Рекомендации по поводу защиты SuSE можно найти по адресу: ** novell.com/linux/security/securitysupport.html Для того чтобы подписаться на официальный список рассылки, посвященный во- просам безопасности SuSE, посетите страницу suse.com/en/private/support/online_help/mailinglists/index.html ... Объявления о продуктах компании Red Hat, связанных с безопасностью, рассылаются по списку “Enterprise watch”, который расположен по адресу: ’redhat.com/mailman/listinfo/enterprise-watch-list. * Несмотря на то что компания Sun Microsystems была приобретена компанией soians Oracle, ее блог, посвященный вопросам безопасности, продолжает обновлять- ся (blogs . sun. com/security/category/alerts). Когда торговая Марка и местоположение блога изменятся, вероятно, вы найдете там необходи- мую ссылку. Д°СТУП к предложениям компании HP можно получить с помощью сайтов us-support.external.hp.com (для Америки и Азии) и europe-support. external. hp. com (для Европы). Информация, связанная с обеспечением безопасности, тщательно скрыта. Для того чтобы найти ее, войдите в область maintenance/support и выберите пункт поиска по базе технических знаний. Ссылка, находящаяся среди опций фильтра на этой странвде, приведет вас к архиву бюллетеней по вопросам безопасности. (Если вы не зарегистри- рованы, придется это сделать.) В этой области можно также найти “заплаты” для систем безопасности. Для того чтобы получать бюллетени по вопросам безопасности, вернитесь на глав- ную страницу в область maintenance/support и выберите пункт “Subscribe to proactive notifications and security bulletins”. К сожалению, по электронной почте подписаться не получится. • Подписаться на уведомления по вопросам безопасности системы AIX мож- но с помощью ссылки “Му notifications” на странице ibm.com/systems/ support.
996 Часть II. Работа в сети Информация о безопасности продуктов Cisco распространяется в виде практических замечаний, список которых находится по адресу cisco.com/public/support/tac/ fn index.html. Для того чтобы подписаться на список рассылки, посвященный во- просам безопасности продуктов Cisco, направьте письмо по адресу ma jordomo@cisco. сот, включив в тело сообщения строку “subscribe cust-security-announce”. другие списки рассылки и веб-сайты Перечисленные выше контактные адреса — лишь небольшая часть интернет-ресурсов по вопросам безопасности. Учитывая объем имеющейся сегодня информации, а также скорость, с которой появляются и исчезают различные ресурсы, мы посчитали целесоо- бразным указать несколько “метаресурсов”. Хорошей стартовой площадкой является веб-узел linuxsecurity.com, на котором каждый день размещается несколько сообщений по вопросам безопасности системы Linux. Он также содержит постоянно обновляющуюся коллекцию советов по вопросам безопасности системы Linux, регистрирует происходящие события и поддерживает ра- боту групп пользователей. (IN)SECURE — это свободно распространяемый двумесячный журнал, содержащий информацию о современных тенденциях, а также интервью с выдающимися специали- стами в области безопасности. Правда, некоторые статьи в этом журнале следует читать с долей недоверия — убедитесь, что ее автор не занимается беззастенчивой рекламой своей продукции. Сайт Linux Security (linuxsecurity.com) освещает последние новости, касающие- ся системы Linux и вопросов безопасности открытых кодов. Для того чтобы извлечь из него максимальную выгоду, подпишитесь на канал RSS. Linux Weekle News — это симпатичный источник информации о ядре, безопасности, дистрибутивных пакетах и других вопросах. Раздел, посвященный проблемам безопас- ности, находится по адресу lwn. net/security. 22.17. Что нужно делать в случае атаки на сервер Прежде всего, не паникуйте! Скорее всего, к моменту обнаружения взлома большая часть ущерба уже нанесена. Возможно, хакер “гулял” по системе несколько недель или даже месяцев. Вероятность того, что вам удалось выявить факт взлома, происшедшего всего час назад, близка к нулю. В свете этого мудрая сова приказывает сделать глубокий вдох и начать тщательно продумывать стратегию устранения взлома. Старайтесь не вспугнуть злоумышленника, во всеуслышание заявляя о происшествии или выполняя действия, которые могут на- сторожить того, кто наблюдал за деятельностью организации на протяжении нескольких недель. Подсказка: в этот момент неплохо выполнить резервное копирование. Надеемся, это не удивит нарушителя?!13 Стоит также напомнить самому себе о том, что, согласно исследованиям, в 60% ин- цидентов, связанных с нарушением безопасности, присутствовал “внутренний враг”. Не изучив всех фактов, старайтесь не посвящать в проблему лишних людей, кем бы они ни были. Приведем короткий план, который поможет администратору пережить кризис. 13 Если создание резервных копий не является “нормальным” действием в вашей организации, то обнаружение взлома окажется самой незначительной из ожидающих вас проблем.
Глава 22. Безопасность 997 Этап 1: не паникуйте. Во многих случаях проблема обнаруживается только спустя какое-то время. Еще один-два часа или дня уже ничего не решают. Однако имеет значе- ние реакция на событие — паническая или рациональная. Часто в результате возникшей паники ситуация только усугубляется уничтожением важной информации, которая по- зволяет выявить нарушителя. Этап 2: определите адекватную реакцию. Никому не выгодно раздувать инцидент. Будьте благоразумны. Решите, кто из персонала будет участвовать в решении возникшей проблемы и какие ресурсы при этом должны быть задействованы. Остальные будут по- могать осуществлять “вынос тела”, когда все закончится. Этап 3: соберите всю возможную информацию. Проверьте учетные и журнальные фай- лы. Попытайтесь определить, где первоначально произошел взлом. Выполните резерв- ное копирование всех систем. Убедитесь в том, что резервные ленты физически защи- щены от записи, если вы вставляете их в дисковод для чтения. Этап 4: оцените нанесенный ущерб. Определите, какая важная информация (если та- ковая имеется) “покинула” компанию, и выработайте подходящую стратегию смягчения возможных последствий. Оцените степень будущего риска. Этап 5: выдерните шнур. Если это необходимо и возможно, отключите “взломанные” компьютеры от сети. Перекройте обнаруженные “дыры”. Организация CERT предлагает инструкции по обнаружению взлома. Этот документ находится по адресу: cert.org/tech_tips/win-UNIX-system_compromise.html Этап 6: разработайте стратегию восстановления. Соберите толковых людей и обсуди- те план восстановления. Не заносите его в компьютер. Сосредоточьтесь на том, чтобы потушить “пожар” и свести ущерб к минимуму. Избегайте обвинений в чей-либо адрес или нагнетания обстановки. Не забывайте о психологическом ударе, который могут ис- пытать пользователи. Этап 7: сообщите о своем плане. Расскажите пользователям и управляющему персона- лу о последствиях взлома, возможных будущих проблемах и предварительной стратегии восстановления. Будьте честны и откровенны. Инциденты, связанные с безопасностью, являются неотъемлемой частью современных сетей. Это не отражение ваших способно- стей как системного администратора или чего-то другого, чего можно было бы стыдить- ся. Открытое признание возникшей проблемы — 90% победы, если при этом вы демон- стрируете, что у вас есть план выхода из ситуации. Этап 8: воплотите план в жизнь. Вы знаете свои системы и сети лучше, чем кто бы то ни было. Доверьтесь плану и инстинктам. Посоветуйтесь с коллегами из других органи- заций, чтобы убедиться в правильности выбранного направления. Этап 9: сообщите об инциденте в соответствующие органы. Если в инциденте участво- вал “внешний игрок”, сообщите об этом случае в организацию CERT. Соответствующий адрес электронной почты — cert@cert. org. Предоставьте им как можно больше ин- формации. Стандартная форма для отчета находится на веб-узле cert. org. Ниже приведен спи- сок того, что желательно включить в отчет. • имена, модели “взломанных” компьютеров, а также установленные на них опера- ционные системы; • список “заплат”, которые были установлены в системе на момент инцидента; • список учетных записей, подвергшихся нападению; • имена и IP-адреса всех удаленных компьютеров, вовлеченных в инцидент;
998 Часть II. Работа в сети • контактная информация, если известны администраторы удаленных систем; • соответствующие журнальные записи и учетные данные. Если есть подозрение, что вами обнаружена ранее неизвестная проблема в программ- ном обеспечении, следует также сообщить об этом компании-разработчику. 22.18. Рекомендуемая литература • Barrett, Daniel J., Siverman Richard E., Byrnes Robert G. “Linux Security Cookbook”. Sebastobol, CA: O’Reilly Media, 2003. • Bauer Michael D., “Linux Server Security (2nd Edition). Sebastobol, CA: O’Reilly Media, 2005. • Bryant, William. “Designing an Authentication System: a Dialogue in Four Scenes.” 1988; web.mit.edu/kerberos/www/dialogue.html. • Cheswick William R., Bellovin Steven M., Rubin Aviel D. “Firewalls and Internet Security: Repelling the Wily Hacker (2nd Edition). Reading, MA: Addison-Wiley, 2003. • Curtin Matt, Ranum Marcus, Robinson P.D. “Internet Firewalls: Frequently Asked Quetions”, 2004; interhack.net/pubs/fwfaq. • Farrow Rick, Power Richard “Network defence article series”, 1998—2004; spirit. com/Network. • Fraser B. (Ed.) “RFC2196: Site Security Handbook.” 1997; rfc-editor.org. • Garfinkel Simson, Spafford Gene, Schwartz Alan. “Practical UNIX and Internet Security (3rd Edition). Sebastobol, CA: O’Reilly Media, 2003. • Kerby Fred et. al. SANS Intrusion Detection and Response FAQ”. SANS. 2009; sans. org/resources/idfaq. • Lyon Gordon Fyodor. “Nmap Network Scanning: The Official Nmap Project Guide to Network Discovery and Security Scanning”. Nmap Project, 2009. • Mann Scott, Mitchell Ellen I. “Linux System Security: The Administrator’s Guide to Open Source Security Tools (2nd Edition). Upper Saddle River, NJ: Prentice Hall PTR, 2002. • Morris Robert, Thompson Ken. “Password Security: A Case History”. Communications pf the ACM, 22 (11): 594—597, November, 1979. Reprinted in “Unix System Manager's Manual”, 4.3 Berkeley Software Distribution. Universityof California, Berkeley, April 1986. • Ritchie, Dennis M. “On the Security of UNIX.” May 1975. Перепечатано в UNIX System Manager's Manual, 4.3 Berkeley Software Distribution. University of California, Berkeley. April 1986. • Schneier, Bruce. Applied Cryptography: Protocols, Algorithms, and Source Code in C. New York, NY: Wiley, 1995. • Steves K. “Building a Bastion Host Using HP-UX 11”. HP Consulting, 2002; tinyurl. com/5sffy2. • Thompson, Ken. “Reflections on Trusting Trust.” Опубликовано в ACM Turing Award Lectures: The First Twenty Years 1966-1985. Reading, MA: ACM Press (Addison-Wesley), 1987.
Глава 22. Безопасность 999 22.19. Упражнения 22.1. Каковы преимущества SSH-аутентификации с использованием паролей Linux по сравнению с SSH-аутентификацией посредством идентификационного пароля и пары ключей. Если один из методов обеспечивает большую безопасность, обяза- тельно ли переходить на него? 22.2. * Туннели SSH часто являются единственным средством передачи трафика на удаленный компьютер, к которому у вас нет административного доступа. Прочтите man-страницу команды ssh и составьте команду, которая организует туннельную пересылку трафика с порта 113 локального компьютера на порт 113 узла mail. remotenetwork.org. Точкой перенаправления туннеля тоже должен быть узел mail.remotenetwork.org. 22.3. ★ Проанализируйте один из последних преданных огласке инцидентов, связан- ных с компьютерной безопасностью. Найдите соответствующие “заплаты” или способы защиты компьютеров вашей лаборатории. Укажите, какими источниками информации вы пользовались и какие действия следует предпринять для защиты системы. 22.4. Предварительно получив разрешение от администратора, инсталлируйте ути- литу John the Ripper, которая ищет учетные записи со “слабыми” паролями. а) модифицируйте исходный код этой утилиты, чтобы она отображала только ре- гистрационные имена, но не пароли. б) примените утилиту John the Ripper к файлу паролей вашей лаборатории (по- требуется получить доступ к файлу /etc/shadow) и посмотрите, сколько паро- лей она сможет взломать. в) задайте собственный пароль в виде слова из словаря и заставьте утилиту john проверить только вашу запись файла /etc/shadow. Сколько времени ушло на взлом пароля? г) попробуйте разные варианты написания (с заглавной буквы, с цифрой в кон- це, однобуквенный пароль и так далее) и оцените возможности утилиты. 22.5. Выберите два компьютера в лаборатории и назначьте один из них мишенью, а второй — зондом. 22.6. Инсталлируйте на зондирующем компьютере утилиты nmap и Nessus и попытай- тесь атаковать компьютер-мишень. Как можно обнаружить факт атаки? 22.7. Создайте на компьютере-мишени брандмауэр с помощью команды iptables для защиты от этих атак. Можно ли теперь обнаружить факт атаки? Как именно? 22.8. Какими дополнительными средствами защиты можно воспользоваться? (Необходим доступ с правами суперпользователя.) 22.9. Используя общие списки рассылки или веб-сайт, идентифицируйте приложе- ние, которое недавно обнаружило уязвимость. Найдите надежный источник ин- формации о “лазейке” и обсудите пути ее устранения. 22.10. Программы с установленным битом SETUID часто являются необходимыми. А вот SETUID-сценариев интерпретатора команд следует избегать. Почему? 22.11. Используя команду tcpdump, перехватите трафик службы FTP в активном и пассивном режимах. Как необходимость поддерживать анонимный сервер FTP
1000 Часть II. Работа в сети влияет на функционирование брандмауэра? Что именно должны разрешить пра- вила брандмауэра? (Необходим доступ с правами суперпользователя.) 22.12. Что разрешают и запрещают показанные ниже правила, сообщаемые коман- дой iptables? Что можно сделать для повышения безопасности такой системы? (Подсказка: цепочки output и forward можно расширить.) Chain INPUT target prot block all (policy ACCEPT) opt source anywhere destination anywhere Chain FORWARD (policy ACCEPT) target prot opt source all — anywhere destination anywhere Chain OUTPUT target prot (policy ACCEPT) opt source destination Chain block (1 references) target prot opt source destination ACCEPT all ESTABLISHED — anywhere anywhere state RELATED, ACCEPT tcp — anywhere anywhere state NEW tcp dpt:www ACCEPT tcp — anywhere anywhere state NEW tcp dpt:ssh ACCEPT tcp — 128.138.0. .0/16 anywhere state NEW tcp dpt: kerberos ACCEPT icmp — anywhere anywhere DROP all anywhere anywhere 22.13. Проанализируйте цепочки правил вашего брандмауэра. Какие стратегии за- щиты они выражают? Все ли надежно в такой системе? (Выполнение этого упраж- нения может потребовать взаимодействия с администраторами, отвечающими за безопасность организации.) 22.14. Напишите программу, которая находит сетевые интерфейсы, работаю- щие в “беспорядочном” режиме. Регулярно запускайте эту программу для раннего обнаружения попыток вторжения в сеть. Какую нагрузку на сеть создает програм- ма? Ее нужно запускать на каждом компьютере или достаточно одного? Можете ли вы составить такой пакет, который сообщит о том, что интерфейс находился в “беспорядочном” режиме? (Необходим доступ с правами суперпользователя.)
Глава 23 Веб-хостинг В настоящее время системы UNIX и Linux являются основными платформами для обслуживания веб-содержимого и веб-приложений. Это идеальные системы для этой цели, поскольку они изначально были разработаны как многозадачные системы с вы- теснением (preemptive, multitasking systems). Они могут обрабатывать огромный объем веб-запросов и делать это эффективно, безопасно и надежно. В некоторых аспектах веб-приложения действительно облегчили работу администра- торов. Технологии “Web 2.0”, такие как AJAX (Asynchronous JavaScript and XML) и дина- мический HTML, не только предоставили пользователям функциональные возможности локально инсталлированных приложений, но и освободили системных администрато- ров от проблем, связанных с развертыванием программного обеспечения; из всего про- граммного обеспечения на клиентской стороне требуется лишь веб-браузер. На серверной стороне типичной конфигурацией является высоко функциональный стек LAMP (Linux, Apache, MySQL и PHP/Perl/Python)1. Для приложений, связанных с управлением базами данных, популярные веб-приложения с открытым кодом основаны на языке Ruby. Оба стека являются разумным выбором и легко поддерживаются. 23.1. Основы ВЕБ-ХОСТИНГА Хостинг веб-узла мало чем отличается от других сетевых услуг. Демон прослушивает TCP-порт с номером 80 (в соответствии со стандартом HTTP), принимает запросы на выдачу документов, а затем посылает эти документы пользователю. Многие из этих 1 Дистрибутивные пакеты, не содержащие операционную систему Linux, называют эту конфи- гурацию просто АМР. В системе Solaris она называется SAMP, а в среде пользователей системы Windows — WAMP. Поди разбери.
1002 Часть II. Работа в сети документов генерируются “на лету” во взаимодействии с базами данных и прикладными каркасами, но для основного протокола HTTP это не характерно. Обнаружение ресурсов в сети веб Информация в Интернете организована с помощью архитектуры, определенной ор- ганизацией Internet Society (ISOC). Это целеустремленная (хотя и управляемая комите- тами) организация, которая поддерживает согласованную работу и операционную со- вместимость в Интернете. £3 Информацию об организации Internet Society можно найти в разделе 14.1. Организация ISOC определяет три способа идентификации ресурсов: унифициро- ванные идентификаторы ресурсов (Uniform Resource Identifier — URI), унифицирован- ные указатели ресурсов (Uniform Resource Locator — URN) и унифицированные име- на ресурсов (Uniform Resource Names — URN). Как показано на рис. 23.1, по существу, унифицированные указатели и имена ресурсов представляют собой частный случай уни- фицированного идентификатора ресурсов. Рис. 23.1. Классификация унифицированных идентификаторов ресурсов В чем же различия между ними? • Унифицированные указатели ресурсов сообщают вам, как найти ресурс, описывая его механизм первичного доступа (например, http: / /admin. com). • Унифицированные имена ресурсов идентифицируют (“называют”) ресурс без указания на него или сообщают, как получить доступ к нему (например, urn: isbn: 0-13-020601-6). Что же тогда называется URI? Если доступ к ресурсу возможен только через Интер- нет, то используется указатель URL. Если же доступ к ресурсу возможен не только через Интернет, но и с помощью других средств, то используется идентификатор URL Унифицированные указатели ресурсов Большую часть времени мы работаем с указателями URL, описывающими доступ к объекту с помощью пяти базовых компонентов. • Протокол или приложение • Имя узла • Порт TCP/IP (необязательно) • Каталог (необязательно) • Имя файла (необязательно) В табл. 23.1 перечислены протоколы, которые наиболее часто упоминаются в URL- адресах.
Глава 23. Веб-хостинг 1003 Таблица 23.1. Протоколы URL-адресов Протокол file Доступ к локальному файлу (выход в Интернет file://etc/syslog.conf не осуществляется) ftp http https Idap mailto Доступ к файлам по протоколу FTP ftp://ftp.admin.com/adduser.tar.gz Доступ к файлам по протоколу HTTP http://admin.com/index.html Доступ к файлам по протоколам HTTP/SSL https://admin.com/order.shtml Доступ к службе каталогов LDAP ldap://ldap.bigfoot.com:389/cn=Herb Отправка электронного сообщения по указан- mailto:sa-book@admin.com ному адресу Принцип работы HTTP HTTP — это клиент-серверный протокол, не хранящий информацию о состоянии сеанса. Клиент запрашивает у сервера “содержимое” заданного URL-адреса. Сервер дт- вечает, передавая поток данных или возвращая сообщение об ошибке. Затем клиент мо- жет запросить следующий объект. Поскольку протокол HTTP настолько прост, можно легко подключиться к веб-бра- узеру с помощью утилиты telnet. Для этого достаточно подключиться к порту 80 вы- бранного веб-сервера. После установления соединения сервер готов принимать НТТР- команды. Чаще всего используется команда GET, которая запрашивает содержимое документа. Обычно она задается в формате GET /. В этом случае возвращается корневой документ сервера (как правило, начальная страница). Протокол HTTP чувствителен к регистру символов, поэтому команды следует набирать прописными буквами. $ telnet localhost 80 Trying 127.0.0.1. . . Connected to localhost.atrust.com. Escape character is ,A] ’. GET I <далее следует содержимое файла, заданного по умолчания» Connection closed by foreign host. Более “полный” HTTP-запрос должен включать номер версии протокола HTTP, за- прашиваемый узел (необходимый для того, чтобы извлечь файл из виртуального узла, использующего имена) и другую информацию. В этом случае ответ, помимо возвращае- мых данных, содержит информативные заголовки. $ telnet localhost 80 Trying 127.0.0.1. . . Connected to localhost.atrust.com. Escape character is ,A] ’ . GET / HTTP/1.1 Host: www.atrust.com HTTP/1.1 200 OK Date: Sat, 01 Aug 2009 17:43:10 GMT Server: Apache/2.2.3 (CentOS) Last-Modified: Sat, 01 Aug 2009 16:10:22 GMT Content-Length: 7044 Content-Type: text/html
1004 Часть II. Работа в сети сдалее следует содержимое файла, заданного по умолчании» Connection closed by foreign host. В данном случае мы сообщили серверу, что собираемся передавать данные по прото- колу НТТ версии 1.1, и назвали виртуальный узел, у которого мы запрашиваем инфор- мацию. Сервер вернул нам код состояния (НТТР/1.1 200 ОК), текущую дату и время, имя и версию программного обеспечения, на котором выполняется протокол, дату по- следнего изменения запрашиваемого файла и содержимое запрашиваемого файла. Ин- формация заголовка отделена от содержимого одной пустой строкой. Генерирование содержимого "на лету" Помимо работы со статическими документами, HTTP-сервер способен выдавать пользователям страницы, формируемые “налету”. Например, если требуется отобра- зить текущие время и температуру, сервер вызывает сценарий, предоставляющий эту информацию. Такие сценарии зачастую создаются средствами CGI (Common Gateway Interface — единый шлюзовой интерфейс). CGI является не языком программирования, а, скорее, спецификацией, описываю- щей обмен информацией между HTTP-сервером и другими программами. Чаще всего CGI-сценарии представляют собой программы, написанные на языке Perl, Python или PHP. В действительности подойдет практически любой язык программирования, кото- рый поддерживает операции ввода-вывода в режиме реального времени. Встроенные интерпретаторы Модель CGI обеспечивает высокую гибкость, благодаря которой разработчик веб- приложения может свободно использовать любой интерпретатор или язык сценариев. К сожалению, запуск отдельного процесса в каждом сценарии может стать ночным кошмаром для загруженного веб-сервера, обрабатывающего значительный объем дина- мического содержания. Кроме поддержки дополнительных внешних сценариев CGI, многие веб-серверы < определяют модульную архитектуру, позволяющую интерпретаторам сценариев, таким j как Perl и РНР, самим встраиваться в веб-сервер. Это связывание значительно увеличи- вает производительность, поскольку веб-сервер больше не обязан запускать отдельный процесс, чтобы обрабатывать каждый запрос сценария. Архитектура, большей частью, скрыта от разработчиков сценариев. Как только сервер видит файл, имя которого за- канчивается специфическим расширением (например, .pl или .php), он посылает со- держимое файла встроенному интерпретатору для выполнения. Некоторые интерпрета- торы, которые могут выполняться внутри веб-сервера Apache, перечислены в табл. 23.2. Таблица 23.2. Модули встроенных сценариев для веб-сервера Apache Язык . Имя встроенного интерпретатора Источник информации Perl mod_perl perl.apache.org Python mod_python modpython.org PHP mod_php (традиционно) Zend server (коммерческий ускоритель) apache.org zend.com Ruby on Rails Phusion Passenger (он же mod jails или mod jack) modrails.com
Глава 23. Веб-хостинг 1005 Модуль FastCCI В некоторых ситуациях удобно использовать модуль FastCGI (fastcgi. com). Этот модуль улучшает производительность сценариев, запуская их один раз, а затем оставляя выполняться для обслуживания многих запросов. Такая схема снижает стоимость запу- ска интерпретатора и анализа сценария при выполнении нескольких запросов. Иногда она работает быстрее, чем запуск интерпретатора внутри самого веб-сервера Apache. К сожалению, в этом случае сценарии приходится модифицировать, чтобы они со- ответствовали новому способу взаимодействия с веб-сервером. Основной протокол реа- лизовать легко, но сценарии FastCGI не могут избежать погрешностей при управлении памятью. Неудачные завершения сценариев оставляют в памяти следы, количество кото- рых со временем возрастает. Другая потенциальная опасность заключается в персистент- ности данных между выполнением запросов; программист должен гарантировать, что эти данные не будут взаимодействовать друг с другом. Разработчики веб-приложений должны оценить, стоит ли повышение производительности за счет сценариев FastCGI дополнительных усилий и риска. Безопасность сценариев Как правило, CGI-сценарии интересуют веб-разработчиков и программистов. Одна- ко один из аспектов сценариев не обходит стороной и системных администраторов — безопасность. Поскольку CGI-сценарии получают доступ к файлам, сетевым соедине- ниям и прочим механизмам перемещения данных, выполнение этих сценариев несет потенциальную угрозу компьютеру, на котором инсталлирован HTTP-сервер. Ведь CGI- сценарий или надстройка позволяет любому пользователю выполнять программы на сервере. Поэтому CGI-сценарии должны подчиняться тем же правилам безопасности, что и другие сетевые программы. Сайт OWASP (Open Web Application Security Project, owasp. org) публикет массу пре- восходных материалов о веб-безопасности. Общую информацию по вопросам безопас- ности можно найти в главе 22. Серверы приложений Сложные промышленные приложения могут требовать больше функциональных возможностей, чем может предоставить базовый НТТ-сервер. Например, современные страницы Web 2.0 часто содержат компоненты, связанные с динамическими котиров- ками (например, биржевым аппаратом). Несмотря на то что на веб-сервере Apache эту функциональную возможность можно реализовать с помощью таких технологий, как AJAX и JavaScript Object Notation (JSON), некоторые разработчики предпочитают более богатые языки, такие как Java. Обычно для взаимодействия приложения, написанного на языке Java, с другими источниками данных на предприятии используется “сервлет”. Сервлеты (servelet) — это программы, которые выполняются на сервере прикладных программ поверх его платформы. Серверы прикладных программ могут работать не- зависимо или в сочетании с веб-сервером Apache. Большинство серверов прикладных программ разрабатывается “программистами для программистов” и не имеет достаточно мощного механизма отладки, необходимого системным администраторам. В табл. 23.3 перечислены некоторые серверы прикладных программ для систем UNIX/Linux. Если вам придется столкнуться с необходимостью поддержки одного из этих серве- ров прикладных программ, поищите документацию, описывающую программы, и по-
1006 Часть II. Работа в сети тренируйтесь. Поверьте нам, это не та технологию, которую можно освоить “на ходу”, как большинство приложений для систем UNIX и Linux. Мы вас предупредили. Таблица 23.3. Модули встроенных сценариев для веб-сервера Apache Сервер тив3 Tomcat Открытый код tomcat.apache.org GlassFish Открытый код grassfish.dev.j ava.net JBoss Открытый код jboss.org 0CJ4 Коммерческий oracle.com/technology/tech/j ava/oc4j WebSphere Коммерческий ibm.com/websphere WebLogic Коммерческий oracle.com/appserver/weblogic/weblogic-suite.html Jetty Открытый код eclipse.org/j etty Распределение нагрузки Довольно трудно предсказать, сколько обращений (запросов к одному объекту, тако- му как текстовый файл или изображение) либо операций просмотра страниц (запросов всех объектов на одной просматриваемой странице) может обработать сервер за единицу времени. Все зависит от операционной системы, ее настройки, аппаратной платформы, а также от организации веб-узла (например, содержатся ли там статические HTML-стра- ницы или выполняются запросы к базе данных и математические вычисления). Только непосредственное определение производительности и уточнение фактических параметров узла, использующего реальное аппаратное обеспечение, позволят ответить на этот вопрос. Иногда подсказку могут дать разработчики, создающие аналогичные узлы с помощью аналогичного аппаратного обеспечения. Но ни в коем случае не стоит пола- гаться на числа, указываемые поставщиками коммерческих систем. Кроме того, следу- ет помнить о том, что одним из основных факторов является пропускная способность. Отдельная машина, обслуживающая статические HTML-файлы и изображения, может легко выдать столько данных, чтобы вызвать перегрузку канала типа ОСЗ (155 Мбайт/с). Иначе говоря, вместо показателя производительности одного сервера лучше сосре- доточиться на показателе масштабируемости; перед перегрузкой интерфейса Ethernet веб-сервер обычно интенсивно использует центральный процессор или механизм ввода- вывода. Убедитесь в том, что вы и ваша команда веб-дизайнеров работаете по плану, ко- торый позволяет распределять нагрузку узла между несколькими серверами. Распределение нагрузки повышает как производительность работы, так и избыточ- ность. Существует несколько различных подходов к распределению нагрузки: круговая система DNS, аппаратное распределение нагрузки и программное распределение на- грузки. Круговая система DNS — это простейшая форма распределения нагрузки. В этой си- стеме нескольким IP-адресам назначается одно имя узла. Когда на сервер имен поступа- ет запрос к веб-серверу с заданным IP-адресом, клиент получает в ответ один 1Р-адрес. Адреса обрабатываются один за другим в круговой последовательности. Ш Информация о системе DNS и ее функционировании изложена в главе 17. Круговая система DNS используется очень широко. Она применяется даже компа- нией Google. Например, если вы пошлете инфраструктуре DNS запрос о сервере www. google. com, то получите в ответ примерно такие записи.
Глава 23. Веб-хостинг 1007 $ dig www.google.com а ;; QUESTION SECTION: ;www.google.com. IN A ;; ANSWER SECTION: www.google.com. 0 www.1.google.com. www.1.google.com. www.1.google.com. www.1.google.com. www.1.google.com. www.1.google.com. IN CNAME www.1.google.com. 65 IN A 74.125.95.104 65 IN A 74.125.95.105 65 IN A 74.125.95.106 65 IN A 74.125.95.147 65 IN A 74.125.95.99 65 IN A 74.125.95.103 В данном примере имя www.google.com отображается в каноническое имя www. 1.google. com. Компания Google добавляет этот уровень косвенной адресации, чтобы делегировать ответственность за доставку содержимого внутреннему провайдеру, например Akamai (см. раздел 23.6), не предоставляя управления содержанием (CDN) своему корневому домену. Клиент DNS может выбрать любую из записей А, возвращенных для сайта www. 1. google. com. Предполагается, что это делается случайным образом. В противополож- ность общепринятому мнению, порядок, в котором возвращаются записи А, значения не имеет. В частности, первая запись не является “главной”. Поскольку клиенты выби- рают адрес случайно, нагрузка на этот сайт примерно равномерно распределяется между шестью серверами. Недостатком круговой системы DNS является то, что в случае отказа сервера данные DNS необходимо обновить, чтобы можно было перенаправить трафик в обход. Длинные тайм-ауты, связанные с записями А, могут сделать эту операцию сложной и ненадеж- ной. С другой стороны, короткие тайм-ауты мешают кешированию и замедляют поиск сайта в системе DNS, затрачивая дополнительные ресурсы. Обсуждение этой проблемы изложено в разделе 17.2. В приведенном выше примере записи А можно кешировать за 65 секунд до истече- ния срока их действия. Это относительно короткий тайм-аут. Если в вашем распоряже- нии есть резервный сервер, можно установить более длинные тайм-ауты для записей А и просто переназначить IP-адрес поврежденного сервера на резервный сервер. Аппаратное распределение трафика является довольно простой альтернативой кру- говой системе DNS, но оно требует наличия резервного кеша. К аппаратному обеспече- нию, предназначенному для распределения нагрузки, относятся Big-IP Controller ком- пании F5 Networks, веб-коммутаторы Alteon компании Nortel и коммутаторы Content Services Swithes компании Cisco. Эти устройства ориентируются на параметры, задавае- мые администратором, в частности на время отклика отдельного сервера и время до- ступности. Благодаря распределению нагрузки увеличивается производительность и от- казоустойчивость сети. Программное распределение нагрузки не требует использования аппаратного обеспе- чения; эти программы можно запускать в системе UNIX. Существуют как открытые, так и коммерческие программы для распределения нагрузки. К программам с открытым ко- дом относятся Linux Virtual Server (linuxvirtualserver. org) и модуль для распределе- ния нагрузки между прокси-серверами (mod_proxy_balancer), внедренный на веб-сервере Apache 2.2. Примером коммерческого продукта является программа Zeus (zeus.com). Компания Google на самом деле использует сочетание круговой DNS-системы и ап- паратного распределения нагрузки. Более подробно этот механизм описан в Википедии в статье “Google platform”.
1008 Часть II. Работа в сети Помните, что в настоящее время большинство сайтов генерируется автоматически. Эта архитектура предусматривает колоссальную нагрузку на серверы баз данных. При необходимости проконсультируйтесь у администратора ваших баз данных, как лучше организовать распределение нагрузки между многими серверами баз данных. 23.2. Инсталляция НТТР-сервера Установить и поддерживать веб-сервер очень просто! Веб-службы значительно уступа- ют системам электронной почты и службе DNS в плане сложности администрирования. Выбор сервера Существует несколько HTTP-серверов, но чаще всего используют сервер Apache, ко- торый отличается высокой гибкостью и производительностью. По состоянию на январь 2010 года, 54% веб-серверов в Интернете работали под управлением Apache, обслуживая 111 миллионов сайтов. Среди остальных сайтов 24% обслуживаются серверами Microsoft. Это распределение рыночных долей между серверами Apache и Microsoft на протяжении последних пяти лет практически не изменилось. Более подробную информацию о ры- ночных долях этих веб-серверов можно найти на сайте news.netcraft.com/acrhives/web_server_survey.html Полезную информацию для сравнения существующих HTTP-серверов содержит сайт serverwatch. сот/stypes (выберите в меню Server Туре команду web). Ниже указано несколько факторов, которые следует учитывать при выборе. • Надежность • Производительность • Своевременность обновлений и исправлений ошибок • Доступность исходного кода • Уровень коммерциализации или поддержки сообщества • Цена • Безопасность и контроль доступа • Возможность использования в качестве прокси-сервера • Возможность шифрования данных Код HTTP-сервера Apache распространяется свободно и доступен на сайте Apache Group apache. org. Если вы не желаете заниматься компиляцией кода, можно инстал- лировать пакет готовых исполняемых модулей (подсказки в табл. 23.4). Некоторые по- ставщики не употребляют слово Apache, но, по существу, вы получите именно его. Таблица 23.4. Адреса модулей веб-сервера Apache Система Катален* Рекомендуемый источник , | Linux /usr/sbin Инсталлируется как часть стандартного дистрибутива Solaris /usr/apache2 Инсталлируется как часть стандартного дистрибутива HP-UX /opt/apache Инсталлируется HP-UX 11i “Web Server suite” AIX /usr/IBMIHS Инсталлируется продукт IBM HTTPServer
Глава 23. Веб-хостинг 1009 Инсталляция сервера Apache Если вы решили загрузить исходный код сервера и скомпилировать его самостоя- тельно, выполните сценарий configure, который включен в дистрибутив. Этот сцена- рий автоматически определяет тип операционной системы, а также устанавливает со- ответствующие make-файлы проекта. Потребуется указать каталог, в котором должен располагаться сервер Apache. Для этого предназначена опция -prefix. $ ./configure —prefix=/etc/httpd Если вы не укажете префикс, то по умолчанию будет использоваться каталог /usr/ local/apache2. Для того чтобы увидеть список возможных аргументов, выполните команду config -help. Большинство этих аргументов содержит опции —enable-модуль= и —disable-модуль-, включающие и отключающие функциональные компоненты, су- ществующие внутри веб-сервера. Задав опцию —enable-MO^yjib=shared (или —enable-mods-shared-all, чтобы сделать совместно используемыми все модули), можно также скомпилировать модули в файлы динамических совместно используемых объектов. Это позволит вам позднее ре- шить, какие модули включить, а какие исключить; во время выполнения загружаются только модули, указанные в конфигурации httpd. Эта конфигурация по умолчанию за- дается для бинарного пакета Apache — все модули компилируются в совместно исполь- зуемые объекты и динамически загружаются при запуске веб-сервера Apache. Единственным недостатком совместно используемых библиотек является более долгое время загрузки и небольшое снижение производительности (обычно менее чем на 5%). Для большинства сайтов возможность “на лету” добавлять новые модули и вклю- чать существующие модули без перекомпиляции перевешивает снижение производи- тельности. Полный список стандартных модулей приведен на сайте httpd.apache. org/docs- 2.2/mod. Несмотря на то что набор модулей, предлагаемый по умолчанию, является вполне приемлемым, можно также включить модули, указанные в табл. 23.5. Таблица 23.5. Полезные модули Apache, которые не включены по умолчанию Модуль Л auth_dbm Использует базу данных DBM для управления доступом со стороны пользователей/групп (ре- комендуется для обеспечения индивидуального доступа пользователей на основе паролей) rewrite Переписывает URL-адреса на основе регулярных выражений expires Позволяет включать в документ дату его истечения proxy Конфигурирует Apache в качестве прокси-сервера mod ssi Включает поддержку протокола Secure Socket Layer* для HTTPS , а Этот протокол известен также под именем Transport Layer Security или RSL (раздел 23.4). Аналогичным образом можно отключить модули, перечисленные в табл. 23.6. От- ключая неиспользуемые модули, следует исходить из соображений безопасности и по- вышения производительности. После завершения сценария configure выполните команды make и make install Для фактической компиляции и установки соответствующих файлов.
1010 Часть II. Работа в сети Таблица 23.6. Модули Apache, которые могут быть отключены модуль .. asis Позволяет посылать файлы указанных типов без использования НТТР-заголовков autoindex Индексирует каталоги, в которых отсутствует начальная HTML-страница (например, index.html) env Позволяет устанавливать специальные переменные среды для CGI-сценариев userdir Разрешает пользователям иметь собственные HTML-каталоги К сожалению, компиляция веб-сервера Apache в системе AIX не такая простая. Советы и приемы для этой инсталляции приведены на сайте people. apache. org/~trawick/apache-2-on-aix.html. Конфигурирование сервера Apache После инсталляции сервера необходимо сконфигурировать его с учетом выполняемых функций. Все конфигурационные файлы находятся в каталоге conf (например, /etc/ httpd/conf). Необходимо проверить и настроить файл httpd.conf, разделенный на три раздела. Первый раздел файла httpd.conf определяет глобальные настройки, например пул сервера, TCP-порт, через который HTTP-сервер принимает запросы (обычно это порт 80, но можно на одном компьютере запустить несколько HTTP-серверов, подключенных к различным портам), а также параметры для загрузки динамических модулей. Второй раздел описывает сервер “по умолчанию”, который будет отвечать на все за- просы, не обработанные определениями VirtualHost (раздел 23.3). В нем находятся параметры конфигурации, включающие пользователя и группу, для которых будет ра- ботать сервер (не суперпользователь!), и инструкцию DocumentRoot, которая опреде- ляет корневой каталог для обслуживаемых документов. В этом разделе указывается так- же ряд специальных установок, связанных, в частности, с обработкой “специальных” URL-адресов, использующих синтаксис -пользователь для. доступа к рабочему каталогу пользователя. Глобальные параметры безопасности также устанавливаются во втором разделе кон- фигурации. Он содержит директивы, которые позволяют управлять доступом на уровне отдельных каталогов (директива <Directory>) или файлов (<File>). С их помощью; можно предотвратить доступ к важным файлам через демон httpd. Необходимо опреде- лить, как минимум, два уровня управления доступом: на одном уровне охватывается весь каталог документов, а второй применяется только к главному каталогу документов. Для этого достаточно оставить без изменения параметры, установленные для веб-сервера Apache по умолчанию, хотя мы рекомендуем удалить параметр AllowSymLinks, чтобы предотвратить обращение демона httpd к вашему дереву документов по символическим ссылкам. (Ведь никто не хочет, чтобы кто-нибудь случайно создал символическую ссыл- ку на каталог /etc, не так ли?) Более подробные советы по укреплению безопасности веб-сервера Apache можно найти на сайте httpd.apache.org/docs-2.2/misc/security_tips.html. Третий, и последний, раздел файла конфигурации настраивает виртуальные узлы. Эту тему мы обсудим в отдельном разделе. Внеся изменения в конфигурацию, проверьте синтаксис конфигурационного файла, выполнив команду httpd -t. Если все в порядке, веб-сервер Apache ответит “Syntax ОК”. Если нет, проверьте опечатки в файле httpd. conf.
Глава 23. Веб-хостинг 1011 Запуск сервера Apache Для запуска сервера Apache уожно запустить демон httpd вручную либо воспользо- ваться сценариями запуска системы. Последний способ предпочтительнее, поскольку он гарантирует, что веб-сервер перезапускается всякий раз при перезагрузке компьютера. Для ручного запуска сервера следует ввести примерно такую команду. % apachectl start Сценарии загрузки описаны в главе 3. Анализ регистрационных файлов Разрабатывая свой веб-сайт, вы, вероятно, захотите собрать статистические показате- ли об его использовании, например количество обращений к каждой странице, среднесу- точное количество запросов, процент ошибочных запросов и объем переданных данных. Убедитесь, что вы используете “комбинированный” формат регистрации (директивы CustomLog должны содержать слово combined, а не common). Комбинированный фор- мат регистрации содержит информацию о домене, ссылающемся на ваш сайт (страницу, с которой произошел переход на URL), и пользовательском агенте (браузере клиента и операционной системе). Файлы регистрации доступа и ошибок находятся в каталоге logs сервера Apache. Эти файлы являются удобочитаемыми для человека, но они содержат так много инфор- мации, что для ее анализа необходима дополнительная программа. Существуют букваль- но сотни анализаторов регистрационных файлов, как свободных, так и коммерческих. > Заслуживают внимание два свободно распространяемых анализатора: Analog (analog.сх) и AWStats (awstats.sourceforge.net). Оба они позволяют получить действительно важную информацию. Если вас интересует информация о трафике и привычках пользователей вашего веб- сайта, обратитесь к службе Google Analysics на сайте analytics. google. com. Эта служ- ба требует, чтобы вы поместили небольшую заглушку на каждую веб-страницу, за кото- рой хотите следить, но зато совершенно бесплатно собирает все данные и выполняет анализ инфраструктуры.2 Высокопроизводительный хостинг За последние несколько лет стало очевидно, что самым простым способом организа- ции высокопроизводительного хостинга является оптимизация некоторых серверов для обслуживания статического содержимого. Одним из способов решения этой проблемы является использование веб-сервера или веб-страницы, работающих в адресном пространстве ядра. Они повышают произво- дительность работы, поскольку эти системы не копируют данные из пользовательского адресного пространства и обратно, прежде чем вернуть их инициатору запроса. Однако поскольку они работают в адресном пространстве ядра, возникает дополнительный риск безопасности системы. Мы рекомендуем использовать этот прием с предельной осто- рожностью. Веб-сервер, работающий в адресном пространстве ядра, называется TUX. Он взаимо- действует с традиционным веб-сервером, например Apache, доступным в некоторых дис- 2 Разумеется, эта схема подразумевает, что компания Google получает доступ к вашему трафи- ку, что может оказаться и хорошо, и плохо.
1012 Часть II. Работа в сети трибутивных пакетах системы Linux. Когда есть такая возможность, сервер TUX предо- ставляет статические страницы, не покидая адресного пространства ядра, как это делает демон rpc. nfsd при обслуживании файлов. Несмотря на то что сервер TUX был вы- пущен для системы Red Hat (в настоящее время компания Red Hat называет его Red Hat Content Accelerator), он распространяется на условиях лицензии GPL, поэтому он может использоваться в других дистрибутивах Linux. Правда, настраивать его не так-то легко. Подробности можно узнать по адресу http: //www. redhat. com/docs/manuals/tux. Для кеширования содержимого в адресном пространстве ядра системы Solaris компа- ния SUN выпустила программу Solaris Network Cache and Accelerator (NCA). Программа NCA перехватывает трафик, входящий и исходящий от демона httpd, и кеширует ста- тические страницы. Когда поступают последующие запросы на то же самое содержимое, они обслуживаются из кеша без использования демона httpd. 23.3. Виртуальные интерфейсы Раньше компьютер с системой UNIX обычно служил сервером для одного веб-узла (например, acme.com). По мере роста популярности сети веб, практически каждый пользователь обзавелся собственным веб-узлом, и, как грибы после дождя, стали появ- ляться тысячи новых компаний, занимающихся веб-хостингом. Ш Основные конфигурации интерфейса описаны в главе 14. Провайдеры быстро осознали, что можно добиться существенной экономии средств и ресурсов, если на одном сервере размещать несколько узлов. Это позволило управлять группой узлов, таких как acme. com, aj ах. com, toadranch. com и многие другие, ис- пользуя одно и то же аппаратное обеспечение. На практике такой подход реализуется с помощью виртуальных интерфейсов. Идея, лежащая в основе виртуальных интерфейсов, весьма проста: одиночный ком- пьютер обслуживает больше IP-адресов, чем позволяют его физические сетевые интер- фейсы. Каждый из “виртуальных” сетевых интерфейсов может иметь доменное имя, под которым он известен пользователям Интернета. Это позволяет единственному серверу обслуживать сотни веб-узлов. Виртуальные интерфейсы позволяют демону идентифицировать соединения не толь- ко по номеру порта назначения (например, порта 80 для HTTP), но и по целевому IP- адресу. В настоящее время виртуальные интерфейсы получили широкое распростране- ние и оказались полезными не только для веб-хостинга. Протокол HTTP 1.1 реализует функциональные возможности, подобные виртуаль- ным интерфейсам (официально это называется “виртуальные интерфейсы, не имеющие IP-адреса”), устраняя потребность в назначении уникальных IP-адресов веб-серверам или в конфигурировании специального интерфейса на уровне операционной системы. Этот подход позволяет совместно использовать IP-адреса, что особенно полезно, когда один сервер содержит сотни или тысячи начальных страниц (например, в случае уни- верситетских веб-узлов). Однако такой подход нельзя назвать практичным для коммерческих узлов, посколь- ку уменьшается степень их масштабируемости (приходится изменять IP-адрес при пере- мещении узла на другой сервер) и возникает угроза безопасности системы (если доступ к узлу фильтруется брандмауэром на основе IP-адресов). Кроме того, виртуальные узлы,
Глава 23. Веб-хостинг 1013 основанные на именах, требуют, чтобы браузер поддерживал протокол SSL.3 Видимо, из-за этого ограничения настоящие виртуальные интерфейсы будут применяться еще долго. Конфигурирование виртуальных интерфейсов Настройка виртуального интерфейса проходит в два этапа. Сначала требуется соз- дать виртуальный интерфейс на уровне TCP/IP. Как именно, зависит от версий системы UNIX; инструкции для разных версий системы UNIX приводятся ниже. На втором эта- пе необходимо сообщить серверу Apache об имеющихся виртуальных интерфейсах. Этот этап также описан ниже. Виртуальные интерфейсы в системе Linux Виртуальные интерфейсы Linux обозначаются в формате интерфейс: экземпляр. Например, если интерфейс Ethernet называется ethO, то связанные с ним виртуальные интерфейсы именуются ethO: 0, ethO: 1 и т.д. Все интерфейсы конфигурируются с по- мощью команды ifconfig. Например, команда $ sudo ifconfig ethO:0 128.138.243.150 netmask 255.255.255.192 up настраивает интерфейс ethO: 0 и закрепляет за ним адрес в сети 128.138.243.128/26. Для того чтобы назначенные виртуальные адреса стали постоянными, необходимо мо- дифицировать сценарии запуска системы. jp’x В системе Red Hat требуется для каждого виртуального интерфейса создать отдельный файл в каталоге /etc/sysconfig/network-scripts. Например, файл ifcfg-ethO; 0, соответствующий приведенной выше команде ifconfig, может содержать такие строки. DEVICE=ethO:О IPADDR=128.138.243.150 NETMASK=255.255.255.192 NETWORK=128.138.243.128 BROADCAST=128.138.243.191 ONBOOT=yes ©Подход, принятый в системе Ubuntu, аналогичен подходу, используемому в си- стеме Red Hat, за исключением того, что определения интерфейсов должны содержаться в файле /etc/network/interfaces. Записи, соответствующие ин- терфейсу ethO: 0, в нашем примере должны выглядеть следующим образом. Iface ethO:0 inet static address 128.138.243.150 netmask 255.255.255.192 broadcast 128.138.243.191 В системе SuSE можно создать виртуальные интерфейсы либо с помощью * и ' " программы YaST, либо путем редактирования интерфейсных файлов. Для ис- пользования программы YAST сначала на вкладке Global Options раздела Network Settings выберите команду Traditional method with ifup. 3 Относительно новая функциональная возможность Server Name Indication (SNI) позволяет использовать протокол SSL с виртуальными узлами, но старые браузеры этого делать не могут.
1014 Часть II. Работа в сети В системе SUSE IP-адреса каждого интерфейса конфигурируются в одном файле. Для редактирования конфигурации поищите в каталоге /etc/sysconfig/network файлы, имена которых начинаются словами if сдЪ-имя_интерфейса. Например, в показанном ниже файле определяются интерфейсы ethO и ethO: 0. IPADDR_1=128.138.243.149 NETMASK_1=255.255.255.192 STARTMODE_1=”auto" LABEL_1=O IPADDR_2=128.138.243.150 NETMASK_2=255.255.255.192 S TARTMODE_2="aut о" LABEL_2=1 Суффиксы, следующие за именами IPADDR и NETMASK (в данном случае _1 и _2), не обязательно должны быть представлены числами, но для согласованности такое со- глашение является вполне приемлемым. Для того чтобы виртуальные интерфейсы рас- познавались, необходимо отредактировать файл /etc/sysconfig/network/config и установить параметр NETWORKMANAGER="no". Виртуальные интерфейсы в системе Solaris Система Solaris поддерживает виртуальные интерфейсы (“вспомогательные ин- терфейсы”) посредством концепции физического интерфейса и логического модуля. Например, если hmeO — это имя физического интерфейса, то hmeO : 1, hmeO :2 и так далее — это имена соответствующих виртуальных интерфейсов. По умолчанию с каж- дым физическим интерфейсом может быть связано до 256 виртуальных сущностей. Если вы хотите изменить это ограничение, используя команду ndd, измените параметр ip_ addrs_per_if (описание команды ndd см. в разделе 14.13). Для конфигурирования виртуального интерфейса просто примените команду ifconfig к одному из виртуальных имен. (Соответствующий физический интерфейс в этот момент уже должен быть “подключен”.) В большинстве случаев систему настраи- вают так, чтобы команда ifconfig применялась к виртуальным интерфейсам во время загрузки. Рассмотрим пример, в котором компьютер под управлением системы Solaris имеет адрес в пространстве частных адресов во внутренней частной виртуальной сети (VPN) и внешний адрес — в Интернете, причем оба адреса связаны с одним и тем же физиче- ским устройством hmeO. Для того чтобы эти интерфейсы автоматически конфигуриро- вались во время загрузки, администратор должен отредактировать два файла имен узлов: /etc/hos tname. hmeO и /etc/hostname. hmeO: 1. $ Is -1 /etc/host* -rw-r—r— 1 root 10 Nov 4 10:19 /etc/hostname.hmeO -rw-r—r— 1 root 16 Dec 21 19:34 /etc/hostname.hmeO:1 Файлы имен узлов могут содержат либо имена узлов из файла /etc/hosts либо IP- адреса. В данном случае администратор использовал каждую из этих возможностей. $ cat /etc/hostname.hmeO overkill $ cat /etc/hostname.hmeO:1 206.0.1.133 $ grep overkill /etc/hosts 10.1.2.9 overkill overkill.domain
Глава 23. Веб-хостинг Ю15 Во время загрузки оба адреса конфигурируются автоматически (вместе со шлейфо- вым адресом, который мы пропустили). $ ifconfig -а hmeO: flags=863<UP,BROADCAST,NOTRAILERS,RUNNING,MULTICAST> mtu 1500 inet 10.1.2.9 netmask ffffffOO broadcast 10.1.2.255 hme0:l: flags=863<UP,BROADCAST,NOTRAILERS,RUNNING,MULTICAST mtu 1500 inet 206.0.1.133 netmask ffffff80 broadcast 206.0.1.255 Виртуальные интерфейсы в системе HP-UX В системе HP-UX все виртуальные интерфейсы можно добавлять с помощью коман- ды ifconfig. Ее синтаксис очень похож на синтаксис, используемый в системе Solaris. Например, для того чтобы добавить первый интерфейс, следует выполнить такую ко- манду. $ sudo ifconfig 1ап0:1 192.168.69.1 up Виртуальные интерфейсы системы AIX В системе AIX, для того чтобы добавить дополнительный IP-адрес для интерфейса, можно создать “псевдоним”. Например, для того чтобы добавить 192.168.1.3 как вирту- альный IP-адрес интерфейса епО, можно использовать команду ifconfig. $ sudo ifconfig епО 192.168.1.3 netmask 255.255.255.0 alias Однако этот псевдоним является временным. Для того чтобы создать постоянный виртуальный IP-адрес, следует выполнить команду chdev. $ sudo chdev -1 епО -a alias4=192.168.1.3,255.255.255.0 Передача серверу Apache информации о виртуальном интерфейсе После создания виртуальных интерфейсов с помощью команды ifconfig требуется сообщить серверу Apache о том, какие документы должны обрабатываться при попытке подключения клиента к каждому интерфейсу (IP-адресу). Это можно сделать с помощью директивы VirtualHost файла httpd. conf. Каждому сконфигурированному виртуаль- ному интерфейсу должна соответствовать одна такая директива. Приведем пример. <VirtualHost 128.138.243.150> ServerName www.company.com ServerAdmin webmasterGwww.company.com DocumentRoot /var/www/htdocs/company ErrorLog logs/www.company.com-error_log CustomLog logs/www.company.com-access_log combined ScriptAlias /cgi-bin/ /var/www/cgi-bin/company </VirtualHost> После подключения клиента к виртуальному узлу 128.138.243.150 будут обрабаты- ваться документы из каталога /var/www/htdocs/ company. Для настройки параме- тров виртуального узла в раздел VirtualHost может включаться почти любая дирек- тива веб-сервера Apache. Относительные пути к каталогам, включая пути для директив DocumentRoot, ErrorLog и CustomLog, интерпретируются в контексте ServerRoot. Если виртуальные узлы имеют имена, то множественные имена в системе DNS ссы- лаются на один и тот же IP-адрес. Конфигурация веб-сервера Apache остается прежней,
1016 Часть II. Работа в сети но необходимо задать основной IP-адрес, который веб-сервер Apache должен прослуши- вать в ожидании входящих запросов к именованному виртуальному узлу, и не указывать IP-адрес в разделе VirtualHost. NameVirtualHost 128.138.243.150 cVirtualHost *> ServerName www.company.com ServerAdmin webmaster@www.company.com DocumentRoot /var/www/htdocs/company ErrorLog logs/www.company.com-error_log CustomLog logs/www.company.com-access_log combined ScriptAlias /cgi-bin/ /var/www/cgi-bin/company </VirtualHost> В этой конфигурации веб-сервер Apache ищет заголовки HTTP, чтобы определить требуемый сайт. Сервер прослушивает запросы к сайту www. company. com на его основ- ном IP-адресе 128.138.243.150. 23.4. Протокол Secure Sockets Layes Протокол SSL защищает соединения между веб-сайтом и клиентским браузером. Эту технологию используют универсальные указатели ресурса, начинающиеся с префик- са https: //. Протокол SSL использует алгоритмы криптографии для предотвращения перехвата, взлома и подделки сообщений. Браузер и сервер используют схему аутентификации с помощью сертификата, после которой они переключаются на более быстродействующую схему шифрования для за- щиты реального соединения. Протокол SSL выполняется на отдельном уровне, лежащем ниже уровня протоко- ла приложения HTTP. Он просто обеспечивает защиту соединения и не вмешивается в трансакцию HTTP. Благодаря такой аккуратной схеме, протокол SSL может защищать не только HTTP, но и другие протоколы, такие как SMTP и FTP. Более подробную ин-; формацию можно найти в Википедии в статье “Secure Sockets Layer.”4 В первые годы использования протокола SSL большинство ключей симметричного шифрования были относительно слабыми и состояли из 40 бит, потому что правитель- $ ство США наложило ограничения на экспорт криптографической технологии. После ' многолетних переговоров и судебных исков, правительство ослабило некоторые огра- ничения экспорта, позволив реализовать протокол SSL с использованием 128-битовых симметричных ключей. Генерирование файла Certificate Signing Request Владелец веб-сайта, использующий протокол SSL, должен сгенерировать цифровой файл Certificate Signing Request (CSR), содержащий открытый ключ и название компа- нии. Этот “сертификат” должен быть “подписан” доверенным источником, известным как Certificate Authority (СА). Сертификат, подписанный источником сертификатов, со- держит открытый ключ сайта, а также подтверждение подлинности источника. 4 Transport Layer Security (TLS) — это протокол, являющийся преемником протокола SSL. Он реализован во всех современных браузерах. Однако сообщество пользователей сети веб по- прежнему называет его SSL.
Глава 23. Веб-хостинг 1017 Веб-браузеры имеют встроенные списки источников СА, подписанные сертификаты которых они будут принимать. Браузер, знающий источник сертификата для вашего сай- та, может верифицировать подпись вашего сертификата и получить ваш открытый ключ, тем самым позволив посылать сообщения, которые может расшифровать только ваш сайт. Кроме того, вы действительно можете подписывать ваш собственный сертификат. Получив сертификат от какого-либо непризнанного источника, большинство браузеров сообщает пользователю о том, что этот сертификат является подозрительным. В ком- мерческих приложениях такая ситуация, очевидно, представляет проблему. Однако, если вы хотите подписывать сертификаты для внутреннего использования и тестирования, изучите документ httpd. apache. org/docs/2.2/ssl/ssl_faq. html#aboutcerts. Вы можете получить подпись сертификата от любого источника сертификатов. Введите в поисковой строке Google слова “SSL certificate” и выберите любую ссылку. Реальное различие между источниками сертификатов заключается в объеме работы, которую они выполняют для проверки вашей идентичности; гарантиях, которые они предоставляют; и количестве браузеров, которые они поддерживают изначально (боль- шинство источников сертификатов поддерживают практически все браузеры). Создание сертификата, который будет послан источнику сертификатов, является довольно простой процедурой. Необходимо инсталлировать пакет OpenSSL, который по умолчанию есть в большинстве систем. Затем необходимо выполнить следующие действия. Сначала, создайте 1024-битовый закрытый ключ RSA для своего веб-сервер^ Apache. $ openssl genrsa -des3 -out server.key 1024 Вам предложат войти и подтвердить пароль для шифрования серверного ключа. Ско- пируйте файл server. key в безопасное место (которое доступно только суперпользог вателю) и запомните введенный пароль. Интересующиеся пользователи могут увидеть многочисленные детали ключа с помощью следующей команды. $ openssl rsa -noout -text -in server.key Затем создайте файл Certificate Signing Request (CSR), содержащий серверный ключ, который вы только что сгенерировали. $ openssl req -new -key server.key -out server.csr Когда увидите приглашение ввести “стандартное имя”, введите полностью опре- деленное имя домена сервера. Например, если ваш сайт имеет URL-идентификатОр https: / /company. com, введите в качестве стандартного имени строку “сотрапусот*. Обратите внимание на то, что для каждого узла нужен отдельный сертификат, даже для узла “www.company.com”, который отличается от “company.com.” Компании обычно ре- гистрируют только стандартное имя; они должны гарантировать, что каждая ссылка по протоколу SSL ссылается именно на этот узел. Детали сгенерированного файла CSR можно увидеть, выполнив такую команду. $ openssl req -noout -text -in server.csr Теперь можно послать файл server. csr выбранному вами источнику сертификатов. Сохранять его локальную копию не обязательно. Подписанный файл CSR, возвращен- ный источником сертификатов СА, должен иметь расширение . crt. Поместите подпи- санный сертификат в каталог, содержащий ваши файлы конфигурации демона httpd, например в каталог /usr/local/apache2/con£/ssl.crt.
1018 Часть II. Работа в сети Конфигурация веб-сервера Apache для использования протокола SSL Запросы по протоколу HTTP приходят на порт 80, а запросы по протоколу HTTPS используют порт 443. Трафики протоколов HTTPS и HTTP можно обслуживать одним и тем же процессом веб-сервера Apache. Однако протокол SSL не работает с именован- ными виртуальными узлами; каждый виртуальный узел должен иметь конкретный IP- адрес. (Это ограничение является следствием внутренней структуры протокола SSL.) Для того чтобы настроить веб-сервер Apache на использование протокола SSL, сна- чала примите меры, чтобы модуль SSL был включен в файле httpd.conf, найдя или добавив следующую строку. LoadModule ssl_module libexec/mod_ssl.so Затем добавьте директиву VirtualHost для порта SSL. <VirtualHost 128.138.243.150:443> ServeгName www.company.com ServerAdmin webmaster@www.company.com DocumentRoot /var/www/htdocs/company ErrorLog logs/www.company.com-ssl-error_log CustomLog logs/www.company.com-ssl-access_log combined ScriptAlias /cgi-bin/ /var/www/cgi-bin/company SSLEngine on SSLCertificateFile /usr/local/apache2/conf/ssl.crt/server.crt SSLCertificateKeyFile /usr/local/apache2/conf/ssl.key/server.key </VirtualHost> Обратите внимание на цифры :443 после IP-адреса и директивы протокола SSL, ука- зывающие веб-серверу Apache, где искать ваш закрытый ключ и подписанный сертифи- кат. Запустив веб-сервер Apache, вы получите сообщение с просьбой ввести пароль для вашего файла server. key. Благодаря этому демон httpd больше не сможет запускаться автоматически при загрузке компьютера. Если хотите, можно удалить шифрование из вашего закрытого ключа, чтобы устранить необходимость вводить пароль. $ ср server.key server.key.orig $ openssl rsa -in server .key. orig -out server, key $ chmod 400 server.key server.key.orig Разумеется, каждый, кто получит копию вашего расшифрованного ключа, затем смо- жет выдать свой сайт за ваш. Более подробную информацию о протоколе SSL можно найти на следующих стра- ницах. httpd.apache.org/docs-2.2/ssl/ssl_faq.html httpd.apache.org/docs/2.2/mod/mod_ssl.html 23.5. Кеширование и прокси-серверы Развитие Интернета и увеличение объема находящейся в нем информации по- прежнему происходят очень быстро. Следовательно, пропускная способность глобаль- ных каналов и мощность вычислительных ресурсов, требуемых для их обслуживания, также резко возрастают. Как с этим справиться? Единственным методом справиться с этим является использование репликации. Независимо от того, на каком уровне — национальном, региональном или корпора-
Глава 23. Веб-хостинг 1019 тивном — находится информация, по мере развития Интернета требуется перемещать данные на ближние узлы. Не имеет смысла передавать одну и ту же популярную веб- страницу, скажем, из Австралии в США миллионы раз в день, используя весьма дорого- стоящий международный канал связи. Должен существовать способ сохранять эту ин- формацию после ее однократной передачи по каналу. К счастью, такой способ есть, хотя бы на уровне сайтов. Веб-прокси позволяет ке- шировать данные и управлять внешними запросами к содержимому вашего веб-сайта. Схема работы веб-прокси такова. Клиентские веб-браузеры подключаются к прокси- серверу, чтобы запросить объект из Интернета. Прокси-сервер выполняет запрос от име- ни клиента (либо извлекает объект из кеша) и возвращает результат клиенту. Прокси- серверы этого типа часто используются для усиления безопасности или фильтрации содержимого. В системе, где работает прокси-сервер, непосредственный доступ в Интернет через брандмауэр нужен лишь одному компьютеру. В компьютерных классах средних школ прокси-серверы зачастую выполняют фильтрацию содержимого, чтобы дети не могли получить доступ к неподобающим материалам. В настоящее время имеется множество коммерческих и бесплатных прокси-серверов. Некоторые из них основаны исклю- чительно на программном обеспечении, а другие встроены в аппаратные устройства. Обширный список технологий прокси-сервера можно найти на странице web-caching, com/proxy-caches.com. В следующих разделах описывается пакет Squid Internet Object Cache5, популярный автономный кеш. Мы также кратко обрисуем функциональные возможности прокси, которыми обладает модуль mod__cache веб-сервера Apache. Использование кеша Squid и прокси-сервера Squid — это кеширующий прокси-сервер, поддерживающий несколько протоколов, включая HTTP, FTP и SSL. Служба прокси — это, конечно, хорошо, но действительно преимуществом сервера Squid являются его кеширующие возможности. Сервер Squid не только кеширует ин- формацию, получаемую в результате выполнения запросов локальных пользователей, но и формирует иерархию серверов6. Группы серверов Squid применяют протокол ICP (Internet Cache Protocol — протокол кеширования в Интернете) для передачи друг другу сведений о содержимом своих кеш-буферов. Это позволяет администратору создать систему, в которой локальные пользова- тели взаимодействуют с кеширующим сервером организации с целью получения веб- содержимого. Если другой пользователь организации уже запрашивал эти же данные, то при повторном обращении к ним будет возвращена их копия, причем скорость передачи окажется сравнима со скоростью работы локальной сети (обычно 10 или 100 Мбит/с). При отсутствии на локальном сервере Squid требуемой информации она запрашивается у регионального кеширующего сервера. Как и в случае локального сервера, если какой- либо пользователь регионального сервера уже запрашивал объект раньше, то этот объект будет немедленно взят из кеша. При отсутствии объекта сервер обратится к “вышестоя- 5 Почему “Squid” (кальмар — Примеч. ред.)? По версии авторов, “потому что все хорошие имена уже были заняты”. 6 К сожалению, некоторые узлы помечают все свои страницы как некешируемые, что препят- ствует эффективной работе сервера Squid. Кроме того, сервер не кеширует динамически форми- руемые страницы.
1020 Часть II. Работа в сети щему” серверу (обслуживающему страну или континент) и т.д. В результате производи- тельность обработки запросов существенно повышается, и пользователи это чувствуют. Применение пакета Squid экономически выгодно. Поскольку пользователи часто за- прашивают в Интернете одну и ту же информацию, в крупных организациях наблюда- ется значительное дублирование внешних веб-запросов. Эксперименты показали, что установка кеширующего сервера приводит к уменьшению внешнего трафика на 40%. Для эффективного использования сервера Squid, вероятно, потребуется заставить пользователей использовать кеш. Либо конфигурируйте прокси по умолчанию с по- мощью службы Active Directory (в среде Windows), либо настройте ваш маршрутизатор на перенаправление всего веб-трафика в кеш Squid с помощью протокола Web Cache Communication Protocol (WCCP). Инсталляция сервера Squid Сервер Squid довольно легко инсталлировать и конфигурировать. Поскольку серверу нужно свободное пространство для кеша, потребуется выделенный компьютер, имею- щий достаточный объем оперативной и дисковой памяти. Приемлемая конфигурация такова: 32 Гбайт ОЗУ и 8 Тбайт на жестком диске. Пакет доступен в виде бинарных скомпилированных модулей. Кроме того, свежую копию пакета Squid можно загрузить с узла squid-cache. org. Во втором случае после распаковки инсталляционного дистрибутива запустите сценарий configure, находя- щийся в начальном каталоге. По умолчанию предполагается, что пакет будет установлен в каталог /usr/local/squid. Если требуется задать другой каталог, воспользуйтесь оп- цией —pref ±х=ка та лог сценария configure. После завершения сценария выполните команды make и make install. Далее потребуется модифицировать файл конфигурации squid, conf. Обратитесь к файлу QUICKSTART, находящемуся в дистрибутивном каталоге, для получения перечня изменений, которым должен подвергнуться имеющийся файл squid, conf. Нужно также выполнить команду squid -z, чтобы сформировать и предварительно очистить структуру каталогов, в которой будут храниться кешированные веб-страницы. В конце можно запустить сервер вручную с помощью сценария RunCache, хотя обычно он вызывается из сценариев запуска системы, чтобы сервер Squid автоматически запу- скался на этапе начальной загрузки. Для тестирования сервера Squid необходимо указать его в качестве прокси-сервера для веб-браузера. Настройка обратного прокси с помощью веб-сервера Apache Для обеспечения безопасности и равномерного распределения нагрузки иногда по- лезно создавать веб-прокси для обработки входящих запросов (т.е. запросов, которые по- ступают от браузеров из Интернета к вашему серверу). Поскольку эта ситуация является противоположной по отношению к обычному использованию веб-прокси (подразуме- вающему обработку запросов, исходящих от браузеров в вашей сети), такая инсталляция называется обратным прокси (reverse proxy). Ш Сети DMZ описаны в главе 22. Одна из распространенных конфигураций подразумевает размещение обратного прокси в вашей сети DMZ, чтобы иметь доступ к запросам, поступающим из Интернета,
Глава 23. Веб-хостинг 1021 к вашим службам, например электронной почте, основанной на использовании сети веб. Затем прокси передает эти запросы соответствующим внутренним серверам. Этот подход имеет несколько преимуществ. • Это исключает соблазн установить прямые соединения с серверами, не принад- лежащими сети DMZ. • Достаточно настроить только один DMZ-сервер, а не по одному серверу для каж- дой службы, доступной извне. • Можно управлять доступными указателями URL с центрального пункта, повышая безопасность. • Входящие запросы можно регистрировать для мониторинга и анализа. Конфигурирование веб-сервера Apache для обеспечения обратного прокси является относительно простым. В разделе VirtualHost файла httpd. conf веб-сервера Apache следует использовать директивы ProxyPass и ProxyPassReverse. • Директива ProxyPass отображает удаленный указатель URL в пространство URL локального сервера, так что эта часть локального адресного пространства выгля- дит как зеркало удаленного сервера. (В этом сценарии “локальный” сервер — это DMZ-компьютер, а “удаленный” сервер — это сервер вашей внутренней сети.) • Директива ProxyPassReverse скрывает реальный сервер с помощью “ретуширо- вания” внешних HTTP-заголовков, проходящих через прокси. ; Ниже приведен фрагмент конфигурации обратного прокси, который необходимо по- местить в систему UNIX DMZ перед сервером Microsoft Outlook Web Access (OWA), обе- спечивающим работу электронной почты с помощью сети веб. CLocation /грс> ProxyPass https://wm.monkeypaw.com/rpc ProxyPassReverse https://wm.monkeypaw.com/rpc SSLRequireSSL </Location> CLocation /exchange> ProxyPass https://wm.monkeypaw.com/exchange ProxyPassReverse https://wm.monkeypaw.com/exchange SSLRequireSSL </Location> CLocation /exchweb> ProxyPass https://wm.monkeypaw.com/exchweb ProxyPassReverse https://wm.monkeypaw.com/exchweb SSLRequireSSL c/Location> CLocation /public> ProxyPass https://wm.monkeypaw.com/public ProxyPassReverse https://wm.monkeypaw.com/public SSLRequireSSL c/Location> CLocation /oma> ProxyPass https://wm.monkeypaw.com/oma ProxyPassReverse https://wm.monkeypaw.com/oma SSLRequireSSL
1022 Часть II. Работа в сети </Location> cLocation /Microsoft-Server-ActiveSync> ProxyPass https://wm.monkeypaw.com/Microsoft-Server~ActiveSync ProxyPassReverse https://wm.monkeypaw.com/Microsoft~Server~ActiveSync SSLRequireSSL </Location> В этом примере прокси-службы обеспечиваются только для нескольких указателей URL верхнего уровня: /rpc, /exchange, /exchweb, /public, /ота и /Microsoft- Server-ActiveSync. По соображениям безопасности желательно ограничить запросы, проходящие через прокси. 23.6. Расширение возможностей Внезапная популярность сайта в сети веб может стать ночным кошмаром для си- стемного администратора. Популярный блок или объявление на сайте digg. com может увеличить ваш веб-трафик в несколько раз. Даже “реальный” рост популярности мо- жет быстро исчерпать пропускную способность вашего локального сервера или сетевого соединения. Но не бойтесь; для решения этих проблем есть много решений. Облачные вычисления Ш Облачные вычисления описаны в главе 24. Облачный хостинг предоставляет вам доступ к виртуальному экземпляру операци- онной системы, выбранной вами, без необходимости устанавливать аппаратное обе- спечение в вашей организации. Фактически в этой схеме аппаратное обеспечение и его поддержка являются полностью абстрактными — вы можете иметь только самое общее представление о том, где на самом деле работает ваш виртуальный экземпляр. Существует много провайдеров облачного хостинга, но компания Amazon являет- ся первопроходцем и остается рыночным лидером со своими службами Amazon Web Services (AWS), работающими на сайте aws. amazon. com. Менее чем за пять минут вы можете запустить новый экземпляр системы Linux или UNIX. Вы регистрируетесь с по- мощью утилиты ssh, чтобы управлять этой системой так, будто это ваш собственный информационный центр. А лучше всего то, что эта услуга невероятно дешевая (в настоя- щее время около 10 центов за час работы одного экземпляра в США для службы самого низкого уровня). Несколько служб можно разместить на верхнем уровне облака, чтобы автоматически подключать или отключать серверы. Собственная служба масштабирования компании Amazon называется Auto Scaling. Интегрированные службы масштабирования продает компания RightScale (rightscale. com). Хостинг совместного размещения серверов Совместное размещение серверов — еще один способ организации хостинга ваших систем в удаленном информационном центре, но в этом случае вы обычно или владеете серверным аппаратным обеспечением, или арендуете его. Этот способ предпочтителен, если стандарты или регламенты запрещают использовать облачные информационные центры (например, при использовании стандарта защиты информации в индустрии пла- тежных карт PCI DSS) или необходимо специальное оборудование. Некоторые прило-
Глава 23. Веб-хостинг 1023 жения, связанные с интенсивным вводом и выводом данных, также лучше работают на специальном оборудовании, хотя виртуальный мир их быстро догоняет. Ш Более подробно уровни информационных центров описаны в главе 27. Существуют сотни провайдеров совместного размещения серверов. Выберите один из них на требуемом вам ярусе в соответствии с рекомендациями организации Uptime Institute (uptimeinstitute. org). Коммерческие приложения обычно размещаются в информационных центрах третьего или четвертого уровня. Сети для распределения контента Большинство контента в Интернете является статическим: изображения, докумен- ты, пакеты программного обеспечения. Помещая копии этих статических компонентов ближе к пользователям (в терминах сети), вы можете уменьшить или вообще исклю- чить необходимость обращаться к данным из оригинального источника и выключить его из сети. Система компьютеров, обеспечивающая эту возможность, называется сетью для рас- пределения контента (content distribution network — CDN). Межконтинентальные сете- вые соединения обычно перегружены, поэтому сети CDN особенно важны для обеспе- чения быстрого доступа к популярному контенту на других континентах. Большинство сетей CDN действует как коммерческие службы, финансируемые про- вайдерами контента, желающими обеспечить доступность и оперативность своих сай- тов без масштабирования их инфраструктуры. Наиболее успешной оказалась платфор- ма CDN, управляемая компанией Akamai Technologies (akamai. com). Крупнейшими конкурентами этой компании являются недавно появившиеся компании Limelight (limelightnetworks. com) и Disney-owned EdgeCast (edgecast. com). При правильной реализации использование сети CDN не представляет для конечно- го пользователя никаких трудностей. Некоторые объекты могут доставляться из относи- тельно близкого сервера или кеша, а другие — непосредственно из источника. Однако все это стоит больших затрат. Включать службу CDN в свой план хостинга могут только богатые организации. 23.7. Упражнения 23.1. Сконфигурируйте виртуальный интерфейс на рабочей станции. Выполните ко- манду ifconfig до и после этого и сравните результат. Можно ли обнаружить виртуальный интерфейс с помощью команды ping, выполненной на другом ком- пьютере той же подсети? А другой сети? Объясните ваш ответ. (Необходим доступ с правами суперпользователя.) 23.2. Используя свой браузер, зайдите на популярный и содержательный сайт, напри- мер abcnews. com, и посмотрите на источник страницы (View«=>Page в браузере Firefox или Page^View в браузере IE). С помощью команды dig просмотрите за- писи DNS для узлов, заданных в указателе URL отдельного объекта. Можете ли вы определить, какие объекты хранятся в сети для распределения контента? 23.3. ★ С помощью анализатора пакетов (tcpdump) прослушайте трафик двустороннего HTTP-диалога, связанного с передачей информации на сервер (например, с за- полнением полей формы или поля поиска). Покажите, каким образом браузер по- сылает данные веб-серверу. (Необходим доступ с правами суперпользователя.)
1024 Часть II. Работа в сети 23.4. Используйте анализатор пакетов для перехвата трафика, возникающего при от- крытии часто посещаемой веб-страницы, например начальной страницы портала amazon. com или cnn. com. Сколько отдельных TCP-соединений приходится от- крывать? Кто инициирует их? Является ли это наиболее эффективным способом использования протокола TCP? (Необходим доступ с правами суперпользователя.) 23.5. Найдите журнальные файлы веб-сервера и проанализируйте их. Запросы каких типов поступали серверу за последние несколько часов? Какие ошибки произош- ли за этот период? Что можно сказать о безопасности сервера на основании со- держимого журнальных файлов? (Может потребоваться доступ с правами супер- пользователя.) 23.6. Инсталлируйте сервер Apache и создайте несколько веб-страниц. Проверьте с других компьютеров, работает ли сервер. Найдите журнальные файлы Apache, которые позволяют узнать, какие браузеры обращались к серверу. Настройте сер- вер Apache на выдачу некоторых веб-страниц через виртуальный интерфейс, соз- данный в упр. 23.1. (Необходим доступ с правами суперпользователя.)
ЧАСТЬ III Разное
Глава 24 виртуализация В то время как корпоративные центры обработки данных продолжают увеличивать количество серверов для удовлетворения информационных аппетитов современного бизнеса, системные администраторы стараются разрешить технический парадокс: как управлять существующими системами более эффективно, чтобы экономить электроэ- нергию, площадь и стоимость охлаждения, продолжая обслуживать сотни пользователей? Разработчики программного обеспечения никогда не поощряли администраторов выполнять свои приложения на других платформах, ссылаясь на потенциальную несо- вместимость, а в некоторых случаях даже угрожая прекратить техническую поддержку. В результате возникло огромное количество узкоспециализированных серверов. По по- следним оценкам коэффициент использования среднестатистического сервера коле- блется от 5 до 15% и продолжает снижаться по мере увеличения производительности серверов. Выйти из этого затруднительного положения позволяет виртуализация: параллель- ное использование разных независимых операционных систем на одном и том же ап- паратном обеспечении. Администраторы могут рассматривать каждую виртуальную машину как уникальный сервер, удовлетворяющий капризных поставщиков (в боль- шинстве случаев) и одновременно уменьшающий затраты на работу центра обработки данных. Виртуализацию поддерживают многие платформы, а разработка специальных инструкций центрального процессора, предназначенных для поддержки виртуализа- ции, и преобладание многоядерных процессоров резко повысили производительность. Виртуальные серверы легко инсталлировать и проще сопровождать (в расчете на один сервер), чем физические машины. Со временем реализация виртуализации сильно изменилась, но основные концепции остаются прежними. Компания IBM использовала виртуальные машины еще в первых мейнфреймах, исследуя в 1960-х годах концепцию разделения времени и позволяя со- вместно использовать процессор и ресурсы для хранения данных с помощью абстрактно-
1028 Часть III. Разное го уровня. Аналогичная технология, разработанная компанией IBM, была использована в мейнфреймах в средине 1970-х годов, пока в 1980-х не начался клиент-серверный бум. Эта технология оставалась доминантной на протяжении 1980— 1990-х годов, пока пробле- мы, связанные с высокой стоимостью обслуживания и сложностью управления огром- ными фермами серверов, не возродили интерес к виртуализации современных систем. По общему мнению, путь для современного виртуального безумия проложила компания VMware, создав в 1999 году платформу для виртуализации на основе архитектуры Intel х86. Сегодня технология виртуализации — это процветающий бизнес, открывающий пе- ред разработчиками множество рыночных возможностей. Компания VMware остается явным лидером и предлагает продукты, предназначенные для бизнеса любого масштаба, а также программное обеспечение для управления организациями с высокой степенью виртуализации. Сообщество разработчиков программ с открытым исходным кодом от- ветило на этот вызов проектом Хеп, получившим коммерческую поддержку компании XenSource, которая в настоящее время называется Citrix. Выпустив систему Solaris 10, компания Sun предложила мощную технологию, осно- ванную на концепциях зон и контейнеров и способную запускать более 8000 виртуаль- ных систем на базе одной инсталляции Solaris. На этом рынке всего несколько игроков и десятки конкурирующих продуктов, каждый из которых занимает свою нишу. Ш Сети хранения данных описаны в главе 8. Несмотря на то что главной темой этой главы является серверная виртуализация, аналогичные концепции можно применить ко многим другим областям информацион- ной инфраструктуры, включая сети, хранилища данных, приложения и даже настоль- ные системы. Например, при использовании сетей для хранения данных или хранилищ, объединенных в сеть, пулы дисков можно рассматривать как службу, при необходимости создавая дополнительный объем памяти. Применение виртуализации к настольным си- стемам может оказаться полезным как для системных администраторов, так и для поль- зователей, поскольку каждому пользователю предоставляется среда, настроенная по его требованиям. Широкие возможности виртуализации создали дополнительные сложности для не- расторопных администраторов систем UNIX и Linux. Их пугает возможность выбора между десятками платформ и конфигураций и необходимость определения долгосроч- ной стратегии. В этой главе мы начнем с определения терминов, используемых в техно- логиях виртуализации, продолжим обсуждением преимуществ виртуализации, подска- жем, как принять наилучшее решение, удовлетворяющее ваши потребности, и, наконец, дадим несколько практических советов, касающихся наиболее популярного программ- ного обеспечения для виртуализации, работающего в исследуемых нами операционных системах. 24.1. Виртуальный жаргон Виртуализация имеет свои термины и концепции. Овладение этим языком является первым шагом к овладению разнообразными функциональными возможностями. Предполагается, что операционные системы управляются аппаратным обеспечением, поэтому одновременное функционирование двух систем вызывает конфликты, связан- ные с совместным использованием ресурсов. Серверная виртуализация — это абстракция вычислительных ресурсов, позволяющая операционным системам работать, ничего не зная о базовом аппаратном обеспечении. Программное обеспечение для виртуализации
Глава 24. Виртуализация 1029 “дробит” физические ресурсы, такие как диски, память и центральный процессор, ди- намически предоставляя их для использования несколькими виртуальными машинами. Администраторы системы UNIX должны понимать три разные парадигмы: полная виртуализация, паравиртуализация и виртуализация на уровне операционной системы. Каждая модель по-своему решает проблемы выделения ресурсов и доступа к аппаратно- му обеспечению, и каждая из них имеет свои преимущества и недостатки. Полная виртуализация В настоящее время наиболее широко признанной является парадигма полной вир- туализации. В этой модели операционная система не знает, что она функционирует на виртуализированной платформе, а между виртуальными машинами (“гостями”) и аппа- ратным обеспечением инсталлируется гипервизор (“hypervisor”), известный также как монитор виртуальной машины. Такие гипервизоры называются автономными (bare-metal), потому что они управ- ляют аппаратным обеспечением. Гипервизор обеспечивает уровень эмуляции для всех аппаратных устройств узла. Гостевая операционная система не модифицируется. Гости выполняют прямые запросы к виртуализированному аппаратному обеспечению, и лю- бые привилегированные инструкции, которые гостевые ядра пытаются выполнить, об- рабатываются гипервизором. Автономная виртуализация — наиболее безопасный вид виртуализации, потому что гостевые операционные системы изолированы от базового аппаратного обеспечения. Кроме того, не требуется вносить никаких изменений в ядра операционных систем, и гости могут выбирать разные базовые архитектуры. Если имеется программное обеспе- чение для виртуализации, то гость может функционировать на любой архитектуре про- цессоров. (Однако трансляция инструкций центрального процессора приводит к уме- ренному снижению производительности.) Примером полной виртуализации является популярная технология VMware. Общая структура систем, созданных по технологии VMware, представлена на рис. 24.1. Рис. 24.1. Архитектура полной виртуализации Паравиртуализация Паравиртуализация — это технология, используемая виртуальной платформой с открытым исходным кодом Хеп. Как и полная виртуализация, паравиртуализация по- зволяет нескольким операционным системам согласованно функционировать на одной
1030 Часть III. Разное машине. Однако ядра каждой операционной системы должны быть модифицирова- ны, чтобы поддерживать “гипервызовы” (“hypercalls”), т.е. перевод определенных ин- струкций, предназначенных для центрального процессора. Приложения, действующие в адресном пространстве пользователя, не требуют модификации и выполняются на Xen-машинах естественным образом. Гипервизор в паравиртуализации используется точно так же, как и в полной виртуализации. Уровень трансляции в паравиртуализированной системе связан с меньшими наклад- ными расходами ресурсов, поэтому паравиртуализация ведет к номинальному повы- шению производительности. Однако необходимость модифицировать гостевые опера- ционные системы резко снижает эффект и является основной причиной того, почему технология паравиртуализации Хеп слабо поддерживается за пределами сообщества Linux и других ядер с открытым исходным кодом. Среда паравиртуализации продемонстрирована на рис. 24.2. Она похожа на пол- ностью виртуализированную систему, изображенную на рис. 24.1, в которой гостевые операционные системы взаимодействуют с гипервизором посредством определенного интерфейса и первый гость является привилегированным. Рис, 24,2, Архитектура паравиртуализации Виртуализация на основе операционной системы Системы виртуализации на основе операционной системы резко отличаются от предыдущих двух моделей. Вместо создания множественных виртуальных машин внутри физической системы, виртуализация на основе операционной системы позволяет опера- ционной системе создать множественные изолированные окружения прикладных про- грамм, относящихся к одному и тому же ядру. Виртуализацию на основе операционной системы следует рассматривать как функциональную возможность ядра, а не отдельный уровень абстракции программного обеспечения. Поскольку в этой схеме нет реального уровня трансляции или виртуализации, на- кладные расходы ресурсов при таком способе виртуализации очень низкие. Большинство реализаций обеспечивает практически естественную производительность. К сожалению, этот тип виртуализации препятствует использованию нескольких операционных систем, поскольку все гости совместно используют одно и то же ядро (или “контейнеры”, как принято говорить в данном контексте).1 Разделы рабочих нагрузок (workload partitions) 1 Это не совсем так. Контейнеры системы Solaris имеют функциональную возможность под названием “фирменные зоны” (“branded zones”), позволяющие выполнять бинарные модули си- стемы Linux в ядре системы Solaris.
Глава 24. Виртуализация 1031 в системе AIX, а также контейнеры и зоны в системе Solaris представляют собой приме- ры виртуализации на основе операционной системы. Архитектура виртуализации на основе операционной системы представлена на рис. 24.3. Виртуализация на основе операционной системы (например, контейнеры Solaris, виртуальные машины Integrity VM компании HP, разделы рабочих нагрузок компании IBM) Рис. 24.3. Архитектура виртуализации на основе операционной системы Естественная виртуализация Пытаясь обеспечить преимущество своему аппаратному обеспечению, ведущие компании—производители микропроцессоров AMD и Intel ведут острую конкурентную борьбу за лучшую поддержку виртуализации с помощью аппаратного обеспечения, те. за естественную (“native”) виртуализацию. Обе компании предлагают центральные процес- соры, которые содержат инструкции по виртуализации, что исключает необходимость в уровне трансляции для полной виртуализации или паравиртуализации. В настоящее время все основные игроки на рынке виртуализации могут воспользоваться этими воз- можностями центральных процессоров. Облачные вычисления В дополнение к традиционной виртуализации, относительно недавно появилась технология, которую неформально (и в некоторой степени недоброжелательно) назы- вают облачными вычислениями и считают альтернативой локальным серверным фер- мам. Облачные вычисления предлагают вычислительные мощности в качестве службы, которая оплачивается по привлекательно низкой цене на почасовой основе. Большая часть очевидных преимуществ этой технологии заключается в преобразовании ресур- сов серверов в инфраструктуру, аналогичную коммунальным службам. Администраторы и разработчики никогда не видят реальное аппаратное оборудование, которое они ис- пользуют, и ничего не знают о его структуре. Название этой технологии происходит от традиционного использования очертания облака для обозначения Интернета на сетевых диаграммах. Поскольку эта книга предназначена для системных администраторов, мы рассмотрим облачные вычисления на уровне сервера, но приложения также могут перемещаться в облако (эта технология называется “программное обеспечение как служба” (software-as- a-service — SAAS)). Все программы для настольных систем, реализующие разнообразные функции — от рассылки электронной почты до деловой активности, — можно перепо- ручить сторонним организациям и ими можно управлять независимо.
1032 Часть III. Разное Облачные службы обычно сопровождаются интерфейсом для управления, который настраивает мощности по требованию и позволяет резервировать новые системы одним щелчком мыши. Служба Elastic Compute Cloud (ЕС2) компании Amazon — это наибо- лее зрелая служба этого типа, относящаяся к первому поколению. Она пользуется попу- лярностью среди компаний, предлагающих веб-платформы нового поколения. Любите ли вы его или ненавидите, но принцип предоставления информационных сервисов как коммунальных услуг (utility computing) привлекает скупых менеджеров как дешевая аль- тернатива центрам обработки данных и локализованной серверной инфраструктуре. Фа- натики информационных технологий верят, что облачные технологии в различных фор- мах — это будущее вычислительных систем. Облачные вычисления основаны на идеях, некоторые из которых легли в основу виртуализации, но ее следует рассматривать как отдельный набор технологий со своими особенностями. Динамическая миграция Последняя концепция, которую нам следует рассмотреть, — это возможность ми- грации виртуальных машин с одной физической машины на другую. Большинство про- граммного обеспечения для виртуализации позволяют переносить виртуальные машины с одной функционирующей системы на другую, причем в некоторых случаях это про- исходит без прерывания обслуживания или потери соединения. Эта функциональная возможность называется динамической миграцией (live migration). Она полезна для равномерного распределения нагрузки, восстановления работы после сбоя, поддержки сервера и обеспечения общей гибкости системы. Сравнение технологий виртуализации Несмотря на то что разные технологии виртуализации основаны на разных концеп- циях, все они в конце концов приводят к одинаковым результатам. Администраторы об- ращаются к виртуальным системам точно так же, как это происходит в обычном режи- ме работы в сети. Основные отличия заключаются в том, что проблемы с аппаратным оборудованием сказываются на всех операционных системах одновременно (поскольку все они совместно используют эти устройства), а проблемы, связанные с содержанием ресурсов, должны устраняться на том же уровне, на котором реализована виртуализация (т.е. в гипервизоре). 24.2. Преимущества виртуализации Услышав столько комплиментов в адрес виртуальных вычислений, удивительно осознавать, что на ее разработку и коммерческую адаптацию ушло так много лет. Ос- новными факторами, способствующими принятию виртуальных технологий, являются экономия средств, снижение потребления электроэнергии, упрощенное обеспечение бесперебойной работы и высокая техническая маневренность. Стоимость является основным фактором во всех новых проектах в области информа- ционных технологий, и, оценивая технологии виртуализации, бизнесмены видят крат- косрочную выгоду, поскольку им не придется покупать несколько серверов. Вместо приобретения новых серверов для реализации новых приложений, админи- страторы могут запустить новые виртуальные машины и сэкономить деньги на покупке физических устройств и их дальнейшем обслуживании. Кроме того, резко снижаются
Глава 24. Виртуализация 1033 затраты на охлаждение, поскольку виртуальные серверы не генерируют тепла, что также приводит к дополнительной экономии. Упрощается работа центров обработки данных и удешевляется их обслуживание. Некоторые организации объединяют на одном виртуальном узле до 30 серверов, благо- даря чему они экономят место для стоек. Помимо прочего, виртуализация снижает нагрузку на окружающую среду. По неко- торым оценкам, прожорливыми центрами обработки данных потребляется около одного процента электричества, производимого в мире.2 Современные многоядерные централь- ные процессоры используются более эффективно, когда на них одновременно работает несколько виртуальных машин. Бесперебойность бизнеса, т.е. способность компании переживать физический и ло- гические кризисы с минимальными потерями, — это досадная и дорогостоящая про- блема для системных администраторов. Сложные подходы к восстановлению системы после сбоя упрощаются, если виртуальные серверы могут перемещаться с одной фи- зической машины на другую с помощью одной команды. Технологии такой миграции, поддерживаемые большинством платформ виртуализации, позволяют обеспечивать не- зависимость приложений от физического местоположения. Поскольку виртуальные серверы могут независимо обращаться к гипервизорам, ко- торые их поддерживают, управление серверами разрывает связь с физической реально- стью и может полностью описываться сценариями. Системные администраторы могут быстро удовлетворять потребности заказчиков в новых системах и приложениях, ис- пользуя шаблонное обеспечение серверов. Сценарии могут автоматизировать и упро- стить задачи управления типичными виртуальными системами. Загрузку, прекращение работы и миграцию виртуального сервера можно автоматизировать с помощью сцена- риев оболочки и даже задать расписание его работы с помощью демона cron. Снятые с производства операционные системы и приложения можно переносить с устаревшего аппаратного обеспечения на более современные архитектуры. Виртуализация увеличивает доступность. Динамическая миграция позволяет снимать физические серверы с обслуживания без прерывания работы службы. Обновление аппа- ратного обеспечения также не нарушает бизнес-процессы. Когда приходит время заме- нить устаревшую машину, виртуальная система немедленно мигрирует без болезненной модификации, инсталляции, тестирования и цикла переключений. Виртуализация обеспечивает строгое разделение между средами для разработки, тести- рования, размещения и производства даже в небольших компаниях. Исторически сложи- лось так, что поддержка этих раздельных сред для многих компаний была слишком до- рогим удовольствием, хотя этого могут требовать законы и стандарты. Отдельные среды могут быть выгодными; например, специалисты, занимающиеся обеспечением качества продукции, могут легко восстанавливать базовую конфигурацию среда для тестирования. С точки зрения немедленной отдачи, лишь немногие технологии предлагают так много преимуществ, как серверная виртуализация. Однако, как мы увидим в следующем разделе, виртуализация — это не панацея. 24.3. Практичный подход Необходимо тщательно планировать, контролировать и реализовывать переход в виртуализованную среду. Несогласованный подход приведет к появлению неупорядо- 2 Эта оценка приведена Джонатаном Куми (Jonathan Koomey) в его превосходном исследова- нии “Estimating total power consumption by servers in the U.S. and the world”.
1034 Часть III. Разное ченного набора неустойчивых и неуправляемых реализаций, которые принесут больше вреда, чем пользы. Более того, доверие заинтересованных лиц легко потерять: ошибки, сделанные на ранних этапах, могут усложнить будущие попытки перетянуть сопротив- ляющихся пользователей на новые платформы. Тише едешь — дальше будешь. Важно правильно выбрать системы, в которых одни приложения виртуализировать удобнее, чем другие. Службы, которые уже интенсивно используются, лучше оставить на физической системе, по крайней мере на начальном этапе. Среди других служб, ко- торые целесообразно оставить в покое, перечислим следующие. • Серверы интенсивного резервирования ресурсов или регистрационные узлы. • Приложения с высокой пропускной способностью, например системы для обна- ружения взлома. • Загруженные серверы для управления базами данных с вводом и выводом. • Лицензионные приложения с аппаратной защитой от копирования. • Приложения с особыми требованиями к аппаратному обеспечению, например ме- дицинские системы или некоторые системы для сбора научных данных. Хорошими кандидатами на виртуализацию являются следующие серверы. • Веб-серверы с выходом в Интернет, посылающие запросы межплатформенному программному обеспечению или базе данных. • Мало используемые изолированные серверы прикладных программ. • Системы для разработки программ, например серверы сборки или контроля версий. • Узлы для проверки качества продукции и среды для разворачивания программ. • Системы ядерной инфраструктуры, такие как каталоги LDAP, серверы DHCP и DNS, сервер времени и шлюзы SSH. Сначала организуйте миграцию небольшого количества менее важных систем. Это повысит доверие организации и обогатит опыт администратора. Очевидными претен- дентами на миграцию являются новейшие приложения, которые могут изначально иметь встроенные возможности для виртуализации. После стабилизации среды можно продолжить регулярный перенос систем. Для крупных организаций разумный темп ми- грации составляет от 25 до 50 серверов в год. Планируйте соответствующую поддержку инфраструктуры в новой среде. Планы по миграции должны поддерживаться соответствующими объемами дисковой памяти и се- тевыми ресурсами. Если несколько систем с одного узла окажутся в разных физических сетях, запланируйте соединение сетевых интерфейсов. Предусмотрите соответствующее оснащение для систем, которые будут использовать память в сети SAN. Правильно раз- мещайте подобные системы на одном и том же физическом аппаратном обеспечении, чтобы упростить инфраструктуру. В заключение примите меры, чтобы каждая виртуаль- ная машина имела запасную позицию, на которую ее можно перенести, если на первич- ной системе возникнут проблемы. Не запускайте все важные службы на одном и том же физическом аппаратном обе- спечении и не перегружайте системы слишком большим количеством виртуальных ма- шин. Благодаря быстрому совершенствованию серверного оборудования администрато- ры имеют широкие возможности для виртуализации. Многоядерная многопроцессорная архитектура — очевидный выбор для виртуальных машин, поскольку они уменьшают потребность в переключателях контекста и облегчают выделение ресурсов центрального процессора. Для виртуальных сред основные производители выпускают новые лезвий-
Глава 24. Виртуализация 1035 ные серверы (blade server) и предлагают быстродействующие средства ввода и вывода, а также большие объемы памяти. Полупроводниковые дисковые устройства отлично под- ходят для виртуализации, потому что они обеспечивают быстрый доступ и потребляют мало электроэнергии. 24.4. Виртуализация с помощью системы linux За звание чемпиона по виртуализации системы Linux соперничают две платформы: Хеп и KVM. В одном углу ринга — платформа Хеп, устоявшаяся, хорошо документиро- ванная, с широкой поддержкой от авторитетных дистрибьюторов. В другом углу рин- га — платформа KVM, которую Линус Торвальдс (Linus Torvalds) включил в ядро систе- мы Linux. Количество ее поклонников возрастает. Кроме того, она получила поддержку со стороны систем Ubuntu и Red Hat. В этом разделе мы не станем вмешиваться в их состязание, а сосредоточимся на во- просах администрирования систем, связанных с каждой из этих технологий. Введение в платформу Хеп Изначально Linux-ориентированная платформа Хеп была разработана Яном Праттом (Ian Pratt) как исследовательский проект Кембриджского университета (University of Cambridge). Со временем она стала мощной платформой для виртуализации, которая, благодаря производительности, безопасности и дешевизне, оказалась способной конку- рировать даже с коммерческими гигантами. Накладные расходы, связанные с эксплуа- тацией паравиртуального гипервизора виртуальной машины Хеп, составляют 0,1—3,5%, что намного меньше, чем у полностью виртуализованных платформ. Поскольку гипервизор Хеп является программой с открытым исходным кодом, су- ществует множество инструментов с разными уровнями поддержки ее функциональных возможностей. Исходный код платформы Хеп можно загрузить на сайте хеп. огд. Кроме того, она входит во многие дистрибутивные пакеты. Хеп — это автономный гипервизор, который функционирует непосредственно на физическом аппаратном обеспечении. Работающая виртуальная машина называется до- меном. Всегда существует по крайней мере один домен, который называется нулевым (или domO). Нулевой домен имеет полный доступ к аппаратному обеспечению, управ- ляет другими доменами и запускает драйверы всех устройств. Непривилегированные до- мены называются domU. Всеми доменами, включая domO, управляет гипервизор Хеп, ответственный за работу центрального процессора и управление памятью. Архитектуру платформы Хеп дополняют демоны, инструменты и библиотеки, обеспечивающие взаи- модействие между доменами domU, domO и гипервизором. Несколько инструментов управления упрощают решение общих задач управления платформой Хеп, таких как загрузка и остановка, конфигурирование и создание гостей. Хеп Tools — это коллекция сценариев на языке Perl, которые упрощают создание доме- нов domU. Сценарий MLN, или Manage Large Networks, — это еще один сценарий на языке Perl, создающий виртуальные сети на основе ясных и понятных файлов конфигу- рации. ConVirt — это превосходный инструмент с графическим пользовательским интер- фейсом для управления гостями. Он обеспечивает динамическую миграцию по принципу “drag-and-drop”, мультисерверную поддержку без агентов, доступ к приборным интер- фейсам и их конфигурирование, а также шаблонное создание новых виртуальных машин. Для поклонников командной строки предусмотрена также встроенная утилита хт.
1036 Часть III. Разное Дистрибутивные пакеты Linux по-разному поддерживают платформу Хеп. Компания Red Hat сначала включала платформу Хеп в свои дистрибутивные пакеты, пока не от- казалась от нее в пользу конкурирующего программного обеспечения KVM. Платформа Хеп хорошо поддерживается системой SUSE Linux, особенно в версии Enterprise 11. Разработчики канонической системы Ubuntu Linux выбрали странный подход к плат- форме Хеп, нерешительно поддерживая ее вплоть до появления версии 8.10, в которой они отказались от платформы Хеп и предпочли программное обеспечение KVM (хотя платформа Хеп по-прежнему упоминается в документации). После инсталляции способ использования платформы Хеп мало чем отличается в разных дистрибутивных пакетах. В общем, для крупного развертывания виртуализации на основе платформы Хеп мы ре- комендуем использовать системы Red Hat или SUSE. Основы платформы Хеп Сервер Linux Хеп требует большого количества демонов, сценариев, конфигураци- онных файлов и инструментов. Большинство элементов этой головоломки перечисле- но в табл. 24.1. Конфигурационный файл каждого домена на платформе Хеп в каталоге /etc/xen содержит информацию о том, какие виртуальные ресурсы доступны для до- мена domU, например дисковые устройства, центральный процессор, память и сетевые интерфейсы. Каждый домен domU имеет свой конфигурационный файл. Формат этого файла очень гибкий и позволяет администраторам точно контролировать ограничения, накладываемые на каждого гостя. Если в подкаталог auto добавлена символическая ссылка на конфигурационный файл домена domU, то гостевая операционная система будет автоматически запускаться во время загрузки. Таблица 24.1. Компоненты платформы Хеп Путь .................................................. / . .. / /etc/xen Каталог основной конфигурации xend-config.sxp Высокоуровневый файл конфигурации демона xend . auto Конфигурационные файлы гостевой операционной системы для автоматического scripts /var/log/xen /usr/sbin/xend /usr/sbin/xm запуска во время загрузки Вспомогательные сценарии, создающие сетевые интерфейсы и т.д. Регистрационные файлы платформы Хеп Главный управляющий демон платформы Хеп Инструмент для управления гостевым доменом на платформе Хеп Демон xend обеспечивает создание доменов domU и миграцию, а также решает дру- гие задачи управления. Он должен всегда находиться в работе и, как правило, запускает- ся во время загрузки. Его файл конфигурации /etc/xen/xend-config.sxp задает па- раметры соединения для гипервизора и ограничения ресурсов для домена domO. Кроме того, он конфигурирует функциональные возможности для динамической миграции. Ш Разреженные файлы упоминаются также в разделе 10.4. Диски гостевых доменов обычно хранятся в виртуальных блочных устройствах (virtual block devices — VBD) в домене domO. Устройство VBD может быть соединено со специ- альным ресурсом, например физическим дисковым запоминающим устройством или логическим томом. Кроме того, оно может представлять собой закольцованный файл (loopback file), также известный как файловое устройство VBD (file-backed VBD), соз-
Глава 24. Виртуализация 1037 данное программой dd. Если используется специальный диск, то производительность такого устройства оказывается более высокой, но файлы являются более гибкими и могут управляться с помощью обычных команд системы Linux (таких, как mv или ср) в нулевом домене. Файлы, на основе которых создается такое устройство, являются раз- реженными и при необходимости могут увеличиваться. Если в системе возникает узкое место с точки зрения производительности, то фай- ловое устройство VBD обычно оказывается лучшим выбором. Если вы передумаете, устройство VBD легко переключить на специальный диск. Аналогично виртуальные сетевые интерфейсы (VIF) можно установить многими спо- собами. По умолчанию используется мостовой режим (bridged mode), в котором каждый гостевой домен является узлом той же сети, что и главный узел. Маршрутизированный режим и режим NAT конфигурируют гостевые домены как частные сети, доступные друг для друга и нулевого домена, но скрытые от остальной части сети. Более сложные кон- фигурации включают связанные сетевые интерфейсы и сети VLAN для гостей из разных сетей. Если ни одна из этих возможностей не удовлетворяет вашим требованиям, можно настроить сценарии платформы Хеп для реализации практически любых пожеланий. Инсталляция гостя на платформе Хеп с помощью программы virt-install Для простой инсталляции гостя существует инструмент virt-install, являющийся частью приложения virt-manager для системы Red Hat.3 Инструмент virt-install — это утилита, запускаемая из командной строки для инсталляции операционной системы. Она принимает средства инсталляции из разных источников, например устройства сетевой файловой системы NFS, физического CD- или DVD-привода или местоположения HTTP. Например, инсталляция гостевого домена может быть выполнена с помощью сле- дующей инструкции. redhat$ sudo virt-install -n chef -f /vm/chef.img -1 http://exainple.com/myos —r 512 —nographics Это типичный гостевой домен на платформе Хеп с именем “chef,” дисковым устрой- ством VBD, размещенным в каталоге /vm/chef .img, и средой инсталляции, получен- ной с помощью протокола HTTP. Этот экземпляр имеет 512 двоичных Мбайт (MiB) оперативной памяти и не использует во время инсталляции графическую поддержку X Windows. Утилита virt-install загружает файлы, необходимые для начала инсталля- ции, а затем запускает процесс инсталлятора. Вы увидите пустой экран и пройдете через все стандартные этапы инсталляции систе- мы Linux в текстовом режиме, включая конфигурирование сети и выбор пакета. После инсталляции гостевой домен перезагружается и готов к использованию. Для отсоедине- ния от гостевой консоли и возвращения в домен domO выполните команду <Control-]>. £□ Более подробно система VNC обсуждается в разделе 30.2. Несмотря на то что в данном примере волшебное заклинание virt-install осу- ществляет текстовую инсталляцию, возможна также графическая поддержка этого про- цесса с помощью системы Virtual Network Computing (VNC). Конфигурация домена хранится в файле /etc/xen/chef. Этот файл выглядит сле- дующим образом. 3 Для поддержки инструмента virt-install в системе Ubuntu инсталлируйте пакет python- virtinst.
1038 Часть III. Разное name = "chef" uuid = "a85e20f4-dllb-d4f7-1429-7339bld0d051" maxmem = 512 memory = 512 vcpus = 1 bootloader = "/usr/bin/pygrub" on_poweroff = "destroy" on_reboot = "restart" on_crash = "restart" vfb = [ ] disk = [ "tap:aio:/vm/chef.dsk,xvda,w" ] vif - [ "mac=00:16:3e:le:57:79,bridge=xenbrO" ] Как видим, по умолчанию сетевой интерфейс установлен в мостовой режим. В этом случае устройство VBD представляет собой “блочный” файл, обеспечивающий более высокую производительность, чем стандартный кольцевой файл. Файл образа диска, допускающий запись, предоставлен гостю под именем /dev/xvda. Это специфическое определение дискового устройства tap: aio рекомендовано разработчиками платформы Хеп по соображениям производительности. Инструмент хт удобен для ежедневного управления виртуальными машинами, на- пример для их запуска и остановки, присоединения к их консолям и исследования те- кущего состояния. Ниже показана процедура запуска гостевого домена с последующим присоединением к консоли chef. Идентификаторы присвоены в порядке возрастания по мере создания гостевых доменов. При перезагрузке узла они восстанавливаются. redhat$ sudo xm list Name ID Mem(MiB) VCPUs State Time(s) Domain-0 0 2502 2 r------- 397.2 chef 19 512 1 -b------ 12.8 redhat$ sudo xm console 19 Для того чтобы ввести в действие любую настройку гостевого домена, например при- соединение другого диска или перевод сети из мостового режима в режим NAT, необхо- димо отредактировать гостевой конфигурационный файл в каталоге /etc/xen и переза- грузить гостя. Подробную информацию о дополнительных параметрах гостевых доменов можно найти на справочной странице xmdomain. cfg. Динамическая миграция на платформе Хеп Динамическая миграция — это процесс переноса домена domU с одного физическо- го узла на другой без прекращения работы службы. С практической точки зрения это один из наиболее удобных и самых магических трюков виртуализации, который могут выполнить системные администраторы. Поскольку поддерживаются открытые сетевые соединения, то ни сеанс протокола SSH, ни одно активное соединение HTTP не будут потеряны. Хорошим поводом для динамической миграции является добавление ап- паратного обеспечения, обновление операционной системы и перегрузка физических серверов. Для успешного осуществления миграции важно, чтобы запоминающие устройства использовались совместно. Любое запоминающее устройство, необходимое для домена domU, например файл образа диска, на котором хранится виртуальная машина, должно быть доступным для обоих узловых серверов. Динамическую миграцию виртуальных ма- шин с файловой поддержкой выполнить легче всего, потому что они обычно содержатся в одном переносимом файле. Однако совместное использование файлов между система-
Глава 24. Виртуализация 1039 ми возможно также в сетях SAN и NAS, а также в протоколах NFS и iSCSI. Несмотря на то что устройство VBD используется совместно несколькими пользователями, примите меры, чтобы домен domU единовременно функционировал только на одном физиче- ском сервере. Файловые системы Linux не поддерживают непосредственный параллель- ный доступ к нескольким узлам. Кроме того, поскольку IP- и МАС-адреса виртуальной машины следуют за ней от одного узла к другому, каждый сервер должен находиться на том же самом уровне 2 и в той же самой IP-подсети. Как только виртуальная машина посылает трафик по сети, сетевое аппаратное обе- спечение узнает новое местоположение МАС-адреса. Если все эти основные требования удовлетворены, все, что нужно для выполнения миграции, — внести новые изменения в конфигурационный файл гипервизора /etc /xen/xend-conf ig. sxp. Соответствующие параметры перечислены в табл. 24.2; в стан- дартном процессе инсталляции платформы все они закомментированы. Внеся измене- ния, запустите демон xend заново, выполнив команду /etc/init. d/xend restart. Таблица 24.2. Параметры динамической миграции в конфигурационном файле xend xend-relocation-server Включает механизм миграции; установить равным yes xend-relocation-port xend-relocation-address Сетевой порт, используемый для выполнения миграции Интерфейс, прослушиваемый для миграционных соединений. Если не задан, платформа Хеп прослушивает все интерфейсы в домене domO xend-relocation-hosts-allow Узлы, из которых разрешены соединения8 а Этот параметр никогда нельзя оставлять пустым; в противном случае будут разрешены все соединения со всех узлов. В процессе миграции виртуальной машины между узлами образ памяти домена domU передается по сети в незашифрованном виде. Если гость хранит в памяти конфиденци- альные данные, администраторы обязаны обеспечивать секретность. Перед выполнени- ем миграции файл конфигурации гостя должен находиться как на сервере источника, так и на сервере назначения. Если местоположение файлов образа диска на разных узлах разное (например, если один сервер монтирует совместно используемое запоминающее устройство в каталоге /хеп, а другой — в каталоге /vm), то это различие должно отра- жаться в параметре disk = в файле конфигурации домена. Сама миграция выполняется очень просто. redhat$ sudo xm migrate —live chef server2.exanple.com Предполагая, что гостевой домен chef функционирует, команда переносит его на дру- гой узел платформы Хеп, server2. example. com. Из-за того что флаг —live пропу- щен, он останавливает свою работу перед миграцией. Поучительно применить команду ping к IP-адресу домена chef во время миграции, чтобы увидеть отброшенные пакеты. Платформа KVM KVM (Kernel-based Virtual Machine) — это инструмент полной виртуализации, вклю- чаемый в магистральное ядро системы Linux начиная с версии 2.6.20. Необходимым условием его применения является наличие расширений центрального процессора Intel
1040 Часть III. Разное VT и AMD-V для поддержки виртуализации.4 В операционной системе Ubuntu эта техно- логия виртуализации предусмотрена по умолчанию, а компания Red Hat переключилась с платформы Хеп на программу KVM после поглощения компании Qumranet, разрабо- тавшей программу KVM. Поскольку виртуализация KVM поддерживается аппаратным обеспечением центрального процессора, поддерживаются многие гостевые операцион- ные системы, включая Windows. Для работы этого программного обеспечения необходи- ма также модифицированная версия эмулятора процессора QEMU. На платформе KVM ядро операционной системы Linux функционирует как гиперви- зор; управление памятью и диспетчеризация выполняются с помощью ядра узла, а го- стевые машины представляют собой обычные процессы Linux. Этот уникальный подход к виртуализации сулит огромные преимущества. Например, сложность, порождаемая многоядерными процессорами, устраняется с помощью ядра системы, и для их под- держки не требуется вносить никаких изменений в гипервизор. Команды Linux, такие как top, ps и kill, управляют виртуальными машинами так, будто они являются обычными процессами. Интеграция с системой Linux является без- упречной. Следует предупредить администраторов о том, что KVM — относительно новая тех- нология, поэтому перед использованием ее следует тщательно протестировать. На сайте KVM зарегистрировано множество проблем, связанных с несовместимостью и возни- кающих при запуске гостей, представляющих собой разные типы операционных систем. Сообщается также о частом прерывании миграции между разными версиями программ- ного обеспечения KVM. Об этом следует помнить. Инсталляция платформы KVM и ее использование Несмотря на то что технологии, лежащие в основе платформ Хеп и KVM, принципи- ально отличаются друг от друга, инструменты, инсталлирующие гостевые операционные системы и управляющие ими, похожи друг на друга. Как и на платформе Хеп, для созда- ния новых гостей по технологии KVM можно использовать программу virt-install, а для управления ими — команду virsh.5 Для работы этих утилит необходима библиотека libvirt, разработанная компанией Red Hat. Перед началом инсталляции необходимо сконфигурировать узел так, чтобы он под- держивал работу сетей в гостевых операционных системах.6 В большинстве конфигура- ций для организации моста, обеспечивающего сетевую связность узлов в каждой гостевой системе, используется один физический интерфейс. В системе Red Hat конфигурацион- ные файлы сетевого устройства хранятся в каталоге /etc/sysconf ig/network-scripts. Требуется два файла устройства: для моста и физического устройства. В приведенном ниже примере pethO — это физическое устройство, a ethO — мост. /etc/sysconf ig/network-scripts/pethO DEVICE=pethO 4 Имеет ли ваш центральный процессор эти расширения? Выполните следующую команду egrep ’ (vmx| svm) ’ /proc/cpuinfo. Если эта команда ничего не выведет на экран, значит, рас- ширений нет. В некоторых операционных системах, для того чтобы увидеть расширения, необхо- димо включить их в настройках BIOS. 5 При желании команду virsh можно использовать и для управления доменом domU на плат- форме Хеп. 6 Это в равной степени относится и к платформе Хеп, но демон xend берет эту работу на себя, создавая интерфейсы в фоновом режиме.
Глава 24. Виртуализация 1041 0NB00T=yes BRIDGE=ethO HWADDR=XX:XX:XX:XX:XX:XX /etc/sysconfig/network-scripts/ethO DEVICE=ethO BOOTPROTO=dhcp ONBOOT=yes TYPE=Bridge Здесь устройство ethO получает IP-адрес с помощью протокола DHCP. Флаги, передаваемые программе virt-install, могут немного отличаться от фла- гов, используемых при инсталляции платформы Хеп. Например, флаг —hvm означает, что для виртуализации гостя должно использоваться аппаратное обеспечение, а не пара- виртуализация. Кроме того, аргумент —connect гарантирует, что по умолчанию будет выбран правильный гипервизор, потому что утилита virt-install поддерживает не- сколько гипервизоров. В заключение, чтобы получить выгоду от возможностей платфор- мы KVM, рекомендуется использовать файл -accelerate. Следовательно, пример пол- ной команды для инсталлирования гостевого сервера Ubuntu с диска CD-ROM должен выглядеть следующим образом. ubuntu$ sudo virt-install —connect qemu:///system -n UbuntuHardy -r 512 -f **/ubuntu-hardy,img -s 12 -c /dev/dvd —os-type linux —accelerate —hvm -vnc Would you like to enable graphics support? (yes or no) Если инсталляционный диск DVD для системы Ubuntu вставлен в дисковод, эта команда запускает процесс инсталляции и сохраняет гостя в файле ~/ubuntu-hardy, img, позволяя увеличивать его размер до 12 Гбайт. Поскольку мы не указали ни флаг -nographics, ни флаг —vnc, утилита virt-install спрашивает, включать ли графику. Утилита virsh запускает свою собственную оболочку, которая выполняет комавды. Для того чтобы открыть эту оболочку, наберите команду virsh —connect qemu:/// system. Следующая серия команд демонстрирует некоторые основные функциональ- ные возможности утилиты virsh. Для того чтобы увидеть полный список этих функ- ций, наберите команду help в оболочке или просмотрите справочную страницу. ubuntu$ sudo virsh —connect qemu:///system virsh # list —all Id Name State 3 UbuntuHardy running 7 Fedora running Windows2003Server shut off virsh # start Windows2003Server Domain WindowsServer started virsh # shutdown FedoraExample Domain FedoraExample is being shutdown virsh # quit Похоже, что динамическая миграция на платформе KVM пока находится на стадии разработки; ее реализации в разных версиях резко отличаются друг от друга. Миграции между системами с разной архитектурой центрального процессора могут потребовать
1042 Часть III. Разное специальных “заплат”. Мы не рекомендуем полагаться на механизм динамической ми- грации в платформе KVM в промышленной среде, пока эта технология не станет доста- точно устойчивой. 24.5. Зоны И КОНТЕЙНЕРЫ СИСТЕМЫ SOLARIS Компания Sun раньше многих реализовала виртуализацию на уровне операцион- ной системы, предложив в системе Solaris 10 (которая относится примерно к 2005 году) концепцию зон и контейнеров. Обширная интерактивная документация и сообщество активных пользователей привели к широкой адаптации и признанию этой технологии со стороны бизнеса. Гибкость и богатый набор инструментов для управления также спо- собствуют продажам средств виртуализации для системы Solaris. Зоны и контейнеры нельзя назвать средствами виртуализации, характерными ис- ключительно для системы Solaris. Например, проект xVM включает в себя гиперви- зор LDOM для виртуальных машин, основанный на технологии Хеп, наряду с другими мощными средствами управления для развертывания и контроля за большим количе- ством гостевых систем. Технология, основанная на аппаратном обеспечении компании Sun (наряду с системами многих других производителей), может выполнять физическое разделение устройств на электрическом уровне, позволяя нескольким операционным системам параллельно работать на одном и том же шасси. В этой книге мы не соби- раемся обсуждать дополнительные технологии, но читателям стоит заглянуть на сайты, посвященные многочисленным устройствам компании Sun. Зоны и контейнеры отличаются от других инструментов виртуализации, поэтому мы начнем с быстрого обзора, который поможет нам не углубляться в некоторые темы. Термины “зона” и “контейнер” во многом являются синонимами. В самом стро- гом смысле, зоны — это защищенная среда выполнения, а контейнер — это зона плюс управление ресурсами. На практике эти термины эквивалентны, и именно так мы будем их использовать в данной главе. Все системы Solaris имеют “глобальную зону”, которая запускает ядро и все процес- сы в системе, включая процессы из других зон. Неглобальная зона — это виртуальная система Solaris, работающая наряду с глобальной зоной. Сетевой трафик и выполнение процессов в неглобальной зоне скрыты от других неглобальных зон, но все процессы являются видимыми в глобальной зоне. С целью обеспечения безопасности важно огра- ничить доступ системных администраторов в глобальную зону. Существует два типа зон: целостная (whole-root) и разреженная (sparse). Целостная зона содержит копии файлов собственной операционной системы и независимых фай- ловых систем, требуя при этом намного больше места для хранения на запоминающих устройствах. Разреженная зона совместно с глобальной использует несколько своих файловых систем, монтируя их только для чтения. Пулы ресурсов являются коллекциями системных ресурсов, таких как процессоры, которые можно распределять между зонами. Во всех системах существует по крайней мере один стандартный пул ресурсов. Все зоны, включая глобальную, должны иметь хотя бы один пул ресурсов. Можно также создавать несколько пулов ресурсов для рас- пределения доступных системных ресурсов между функционирующими зонами. Пул ресурсов состоит из, как минимум, одного набора ресурсов (который в настоя- щее время ограничен частью ресурсов центрального процессора) и алгоритма их распре- деления. Несколько зон могут совместно использовать один пул ресурсов. В этом случае
Глава 24. Виртуализация 1043 распределитель может определять, как совместно использовать центральный процессор среди зон, использующих пул ресурсов. Зоны поддерживают множество разных алгоритмов распределения ресурсов для раз- ных ситуаций, но мы сосредоточимся на самом популярном — “справедливом разделе” (“fair share scheduling”). Рассмотрим конкретный пример. Представьте себе систему с двумя физическими центральными процессорами. Эта система собирается запустить две виртуальные си- стемы Solaris: одну со специализированным приложением, требующим по крайней мере одного полноценного центрального процессора, а другую — с облегченным веб- сервером, не требующим особенных ресурсов. Реализация этой архитектуры в системе Solaris представлена на рис. 24.4. Контейнер 2 Контейнер 3 Контейнер 1 Глобальная зона Рис, 24,4, Пример контейнеров в системе Solaris На рис. 24.4 показаны три контейнера: контейнер для специализированного при- ложения, веб-сервер и оригинальный (глобальный) экземпляр системы Solaris. Кроме того, существует три зоны: для лицензионного приложения, веб-сервера и глобальная. Помимо них, есть два пула ресурсов: по одному для каждого центрального процессора. Веб-сервер и глобальная зона совместно используют стандартный пул ресурсов, со- держащий один центральный процессор и реализующий алгоритм справедливого раз- дела. Каждая из этих зон имеет свою долю (которые не изображены на рисунке), т.е. ресурсы центрального процессора разделяются поровну между глобальной зоной и зо- ной веб-сервера. Спецализированное приложение использует отдельный пул ресурсов со специальным центральным процессором. Система Solaris имеет несколько утилит командной строки для управления контей- нерами, зонами и ресурсами. Наиболее важно то, что каждая зона и пул ресурсов име- ют инструмент конфигурации и инструмент управления: zonecfg, zoneadm, poolcfg и pooladm. С помощью команды pooladm можно создать пул ресурсов до его присвоения зоне. Для включения пулов используется флаг -е, а затем выполняется команда pooladm без аргументов, чтобы увидеть текущее состояние пула. Solaris$ sudo pooladm -е solaris$ sudo pooladm system default string system.comment
1044 Часть III. Разное int system.version 1 boolean system.bind-default true string system.poold.objectives wt-load Мы сократили довольно длинный вывод; команда продолжает печатать информацию о текущем состоянии пула и доступности центрального процессора. Стандартный пул называется pool_default. Он содержит все доступные ресурсы центрального процессора. Команда poolcfg создает новый пул. В серии команд, представленных ниже, мы выделяем отдельный центральный процессор для набора специализированных ресурсов, присваиваем этот набор ресурсов новому пулу ресурсов и активизируем процессор. solaris$ sudo poolcfg -с 'create pset proprietary-pset (uint pset.min=l; uint pset.max=l) ' solaris$ sudo poolcfg -c 'create pool proprietary-pool' Solaris $ sudo pooladm -c Теперь мы создаем зону с помощью команд zoneadm и zonecfg. Выполнение коман- ды zonecfg открывает новую оболочку конфигурации для зоны. Следовательно, этот инструмент поддерживает оболочечные функциональные свойства, такие как автозапол- нение при нажатии клавиши <ТаЬ> и “горячие” клавиши для перемещения курсора. Как минимум, должны выполняться следующие условия. • Зона создана. • Для зоны задан путь к запоминающему устройству для зонных файлов и файловых систем. • Для зоны задан независимый 1Р-адрес. • Зоне присвоен один из активных системных интерфейсов. • Зоне выделен созданный выше пул ресурсов. Рассмотрим команды, выполняющие эти действия. solaris$ sudo zonecfg -z proprietary-zone zonecfg:proprietary-zone> create zonecfg:proprietary-zone> set zonepath=/zones/proprietary-zone zonecfg:proprietary-zone> set autoboot=true zonecfg:proprietary-zone> add net zonecfg:proprietary-zone:net> set address=192.168.10.123 zonecfg:proprietary-zone:net> set physical=el000g0 zonecfg:proprietary-zone:net> end zonecfg:proprietary-zone> set pool=proprietary-pool zonecfg:proprietary-zone> verify zonecfg:proprietary-zone> commit zonecfg:proprietary-zone> exit Обратите внимание на то, что команда zonecfg просит вас указать объект, с кото- рым вы в настоящее время работаете. В этот момент происходит конфигурирование зоны, но на самом деле она еще не инсталлирована и не готова к работе. Это полно- ценная система Solaris, которой нужен пакет инсталляции, как любой нормальной опе- рационной системе. Утилита zoneadm инсталлирует, загружает и выполняет другие операции над зоной. Solaris $ sudo zoneadm -z proprietary-zone install Preparing to install zone <proprietary-zone>. Creating list of files to copy from the global zone.
Глава 24. Виртуализация 1045 solaris$ sudo zoneadm -z proprietary-zone boot Solaris$ sudo zoneadm list global proprietary-zone После запуска зоны вызов команды zlogin -С proprietary-zone приводит к со- единению с ее консолью. Процесс загрузки зоны напоминает загрузку физической си- стемы, поэтому соединение с утилитой zlogin перед загрузкой приводит к выводу на экран всей информации во время процесса загрузки. Необходимо выполнить обычное конфигурирование новой системы, например выбрать язык и метод аутентификации. Осталось создать зону для нашего веб-сервера. Поскольку зона веб-сервера делит стандартный пул ресурсов с глобальной зоной, нет необходимости создавать новый пул. Вместо этого мы просто создадим зону с помощью утилиты zonecfg, как показано выше, но с параметром pool=pool_default. Концепция зон и контейнеров намного глубже, чем мы описали в этом разделе. Она предусматривает функциональные возможности для миграции зон между физическими системами (хотя динамическая миграция не поддерживается), ZFS-ресурсы для неболь- ших целостных зон и “фирменные зоны” (“branded zones”), поддерживающие выполне- ние бинарных модулей, принадлежащих другим платформам (например, Linux), в яйфе системы Solaris. 24.6. Разделы рабочей нагрузки в системе AIX Компания IBM уже давно занимается виртуализацией. Ее сотрудники изобрели эту концепцию еще в 1960-х годах, но не реализовали ее, пока в конце 2007 года не появи- лась версия AIX 6.1. Любая система, способная выполнить программную платформу AIX 6, поддерживает разделы рабочей нагрузки (WPAR). (Эта технология отличается от различных реализаций логического разделения, предлагавшихся компанией IBM в вер- сиях, предшествующих версии 4.3.) Разделы WPAR работают в изолированной среде выполнения. Процессы могут взаи- модействовать только с процессами, находящимися в том же самом разделе. Сигналы и события в глобальной среде не влияют на разделы и наоборот. Разделы WPAR могут иметь собственные сетевые адреса. Разделы WPAR бывают двух видов: системные и прикладные. • Системный раздел WPAR совместно с глобальным окружением использует только ядро системы AIX (по существу, узел). Приложение, работающее в системе WPAR, функционирует так, будто оно запущено в независимом экземпляре системы AIX с собственным демоном inetd для обеспечения сетевой автономии. • Прикладной раздел WPAR выполняет отдельное приложение в изолированной среде. Он использует все файловые системы совместно с глобальным окружением и не может предоставить возможности для удаленного доступа. После выполнения приложения прикладной раздел WPAR продолжает существовать. Компания IBM предоставляет несколько разных инструментов для управления раз- делами WPAR, продолжая традицию обеспечения удобного управления, характерную для системы. Здесь мы обсудим интерфейс командной строки, но администраторы должны знать, что в типичной ситуации для системы AIX существует полноценный интерфейс SMIT и программа WPAR Manager, представляющая собой веб-интерфейс для централи- зованного управления несколькими серверами и их разделами рабочей нагрузки.
1046 Часть III. Разное Мы создаем систему WPAR с помощью команды mkwpar. Для нее нужен только один аргумент -п, чтобы задать имя системы. Таким образом, команда mkwpar -n mario соз- дает раздел с именем “mario.” Команда mkwpar создает файловые системы, инсталли- рует соответствующие наборы файлов и готовит подсистемы и службы. Этот процесс занимает мало времени; после его завершения для запуска системы WPAR необходимо выполнить команду startwpar mario. Каталог /wpars в глобальной среде содержит файловые системы для раздела mario. Разделы WPAR из глобальной среды можно перечислить с помощью команды Iswpar. aix$ sudo Iswpar Name State Type Hostname Directory mario A S mario /wpars/mario Для того чтобы соединить корень с консолью, используется команда clogin mario. Что может быть проще? Этот простой пример не учитывает множество важных фактов и возможностей для настройки. Например, новое программное обеспечение нельзя инсталлировать в раз- деле mario, потому что файловые системы /usr и /opt по умолчанию монтируются только для чтения, чтобы сэкономить память запоминающего устройства. Кроме того, не доступен ни один сетевой интерфейс. Упрощенная процедура, описанная выше, так- же игнорирует превосходные возможности, которые компания IBM предоставляет для управления ресурсами и которые упрощают контроль над использованием центрального процессора, памяти, виртуальной памяти и других ресурсов разделом WPAR. Для создания более полезного экземпляра можно снабдить команду mkwpar допол- нительными аргументами. Приведенная ниже процедура создает раздел WPAR со сле- дующими атрибутами. • Имя WPAR — mario (-n). • Настройки для разрешения имен наследуются у глобального экземпляра (-г). • Созданы частные, допускающие запись файловые системы /opt и /usr (-1). • Раздел WPAR использует IP-адрес 192.168.10.15 на интерфейсе епО из глобального раздела WPAR (-N). • Доля центрального процессора, выделенного данному разделу WPAR, колеблется от 5 (минимум) до 15% (условный максимум); абсолютный предел составляет 25% (-R). aix$ sudo mkwpar -n mario -r -1 -N interface=en3 address=192.168.10.15 netmask-255.255.255.0 broadcast=192.168.10.255 -R active=yes C₽U=5%-15%,25% Этот вызов более подробный по сравнению с предыдущим вызовов команды mkwpar и выполняется дольше из-за дублирования файловых систем /usr и /opt. Для модификации раздела после его создания следует использовать команду chwpar. С помощью команды stopwpar можно прекратить работу раздела, а с помощью коман- ды rmwpar — удалить его. Прикладные разделы WPAR обрабатываются аналогично. Вместо команды mkwpar для создания прикладного раздела WPAR используется команда wparexec. Ее параме- тры в целом идентичны параметрам команды mkwpar, но вместо имени следует указать приложение, которое выполняется как аргумент. Например, для того чтобы запустить веб-сервер Apache в своем прикладном разделе WPAR, следует просто выполнить ко- манду wparexec /usr/local/sbin/httpd.
Глава 24. Виртуализация 1047 24.7. Программное обеспечение Integrity Virtual Machines в системе HP-UX Если целью сотрудников компании HP было запутать администраторов неорганизо- ванной массой возможных подходов к виртуализации, то они ее достигли. Программное обеспечение Integrity Virtual Machines распределяет ресурсы аппаратного обеспечения среди нескольких гостевых операционных систем на отдельном низкоуровневом серве- ре. Для более крупных систем с несколькими ядрами компания HP разработала более мощное программное обеспечение Virtual Partitions или vPars. Кроме того, служба разде- ления аппаратного обеспечения nPartitions обеспечивает истинное разделение ресурсов среди работающих серверов на электрическом уровне. Эти технологии совместно с про- граммным обеспечением компании HP для кластеризации получили обобщенное назва- ние Virtual Server Environment. В этом разделе рассматривается только программное обеспечение Integrity Virtual Machines (IVM). ГУМ — это технология полной виртуализации. Немодифицированные версии систем Windows и Linux могут выполнять его на узле HP-UX. Каждый гость по- лучает заранее сконфигурированную долю времени центрального процессора. Память ц ресурсы запоминающих устройств также допускают настройку. Можно конфигурировать неограниченное количество гостей, но количество функционирующих виртуальных шин ограничено числом 256. Сеть для гостевых машин состоит из трех компонентов. • Адаптер физической сети в узле, который называется pNIC. • Адаптер гостевой сети, который называется виртуальным интерфейсом NIC или vNIC. • Виртуальный коммутатор, или vswitch, создающий сеть между узлом и одним или несколькими гостями. Сложность различных сетевых конфигураций, возникающих при инсталляций вир- туальных машин Integrity, ошеломляет, но в то же время это обеспечивает гибкость си- стемы. Для иллюстрации создадим отдельный виртуальный коммутатор, выполняющий отображение в ту же сеть, в которой находится узел. Это простейшая конфигурация, ко- торая эквивалентна мостовым сетям, упомянутым ранее. Почти как на платформе Хеп, узел может предоставлять гостям ресурсы запоми- нающего устройства в виде физических дисков, DVD, лентопротяжных устройств или файлов операционной системы узла. Кроме того, как и на платформе Хеп, достичь максимальной производительности работы запоминающего устройства иногда доволь- но сложно. Инструкции по сложной конфигурации сети и методам оптимизации запоминающих устройств можно найти в руководстве Installation, Configuration, and Administration Guide для системы HP-UX. Создание и инсталляция виртуальных машин Команды, создающие виртуальные машины, инсталлирующие их и управляющие ими, являются мощными и в то же время простыми. Имя каждой команды начинается с префикса hpvm, а остальная часть имени описывает требуемое действие. Например, команда для создания новой виртуальной машины называется hpvmcreate.
1048 Часть III. Разное Для управления конфигурацией гостевых операционных систем в каждой команде используются различные аргументы и нет статических файлов, которыми мог бы управ- лять администратор. Изменения в настройке гостя осуществляются с помощью команды hpvmmodify. Прежде чем создать виртуальную машину, следует обеспечить доступ к ресурсам ее запоминающих устройств и сети. В приведенном ниже примере сначала мы создаем файловую систему на одном из физических дисков для хранения гостя, а затем вирту- альный коммутатор для обеспечения сетевой связности гостя. Кратко опишем процесс создания виртуальной машины. • Создаем ресурсы запоминающих устройств для файлов гостя. • Создаем виртуальный коммутатор для сетевой связности. • Создаем виртуальную машину. • Запускаем и инсталлируем виртуальную машину. В серии приведенных ниже команд мы используем команду mkf s для создания фай- ловой системы на физическом устройстве disk3, произвольном диске, который оказал- ся доступным в нашей лабораторной системе. В результате он будет хранить гостевую операционную систему, приложения и данные. Файл монтируется в каталоге /vdev, и, в заключение, команда hpvmdevmgmt (не путайте ее с командой hpwndkwlvyfm) создав! запоминающее устройство с именем diskl. hp-ux$ sudo mkfs -F vxfs -o large files /dev/disk/disk3 hp-ux$ sudo mount /dev/disk/disk3 /vdev/vmOdisk/ hp-ux$ sudo hpvmdevmgmt -S 8G /vdev/vmOdisk/diskl На следующем шаге создается виртуальный коммутатор для гостя. Один виртуаль- ный коммутатор может использоваться несколькими гостями. hp-ux$ lanscan Hardware Station Crd Hdw Net-Interface NM MAC HP-DLPI DLPt Path Address In# State NamePPA ID Type Support Mjr# 0/0/3/0 0x00306EEA9237 0 UP lanO snapO 1 ETHER Yes 119 0/1/2/0 0x00306EEA720D hp-ux$ sudo hpvmnet -c -S hp-ux$ sudo hpvmnet -b -S 1 UP lanl snapl vmOswitch -n 0 vmOswitch 2 ETHER Yes IIS' Здесь удобная команда lanscan находит все системные сетевые интерфейсы. Нам необходим правильный идентификатор для сетевого интерфейса в правильной сети; в данном случае это идентификатор 0 в сети 1ап0. Используя команду hpvmnet и имя 1ап0, мы создаем коммутатор, а затем запускаем его с помощью следующей команды, передавая ей аргумент -Ь. Создав необходимые ресурсы, можно приступать к созданию самой виртуальной машины. hp-ux$ sudo hpvmcreate -₽ vmO -О hpux -r 26 -a network: lan: vswitch: vmOswitch -a disk:scsi:-.file:/vdev/vmOdisk/diskl hp-ux$ sudo hpvmstart -₽ vmO Эта команда создает виртуальную машину с именем vmO, выделяет два двоичных ги- габайта памяти, использует виртуальный коммутатор vmOswitch и выбирает запоминаю- щее устройство, созданное нами ранее. Затем новая виртуальная машина запускается с помощью команды hpvmstart. Инсталляция виртуальной машины идентична инсталляции физической машины с консоли. Соединение с консолью осуществляется с помощью команды hpvmconsole
Глава 24. Виртуализация 1049 -р vmO, а отсоединение — с помощью комбинации клавиш <Ctrl+B>. Для проверки статуса гостя используется команда hpvmstatus -Р vmO. 24.8. VMware: операционная система СО СВОИМИ СОБСТВЕННЫМИ ПРАВАМИ Компания VMware — крупнейший игрок на авангардном рынке средств виртуали- зации и первый разработчик методов виртуализации капризной платформы х86. Она разработала технологию для выполнения семнадцати проблематичных инструкций, ко- торые ранее препятствовали распространению виртуализации. Выпуск программного обеспечения VMware Workstation в 1999 году открыл возможности для более эффектив- ных вычислений, реализация которых остается актуальной проблемой и в наши дни. Платформа VMware — это третий коммерческий продукт, заслуживающий внима- ния при выборе технологии виртуализации для сайта. Администраторов систем UNIX и Linux в первую очередь должны заинтересовать платформы ESX и ESXi — автономные гипервизоры для архитектуры Intel х86. Платформа ESXi распространяется свободно, но некоторые полезные функциональные возможности, такие как доступ к консоли, из нее удалены. Платформа ESX предназначена для предприятий, использующих инсталляции, управляемые сценариями, средства для слежения с помощью протокола SNMP и под- держку загрузки с устройства сети для хранения данных (SAN). Кроме продуктов ESX, компания VMware выпустила несколько мощных и современ- ных программ, облегчающих централизованное развертывание и управление виртуаль- ными машинами. Разработчики компании VMware создали самую зрелую технологию динамической миграции, которую нам довелось видеть. К сожалению, их интерфейс управления кли- ентом в данный момент работает только в среде Windows. В общем, продукция компа- нии VMware относится к следующему поколению информационных сред, подробное описание которых выходит за рамки нашей книги. Системы HP-UX и AIX не могут работать как виртуальные машины VMware, по- скольку они используют специализированную архитектуру процессора, которую про- граммное обеспечение VMware не эмулирует. Разумеется, система Linux поддерживается хорошо. Система Solaris также может функционировать под управлением программы VMware, поскольку ее исходный код охватывает платформы SPARC и х86. 24.9. Веб-службы компании Amazon Все крутые парни занимаются облачными вычислениями, и компания Amazon Web Services (AWS) впереди всех. Начиная с 2006 года компания Amazon начала выпускать на рынок инфраструктуру, в основе которой лежит сайт amazon. com, продавая доступ к набору прикладных интерфейсов и веб-служб. Эти службы представляют собой чрезвы- чайно мощную, масштабируемую и широко доступную вычислительную платформу для всех, кому необходимы дешевые и быстродействующие вычислительные мощности или Ресурсы. Основной пакет услуг, предлагаемых компанией AWS администраторам системы UNIX, включает в себя следующие службы.
1050 Часть III. Разное • ЕС2, Elastic Compute Cloud, — платформа для масштабируемых вычислений. “Экземпляр” платформы ЕС2 представляет собой расположенный в Интернете сервер, который запускает операционную систему по вашему выбору и находится под вашим полным контролем. Вы можете добавлять или удалять экземпляры по своему желанию. Платформа ЕС2 основывается на платформе Хеп и поддерживает много разных операционных систем. • EBS, Elastic Block Store, — постоянное дископодобное устройство для экземпля- ров ЕС2. Концепция EBS похожа на хранилище SAN. Это устройство позволяет сохранять экземпляры платформы ЕС2 и сберегать ее состояние между разными вызовами. • S3, Simple Storage Services, — широко доступная долгосрочная инфраструктура хра- нения. В отличие от платформы EBS, она не предназначена для монтирования в ка- честве файловой системы, а вместо этого хранит и извлекает объекты с помощью прикладного программного интерфейса. Эти службы обеспечивают администраторам беспрецедентную гибкость и масштаби- руемость за счет потери части контроля над аппаратным обеспечением и сетевой кон- j фигурацией. j Перенося службы в облако, администраторы и разработчики должны учитывать по- ’ следствия для безопасности. Конфиденциальные данные должны оставаться в физиче-; ским центре обработки данных, особенно если его деятельность регулируется законами, j такими как Sarbanes-Oxley или HIPAA (в США). Требования регуляторов могут исклю- * чать (но могут и не исключать!) использование облачных вычислений, но пока суды за- полняют пробелы в законодательстве, лучше не играть с огнем. Где же тогда служба AWS может оказаться полезной? С точки зрения стоимости, до- ступности и динамической масштабируемости, служба AWS находится вне конкуренции как платформа для веб-хостинга. Стоимость использования экземпляров ЕС2 “до востребования” в настоящее время колеблется от 0,09 до 0,68 долл, за час, в зависимости от вычислительной мощности эк- земпляра. Стоимость использования хранилища S3 составляет 0,15 долл, за гигабайт в месяц. Эти гроши складываются в приличную сумму (работа самого дешевого из доступ- ных экземпляров платформы ЕС2 будет стоить около 379 долл, в год в рамках трехлетне- го контракта), но если учесть стоимость электроэнергии, систем охлаждения и эксплуа- тационные издержки, то итоговая сумма покажется более привлекательной, чем расходы на содержание собственных серверов. С учетом неограниченных ресурсов, облако также является привлекательным в ка- честве распределенной вычислительной платформы. Фактически служба AWS может с пользой использоваться для хостинга электронной почты, DNS или других услуг, кото- рые обычно предоставляются центрами обработки данных. Служба AWS — это ядро набора интерфейсов прикладного программирования SOAP, но компания Amazon предоставляет несколько простых оболочек командной строки, написанных на языке Java, а также графический пользовательский веб-интерфейс и надстройки для браузера Firefox. Служба AWS может запускать в качестве гостевых опе- рационных систем как систему Linux, так и систему Windows. Ниже перечислены этапы создания и запуска постоянного запоминающего устройства. • Инсталляция и конфигурирование среды выполнения на языке Java (проследите, чтобы переменная окружения JAVAHOME ссылалась на правильное место). • Создание учетных записей S3 и ЕС2 на веб-сайте Amazon Web Services.
Глава 24. Виртуализация 1051 • Загрузка и инсталляция инструментов для платформы ЕС2. • Создание экземпляра ЕС2 из образа диска Amazon Machine Image (AMI), пред- ставляющего собой образ диска сконфигурированной операционной системы, возможно, с инсталлированным дополнительным программным обеспечением. Вы можете выбрать эти программы из обширного списка доступного программно- го обеспечения или развернуть свое собственное. • Создание тома EBS и присоединение его к вашему экземпляру. Веб-сайт AWS содержит страницы для регистрации учетных записей и все необхо- димые модули для загрузки. Для того чтобы приступить к использованию службы AWS, загрузите инструменты командной строки и идентификаторы доступа, которые состоят из сертификата и закрытого ключа. Создайте каталог с именем ~/.ес2 и перенесите туда загруженный файл сертифика- та, файл ключа и загруженные инструменты. Все команды ЕС2 будут находиться в ка- талоге ~/. ec2/bin, а библиотечные модули — в каталоге ~/. ec2/lib. Для того чтобы настроить окружение для более легкого использования, добавьте в сценарий регистра- ции следующие инструкции. (Например, для пользователя bash файл будет называться ~/.bash_login или ~/ .bash_profile.) export ЕС2_НОМЕ=~/.ес2 export РАТН=$PATH:$ЕС2_Н0МЕ/bin export EC2_PRIVATE_KEY=$EC2_HOME/pk-<long string value>.pem export EC2_CERT=$EC2_HOME/cert-<long string value>.pem export JAVA_HOME=/path/to/java В заключение, прежде чем сделать выбор образа и загрузить его, создайте пару клю- чей, которые вы собираетесь использовать для обеспечения доступа к этому образу. Новую пару ключей создает команда ес2-add-keypair. Все новые образы, которые вы создадите, будут автоматически конфигурироваться для использования нового открыто- го ключа для аутентификации SSH на корневой учетной записи. ubuntu$ ес2-add-keypair my-keypair KEYPAIR my-keypair bO:65:11:df:05:43:3b:f7:42:93:fb:Oe:7f:63:22:13:ff:88:e5:ae -----BEGIN RSA PRIVATE KEY---- MIIEowIBAAKCAQEAoiJxHIHjuXOqeEoKaeluj8ny55lNuWS5hOQVBxfuhEwG7kttz kiuF8B7U4C4 82827HZO/9cCok6FP81oOAR8GIJvDzvWozZ7hdRhc/i6isWBiMTDQQUItk79fl9atk7P -----END RSA PRIVATE KEY---- Этот ключ понадобится в будущем, поэтому сохраните все, кроме строки, начина- ющейся словом KEYPAIR, в файл, находящийся в каталоге ~/.ес2, и установите па- раметр режима доступа равным 600. Никогда не допускайте совместное использование файла, содержащего закрытый ключ, ведь именно в нем содержатся ключи от облаков! Настало время выбрать образ AMI. Существует огромный список образов AMI, одни из них созданы компанией Amazon, а другие предоставлены (или проданы) членами со- общества. Можно также самостоятельно создать образ AMI для собственного использо- вания и сконфигурировать его с учетом особенностей вашего окружения или инсталли- ровать в него заранее все необходимые приложения. Выбрав образ, обратите внимание на его идентификатор. Команда, приведенная ниже, выводит на экран список образов AMI, созданных компанией Amazon. Добавив в переменную PATH имя каталога с инструментами, можно выполнять команды плат- формы ЕС2 где угодно.
1052 Часть III. Разное ubuntu$ ес2-describe-images -о amazon IMAGE ami-ba4eaad3 /aws-quickstart/phpquickstart.manifest.xml amazon available public i386 machine IMAGE ami-b44bafdd /aws-quickstart/rubyquickstart.manifest.xml amazon available public i386 machine aki-a71cf9ce ari-a51cf9cc IMAGE ami-lc54b075 /aws-quickstart/tomcatquickstart.manifest.xml amazon available public i386 machine aki-a71cf9ce ari-a51cf9cc Имя образа обычно имеет краткое описание, помогающее понять его назначение и конфигурацию, но подробная информация находится на сайте. Для того чтобы препро- цессор РНР быстро запустил образ AMI из приведенного выше списка, выполните сле- дующую команду. ubuntu$ ес2-run-instances ami-ba4eaad3 -k my-keypair ubuntu$ ec2-describe-instances RESERVATION r-56aa053f default INSTANCE i-1343fb7a ami-ba4eaad3 pending my-keypair 0 ml.small 2008-12-22T01:43:27+0000 us-east-lc Результаты работы команды ec2-describe-instances отражают тот факт, что эк- земпляр еще загружается (статус “pending”) и что он использует пару ключей с именем my-keypair. Следует подчеркнуть, что, согласно этим результатам, экземпляр работает в зоне до- ступности us-east-lc. Компания Amazon разделила свои системы на отдельные зоны до- ступности, поэтому пользователь, желающий получить гарантии, что несколько экзем- пляров будут выполняться в физически разделенных центрах обработки данных, может послать запрос в командной строке. Это значение также необходимо для присоединения тома EBS. В заключение отметим, что, согласно данной команде, экземпляр имеет тип ml.small. Этот код сообщает объем ресурсов, доступных для системы. Служба Amazon имеет не- сколько стандартных профилей; ml.small — это стандартный профиль, включающий единственный 32-битовый центральный процессор ЕС2, память объемом 1,7 Гбайт и 160 Гбайт памяти на диске (непостоянном). Разумеется, реальное аппаратное обеспече- ние, на котором работает ваш сервер, вряд ли имеет такие параметры; это просто способ описать ваши ресурсы. Запустив экземпляр платформы, необходимо провести авторизацию всех сете- вых портов, к которым вам нужен доступ. Для этого используется команда ЕС2 ес2- authorize. ubuntu$ ес2-authorize default -р 22 В данном случае порт 22 (для протокола SSH) авторизован для всех узлов в стандарт- ной группе. (Группы — это механизм для управления коллекциями экземпляров. Если не указано иное, новые экземпляры включаются в стандартную группу.) После авто- ризации порта 22 можно, наконец-то, соединиться с вашим новым экземпляром. Для этого сначала найдите имя узла, затем соединитесь с ним с помощью утилиты ssh, как с обычным узлом в Интернете (потому что он таким и является!). ubuntu$ ес2-describe-instances RESERVATION r-56aa053f default INSTANCE i-1343fb7a ami-ba4eaad3 ec2-67-202-24-235.compute- 1.amazonaws.com domU-12-31-39-02-5E-55.compute-1.internal runninmy-keypair 0 ml.small 2008-12-22T01:43:27+0000 us-east-lc
Глава 24. Виртуализация 1053 ubuntu$ ssh -i ~/.ec2/id_rsa-my-keypair root@ec2-67-202-24-235.compute-1. amazonaws.com Эта команда использует пару ключей, сохраненную ранее, для соединения с корне- вой учетной записью нового экземпляра. Для обеспечения безопасности мы рекоменду- ем отключить корневой доступ по протоколу SSH. Осталась только одна проблема — экземпляры не являются персистентными. Иначе говоря, когда экземпляр прекращает работу, любые изменения состояния его дисков или памяти не сохраняются. Тома запоминающих устройств для новых экземпляров предо- ставляет устройство EBS. В данном случае мы создаем том и присоединяем его к рабо- тающему узлу. ubuntu$ ес2-create-volume -s 1 -z us-east-lc VOLUME vol-5de80c34 1 us-east-lc creating 2008-12-22T02:02: 53+0000 ubuntu$ ec2-attach-volume vol-5de80c34 -i i-1343fb7a -d /dev/sdf ATTACHMENT vol-5de80c34 i-1343fb7a /dev/sdf attaching 2008- 12-22T02:04:01+0000 ubuntu$ ec2-describe-volumes VOLUME vol-5de80c34 1 us-east-lc in-use 2008-12-22T02:02: 53+0000 ATTACHMENT vol-5de80c34 i-1343fb7a /dev/sdf attached 2008-12- 22T02:04:01+0000 Ш Более подробно создание файловых систем описано в главе 8. Эти команды создают новый том запоминающего устройства EBS в зоне доступности us-east-lc и присоединяют его как устройство /dev/sdf к ранее созданному экземпляру. Для того чтобы создать файловую систему и приступить к использованию этого тома, зарегистрируйте его в экземпляре платформы и работайте так, будто вы на самом деле создали файловую систему на физическом диске. Помните, что служба AWS взимает почасовую плату за работу каждого экземпляра, поэтому неиспользуемые экземпляры и тома следует удалять. Прежде чем завершить ра- боту ненужного экземпляра, отсоедините от него все тома EBS и аккуратно остановите работу системы, как это обычно делают с физически существующими узлами. ubuntu$ ес2-detach-volume vol-5de80c34 ATTACHMENT vol-5de80c34 i-1343fb7a /dev/sdf detaching 2008- 12-22T02:04:01+0000 ubuntu$ ec2-terminate-instances i-1343fb7a INSTANCE i-1343fb7a running shutting-down ubuntu$ ec2-delete-volume vol-5de80c34 VOLUME vol-5de80c34 В дополнение к интерфейсу командной строки, компания Amazon предлагает уп- равляющий веб-интерфейс, который может инициировать те же самые команды, что и утилитц командной строки, например запуск и останов экземпляров, присоединение томов запоминающих устройств и выделение IP-адресов. Надстройка ElasticFox для веб- браузера Firefox обеспечивает те же функциональные возможности непосредственно в самом браузере. Компания Amazon регулярно предлагает новые функциональные возможности и про- дукты для своих веб-служб. Например, автоматическое масштабирование экземпляров ЕС2 предусматривает автоматический запуск новых серверов, чтобы предотвратить их отключение при высокой нагрузке. Служба CloudWatch проводит мониторинг показате-
1054 Часть III. Разное лей, таких как степень использования центрального процессора и дисковых механизмов ввода-вывода, чтобы быстро реагировать на изменяющиеся условия. Обратите внимание на блог службы AWS по адресу: aws. typepad. com. Он содержит информацию о новых функциональных возможностях и усовершенствованиях. 24.10. Рекомендуемая литература • Веб-сайт virtualization, info — превосходный источник новостей и слухов о виртуализации и облачных вычислениях. • Troy Ryan. VMware Cookbook: A Real-World Guide to Effective VMware Use. Sebastopol, CA: O’Reilly Media, 2009. • Crawford, Luke. The Book of Xen: A Practical Guide for the System Administrator. San Francisco, CA: No Starch Press, 2009. • Hess, Kenneth. Practical Virtualization Solutions: Virtualization from the Trenches. Upper Saddle River, NJ: Prentice Hall PTR, 2009. 24.11. Упражнения 24.1. Сравните разные подходы к визуализации. К какой категории относится платфор- ма KVM? Чем технология облачных вычислений отличается от виртуализации? 24.2. Современные процессоры Intel и AMD имеют специальные инструкции, улуч- шающие поддержку виртуализации. Что это за инструкции и какие специальные функции они выполняют? Выберите конкретную операционную систему и модель процессора и опишите, по крайней мере, два способа, позволяющих определить, поддерживаются ли инструкции виртуализации. 24.3. Какие новые функциональные возможности стала поддерживать служба Amazon Web Services с момента написания этой главы? Улучшают ли они существующую инфраструктуру или представляют собой совершенно новые службы? 24.4. Создайте учетную запись на службе Amazon X\feb Services и пару открытых клю- чей. Установите окружение Java и создайте экземпляр платформы ЕС2. Имеете ли вы прямой доступ к консоли? Что из этого следует? Предположим, что созданный вами экземпляр платформы предназначен для хранения конфиденциальных дан- ных, какие шаги следует предпринять, чтобы убедить клиента в том, что данные в облаке хорошо защищены? 24.5. Крупное предприятие планирует развернуть новую систему для управления взаимоотношениями с клиентами (CRM), состоящую из зарезервированных прикладного и интерфейсного серверов, промежуточных серверов и сервера для управления базой данных. Какие из этих компонентов системы CRM следует вир- туализировать? Объясните свое решение.
Глава Система X Window System Основой для большинства графических пользовательских сред для систем UNIX и Linux является система X Window (ее еще называют XI1 или просто X). X — это прямая наследница оконной системы, называемой W (это действительно так), которая разра- батывалась под эгидой проекта Project Athena в Массачусетсском технологическом ин- ституте (MIT) в начале 80-х годов прошлого века. Система X Window System версии 10, вышедшая в 1985 году, была первой, которой удалось достичь широкого распростране- ния, а вскоре после нее вышла версия 11 (XII). Благодаря относительно либеральным условиям лицензионного соглашения, систему X стали переносить на другие платфор- мы, появились различные варианты ее реализации. Как и в случае с протоколом ТСР/ IP, элегантная архитектура и гибкость системы X позволили ей стать самым популярным в мире графическим интерфейсом пользователя (GUI), отличающимся от интерфейса системы Windows. В 1998 году группа X Consortium, входящая в состав MIT, выработала общее направ- ление развития протокола X. В течение последующих десяти лет эта группа, а также ее последователи постоянно работали над обновлениями протокола. Самой последней и большой версией является XI 1R7.5 — теперь к номерам версий добавляются новые чис- ла, а не увеличиваются существующие. Версия XFree86 являлась фактической реализацией Х-сервера для многих платформ до тех пор, пока в 2004 году не изменились условия лицензионного соглашения, вслед- ствие чего многие дистрибьюторы были вынуждены переключиться на ветвь XFree86, которая не подпадала под условия нового лицензионного соглашения. Эта ветвь под- держивается некоммерческой организацией X.Org Foundation и сегодня является доми- нирующей реализацией. Кроме того, версию X.Org Server можно переносить на плат- форму Windows для использования в среде совместимости Cygwin Linux. (Для Windows
1056 Часть III. Разное существует несколько коммерческих версий Х-сервера; более подробно об этом можно прочитать в разделе 30.2.) В этой главе будет рассмотрена версия X.Org, которая используется во всех наших примерах систем, за исключением HP-UX. Реализации версий X.Org и XFree86 имеют расхождения в плане архитектуры, однако многие административные функции одина- ковы. Чтобы использовать команды для версии XFree86, можно менять в них записи “xorg” на “xf86”. Система Solaris (начиная с версии 10) включала как X.Org Server, так и Xsun SOLdriS (еще одну реализацию системы X)1. Сервер Xsun применяется в системах SPARC, работающих под управлением Solaris 10, а системы х86 обычно ис- пользуют реализацию сервера X.Oig. Но в настоящее время X.Org уже поддер- живает архитектуру SPARC, и проектом OpenSolaris заявлено, что сервер X.Oig будет единственным вариантом поддержки платформы X в будущем. Поэтому здесь мы не будем рассматривать реализацию Xsun. • По умолчанию система AIX не включает среду X Window System. Чтобы инстал- лировать ее, выполните команду smitty easy-install, укажите в качестве исходной библиотеки 1рр, а затем выберите либо вариант CDE (для традици- онной и “святой” для IBM платформы Motif), либо вариант KDE (для более со- временных платформ)2. Вы получите версию среды X.Oig, высокая степень на- страиваемости которой позволяет придать ей вид старых-добрых систем X эры Motif. Но под “ретро-оболочкой” вы обнаружите поддержку среды XI 1R7.5. В системе X Window System можно выделить несколько ключевых компонентов. Она содержит диспетчер дисплеев (display manager), главной задачей которого является аутен- тификация пользователей, их регистрация и запуск исходной среды .для сценариев за- пуска системы. Диспетчер дисплеев запускает Х-сервер (X server), который определяет ; абстрактный интерфейс для растровых изображений и устройств ввода (например, для клавиатуры и мыши). Сценарии запуска запускают диспетчер окон (window manager), j который позволяет пользователям перемещать окна, сворачивать, восстанавливать и из- < менять их размеры, а также управлять отдельными виртуальными рабочими столами. ** Наконец, на самом нижнем уровне приложения связываются с библиотекой графических интерфейсных элементов (widget library), которая реализует механизмы высокоуровнево- го пользовательского интерфейса, такие как кнопки и меню. На рис. 25.1 можно просле- дить взаимосвязь между диспетчером дисплеев, Х-сервером и приложениями клиентов. Х-сервер понимает только базовый набор рисуемых примитивов в сетевом API; он не определяет программный интерфейс для высокоуровневых объектов, таких как кнопки, текстовые окна, меню и ползунки. Это обусловлено двумя причинами. Во-первых, это позволяет Х-серверу работать на совершенно другом компьютере из приложения кли- ента. Во-вторых, Х-сервер позволит серверу поддерживать разнообразные диспетчеры окон и наборы библиотек графических интерфейсных элементов. У разработчиков приложений имеются свои библиотеки графических интерфейс- ных элементов и стандарты пользовательских интерфейсов. К сожалению, часто выбор зависит от “религиозной” приверженности, а не от того, какие задачи нужно решать разработчикам в действительности. Несмотря на удобства, которые открываются бла- 1 Реализация Xsun включала поддержку технологии Display PostScript, которой когда-то про- рочили стать языком отображения будущего. 2 Совместная инсталляция обеих сред возможна, но не рекомендуется. Больше о настольных ' средах см. в разделе 25.5.
Глава 25. Система X Window System 1057 годаря свободе выбора, агностицизм пользовательского интерфейса системы X и сдача лидерских позиций в области дизайна в течение долгих лет сдерживали разработку каче- ственных пользовательских интерфейсов. К счастью, степень завершенности основных Х-сред заметно возросла. Настольные среды KDE и GNOME существенно оживляют современные веб-браузеры, дружественные к пользователю программы управления фай- лами, и новые мультимедийные возможности. = Библиотека графических интерфейсных элементов Диспетчер дисплеев Требует ввести регистрационное имя и пароль Запускает сценарии запуска системы Обрабатывает протокол управления XDM Х-клиент Х-клиент >ц^сервер Управляет дисплеем Управляет устройствами ввода Среда дисплея Диспетчер окон 4З Рис. 25.1. Модель “клиент/сервер” в системе X В этой главе мы поговорим о том, как запускаются программы на дистанционном дис- плее и как выполняется процесс аутентификации. Кроме того, мы рассмотрим вопрос конфигурирования сервера X.Oig, а также поиска и устранения ошибок в конфигура- ции. В конце главы мы вкратце поговорим о некоторых доступных диспетчерах окон и средах рабочего стола. 25.1. Диспетчер дисплеев Диспетчер дисплеев представляет себя с помощью экрана регистрации, и обычно именно его пользователь видит первым, садясь за компьютер. Он не является обязатель- ным; многие пользователи отключают эту утилиту и запускают систему X из текстовой консоли или из сценария . login, выполняя команду startx (она является оболочкой для программы xinit, которая запускает Х-сервер). Исходный диспетчер дисплеев называется xdm (для диспетчера дисплеев системы X), однако современные варианты, такие как gdm (диспетчер дисплеев для GNOME) и kdm (диспетчер дисплеев для KDE), предлагают дополнительный набор функций и имеют более привлекательный вид. Диспетчер дисплеев может позволить выполнять дистан- ционную регистрацию на других Х-серверах посредством протокола XDMCP. Он может также поддерживать аутентификацию дисплея (см. раздел “Аутентификация клиентов” далее в этой главе). Конфигурационные файлы, находящиеся в подкаталогах xdm, gdm или kdm катало- га /etc/Xll, определяют, как будет работать утилита xdm. К примеру, файл Xservers можно отредактировать таким образом, чтобы изменить номер дисплея, используемо- го для данного сервера, если множество серверов будет работать на других виртуальных терминалах. Или же можно изменить компоновку сервера с помощью опции -layout, если вы определили компоновку, подходящую для множества систем. Ш Подробные сведения о РАМ можно найти в разделе 22.5.
1058 Часть III. Разное Как правило, диспетчер дисплеев предлагает ввести имя пользователя и пароль. Пароль пользователя проверяется в соответствии с конфигурацией РАМ (Pluggable Authentication Modules — подключаемые модули аутентификации), заданной в файле .etc/pam.d/xdm (или gdm/kdm, если вы используете диспетчеры дисплеев GNOME или KDE). На экране регистрации может быть предложено использование нескольких альтернативных сред рабочего стола, включающих важную безотказную опцию, о кото- рой поговорим немного позже. В заключение диспетчер дисплеев должен выполнить сценарий интерпретатора ко- манд XSession, который настраивает среду рабочего стола пользователя. Сценарий XSes- sion, который, как правило, находится в каталоге /etc/Xll/{xdm,gdm,kdm}, является общесистемным сценарием запуска. Он задает стандартные настройки приложений, ин- сталлирует стандартные клавиатурные привязки и выбирает языковые настройки. Затем сценарий XSession выполняет личный пользовательский сценарий запуска, который обыч- но называется ~/.xsession. Он запускает диспетчер дисплеев, панель задач, вспомога- тельные аплеты, а также может запускать и другие программы. GNOME и KDE имеют собственные сценарии запуска, которые конфигурируют рабочий стол пользователя в со- ответствии со средствами конфигурации GNOME и KDE. При этой схеме ошибок возни- кает меньше, чем при редактировании пользователями собственных сценариев запуска. Когда работа сценария -/.xsession завершена, пользователь выводится из системы и диспетчер дисплеев снова предлагает ввести имя пользователя и пароль. Таким обра- зом, сценарий ~/.xsession должен запускать все программы в фоновом режиме (до- бавляя символ & в конце каждой команды), кроме самой последней, которой обычно является диспетчер окон. (Если все команды в сценарии -/.xsession будут работать в фоновом режиме, работа сценария будет тут же прекращена и пользователь будет вы- веден из системы сразу же после входа в нее.) Если же диспетчер окон будет работать в качестве приоритетного процесса, пользователь сможет выйти из системы только после того, как будет завершена работа диспетчера окон. Безотказная опция позволяет пользователям входить в систему с целью устранения сбоев в проблемных сценариях запуска. Как правило, эту опцию можно выбирать на экране регистрации диспетчера дисплеев. В этом случае открывается только простое окно терминала; после закрытия окна пользователь выходит из системы. Благодаря это- му пользователь может самостоятельно устранить возникшие неполадки, не обращаясь за помощью к администратору. Как правило, самой распространенной проблемой при запуске системы является как раз то, что процессу не присваивается высокий уровень приоритета и он остается работать в фоновом режиме. Однако это не единственная проблема, которая может возникнуть. Если причину возникновения проблемы установить сложно, можно просмотреть файл */ .xsession-errors, в котором содержатся результаты выполнения команд в сценарии *7 .xsession. Постарайтесь найти в этом файле ошибки или какое-либо необычное пове- дение системы. Если и это не поможет, переместите сценарий ~/.xsession в какое-нибудь изолированное место и попробуйте войти в систему без него. Затем постепенно восстанав- ливайте одну-две строки до тех пор, пока не будет найдена “проблемная” строка. 25.2. Процесс запуска Х-приложения Процедура, необходимая для запуска Х-приложения, на первый взгляд может пока- заться слишком сложной. Тем не менее вскоре вы обнаружите, что клиент-серверная модель дисплеев предлагает высокую степень гибкости. Так как информация об обнов-
Глава 25. Система X Window System 1059 лении дисплея передается по сети, приложение (клиент) может работать на совершенно другом компьютере, а не на том, где оно отображает свой графический интерфейс поль- зователя (на сервере). Х-сервер может соединяться со многими другими приложениями, каждое из которых будет работать на отдельном компьютере. Чтобы эта схема работала, клиенты должны знать, к какому дисплею нужно подклю- чаться и какой экран нужно занимать на этом дисплее. После соединения с дисплеем клиенты должны пройти аутентификацию на Х-сервере, гарантируя, что человек, сидя- щий перед дисплеем, имеет право устанавливать соединение. Ш Подробные сведения о протоколе SSH даны в разделе 22.10. Тем не менее даже после прохождения аутентификации система X не обязательно бу- дет полностью защищена. Еще один безопасный способ управления соединениями за- ключается в использовании протокола SSH (см. раздел “Перенаправление соединений с помощью протокола SSH” далее в этой главе). Мы настоятельно рекомендуем использо- вать протокол SSH для соединений системы X с Интернетом. В любом случае это будет нелишним для локальной передачи данных. Переменная окружения DISPLAY Х-приложения обращаются к переменной окружения DISPLAY для того, чтобы узнать, где они будут отображать свои данные. Эта переменная содержит имя или IP- адрес сервера, номер дисплея (он указывает на определенный экземпляр Х-сервера, с которым нужно соединиться) и необязательный номер экрана (для дисплеев с нисколь- кими мониторами). Когда приложения работают на том же компьютере, на котором отображаются их интерфейсы, для простоты записи большинство этих параметров мож- но опустить. Следующий пример показывает и формат информации, представленной на дисплее, и синтаксис интерпретатора команд bash, используемого для задания переменной окру- жения. client$ ЪТ32ЪкЧ—имя_сервера. домен, сохл: 1G.2; export DISPLAY Эта запись расшифровывается так: Х-приложение находится по адресу имя_серве- ра. домен, сот, дисплей 10, экран 2. Приложения устанавливают TCP-соединение с сер- вером на порту с номером 6000 плюс номер дисплея (в данном примере это порт 6010), на котором Х-сервер, обрабатывающий данный дисплей, должен вести прослушивание. Следует иметь в виду, что каждый процесс имеет собственные переменные окруже- ния. Если переменную окружения DISPLAY задать для интерпретатора команд (оболоч- ки), то ее значение будет передано только тем программам, которые будут запускаться этим интерпретатором. Если выполнить приведенные выше команды в одной програм- ме xterm, а затем попытаться запустить любимое Х-приложение в другой программе, то приложение не будет иметь доступа к созданной вами переменной DISPLAY. Обратить внимание нужно и на другой момент. Дело в том, что хотя Х-приложения посылают свои графические выходные данные на обозначенный Х-сервер, они по- прежнему имеют локальные каналы stdout и stderr. На терминальное окно, из кото- рого было запущено Х-приложение, могут направляться некоторые выходные данные об ошибках. Если и клиент, и сервер находятся в вашей организации, вы можете убрать из пере- менной DISPLAY полное доменное имя сервера, в зависимости от того, каким образом был сконфигурирован распознаватель вашего сервера имен. Поскольку большинство си-
1060 Часть IIL Разное стем работает на одном Х-сервере, дисплей обычно имеет нулевой номер. Номер экра- на можно опустить, в результате чего будет подразумеваться номер 0. Итак, чаще всего удобнее будет присваивать переменной DISPLAY значение имя_сервера: 0. Ш О конфигурировании распознавателя DNS рассказывалось в разделе 17.3. Если приложение клиента будет работать на том же компьютере, что и Х-сервер, пе- ременную DISPLAY можно еще больше упростить, опустив имя компьютера. Это не про- сто косметическое изменение: если указать пустое имя, то для связи с Х-сервером би- блиотеки клиента будут использовать сокет домена UNIX, а не сокет сети. Кроме того, что этот тип соединения является более быстрым и эффективным, он позволяет обойти любые ограничения, вводимые брандмауэром в локальной системе, которые блокируют внешние соединения с системой X. Наиболее простым из возможных значений пере- менной окружения DISPLAY является нулевое значение (: 0). Аутентификация клиентов Несмотря на то что Х-среда обычно считается относительно незащищенной, любая мера предосторожности поможет защититься от несанкционированного доступа. Ранее, до того как вопрос безопасности системы стал крайне важным, Х-серверы с помощью команды xhost принимали соединения от любого клиента, работающего на компьюте- ре, который помечался как безопасный. Однако в связи с тем, что любой пользователь, работающий на этом компьютере, мог соединиться с вашим дисплеем и причинить вред (случайно или преднамеренно), от метода предоставления доступа посредством коман- ды xhost отказались навсегда. Больше о нем и мы не будем упоминать. Наиболее распространенным альтернативным вариантом защиты является аутенти- фикация с использованием “магических” cookie-наборов (magic cookie). Если вы знако- мы с работой в Интернете, то cookie-наборы вам тоже должны быть знакомы; в данном контексте cookie-наборы используются для аутентификации Х-соединений. Суть в том, что диспетчер дисплеев X в самом начале процедуры регистрации в системе генерирует большое случайное число, которое и называется cookie-набором. Cookie-набор сервера записывается в файл ~/ .Xauthority, который находится в домашнем каталоге пользо- вателя. Соединение могут выполнять любые клиенты, которым известен cookie-набор. Пользователи могут выполнять команду xauth для того, чтобы просматривать суще- ствующие cookie-наборы и добавлять в этот файл собственные cookie-наборы. Как работает эта схема, проще всего продемонстрировать на примере. Предположим, что вы задали вашу переменную DISPLAY в системе клиента для отображения Х-приложений на компьютере, за которым работаете. Однако когда вы запускаете про- грамму, на экран выводится ошибка, которая выглядит примерно так. client$ xprogram -display server:0 Xlib: connection to "server:0.0" refused by server xprogram: unable to open display ’server:0' Это сообщение говорит о том, что у клиента нет подходящего cookie-набора, поэто- му дистанционный сервер отклонил данное соединение. Чтобы получить подходящий cookie-набор, нужно зарегистрироваться на сервере (это уже может быть сделано, если вы пытаетесь отобразить программу прямо на нем) и вывести список cookie-наборов сервера, выполнив команду xauth list. server$ xauth list server:0 MIT-MAGIC-COOKIE-1 f9d888df6077819ef4d788fab778dc9f
Глава 25. Система X Window System 1061 server/unix:О MIT-MAGIC-COOKIE-1 f9d888df6077819ef4d788fab778dc9f localhost:0 MIT-MAGIC-COOKIE-1 cb6cbf9e5c24128749feddd47f0e0779 Каждый сетевой интерфейс на сервере имеет свою запись. В данном примере мы имеем cookie-набор для Ethernet, для сокета домена UNIX, который используется для локальных соединений, и для сетевого интерфейса обратной связи localhost. Самый простой способ “обзавестись” cookie-набором на клиенте (при условии, что не используется сетевой протокол SSH, который сам заботится о cookie-наборах) заклю- чается в применении знакомой всем операции вырезания и вставки. Многие эмуляторы терминалов (например, xterm3) позволяют выделять текст с помощью мыши и вставлять его в другом окне, обычно посредством щелчка средней кнопкой мыши. В этом случае удобно то, что команда xauth add принимает в качестве ввода тот же формат, который отображает команда xauth list. Добавить cookie-набор к клиенту можно следующим образом. client$ xauth add server:О MIT-MAGIC-COOKIE-1 9d888df6077819ef4d788fab778dc9f Чтобы убедиться в том, что cookie-набор был добавлен правильно, нужно выполнить команду xauth list на клиенте. Если переменная окружения DISPLAY задана и добав- лен действительный “магический” cookie-набор, приложения смогут отображать свои данные на сервере. Если у вас возникнут проблемы с работой cookie-наборов, можно на время вернуть- ся к процедуре аутентификации с использованием команды xhost — просто для того, чтобы посмотреть, не возникают ли какие-то проблемы в ней (например, ограничения, выдвигаемые брандмауэрами или локальной сетью, которые не предоставляют клиенту доступ к серверу). Чтобы отключить аутентификацию xhost после выполненного вами теста, нужно выполнить команду xhost - (т.е. xhost со знаком дефиса в качестве един- ственного аргумента). Перенаправление соединений с помощью протокола SSH “Магические” cookie-наборы усиливают защиту, однако использовать одни лишь cookie-наборы недостаточно. Любой пользователь, который может получить cookie- набор вашего дисплея, сможет подключиться к нему и запустить программы, которые будут отслеживать ваши действия. Даже без вашего cookie-набора Х-протокол будет пе- редавать данные по сети без шифрования, в результате чего буквально каждый пользо- ватель сможет их перехватывать. Ш Подробные сведения о протоколе SSH даны в разделе 22.10. Усилить защиту можно с помощью протокола SSH (secure shell — защищенный ин- терпретатор команд). Этот протокол обеспечивает аутентификацию и шифрование на терминале. Тем не менее SSH может также передавать произвольные сетевые данные, включая данные протокола X, по защищенному каналу. Механизм перенаправления, ис- пользуемый в системе X, подобен обобщенному перенаправлению портов с помощью SSH, однако поскольку SSH знает об особенностях системы X, вы получаете дополни- тельные преимущества, включая псевдодисплей на дистанционном компьютере и “до- говорную” передачу “магических” cookie-наборов. Протокол SSH обычно используется для передачи данных между компьютером, на котором работает Х-сервер, и компьютером, на котором функционируют Х-программы. 3 Или команда aixterm в системе AIX. Мудро, да?
1062 Часть III. Разное Эта схема может привести читателя в замешательство, поскольку SSH-клиент работает на том же компьютере, что и Х-сервер, и соединяется с SSH-сервером, который работает на том же компьютере, где работают приложения Х-клиента. Ситуация усугубляется еще и тем, что виртуальный дисплей, который формирует SSH для вашего Х-сервера, явля- ется локальным по отношению к дистанционной системе. На рис. 25.2 показано, как осуществляется передача данных посредством SSH-соединения в системе X. Компьютер Х-клиента Компьютер Х-сервера Рис. 25.2. Использование протокола SSH в системе X Вашу переменную окружения DISPLAY и информацию об аутентификации можно задать автоматически посредством команды ssh. Номер дисплея начинается с : 10.0 и увеличивается на единицу для каждого SSH-соединения, при котором передаются дан- ные в системе X. В качестве примера можно предложить следующую последовательность. x-server$ ssh -v -X х-cl lent, xnydomain.com SSH-2.0-OpenSSH_5.1 debugl: Reading configuration data /home/boggs/.ssh/config debugl: Reading configuration data /etc/ssh/ssh_config debugl: Applying options for * debugl: Connecting to x-client.mydomain.com [192.168.15.9] port 22. debugl: Connection established. Enter passphrase for key ' /home/boggs/. ssh/id_rsa' : debugl: read PEM private key done: type RSA debugl: Authentication succeeded (publickey). debugl: Entering interactive session. debugl: Requesting Xll‘forwarding with authentication spoofing. debugl: Requesting authentication agent forwarding. x-client$ В последних двух строках видно, что клиент получает запрос на перенаправление данных для XI1-приложений. Перенаправление в системе X может быть разрешено как на SSH-сервере, так и на SSH-клиенте; кроме того, у клиента должен быть подходящий cookie-набор для сервера. Если у вас не получается организовать перенаправление, по- пробуйте использовать флаги -X и -v, как было показано выше (для OpenSSH), чтобы явным образом разрешить перенаправление в системе X и запросить подробные выход- ные данные4. Также можно просмотреть глобальные конфигурационные файлы SSH в каталоге /etc/ssh и убедиться в том, что перенаправление в системе XI1 не было отме- 4 Обратите внимание на то, что команда ssh также имеет флаг -Y, который “выражает дове- рие” соединениям со всеми клиентами. Эта возможность поможет решить некоторые проблемы перенаправления данных, но использовать ее все же нужно с предельной осторожностью.
Глава 25. Система X Window System 1065 нено администратором. Сразу после входа в систему вы можете проверить ваш дисплей и магические cookie-наборы. x-client$ echo $DISPLAY localhost:12.0 x-client$ xauth list x-client/unix:12 MIT-MAGIC-COOKIE-1 a54b67121eb94c8a807f3ab0a67a51f2 Обратите внимание на то, что переменная DISPLAY указывает на виртуальный ди- сплей на SSH-сервере. Остальным SSH-соединениям (производимым как вами, так и другими пользователями) присваиваются разные виртуальные номера дисплеев. Если переменная DISPLAY и cookie-набор будут заданы правильно, вы сможете запустить приложение клиента. х-alient$ xeyes debugl: client_input_channel_open: ctype xll rchan 4 win 65536 max 16384 debugl: client_request_xll: request from 127.0.0.1 35411 debugl: channel 1: new [xll] debugl: confirm xll debugl: channel 1: FORCE input drain Если с помощью команды ssh -v разрешить отображение отладочной информа- ции, вы увидите, что ssh получила запрос на Х-соединение и покорно перенаправила его Х-серверу. Сам процесс перенаправления может быть немного медленным, однако приложение в конечном счете должно появиться на вашем экране. 25.3. Конфигурирование Х-сервера Сервер X.Oig, или Xorg, сложно поддается конфигурированию на конкретном аппа- ратном обеспечении. Но после определенных работ по модернизации сервера Xoig мно- гие системы смогли успешно его запускать вообще без файла конфигурации. При этом сохранилась возможность вручную адаптировать сервер Xorg к широкому разнообразию оборудования для графики, устройств ввода, режимов видео, разрешений и глубины цвета, которую поддерживают устройства. Очень хорошо, если ваша система нормально работает без файла конфигурации сер- вера Xoig! Это возможно, например, при использовании модуля KMS, который описан ниже в этой главе. В противном случае у вас есть два варианта. Первый вариант состоит в ручном конфигурировании файла xorg. conf (см. описание ниже). Причем в некото- рых ситуациях этот вариант, по правде говоря, может оказаться вашим единственным выходом из положения. Второй вариант заключается в использовании утилиты xrandr для конфигурирования вашего сервера (подробности ниже). Конфигурационный файл сервера Xorg обычно находится в каталоге /etc/Xll /xorg. conf, однако Х-сервер будет просматривать целые кипы каталогов, пытаясь найти его. Полный список есть на man-странице, однако нужно иметь в виду, что некоторые пути, по которым Xoig ведет поиск, содержат имя компьютера и глобальную переменную, что облегчает хранение конфигурационных файлов для множества систем в одном месте. • Система AIX не требует файла конфигурации xorg. conf и пытается авто- матически распознавать все типы AIX-оборудования. Вы можете передать Х-серверу свои пожелания по конфигурации как аргументы. Некоторые программы могут помочь вам в конфигурировании системы X (напри- мер, xorgconfig), однако вам желательно самим разобраться со структурой конфигура-
1064 Часть III. Разное ционного файла на тот случай, если вы захотите самостоятельно просматривать или ре- дактировать эти файлы. Первичную информацию по этому вопросу можно найти прямо на Х-сервере, выполнив команду Xorg -probeonly и просмотрев выходные данные для видеоплаты и прочие тестовые значения. Если выполнить команду Xorg -configure, Х-сервер создаст исходный конфигурационный файл, который будет основан на тесто- вых значениях. Для начала этой информации вам вполне хватит. Файл xorg. conf состоит из нескольких разделов, каждый из которых начинается с ключевого слова Section и заканчивается ключевым словом Endsection. Наиболее распространенные типы разделов перечислены в табл. 25.1. Таблица 25.1. Разделы файла xorg.conf Раздел Описание' v ' " ServerFlags Module Перечисляет главные конфигурационные параметры Х-сервера Определяет динамически загружаемые расширения для ускоренной графики, визуа- лизаторов шрифтов и т.п. Device Monitor Конфигурирует информацию о видеоплате, драйвере и оборудовании Описывает физические параметры монитора, включая синхронизацию и разрешения дисплеев Screen Связывает монитор с видеоплатой (Device) и определяет разрешения и глубину цве- та, доступные в данной конфигурации InputDevice ServerLayout Определяет устройства ввода, такие как клавиатуры и мыши Связывает устройства ввода с экранами и позиционирует экраны относительно друг друга Как правило, создавать конфигурационный файл проще всего “снизу вверх”, начи- ная с определения разделов для устройств ввода и вывода и комбинируя их в различ- ных компоновках. При таком иерархическом подходе простой конфигурационный файл можно использовать для многих Х-серверов, каждый с разным оборудованием. Этот подход будет удобен и для одной системы, в которой установлено несколько видеоплат и используется несколько мониторов. На рис. 25.3 показано, как некоторые из этих разделов располагаются в иерархии кон- фигурации X.Org. Физический дисплей Monitor и видеоплата Device формируют экраЗй Screen. Набор экранов Screen плюс устройства ввода InputDevices формируют ком- поновку ServerLayout. В конфигурационном файле может быть определено множеств# компоновок сервера, однако только одна из них будет активной в данном экземпляре процесса Xorg. Рис. 25.3. Взаимоотношение между разделами конфигурации xorg. conf
Глава 25. Система X Window System 1065 Некоторые разделы, составляющие файл xorg. conf, являются относительно фикси- рованными. Стандартные разделы часто могут браться прямо из существующего конфи- гурационного файла или из его образца. Другие (например, Device, Monitor, Screen, inputDevice и ServerLayout) зависят от того, как настроено оборудование компьюте- ра. В следующих подразделах мы рассмотрим наиболее интересные из этих разделов. раздел Device В этом разделе описывается определенная видеоплата. Вы должны указать строку, ко- торая идентифицирует плату и драйвер, подходящий для данного устройства. Драйвер загружается только в том случае, если на это устройство имеется ссылка в соответствую- щем разделе Screen. Типичная раздел Device может выглядеть примерно так. Section "Device" Identifier "VideocardO" Driver "radeon" опция значение EndSection На странице справочного руководства этого драйвера (в данном случае это radeon) перечисляются и описываются оборудование, которым он управляет, и опции, которые он поддерживает. Если во время работы возникают какие-то странные явления, можно отключить аппаратное ускорение (если эта функция поддерживается), сократив доступ к видеопамяти, или модифицировать параметры интерфейса. Однако перед тем как что- либо изменять, желательно проконсультироваться в Сети или у специалиста. Раздел Monitor В разделе Monitor описываются дисплеи, подключенные к вашему компьютеру. В ней могут быть определены детализированные значения синхронизации. Информация о синхронизации необходима для оборудования старого образца; тем не менее она мо- жет быть полезной для многих современных мониторов. Спецификации дисплеев обыч- но можно получить на веб-сайтах производителей, однако самым лучшим источником, естественно, является руководство, прилагаемое к монитору. В любом случае вам нужно будет знать как минимум частоты горизонтальной и вертикальной развертки для вашей модели. Типичный раздел Monitor выглядит примерно так. Section "Monitor" Identifier Option HorizSync VertRefresh EndSection "ViewSonic" "DPMS" 30-65 50-120 Как и во всех разделах, строка Identifier присваивает имя, с помощью которого вы будете ссылаться на данный монитор. Здесь мы включили функцию DPMS (Display Power Management Signaling — сигналы управления энергопотреблением дисплеев), бла- годаря которой Х-сервер будет выключать монитор, когда мы будем делать перерыв на чашечку кофе или просто отлучаться на некоторое время. Строки HorizSync и VertRefresh должны содержать значения, подходящие для вашего CRT-монитора (с электронно-лучевой трубкой). Они могут быть определены
1066 Часть III. Разное в виде диапазона частот (как это сделано в приведенном выше примере) или в виде на- бора дискретных значений, разделяемых запятыми. Драйвер теоретически может про- тестировать поддерживаемые режимы, однако если параметры будут определены, он не будет использовать неподдерживаемые частоты. Раздел Screen В разделе Screen устройство (видеоплата) связывается с монитором при опреде- ленной глубине цвета, а также задаются параметры разрешения дисплея. Ниже показан пример, в котором используются упомянутые видеоплата и монитор. Section "Screen" Identifier "ScreenO" Device "VideocardO" Monitor "ViewSonic" DefaultDepth 24 Subsection "Display" Depth 8 Modes "640x400" EndSubsection Subsection "Display" Depth 16 Modes "640x400" "640x480" "800x600" "1024x768" EndSubsection Subsection "Display" Depth 24 Modes "1280x1024" "1024x768" "800x600" "640x400" "640x480" EndSubsection EndSection Как можно было предположить, в строке Identifier указывается имя экрана и перечисляются идентификаторы ранее определенной видеоплаты и монитора. Это пер- вый представленный нами раздел, в котором имеются подразделы. Для каждой глуби- ны цвета определяется одн подраздел, а стандартное значение глубины задается в поле DefaultDepth. Данный экземпляр Х-сервера может работать только при одной глубине цвета. В са- мом начале сервер определяет, какие разрешения поддерживаются для данной глу- бины цвета. Возможные разрешения зависят, как правило, от видеоплаты. В разделе “Специальные комбинации клавиш в системе X” этой главы описано, в каком порядке производится выбор определенных здесь разрешений. Любая современная видеоплата должна уметь работать с вашим монитором с пол- ным его разрешением при 24- или 32-битовом цвете. Если вам понадобится запустить старые программы, для которых сервер должен работать с 8-битовым цветом, запусти- те другой Х-сервер в отдельной виртуальной консоли. Чтобы отменить действие опции DefaultDepth, в командной строке Xorg используйте флаг -depth 8. Раздел inputDevice В разделе InputDevice описывается устройство ввода (например, клавиатура или мышь). Каждому устройству соответствует собственный раздел InputDevice и, как и в других разделах, имя в поле Identifier. Если вы используете один конфигурацион- ный файл для нескольких компьютеров с разным оборудованием, можете определить
Глава 25. Система X Window System 1067 все устройства ввода; использоваться будут только те из них, которые указаны в разделе ServerLayout. Ниже показано типичное определение клавиатуры. Section "InputDevice Identifier Driver Option Option Option EndSection "Generic Keyboard" "Keyboard" "AutoRepeat" "500 30 "XkbModel" "pcl04" "XkbLayout" "us" "Generic Mouse" "mouse" "CorePointer" "Device" "/dev/input/mice "Protocol" "IMPS/2" "Emulate3Buttons" "off" "ZAxisMapping" "4 5" Среди прочего, в определении клавиатуры можно задать такие опции, которые опре- делят настройку клавиш <Ctri> и <Caps Lock>. В данном примере опция AutoRepeat определяет, как долго нужно удерживать клавишу нажатой, чтобы это привело к повтору нажатия символа, и как быстро будет повторяться ввод символа. Конфигурация мыши определяется в другом разделе InputDevice. Section "InputDevice" Identifier Driver Option Option Option Option Option EndSection Опция CorePointer обозначает эту мышь как основное указывающее устройство в системе. Файл устройства (Device), связанный с мышью, определен в поле Option. Файлы мультиплексоров мыши перечислены в табл. 25.2. Таблица 25.2. Файлы мультиплексоров мыши ос ; / Linux Solaris HP-UX AIX /dev/input/mice /dev/mouse /dev/devi ceFi leSys tem/mouseMux /dev/mouseO Протокол связи зависит от конкретного производителя мыши, ее функциональных характеристик и интерфейса. Если ему присвоить значение auto, сервер попытает- ся определить протокол самостоятельно. Если колесико мыши не работает, попробуй- те воспользоваться протоколом IMPS/2. Если мышь содержит много кнопок (больше трех), используйте протокол ExplorerPS/2. Некоторые пользователи систем Solaris сооб- щают об успешном использовании протокола VUID. Опция Emulate3Button позволяет двухкнопочным мышам имитировать работу трехкнопочных, определяя щелчок двумя кнопками как щелчок средней кнопкой мыши. Опция ZAxisMapping иногда нужна для поддержки прокрутки колесика или работы джойстика; эта поддержка осуществляется путем сопоставления кнопок. Большинство современных моделей мыши имеют как минимум три кнопки, колесико прокрутки, встроенный МРЗ-плеер, щетку для массажа ступней и холодильник для пива5. 5 Xoig поддерживает не все опции. Некоторые продаются отдельно.
1068 Часть ill. Разное Раздел ServerLayout Этот раздел является узлом верхнего уровня в иерархии конфигурации. Каждая ап- паратная конфигурация, на которой будет работать сервер, должна иметь собственный экземпляр раздела ServerLayout. Компоновка, используемая определенным Х-серве- ром, обычно определяется в командной строке сервера. Этот раздел связывает вместе все остальные разделы, представляя Х-дисплей. Она на- чинается с необходимого поля Identifier, в котором указывается данная конкретная компоновка. После этого набор экранов связывается с компоновкой6. Если к отдель- ным видеоплатам подключено несколько мониторов, то каждый экран будет опреде- ляться вместе с необязательными направлениями, чтобы показать их физическое ме- сторасположение. В данном примере один экран (Screen 1) находится слева, а другой (Screen 2) — справа. Ниже показан пример всего раздела ServerLayout. Section "ServerLayout" Identifier Screen Screen InputDevice InputDevice Option Option Option Option EndSection "Simple Layout" "Screen 1" LeftOf "Screen 2" "Screen 2" RightOf "Screen 1" "Generic Mouse" "CorePointer" "Generic Keyboard" "CoreKeyboard" "BlankTime" "10" # Погасить экран через 10 минут "StandbyTime" "20" # Отключить экран через 20 минут (DPMS) "SuspendTime" "60" # Полное засыпание через 60 минут (DPMS) "OffTime" "120"# Отключить DPMS-монитор через 2 часа Некоторые видеоплаты могут управлять одновременно несколькими мониторами. В данном случае в разделе ServerLayout определен только один экран Screen. За спи- ском экранов следует набор устройств ввода, которые необходимо связать с этой ком- поновкой. Опции CorePointer и CoreKeyboard перемещены в раздел InputDevice, чтобы показать, что эти устройства должны быть активными в данной конфигурации. Эти опции могут быть заданы прямо в соответствующих разделах InputDevice, однако проще всего задавать их в разделе ServerLayout. В последних нескольких строках конфигурируется несколько опций, специфиче- ских для компоновки. В приведенном выше примере все они связаны со спецификаци- ей DPMS (Display Power Management System — управление режимом энергосбережения монитора), благодаря которой мониторы, рассчитанные на работу в режиме Energy Star (режим пониженного энергопотребления мониторов), “знают”, когда нужно отключать питание. Мониторы должны также иметь собственные DMPS-опции, разрешенные в со- ответствующих разделах Monitor. Утилита xrandr: конфигуратор Х-сервера Расширение Х-сервера RandR (X Resize and Rotate Extension) позволяет клиентам ди- намически изменять разрешение, частоту развертки, ориентацию (использовать “пор- третный” режим) и отображение экранов их Х-серверов без перезапуска Х-сервера. Утилита командной строки xrandr представляет собой интерфейс с расширением RandR. 6 Помните, что экраны идентифицируют комбинацию “монитор/видеоплата” при определен- ной глубине цвета.
Глава 25. Система X Window System 1069 Безусловно, все мы (исключительно из любви к искусству программирования) с удо- вольствием потратили бы несколько дней, тщательно “вылизывая” каждую строку фай- ла xorg.conf, на поддержку новейшей системы SUPERINATOR 3000 с ее четырьмя роскошными дисплеями. Но во многих случаях это (т.е. работу по конфигурированию) может сделать за нас утилита xrandr (тем самым освободив для нас время для встречи с друзьями). Выполненная без аргументов, утилита xrandr показывает доступные дис- плеи и их возможные варианты разрешения. $ xrandr VGA-0 connected 1024x768+0+0 (normal left inverted right x a...) 0mm x 0mm 1024x768 61.0 60.0 59.9 59.9 800x600 60.3 61.0 59.9 56.2 59.8 640x480 59.9 61.0 59.4 59.5 DVI-0 connected 1024x768+0+0 (normal left inverted right x a...) 0mm x 0mm 1024x768 60.0 60.0 800x600 60.3 59.9 640x480 59.9 59.4 Вы можете задать разрешение для каждого дисплея, а также указать расположение конкретного монитора относительно других7. Рассмотрим пример. $ xrandr —auto —output VGA-0 —mode 800x600 —right-of DVI-0 Аргумент —auto включает все мониторы. Аргументы —output и —mode устанавлива- ют для монитора с видеографической матрицей (VGA) разрешение 800x600, а аргумент —right-of определяет, что VGA-монитор должен физически располагаться справа аг DVI-монитора. (Последняя опция необходима для упорядочения составляющих рабо- чего стола.) Для просмотра множества доступных опций выполните команду xrandr —help. Если вы хотите выполнять утилиту xrandr автоматически при запуске Х-сервера, поместите ее в файл ~/.xprofile. Установка режима ядра Для того чтобы сделать представление системы более гладким и устранить шум мерцания, ответственность за установку начального режима графического отображения в настоящее время перекладывается на ядро Linux посредством модуля KMS (kernel mode setting). Как и в версии ядра 2.6.30-10.12, KMS по умолчанию инициализирует видеокарту в начале процесса загрузки ядра. Вы можете разрешить или запретить KMS с помощью настроек в конфигурационных файлах видеодрайвера каталога /etc/modprobe. d. Например, если у вас есть видеокар- та ATI Radeon, вы сможете отключить KMS, добавив следующую строку в файл /etc/ modprobe.d/radeon.conf. options radeon modeset=0 Модуль KMS пока не поддерживает все типы видеокарт. Если вам посчастливи- лось быть обладателем поддерживаемой карты, то лучше всего переименовать файл xorg. conf так, чтобы Х-сервер пытался стартовать без него и обращался к KMS- конфигурации. 7 До начала использования утилиты xrandr выполните команду Xorg -configure, чтобы перевести файл xorg. conf в известное исходное состояние.
1070 Часть III. Разное 25.4. Устранение неполадок и отладка Х-сервера Конфигурация Х-сервера прошла долгий путь за последние десять лет, однако она по-прежнему остается сложной, и вам будет непросто добиться того, чтобы все работало именно так, как вы того хотите. Вам придется экспериментировать с частотами монито- ров, опциями драйверов, оригинальными драйверами или расширениями для трехмер- ной визуализации. Как правило, сбои в работе мониторов возникают именно тогда, ког- да вам крайне необходимо просмотреть информацию об отладке на экране. К счастью, сервер X.Org может дать вам любую необходимую информацию (и даже сверх того), ко- торая поможет вам выявить причину возникновения проблемы. Специальные комбинации клавиш в системе X Так как Х-сервер принимает на себя управление вашей клавиатурой, дисплеем и мы- шью, вы можете себе представить, что он может оставить вам небольшое количество ре- сурсов и выключит питание системы, если что-то не будет работать. Однако прежде чем дело дойдет до этого, нужно попытаться выполнить некоторые действия. Если нажать и удерживать клавиши <Ctrl> и <Alt>, а затем нажать функциональную клавишу (<F1>—<F6>), Х-сервер переключит вас на один из текстовых виртуальных терминалов. В нем вы сможете войти в систему и выполнить отладку. Для того чтобы вернуться к Х-серверу, работающему на терминале 7, нужно нажать <Alt+F7>8. Если вы работаете в сети, можете также попробовать войти в систему на другом компьютере, чтобы уничтожить Х-сервер, прежде чем нажимать кнопку сброса. Для поддержки виртуальной консоли в системе Solaris разрешите использова- SOLdriS ние системы управления службами (Service Management Facility — SMF) svc:/ sys tern/vtdaemon:default и службы console-login:vt[2-6]. Если монитор не синхронизируется с видеосигналом, поступающим с видеоплаты, попытайтесь изменить разрешение экрана. Доступные разрешения указаны в строке Modes раздела Screen конфигурационного файла. Строка Modes, являющаяся актив- ной, зависит от глубины цвета; более подробно об этом см. раздел 25.3. Стандартные настройки Х-сервера выбираются с учетом первого разрешения, указанного в активной строке Modes, однако вы можете переходить от одного разрешения к другому, удерживая клавиши <Alt> и <Ctri> и нажимая клавиши со знаком “плюс” или “минус” на цифро- вой клавиатуре. При нажатии комбинации клавиш <Ог1+АЙ+пробел> происходит немедленное уни- чтожение Х-сервера. Если вы запустили сервер из консоли, окажетесь в ней после пре- кращения работы сервера. Если сервер был запущен диспетчером дисплеев, то диспетчер запустит новый сервер и предложит снова ввести имя пользователя и пароль. Вам нужно будет уничтожить диспетчер дисплеев (xdm, gdm и т.п.) из текстовой консоли, чтобы он не порождал новые Х-серверы. Когда с Х-сервером творится что-то неладное После того как вновь получите возможность управлять компьютером, вы сможете найти причину возникновения проблемы. Проще всего начать с анализа выходных дан- 8 При нажатии комбинации <А1г+функциональная клавиша> следует удерживать нажатой кла- вишу <Ctrl>, чтобы Х-сервер мог переключить виртуальные терминалы; для текстовой консоли нажимать клавишу <Ctrl> не нужно.
Глава 25. Система X Window System 1071 ных Х-сервера. Эти данные периодически появляются на первом виртуальном терми- нале (<Ctrl+Alt+Fl >), на который поступают все выходные данные программы запуска. Как правило, выходные данные Х-сервера направляются в регистрационный файл, на- пример в файл /var/log/Xorg. О. log (/var/Xll/Xserver/logs/Xf86.0. log в си- стеме HP-UX). Как будет показано ниже, каждой строке предшествует символ, определяющий ее категорию. Вы можете использовать эти символы для обозначения ошибок (ЕЕ) и пред- упреждений (WW), а также для того, чтобы определить, как сервер будет находить каждую порцию информации: посредством стандартных настроек (==), в конфигурационном файле (**), путем автоматического обнаружения (—) или в командной строке Х-сервера (++). Давайте проанализируем следующий фрагмент кода из системы Ubuntu. X.Org X Server 1.6.0 Release Date: 2009-2-25 X Protocol Version 11, Revision 0 Build Operating System: Linux 2.6.24-23-server i686 Ubuntu Current Operating System: Linux nutrient 2.6.28-11-generic #42-Ubuntu SMP Fri Apr 17 01:57:59 UTC 2009 i686 Build Date: 09 April 2009 02:10:02AM xorg-server 2:1.6.0-0ubuntul4 (builddOrothera.buildd) Before reporting problems, check http://wiki.x.org to make sure that you have the latest version. Markers: (—) probed, (**) from config file, (==) default setting, (++) from command line, (’!) notice, (II) informational, (WW) warning, (EE) error, (NI) not implemented, (??) unknown. (==) Log file: "/var/log/Xorg.0.log", Time: Sun May 10 22:11:47 2009 (==) Using config file: "/etc/Xll/xorg.conf" (==) ServerLayout "MainLayout" (**) |—>Screen "Screen 0" (0) (**) | |—>Monitor "Monitor 0" (**) । ।—>Device "Console" (**) |—>Input Device "MouseO" (**) |—>Input Device "KeyboardO" В первых строках указывается версия Х-сервера и номер протокола XII, которые он реализует. В последующих строках сообщается о том, что сервер использует стандарт- ные значения для местонахождения регистрационного и конфигурационного файлов, а также компоновки активного сервера. Дисплей и устройства ввода в конфигурационном файле отображаются схематически. Одной из часто встречаемых проблем, которые можно увидеть в журнале, являет- ся сложность с определенными разрешениями экрана, о чем обычно свидетельству- ет сообщение об ошибке “Unable to validate any modes; failing back to the default mode” (Невозможно проверить какой-либо из режимов; производится возврат к стандартному режиму). Если не определить список частот для вашего монитора, Х-сервер попытается использовать их с помощью EDID-данных (Extended Display Identification Data — Pac“ ширенные данные идентификации дисплея). Если ваш монитор не поддерживает EDID или если ваш монитор выключен, когда запускается система X, вам нужно указать диа- пазон частот для системы X в разделе Monitor конфигурационного файла. Ошибка округления в результатах, полученных после тестирования EDID, может привести к тому, что некоторые разрешения будут недоступными, даже если они должны
1072 Часть III. Разное поддерживаться вашей видеоплатой и монитором. Об этом свидетельствуют такие запи- си в журнале, как “No valid modes for 1280x1024; removing” (Нет подходящих режимов для разрешения 1280x1024; удаление). Решить эту проблему можно, приказав Х-серверу игнорировать информацию EDID и использовать частоты, определенные вами в следу- ющих строках раздела Device. Option "IgnoreEDID" "true" Option "UseEdidFreqs" "false" В качестве другого примера предположим, что вы забыли правильно определить на- стройки мыши в разделе InputDevice. В этом случае выходные данные должны содер- жать сообщение об ошибке следующего рода. (==) Using config file: "/etc/Xll/xorg.conf” Data incomplete in file /etc/Xll/xorg.conf Undefined InputDevice "MouseO" referenced by ServerLayout "MainLayout". (EE) Problem parsing the config file (EE) Error parsing the config file Fatal server error: no screens found После того как система X заработает и вы войдете в нее, сможете запустить команду xdpyinfо, чтобы получить дополнительную информацию о конфигурации Х-сервера9. После выполнения команды xdpyinf о вы получите имя дисплея и версию Х-сервера. Кроме того, будет сообщено также о доступной глубине цвета, загруженных расширени- ях и установленных экранах, их размерах и конфигурации. Выходные данные команды xdpyinf о можно проверять синтаксически с помощью сценария (такого, как ~/ .xsession), чтобы узнать размер активного экрана и правиль- но задать параметры рабочего стола. В процессе отладки команду xdpyinf о полезно вы- полнять для того, чтобы определить, что Х-сервер работает и следит за запросами в сети, что у него правильно сконфигурирован экран и разрешение и что он работает с требуе- мой глубиной цвета. Если все это подтверждается, можно запускать Х-приложения. 25.5. Краткое замечание о настольных средах Гибкость модели “клиент/сервер” в системе X Window с годами привела к появлению наборов библиотек графических интерфейсных элементов, диспетчеров окон, обозрева- телей файлов, утилит панели инструментов и полезных программ. Первые полнофунк- циональные среды, OpenLook и Motif, были элегантными, но слишком узкоспециали- зированными, а условия лицензирования, распространяемые на библиотеки разработки и диспетчер окон, сделали их недоступными для широкой публики. По мере того как приложения становились более совершенными и требовали более серьезной поддержки от базовой оконной системы, стало ясно, что без перехода к более передовой платфоме не обойтись. Как результат, в современных средах рабочего стола для Linux мы имеем двух крупных игроков: GNOME и KDE. Несмотря на то что неко- торые пользователи имеют свое понимание того, какая из них является самым “истин- ным путем”, обе среды являются полноценными диспетчерами рабочего стола. В сущ- 9 Входить в систему X от имени суперпользователя не рекомендуется, поскольку эта операция может создать множество стандартных файлов запуска в домашнем каталоге суперпользователя, которым обычно является каталог / или /root. Кроме того, это небезопасно. Наоборот, входить в систему нужно от имени обычного пользователя и использовать утилиту sudo. В системах Ubuntu эта схема принята по умолчанию.
Глава 25. Система X Window System 1075 ности, работая в одном “королевстве”, вы можете использовать приложения из другого “королевства”. Вы должны лишь быть готовы к тому, что приложение будет выглядеть и вести себя по-другому. Проект freedesktop. org посвящен созданию среды, которая позволит приложени- ям быть совместимыми с любой настольной средой. KDE Среда KDE (расшифровывается как “К Desktop Environment — настольная среда К) написана на языке C++ и основана на библиотеке инструментов Qt. Ее предпочитают те пользователи, которым нравятся привлекательные элементы и эффекты интерфейса (прозрачные окна, тени и анимированные указатели мыши). Выглядит она привлека- тельно, однако может замедлить работу малопроизводительных персональных компью- теров. Работать в этой среде удобно тем пользователям, которые большую часть времени тратят на щелчки на рабочем столе, а не на запуск приложений. Среду KDE часто предпочитают пользователи, перешедшие из Windows или Мас, и причина тому — все та же привлекательность графики. Она придется по вкусу также тем пользователям, кому нравится самостоятельно настраивать все параметры среды. Для остальных пользователей среда KDE вряд ли подойдет — они могут воспользоваться средой GNOME. Приложения, написанные для среды KDE, практически всегда содержат букву “К” в своем названии (например, Konqueror — обозреватель Веб или файлов, Konsole — ими- татор терминала, Kword — текстовый процессор). Стандартный диспетчер окон, KWin, поддерживает стандарт Window Manager Specification проекта freedesktop. org, кон- фигурируемые оболочки (skin) для изменения внешнего вида, а также многое другое. Комплект приложений KOffice позволяет обрабатывать тексты, электронные таблицы и проводить презентации. KDE предлагает обширный набор инструментов для разработ- ки, включая интегрированную среду разработки (IDE). GNOME Среда GNOME написана на языке С и основана на библиотеке графических интер- фейсных элементов GTK+. Название GNOME первоначально являлось акронимом GNU Network Object Model Environment (Среда сетевых объектных моделей GNU), однако в наши дни это не имеет никакого значения — сейчас существует просто имя GNOME. С последним добавлением поддержки Compiz (compiz.org) — композитного ме- неджера окон для X Window System — среда GNOME приобрела множество симпа- тичных функций, которых в ней ранее недоставало. Среда GNOME менее броская, чем KDE, предлагает меньше возможностей для конфигурирования и, вообще, является ме- нее согласованной. Однако она гораздо понятнее, быстрее и проще, чем KDE. Среда GNOME используется во многих дистрибутивах в качестве стандартной настольной сре- ды. Подобно KDE, GNOME имеет богатый набор приложений. Ее приложения обычно идентифицируются буквой “G” в названии приложения. Исключением является стан- дартный диспетчер окон, называемый Metacity, который предлагает базовые функции работы с окнами и оболочки, позволяющие изменять внешний вид. В соответствии с моделью GNOME, Metacity обязана быть “шустрой и проворной”. Если вам понадобятся какие-то дополнительные особенности вроде интеллекту- ального размещения окон, нужна будет поддержка внешних приложений, таких как brightside или devilspie. (В области “шика-блеска”, KDE все еще занимает непло- хие позиции.)
1074 Часть III. Разное К офисным приложениям относятся AbiWord (для обработки текстов), Gnumeric (для работы с электронными таблицами), а также один из наиболее впечатляющих проек- тов — GIMP, позволяющий производить обработку изображений. Еще есть диспетчер файлов Nautilus. Как и KDE, для разработчиков приложений GNOME предлагает об- ширную инфраструктуру. Подводя итоги, можно с уверенностью сказать, что GNOME предлагает функциональную архитектуру для разработки приложений в простой в ис- пользовании среде рабочего стола. Что лучше: GNOME или KDE? Попробуйте-ка задать такой вопрос на одном из открытых форумов, как тут же нач- нется “большой базар”. Вопрос о предпочтениях практически всегда затрагивает личные чувства и становится причиной настоящих “крестовых походов”, поэтому вы можете не согласиться с тем, что написано в следующих двух абзацах. Конечно же, лучше всего попробовать в деле обе среды и решить самостоятельно, какая из них подходит вам больше всего. Следует иметь в виду, что ваши приятели, ваши пользователи и ваш администратор могут иметь совершенно разные предпочтения от- носительно среды рабочего стола, и в этом нет ничего плохого. Не забывайте, что ваш выбор, сделанный в пользу той или иной среды, не означает, что вы сможете работать только с некоторыми приложениями. Не важно, какую среду вы выберете, — вы сможете выбирать приложения из всего имеющегося программного обеспечения, доступного для каждого из этих (и других) проектов с открытым исходным кодом. 25.6. Рекомендуемая литература • На домашней странице X.Oig (www. х. org) содержится информация о свежих вы- пусках, а также ссылки на проект Wiki X.Oig, списки рассылки и ссылки для за- грузки. • На man-страницах Xserver и Xorg (или просто X в системе AIX) рассмотрены об- щие опции Х-сервера и специфические опции командной строки Xorg. Они со- держат также обзор принципов работы Х-сервера. • На man-странице xorg.conf приводится конфигурационный файл с подробным описанием его разделов и перечислены драйверы видеоплат в разделе REFERENCES (Справка). На этой странице уточните, какой драйвер управляет вашей видеопла- той, а затем ознакомьтесь с man-страницей этого драйвера, чтобы узнать обо всех его опциях. 25.7. Упражнения 25.1. Используя SSH, запустите программу X по сети. Используйте команду ssh -v, чтобы удостовериться, что перенаправление настроено должным образом. Какое значение будет иметь переменная окружения DISPLAY после того, как вы войдете в систему? Выведите на экран список cookie-наборов, выполнив команду xauth, и убедитесь в том, что для данного дисплея включена проверка достоверности с ис- пользованием cookie-наборов.
Глава 25. Система X Window System 1075 25.2. Напишите команду интерпретатора команд или сценарий для проверки синтакси- са выходных данных xdpyinf о и напечатайте текущее разрешение экрана в фор- мате XxY (например, 1024x768). 25.3. Проверьте регистрационный файл Xorg (/var/logXorg.о. log) и на его основе постарайтесь ответить на следующие вопросы: а) какая видеоплата используется и какой драйвер управляет ее работой? б) какой объем памяти установлен на видеоплате? в) использовались ли данные EDID для тестирования настроек монитора? Как это можно узнать? г) какие режимы (разрешения) поддерживаются? д) включена ли функция DPMS? е) о каких физических размерах экрана известно серверу? ж) какой файл устройства используется для мыши? 25.4. Какой флаг отключает нелокальные TCP-соединения с сервером? Объясните, чем полезна эта опция?
Глава 26 Печать В операционной системе UNIX процесс печати довольно запутан. Давайте разберемся. В операционной системе Linux печатать довольно удобно. Точно так же удобно печа- тать в системе Mac OS X. Эти операционные системы используют современную, слож- ную, сетевую и безопасную систему печати Common UNIX Printing System (CUPS). Эта система предоставляет современный графический пользовательский интерфейс, осно- ванный на использовании браузера, а также команды оболочки, позволяющие печатать и управлять системой печати с помощью сценариев. Подобно тому как новейшие транспортные системы для передачи почтовых сообще- ний сохраняют команду sendmail, позволяющую выполнять старые сценарии (старым администраторам!) в память о старых славных днях, так и система CUPS допускает вы- полнение команд 1р и 1рг, обеспечивая обратную совместимость с традиционными си- стемами печати в UNIX. В результате все довольны. Судя по названию, можно было бы подумать, что систему CUPS можно найти во всех версиях UNIX. Увы, это не так. Ни одна из рассмотренных нами платформ UNIX — Solaris, HP-UX и AIX — ее не использует. И что еще хуже, быстрый поиск в системе Google показывает, что попытки инсталлировать систему CUPS на этих платформах обычно терпят неудачу. Вместо нее упомянутые платформы предлагают варианты устаревших систем печа- ти System V и BSD. Что было хорошо для компьютера PDP-11, то должно быть хоро- шо и для вас! К сожалению, в сфере печати документов доминируют системы Microsoft Windows и Mac OS, поэтому разработчики систем UNIX не испытывают давления со стороны пользователей и не торопятся улучшать поддержку печати. В то время как раз-
Глава 26. Печать 1077 работники платформы UNIX внедряют систему CUPS (а вы осваиваете системы Linux и Max OS), пользователи вынуждены изучать старые системы печати. Начнем главу с общего обсуждения систем печати и терминологии, принятой в этой сфере. Затем перейдем к описанию разных систем печати на платформах UNIX и Linux, а также их архитектур. После этого обсудим специфику конфигурирования и управления принтерами и закончим кратким руководством по отладке систем печати, обзором допол- нительного программного обеспечения для печати, а также советами общего характера. Впрочем, прежде чем начать, стоит напомнить: системные администраторы часто считают печать менее приоритетной задачей, чем пользователи. Администраторы чита- ют документы в сети, а пользователи часто хотят иметь бумажную копию и хотят, чтобы система печати работала 100% времени. 26.1. Архитектура системы печати Процесс печати состоит из нескольких компонентов. Очередь печати (spooler), собирающая задания и устанавливающая их очередность. Аббревиатура “spool” образована от Simultaneous Peripheral Operation Online. Теперь эта аббревиатура стала термином. Пользовательские утилиты (интерфейс командной строки и/или графический поль- зовательский интерфейс), которые отправляют задания в очередь печати и запросы си- стеме об этих заданиях (приостанавливая или завершая их работу), удаляют задания или изменяют их очередность, а также конфигурируют другие части системы. Внутренние интерфейсы (back end), которые обмениваются информацией с устрой- ствами печати. (Обычно они не видны и скрыты под панелями.) Сетевые протоколы, обеспечивающие связь с очередями печати и передачу заданий. Для управления печатью полезно понимать, как распределены роли между частями системы. К сожалению, существует слишком много вариантов такого распределения. Основные системы печати Каждая операционная система, описанная в книге, имеет подсистему печати, при- надлежащую одному из трех семейств: System V, BSD или CUPS. Мы расскажем, как возникли эти имена. Это не только интересно с исторической точки зрения, но и полез- но. Программное обеспечение для печати не всегда связано с линейкой операционных систем. Например, операционная система AIX, которая изначально была разработана на основе подсистемы System V.0 с расширениями V.2, использует подсистему печати BSD. Существуют самостоятельные системы печати, которые можно инсталлировать от- дельно (как, например, печально известная подсистема LPRng), но функции печати в этом случае часто оказываются перемешаны с другими частями операционной системы и заставить их работать бывает трудно. Инсталлирование собственных систем печати напоминает инсталлирование своей оболочки: система UNIX позволяет это сделать, и у вас могут быть веские причины для этого, но вы оказываетесь предоставлены сами себе. В этой книге мы рассматриваем только программное обеспечение, которое входит в дистрибутивные пакеты по умолчанию. Для того чтобы увидеть, какое программное обеспечение для печати встроено в вашу операционную систему, достаточно посмотреть на очередь печати. Система CUPS имеет демон cupsd, BSD — Ipd, a System V — Ipshed, так что команда which cupsd Ipd Ipshed сообщит вам, что есть в вашем распоряжении.
1078 Часть III. Разное Очереди печати Каждая система имеет очередь печати: часть программного обеспечения, которая по- лучает задания на печать, хранит их, присваивает им приоритеты и последовательно по- сылает их на один или несколько принтеров. Иногда очередь называют демоном или сервером печати. В некоторых принтерах (обычно сложных моделей) существуют собственные вну- тренние очереди печати. Если вы попросили вашего демона печати очистить очередь заданий на печать и проблема не исчезла, проверьте, нет ли заданий во внутренней оче- реди принтера. Для того чтобы очистить внутреннюю очередь заданий, принтер необхо- димо выключить и запустить снова. Очереди печати Ipd (BSD) и Ipshed (SysV) — это автономные демоны, специально предназначенные для печати. Приложения, работающие в системе, либо обмениваются информацией с этими серверами, либо читают и записывают ее в файлы очереди печати или файлы конфигурации, размещенные в “хорошо известных” местах, например в ка- талоге /var/spool или /etc. 26.2. Система печати CUPS Д Серверы CUPS — это веб-серверы, а клиенты CUPS — это веб-клиенты. Кли- ентами CUPS могут быть как команды (наподобие 1рг и Ipq), так и прило- жения с графическим пользовательским интерфейсом (наподобие kprinter). По сути, все они являются веб-приложениями, даже если просто передают информацию демону CUPS в локальной системе. Серверы CUPS могут также функционировать как клиенты других серверов CUPS Сервер CUPS предоставляет полнофункциональный веб-интерфейс на порту 631. Для администраторов веб-браузер обычно является самым удобным способом для управления системой: достаточно просто перейти на адрес http://prw/Aatf:631. Если вам необходимо секретное соединение с демоном (и ваша система позволяет это), исполь- зуйте порт https://prw/Aatf:433. Для управления системой сценарии могут использовать дискретные команды, и пользователи могут обращаться к ним с помощью интерфейсов GNOME или KDE. Эти способы эквивалентны. ; В основе всех взаимодействий между серверами CUPS и клиентами лежит протокол HTTP, точнее, протокол печати в Интернете IPP (Internet Printing Protocol), его улучшен- ная версия. Клиенты посылают задания с помощью операции POST протокола HTTP/ IPP и запрашивают их статус с помощью команды GET из того же протокола. Файлы конфигурации CUPS также выглядят подозрительно похожими на файлы конфигурации веб-сервера Apache. Интерфейсы для системы печати Система CUPS является достаточно современной, так что большинство ее функций можно выполнить из графического пользовательского интерфейса, а администрирование часто осуществляется с помощью веб-браузера. Системный администратор (и, возмож- но, некоторые из консервативных пользователей) может также использовать команды оболочки. В системе CUPS есть аналоги многих команд оболочки из классических си- стем печати BSD и System V. К сожалению, система CUPS не эмулирует все, без исклю- чения, свойства этих систем. Иногда она эмулирует старые интерфейсы слишком хорошо;
Глава 26. Печать 1079 например, вместо того чтобы выдать пользователю краткую информативную справ- ку, команды Ipr —help и Ip -help просто распечатывают сообщения об ошибках. И все же многие старые сценарии, использующие эти команды, просто отлично ра- ботают в системе CUPS. Думайте об отсутствующих функциях как о возможностях: если вы хотите сохранить мир во всем мире и обеспечить оптимальность по Парето, пишите свою программу (а если вы используете старую систему, используйте существующий код). Вот как можно было бы распечатать файлы foo.pdf и /tmp/testprint.pdf. $ Ipr foo.pdf /tap/testprint.ps Команда Ipr передает копии файлов серверу CUPS cupsd, который сохраняет их в очереди на печать (print queue). Когда принтер готов, CUPS начинает обрабатывать каж- дый файл по очереди. Во время печати система CUPS проверяет как документ, так и PPD-файл принтера (PostScript Printer Description — описание принтеров в PostScript), чтобы узнать, что не- обходимо сделать для того, чтобы документ был распечатан должным образом. (Как бу- дет объяснено позже, PPD-файлы используются даже и для принтеров, не понимаюпщх язык PostScript.) Для того чтобы подготовить задание к печати на конкретном принтере, CUPS про- пускает его через конвейер, состоящий из фильтров. Эти фильтры могут выполнять са- мые разные функции. Например, фильтр может изменять формат задания так, чтобы на каждой физической странице печаталось по два экземпляра уменьшенных в размене страниц, или преобразовывать задание из формата Postscript в PCL. Фильтр также моШТ выполнять какую-нибудь специфическую для принтера операцию обработки, такую инициализация принтера. Фильтр даже может преобразовывать изображения в растро- вый формат, превращая абстрактные инструкции, такие как “проведите линию поперек страницы”, в двоичное изображение. Такая функция полезна для принтеров, которые не могут самостоятельно выполнять растеризацию или не понимают язык, на котором сформулировано задание. Последним этапом в конвейере печати является внутренний интерфейс, который от- правляет задание с узла на принтер через подходящий протокол, такой как Ethernet (tea также отправляет информацию о состоянии обратно на сервер CUPS. Просмотреть до- ступные внутренние интерфейсы можно при помощи такой команды. $ locate backend | grep -i cups Передав задание на печать, демон CUPS возвращается снова к обработке своих оче- редей и запросов от клиентов. Принтер приступает к работе, пытаясь распечатать пере- данное ему задание. Очередь на печать Централизованное управление демона cupsd позволяет легко понять, как работают пользовательские команды. Например, команда Ipq запрашивает с сервера CUPS ин- формацию о состоянии задания и форматирует ее для отображения. Клиенты CUPS мо- гут просить сервер откладывать задания, отменять их или изменять их приоритет. Они также могут переносить задания из одной очереди в другую. Почти все изменения требуют указания номера задания, который сообщается в отче- те, возвращаемом командой Ipq. Например, чтобы удалить какое-нибудь задание, нуж- но просто выполнить такую команду: 1рпп идентификатор_задания. Команда Ipstat -t предоставляет хороший сводный отчет об общем состоянии сер- вера печати.
1080 Часть III. Разное Множество принтеров Система CUPS создает для каждого принтера отдельную очередь. Клиенты команд- ной строки принимают аргумент (обычно -р принтер или -р принтер) для указания очереди принтера. Также можно самостоятельно задать принтер, который должен ис- пользоваться по умолчанию, просто установив переменную окружения PRINTER $ export РН1КТЕН=имя_принтера или указав системе CUPS использовать определенный параметр по умолчанию для дан- ной учетной записи. $ Ipoptions -&имя_принтера При выполнении от имени пользователя root, команда Ipoptions устанавли- вает системные параметры по умолчанию, которые хранятся в каталоге /etc/cups /Ipoptions. Эта команда позволяет каждому пользователю устанавливать свои пара- метры, которые хранятся в каталоге ^/Ipoptions. Команда Ipoptions -1 отображает список текущих опций. Экземпляры принтеров Если имеется только один принтер и его нужно использовать по-разному — напри- мер, как для быстрой печати черновых вариантов, так и для качественной печати про- изводственных документов, — система CUPS позволяет создавать для выполнения этих задач разные “экземпляры принтера”. Например, если уже есть принтер с именем Phaser_6120, команда $ Ipoptions -р Phaser_6120/2up -о number-up=2 -о job-sheets=standard создаст экземпляр с именем Phaser_6120/2up, печатающий по две странице на листе и добавляющий титульные страницы. После создания нового экземпляра команда $ Ipr -Р Phaser__6120/2up biglisting.ps затем распечатает файл PostScript biglisting.ps как задание с двумя страницами на каждом листе и соответствующими титульными страницами. Сетевая печать С точки зрения системы CUPS, сеть со множеством машин не очень отличается от изолированной машины. На каждом компьютере выполняется демон CUPS (cupsd), и все эти демоны взаимодействуют между собой. Для того чтобы сконфигурировать демон CUPS так, чтобы он принимал задания на печать с удаленных систем, можно отредактировать файл /etc/cups/cupsd.conf (подробнее об этом будет рассказываться чуть позже в этой главе, в разделе “Настройка сервера сетевой печати”). Настроенные таким образом серверы CUPS по умолчанию каждые 30 секунд рассылают информацию об обслуживаемых ими принтерах. Благодаря этому имеющиеся в локальной сети компьютеры автоматически узнают о доступных им принтерах. Такую же конфигурацию можно создать, просто установив флажки в графи- ческом пользовательском интерфейсе CUPS в вашем браузере. Если кто-нибудь подключил новый принтер или включил в сеть ноутбук либо ин- сталлировал новую рабочую станцию, то с помощью команды cupsd можно най- ти и увидеть новые компоненты сети, щелкнув на кнопке Find New Printers вкладки Administration графического пользовательского интерфейса CUPS.
Глава 26. Печать 1081 Сделать принтеры доступными для множества сетей или подсетей немного сложнее, потому что рассылаемые пакеты не пересекают границ подсетей. Наиболее популярным решением является выделить в каждой подсети подчиненный сервер, который будет за- прашивать информацию с серверов в других подсетях и затем рассылать ее машинам в своей локальной подсети. Предположим, необходимо, чтобы серверы allie (192.168.1.5) и j j (192.168.2.14), находящиеся в разных подсетях, были доступны пользователям в третьей подсети, 192.168.3. Чтобы решить эту проблему, нужно просто выделить подчиненный сервер (например, copeland, 192.168.3.10) и добавить в его файл cupsd. conf такие строки. BrowsePoll allie BrowsePoll jj BrowseRelay 127.0.0.1 192.168.3.255 Первые две строки указывают демону cupsd подчиненного сервера запрашивать у находящихся на серверах allienjj демонов cupsd информацию об обслуживаемых ими принтерах. Третья строка указывает серверу copeland рассылать получаемую ин- формацию по своей собственной подсети. Вам необходима более тонкая настройка? Требуется множество очередей для одного принтера и чтобы у каждой были свои параметры по умолчанию? Нужен один сервер, балансирующий нагрузку путем распределения заданий между несколькими принте- рами? Необходимо иметь множество серверов, способных работать с равнозначными экземплярами одного и того же принтера? Необходимы клиенты Ipd или Windows? Вариантов слишком много, чтобы их все можно было рассмотреть здесь, но CUPS име- ет решение для всех этих ситуаций, и узнать о них подробнее можно в документации CUPS (см. раздел 26.13). Фильтры Вместо того чтобы использовать специализированную утилиту печати для каждого принтера, система CUPS использует ряд фильтров, которые преобразовывают формат распечатываемого файла в формат, понятный для имеющегося принтера. Схема фильтров в системе CUPS является довольно изящной. Когда система CUPS получает подлежащий распечатке файл, она определяет его тип MIME. Затем она про- веряет файл PPD и выясняет, какие типы MIME может обрабатывать принтер. После этого с помощью файлов . convs она решает, какая цепочка фильтров может преобразо- вать один тип в другой и сколько это будет стоить. В заключение она выбирает цепочку и пропускает документ через фильтры. Последний фильтр в цепочке передает серверу пригодный для печати формат, а он, в свою очередь, передает данные на принтер либо через аппаратное устройство, либо через протокол, поддерживаемый принтером. Для распознавания типа поступающих данных система CUPS использует правила, указанные в файле /etc/cups/mime, types. Например, правило application/pdf pdf string (0,%PDF) означает следующее: “Если файл имеет расширение pdf или начинается со строки %PDF, тогда его типом MIME является application/pdf”. О том, как преобразовать один тип данных в другой, система CUPS узнает, просма- тривая правила в файле /etc/cups/mime.convs. Например, правило application/pdf application/postscript 33 pdftops означает следующее: “Для того чтобы преобразовать файл application/pdf в файл application/postscript, нужно выполнить фильтр pdftops”. Число 33 — это стой-
1082 Часть III. Разное мость такой операции преобразования. Если выясняется, что одно и то же преобразова- ние могут выполнить несколько цепочек фильтров, система CUPS выбирает цепочку с наименьшей общей стоимостью. (Стоимость определяется тем, кто создал файл, напри- мер производителем дистрибутивов. Мы не знаем, как. Если вы хотите уточнить этот механизм, потому что считаете, что можете сделать это лучше, значит, у вас слишком много свободного времени.) Последним компонентом в конвейере CUPS является фильтр, который непосред- ственно взаимодействует с принтером. В PPD-файле принтера, не поддерживающего язык PostScript, можно увидеть строки типа *cupsFilter: "application/vnd.cups-postscript 0 foomatic-rip" или даже *cupsFilter: "application/vnd.cups-postscript foomatic-rip” Строка, заключенная в кавычки, имеет точно такой же формат, как и строка в файле mime. convs, но в ней указан только один тип MIME, а не два. Она сообщает о том, что фильтр foomatic-rip преобразовывает данные типа application/vnd. cups- postscript в родной формат данных принтера. Стоимость равна нулю (или вообще не указывается), потому что существует только один способ выполнить эту операцию^ так что зачем притворяться, что есть еще какая-то стоимость? (PPD-файлы проекта Gutenprint для принтеров, не поддерживающих язык PostScript, немного отличаются.) . Узнать, какие фильтры доступны в системе, можно при помощи команды locate pstops (pstops — это популярный фильтр, который выполняет с PostScript-зaдaниямt^ различные манипуляции, например добавляет PostScript-команды для указания количе- ства копий. Остальные фильтры обязательно будут где-нибудь поблизости). f Для того чтобы просмотреть список доступных серверных служб (back ends), выпол- ните команду Ipinf о -v. Если в используемой системе нет серверной службы для нет обходимого сетевого протокола, возможно, она доступна в Интернете или на сайте про- изводителя системы Linux. Управление сервером CUPS Демон cupsd запускается во время загрузки и выполняется непрерывно. Все изучен- ные нами разновидности системы Linux работают именно так по умолчанию. t Конфигурационный файл CUPS называется cupsd.conf; обычно его можно най- ти в каталоге /etc/cups. По формату он похож на конфигурационный файл Apache. Если вы умеете работать с одним из этих файлов, значит, сможете работать и с другим. Просматривать и редактировать файл cupsd.conf можно как с помощью текстово- го редактора, так и посредством графического пользовательского интерфейса CUPS. Стандартный конфигурационный файл хорошо прокомментирован. Эти комментарии и справочная страница cupsd. conf настолько подробные, что мы не будем повторять ту же самую информацию в книге. Система CUPS считывает файл конфигурации только в момент запуска. Если вы внесли изменения в конфигурационный файл cupsd. conf, то должны запустить систе- му печати снова, чтобы они вступили в силу. Если изменения вносились с помощью гра- фического пользовательского интерфейса через веб-браузер, то они вступят в силу ав- томатически. Для того чтобы перезапустить демон cupsd из командной строки, просто выполните команду /etc/init. d/cups restart или /etc/init. d. cupsys restart. Конфигурационный файл CUPS можно редактировать вручную или с помощью гра- фического пользовательского интерфейса. Если установлена настольная среда KDE, то
Глава 26. печать 1085 редактирование можно выполнить с помощью приложения KDE Print Manager, которое доступно через центр управления KDE. Когда мы его тестировали, он “жаловался” нам на то, что не понимает некоторые опции в создаваемых по умолчанию файлах cups. conf, на всех наших тестовых системах. Браузер графиского пользовательского интер- фейса безопаснее и, конечно, авторитетнее. Настройка сетевого сервера печати Для того чтобы заставить систему CUPS принимать задания на печать из сети, нужно внести два изменения в файл cupsd. conf. Сначала нужно изменить <Location /> Order Deny,Allow Deny From All Allow From 127.0.0.1 </Location> на cLocation /> Order Deny,Allow Deny From All Allow From 127.0.0.1 Allow From адресноети </Location> В качестве параметра адрес__сети следует указать IP-адрес сети, из которой должны приниматься задания на печать (например, 192.168.0.0). Далее нужно отыскать ключевое слово BrowseAddress и указать напротив него адрес рассылки в этой сети и порт CUPS. BrowseAddress 192.168.0.255:631 Эти два действия заставят сервер принимать запросы с любой машины в сети и рас- сылать известную ему информацию об обслуживаемом им принтере всем имеющимся в сети демонам CUPS. Вот и все! После перезапуска демон cupsd станет сервером. Автоматическое конфигурирование принтера На самом деле система CUPS может использоваться и без принтера (например, для преобразования файлов в формат PDF или формат факса), но в основном она все-таки используется для управления принтерами. В этом разделе речь пойдет о самих принтерах. В некоторых случаях добавление принтера является обычным делом. Система CUPS старается автоматически обнаружить USB-принтеры при их подключении и выяснить, что с ними нужно делать. Производители принтеров обычно предоставляют установочное программное обеспе- чение, которое автоматически (без участия пользователя) выполняет большую часть не- обходимых установочных операций на Windows и даже на Mac OS X (где тоже использу- ется система CUPS). Однако нельзя рассчитывать на то, что производители позаботятся о предоставлении подобного установочного программного обеспечения для системы Linux. Даже если установку приходится выполнять самостоятельно, процесс добавления принтера часто состоит всего лишь из подключения оборудования, установки соединения с веб-интерфейсом CUPS по адресу localhost: 631/admin и предоставления ответов на несколько вопросов. Среды KDE и GNOME поставляются с собственными утилитами для конфигурирования принтера, которые могут использоваться вместо интерфейса CUPS.
1084 Часть III. Разное Если кто-то другой добавляет принтер и об этом становится известно одному или более функционирующим в сети серверам CUPS, ваш сервер CUPS тоже уведомляется о появлении нового принтера. Ни добавлять этот принтер явно в локальный перечень устройств, ни копировать его PDD-файл на свою машину вам не нужно. Это магия. Конфигурирование сетевых принтеров Сетевым принтерам необходима собственная конфигурация только для того, чтобы быть членами сети TCP/IP. В частности, им необходимо знать свой IP-адрес и сетевую маску. Такая информация обычно передается им одним из двух способов. Почти все современные принтеры могут получать эту информацию по сети от серве- ра ВООТР или DHCP. Этот метод работает хорошо в средах со множеством гомогенных принтеров. Более подробную информацию о DHCP можно найти в разделе 14.7. Второй способ заключается в установке статического IP-адреса при помощи консоли принтера, которая обычно состоит из ряда кнопок на передней панели и однострочной индикаторной панели. Все, что нужно сделать, — это “походить” по меню и отыскать раздел, где можно установить IP-адрес. (Если вдруг попадется команда, позволяющая распечатать меню, следует воспользоваться ею и сохранить печатную версию.) Некоторые принтеры предоставляют доступ к виртуальной консоли через последователь- ный порт. Это замечательная идея, но в целом предполагает выполнение почти точно такого же количества операций, как и использование кнопок на передней панели принтера. После завершения конфигурирования сетевые принтеры обычно имеют веб-консоль, доступную через браузер. Однако для того чтобы с ними можно было работать через эту консоль, у них должен быть IP-адрес и они уже должны функционировать в сети, когда вы к ним обратитесь, так что этот интерфейс оказывается недоступным как раз тогда, когда он вам очень нужен. Когда принтер уже находится в сети и готов к использованию, нужно обязательно убедиться в том, что он защищен от несанкционированного доступа. О том, как это можно сделать, см. в разделе 26.12. Примеры конфигурирования принтеров В качестве примеров добавим принтер с параллельным интерфейсом groucho и се- тевой принтер fezmo из командной строки. $ Ipadmin -р groucho -Е -v parallel:/dev/IpO -m pxlcolor.ppd $ Ipadmin -p fezmo -E -v socket://192.168.0.12 -m laser jet.ppd Как вы видите, интерфейс groucho предоставляется через порт /dev/lpO, a femzo — через IP-адрес 192.168.0.12. Мы указываем каждое устройство в виде универсального идентификатора ресурса (URI) и выбираем PDD-файл из списка PDD-файлов, находя- щихся в каталоге /usr/share/cups/model. Если локальный демон cupsd сконфигурирован как сетевой сервер, он сразу же сде- лает эти новые принтеры доступными для других клиентов в сети. Поскольку сервер cupsd конфигурируется как сетевой, он немедленно делает новые принтеры доступными для других клиентов в сети. Перезапуск при этом не требуется. CUPS позволяет использовать для принтеров самые разные URI-идентификаторы. Вот еще несколько примеров. ipp://zoe.canary.com/ipp Ipd://riley.canary.com/ps serial://dev/ttyS0?baud=9600+parity=even+bits=7
Глава 26. Печать 1085 socket://gillian.canary.com:9100 usb://XEROX/Phaser%206120?serial=YGG210547 Одни URI-идентификаторы принимают параметры (например, serial), а другие — нет. Команда Ipinfо -v отображает список устройств, которые система может видеть, и список типов URI-идентификаторов, которые понимает система CUPS. Создание класса принтеров “Класс” — это группа принтеров, которые используют очередь совместно. Задания в очереди могут распечатываться на любом из этих принтеров, а именно на том, который становится доступен первым. Показанная ниже команда создает класс haemer и добав- ляет в него три принтера: riley, gilly и zoe. $ Ipadmin -р riley -с haemer $ Ipadmin -p gilly -c haemer $ Ipadmin -p zoe -c haemer Обратите внимание на то, что никакого явного шага для создания класса нет; класс существует только при условии добавления в него принтеров. На самом деле интеллек- туальные возможности системы CUPS этим не ограничиваются: если множеству прин- теров в сети присваивается одинаковое имя, система CUPS воспринимает их как неяв- ный класс и автоматически распределяет между ними связанную с заданиями нагрузку. Если не все принтеры расположены в одной комнате, это может оказаться неудобным. Отключение принтера Если вы хотите удалить принтер или класс, это можно легко сделать при помощи команды Ipadmin -х. $ Ipadmin -х fezmo $ Ipadmin -х haemer Но как быть, если нужно только временно отключить принтер для прохождения технического осмотра, а не удалять его? В таком случае можно просто заблокировать очередь печати на входе или выходе. Если отключить “хвост” (т.е. выходную или прин- терную сторону) очереди, пользователи по-прежнему смогут отправлять задания, но эти задания никогда не будут печататься. Если отключить “головную” (входную) часть оче- реди, те задания, которые уже находятся в очереди, будут распечатаны, а вот все попыт- ки добавить в очередь новые задания будут отклоняться. Команды cupsdisable и cupsenable контролируют выходную сторону очереди, а команды reject и accept — ее принимающую сторону.1 $ sudo disable groucho $ sudo reject corbet Какую же из них лучше использовать? Принимать задания на печать, которые точно не будут распечатаны в ближайшем будущем, глупо, поэтому для длительных периодов простоя лучше использовать команду reject. Для коротких перерывов, которые даже 1 В старых версиях системы CUPS вместо команд cupsdisable и cupsenable используются команды disable и enable. К сожалению, команда enable также является встроенной командой оболочки bash, поэтому оболочка bash предполагает, что вы используете ее собственную коман- ду enable, если не указать полный путь к команде. В этом случае выполняется версия команды enable из оболочки bash, которая включает и отключает встроенные команды этой оболочки, поэтому ее саму можно выключить, выполнив команду enable -n enable.
1086 Часть III. Разное не должны быть заметны пользователям (например, когда нужно просто удалить за- стрявшую в принтере бумагу), лучше использовать команду cupsdisable. Администраторы иногда просят дать им какую-нибудь подсказку, которая помогла бы им запомнить, какие команды контролируют каждый конец очереди. Предлагаем попробовать такой вариант: если система CUPS “отклоняет” (reject) задание, это означает, что его нельзя “предоставить”. Еще один способ не путать команды — это за- помнить, что приниматься (accept) и отклоняться (reject) могут только задания на печать, а отключаться (disable) и включаться (enable) — только принтеры. Система CUPS иногда сама временно отключает принтер, с которым не может нор- мально работать (например, из-за того, что кто-то выдернул его кабель). Устранив про- блему, следует снова активизировать очередь. Если забыть это сделать, команда Ips tat напомнит. (Более подробную информацию по этой теме и альтернативному подходу можно найти по адресу www. linuxprinting. org/beh.html.) Другие связанные с конфигурированием задачи Современные принтеры имеют очень много опций, которые можно конфигуриро- вать. Система CUPS позволяет настраивать самые разные функциональные возможности с помощью ее веб-интерфейса и команд Ipadmin и Ipoptions. Как правило, команду Ipadmin используют для выполнения задач на уровне системы, а команду Ipoptions — для выполнения задач на уровне пользователя. Команда Ipadmin позволяет более четко задать ограничения доступа, чем команды disable и reject. Например, с ее помощью можно создавать квоты на печать и указы- вать, на каких именно принтерах разрешается выполнять печать тем или иным пользо- вателям. В табл. 26.1 перечислены все команды, которые поставляются с системой CUPS, и их источники, в которых они использовались первоначально. Таблица 26.1. Утилиты командной строки, поставляемые с системой CUPS, и системы, в которых они использовались первоначально Команда •> „ . ' cups-configa Выводит информацию об API-интерфейсе, компиляторе, каталоге и канале связи системы CUPS cupsdconf8 Представляет собой утилиту для конфигурирования cupsdisable6 Останавливает печать принтера или класса 8 cupsenable6 Восстанавливает печать принтера или класса Ipinfo Показывает доступные устройства или драйверы Ipoptions Отображает или устанавливает опции и параметры по умолчанию принтера Ippasswd Добавляет, изменяет или удаляет пароли дайджеста accept, reject Принимает или отклоняет поступающие в очередь задания cancel Отменяет задания e ip ф H Печатает файлы £ Ipadmin Конфигурирует принтеры и классы CUPS Ipmove Перемещает задание в новое место Ipstat Печатает информацию о состоянии CUPS
Глава 26. Печать 1087 Окончание табл. 26.1 Команда 1рс Представляет собой общую программу для управления принтерами о со Ipq Отображает статус очереди принтера 03 Ipr Iprm Печатает файлы Отменяет задания на печать а Не пугайте эти похожие имена: cupsdconf — это утилита с графическим пользовательским интерфейсом (GUI), поставляемая с KDEPrint, a cups-conf ig — это утилита с интерфейсом командной строки (CU), по- ставляемая с CUPS. 6 На самом деле это просто переименованные команды disable и enable из System V. 26.3. Печать в настольных системах Мы уже упоминали о графическом пользовательском интерфейсе системы CUPS, который является альтернативой надстройкам для среды KDE. Этот графический интер- фейс широко признан и отлично работает. Рассмотрим теперь проблему переносимости. Возможно, вы уже сталкивались с тре- мя разными семействами систем печати, так зачем вносить дополнительную путаницу, заставляя администраторов разбираться с разными графическими пользовательскими интерфейсами? Если ваше руководство хочет печатать файлы из нового ноутбука Macin- tosh, то, возможно, вы не знаете, где надо щелкнуть, чтобы получить доступ к конфигу- рации новейшего пользовательского интерфейса, разработанного компанией Apple. Но если вы просмотрите порт localhost:631, то окажетесь на знакомой территории. Впрочем, если все ваши пользователи используют конкретные настольные системы, вы можете использовать для их поддержки графический пользовательский интерфейс. В каче- стве примера рассмотрим KDEPrint, доминирующее приложение для системы печати KDE. Программа KDEPrint включает средства для добавления принтеров, администрирова- ния заданий на печать, перезапуска серверов печати и т.д. Как и все остальные инструмен- ты системы KDE, она имеет внешний вид KDE, что делает их более понятными для поль- зователей KDE. (Не трудно заметить, что даже имена утилит KDE имеют определенный внешний вид. Однажды у нас кто-то спросил, является ли ksh приложением KDE.) Программа KDEPrint не зависит от системы CUPS. Несмотря на то что она может выполнять все функции системы CUPS, ее можно настроить на работу с любой систе- мой — от LPRng до универсальной внешней программы. Если по какой-то причине вы не используете систему CUPS (или, что еще хуже, вынуждены переключаться то на одну, то на другую систему печати), все равно можете использовать программу KDEPrint для управления процессом печати. Однако заранее предупреждаем, что CUPS мощнее дру- гих систем печати, так что если вы перейдете на какую-нибудь альтернативную систему печати, не исключено, что некоторые из функциональных возможностей KDEPrint вам больше не будут доступны. Ниже перечислены основные компоненты приложения KDEPrint, о которых следует знать. Утилита kprinter с графическим пользовательским интерфейсом, которая позво- ляет отправлять задания на печать. Мастер Add Printer, который автоматически обнаруживает сетевые принтеры (JetDirect, IPP и SMB) и некоторые принтеры, подключаемые локально. Он также по-
1088 Часть III. Разное зволяет добавлять и конфигурировать принтеры, которые не удается обнаружить авто- матически. Утилита Print Job Viewer, которая позволяет менять местами и отменять задания на печать, а также просматривать информацию об их состоянии. Руководство KDEPrint Handbook, в котором содержится необходимая справочная инфор- мация по данной системе. Оно доступно через панель KDE Help Center, но там его иногда трудно найти. Легче всего вызвать какую-нибудь программу наподобие kprinter и щел- кнуть на кнопке Help или же выполнить команду konqueror help: /kdeprint. Кроме того, документация по KDEPrint еще также доступна по адресу printing. kde. org. Программа Print Manager, которая является главным средством управления графи- ческим пользовательским интерфейсом для системы печати. Иногда ее тоже немного трудно найти. Можно попробовать поискать ее в главном меню рабочего стола, хотя ее расположение в дереве меню в каждом дистрибутиве выглядит по-разному. Еще один ва- риант — выполнить команду kcmshell printmgr или konqueror print: /manager. Мастер Add Printer и программа Print Job Manager доступны либо через kprinter, либо KDE Print Manager (не говоря уже об URL-адресах print: /manager и print: / printers в браузере Konqueror). Информация о пользователях KDEPrint хранится в каталоге ~/. kde. Эти файлы име- ют понятный для человека формат и их можно изменять через программу Print Manager. Если хотите, попробуйте отредактировать что-нибудь в них на свой страх и риск. Документы kprinter: printing Утилита kprinter — это имеющая графический интерфейс версия программы Ipr. Ее также можно использовать и из командной строки. Например, команда $ kprinter —nodialog -5 -₽ 1J4600 riley.ps gillian.pdf zoe.prn эквивалентна следующей команде. $ Ipr -5 -Р 1J4600 riley.ps gillian.pdf zoe.prn Ваши пользователи, скорее всего, захотят воспользоваться GUI-интерфейсом. Покажите им, как можно перетащить файлы из окна диспетчера файлов или с рабочего стола в диалоговое окно kprinter и затем распечатать их все сразу. Замените Ipr на kprinter в появляющемся в их браузере окне печати, и у них будет окно печати с GUI- интерфейсом. Научите их устанавливать флажок Keep this dialog open after printing, и они даже не будут тратить время на повторный запуск этой программы каждый раз, ког- да им необходимо будет напечатать что-нибудь. Обратите внимание на меню Print System currently in use, показывающее, что систе- ма KDEPrint сейчас не активна. Также обратите внимание на то, что когда принтер не доступен, kprinter предлагает выполнить печать в PDF или распечатать документ че- рез факс. Дополнительные опции тоже заслуживают внимания: они позволяют ставить в очередь на печать свое резюме и указывать, что оно должно быть распечатано после того, как начальник уйдет домой. Konqueror и печать Многие веб-браузеры распознают ряд специальных URI-адресов, которые выступают в роли шлюзов к уникальным функциональным возможностям. Вы, наверняка, пробо- вали вводить about: config и about :mozilla в окне Firefox. Точно так же семейство URI-адресов print: является в веб-браузере Konqueror шлюзом к KDEPrint.
Глава 26. Печать 1089 При вводе URI-адреса print: / отображается перечень всех возможностей, при вво- де print: / jobs — перечень заданий на печать, а при вводе print: /manager внутри Konqueror запускается программа Print Manager. Даже если вы не работаете с системой печати CUPS непосредственно, все значитель- но упрощается, если помнить, что система CUPS является веб-браузером. Браузеры зна- ют, как общаться с веб-серверами, поэтому их относительно легко оснастить функциями печати CUPS. 26.4. Система печати System V Программное обеспечение System V самое старое и простое среди всех рассматри- ваемых нами систем печати. Оно настолько старое, что вообще не предполагает работу в сети. Большинство разработчиков, использующих его, вынуждены были внести в него много изменений. Как это обычно бывает, некоторые из этих изменений оказались по- лезными, а некоторые нет. СреДи изученных нами операционных систем программное обеспечение System V используют системы Solaris и HP-UX. В обоих случаях программы System V были существенно модифицированы. Ниже мы рассмотрим стан- soians дартную систему, попутно отмечая изменения, внесенные разработчиками. Обзор Пользователь, желающий что-нибудь распечатать, должен использовать либо коман- ду 1р, либо команду, которая вызывает команду 1р неявно. Команда 1р заносит дан- ные в буферный каталог (spool directory), связанный с их пунктом назначения. Демон Ipsched определяет, когда и где следует распечатать данные, а затем выполняет интер- фейсную программу, форматирующую данные и посылающую их на соответствующий принтер. В табл. 26.2 перечислены команды системы печати System V. Таблица 26.2. Команды системы System V Общие accept /usr/sbin Включает режим постановки заданий в очередь cancel /bin Удаляет задания на печать из очереди disable /bin Выключает печать заданий, находящихся в очереди enable /bin Включает печать заданий, находящихся в очереди Ip /bin Ставит задания в очередь для печати Ipadmin /usr/sbin Конфигурирует систему печати Ipmove /usr/sbin Переносит задания из одной очереди в другую Ipsched /usr/sbin Планирует и выполняет задания Ipshut /usr/sbin Останавливает работу системы печати Ipstat /usr/sbin Выводит отчет о состоянии системы печати reject /usr/sbin Выключает режим постановки заданий в очередь Ipfilter /usr/sbin Управляет фильтрами печати Ipforms /usr/sbin Управляет использованием предпечатных форм
1090 Часть III. Разное Окончание табл. 26.2 Команда "1114 " IP" j м ", ,j. ?hiii Ipget /bin Считывает параметры конфигурации Ipset /bin Модифицирует параметры конфигурации Ipuser /usr/sbin Управляет приоритетами заданий в очереди Ipalt /bin Модифицирует задания в очереди Ipana /usr/sbin Анализирует регистрационные записи о работе системы печати Ipfence /usr/sbin Устанавливает минимальный приоритет задания на принтере Ipr /bin Поддерживает функции печати системы BSD Пункты назначения и классы “Пункт назначения” печати имеет имя, которое может состоять максимум из 14 букв, цифр и знаков подчеркивания. Пункт назначения — это, как правило, принтер, хотя и не обязательно. Например, пунктом назначения может быть файл, в который различные пользователи хотят добавить текст. Поскольку система печати является системой мас- сового обслуживания, команду 1р можно использовать для предотвращения ситуаций, когда два человека одновременно пытаются добавить текст в один и тот же файл. Каждый пункт назначения может относиться к одному или нескольким классам, но может и не принадлежать ни одному классу. Класс — это группа пунктов назначения, которые имеют одно и то же назначение. Например, если в организации два принтера стоят в одной комнате, то их можно объединить в один класс. Аналогично два принтера с одинаковыми параметрами (например, цветом, разрешением, дуплексом или скоро- стью) также можно отнести к одному классу. Демон Ipsched направляет данные, пред- назначенные для определенного класса, на тот из двух принтеров, который свободен в данный момент. Имена классов подчиняются тем же правилам, что и имена пунктов на- значения. Как бы там ни было, термин “пункт назначения” часто используется как синоним слов “принтер” или “класс”. Конкретный смысл этого термина зависит от контекста. Краткое описание команды 1р Это команда пользовательского уровня, которая помещает данные в очередь на пе- чать. Команда 1р копирует эти данные (которые могут поступать либо из именованных файлов, либо из стандартного ввода) в файл или в набор файлов в буферном каталоге. В системе HP-UX буферный каталог для пункта назначения обычно называется /var/ spool/lp/reques t/луж тиазначения, где пункт_назначения— это имя, под кото- рым этот принтер или класс принтеров известны команде 1р. Буферные файлы называются хххп, где п — идентификационный номер задания, при- своенный командой 1р, а часть имени ххх зависит от конкретной системы. Это имя файла позволяет идентифицировать задание как пользователю, так и системе печати для внутрен- них целей. Далее мы будем использовать это имя в качестве идентификатора задания. Запрос Ip -d ставит входную информацию в очередь на печать в конкретном пункте назначения. Если опция -d не указана, команда 1р использует в качестве имени пункта назначения содержимое переменной среды LPDEST. Если же эта переменная не уста- новлена, команда 1р ставит данные в очередь для вывода в пункте назначения, исполь- зуемом по умолчанию, который администратор может установить с помощью команды Ipadmin -d.
Глава 26. Печать 1091 В системе Solaris если пункт назначения по умолчанию не задан командой SOLSriS Ipadmin -d, то команда 1р ищет файл ~/ .printers, файл /etc/printers. conf и, наконец, службу Federated Naming Service как пункт назначения, за- данный по умолчанию. Команды Ipsched и Ipshut: начало и конец печати Демон Ipsched посылает файлы, помещенные в буферный каталог командой 1р, на соответствующее устройство по мере его освобождения. Он заносит в файл информа- цию о каждом обработанном файле и возникших ошибках. В операционной системе Solaris регистрационный файл по умолчанию имеет имя / var/1р/logs/Ipsched. Операционная система HP-UX хранит регистрационный файл в каталоге /usr/spool/lp/log. Когда демон Ipsched начинает работу (обычно во вре- мя загрузки), он переносит старый регистрационный журнал в каталог oldlog и начи- нает новый. Журнальный файл выглядит примерно так. ***** LP LOG: Jul 6 12:05 ***** prl-107 garth prl Jul 6 12:10 pr-112 scott prl Jul 6 12:22 pr-117 evi pr2 Jul 6 12:22 prl-118 garth prl Jul 6 12:25 prl-119 garth prl Jul 6 13:38 pr-132 evi prl Jul 6 13:42 В первой колонке указывается идентификатор задания, во второй — имя пользовате- ля, пославшего задание, в третьей колонке задается принтер, на который было послано задание, а в последней — время постановки задания в очередь. В системе HP-UX, взятой для этого примера, имеется два принтера — prl и рг2, ко- торые относятся к классу рг. Пользователь garth всегда указывал конкретный принтер prl, поэтому его задания постоянно посылались именно на него. Пользователи scott и evi, со своей стороны, указывали класс рг, поэтому их задания посылались на первый свободный принтер этого класса. Для того чтобы по какой-то причине прервать выполнение демона Ipsched, необ- ходимо выполнить команду Ipshut как суперпользователь или как пользователь 1р. Когда демон Ipsched не работает, никакие задания не печатаются, хотя можно продол- жать постановку заданий в очередь с помощью команды 1р. Задание, которое в момент останова демона печаталось, после его перезапуска будет напечатано сначала. Команда Ipsched создает файл /usr/spool/lp/SCHEDLOCK, который предназначен для индикации ее работы. Если попытаться запустить другую копию демона Ipsched, вы получите сообщение, что такой файл уже есть, и запуск демона будет прерван. Если выполнение демона Ipsched было прервано не с помощью команды Ipshut, а другими средствами, то перед перезапуском демона файл SCHEDLOCK обязательно нужно удалить вручную. Команда Ipadmin: конфигурирование среды печати Команда Ipadmin информирует систему печати о конфигурации принтеров. Она присваивает принтерам имена, создает классы и задания для принтера, используемого по умолчанию. На самом деле эта команда только создает текстовые файлы и модифи- цирует текстовые файлы в каталоге /usr/spool/1р.
1092 Часть III. Разное Несмотря на то что эти файлы конфигурации можно читать, рядом с ними неплохо бы поместить табличку: “Руками не трогать!” Эти файлы имеют жестко заданный фор- мат, так что их легко испортить. Разработчики операционной системы Solaris попытались использовать файл SOiariS описания принтера, принятый в системе BSD, чтобы облегчить конфигури- рование системы. Однако на деле это привело к разбиению конфигурации на два файла: /etc/printers. conf и /etc/lp. Операционная система Solaris требует, чтобы во время выполнения большинства ад- министративных команд работал демон Ipsched. С другой стороны, в операционной системе HP-UX большинство команд демона Ipadmin не выполняется, если работа- ет демон Ipsched. В этом случае демон Ipsched должен быть остановлен командой Ipshut и лишь после этого можно использовать демон Ipadmin. (Возможно, эти раз- работчики противятся переходу на систему CUPS, потому считают, что она будет одина- ковой во всех операционных системах и лишит мир богатого разнообразия?) Перед тем как система начнет вывод заданий на принтер, необходимо сообщить ей о том, что этот принтер существует. Для того чтобы добавить новый принтер, необходимо выполнить следующую команду. $ sudo Ipadmin -рпринтер -уустройство { -епринтер | -шмодель | ^интерфейс } [ -скласс ... ] [ { -1 | -h } ] Здесь принтер — это имя принтера (как внутреннее в системе организации очере- дей, так и на уровне пользовательских команд), а устройство — это файл устройства, с которым связан принтер. В качестве аргумента устройство обычно используется спе- циальный файл в каталоге /dev, хотя в принципе можно использовать любой файл. Флаги -е, -т и -i сообщают системе организации очередей, какую интерфейсную программу принтера она должна использовать. Интерфейсная программа отвечает за фактическое форматирование заданий, поступающих непосредственно на принтер. Ин- терфейсные программы в системе System V аналогичны фильтрам системы CUPS. Более подробную информацию о фильтрах можно найти в разделе 26.2. Интерфейсную программу можно задать одним из трех способов. • -епринтер, В этом случае принтер — это имя существующего принтера. Этот ме- тод задания интерфейсной программы полезен в том случае, если вы добавляете принтер, идентичный одному из уже имеющихся. Команда Ipadmin создает ко- пию интерфейсной программы с новым именем пункта назначения. • -тлмодель, В этом случае модель — это тип устройства, для которого в системе имеется стандартная интерфейсная программа. Информация о том, какие моде- ли поддерживает система, содержится в каталоге /usr/spool/lp/model. В этом случае команда Ipadmin создает копию файла /usr/spool/1р/model/модель в каталоге /usr/spool/lp/interface/пункт_назначения, • -^интерфейс. В этом случае интерфейс является полным именем пути для про- граммы, которая будет использоваться как интерфейсный сценарий. Большинство версий команды Ipadmin делает копию интерфейсной программы, поэтому если вы захотите изменить ее после запуска команды Ipadmin, необходимо будет заме- нить копию, а не свой оригинал. Система HP-UX позволяет определять программы, которые возвращают ин- формацию о состоянии очереди и отменяют задания печати. Их можно зада- вать как интерфейсные сценарии, но при этом используются другие префиксы
Глава 26. Печать 1093 параметров (префиксы -ост и -osm задают соответственно сценарий отмены и сценарий выдачи статуса). Кроме того, при вызове команды Ipadmin можно задавать следующие параметры. • -^принтер. Этот параметр сообщает команде Ipadmin, с какими принтерами вы хотите работать. Для того чтобы изменить принтер, необходимо комбинировать этот флаг с другими параметрами. • -скласс. Этот параметр задает имя класса, в который следует включить принтер. Для одного принтера можно задать сколько угодно классов. Если указан несуще- ствующий класс, он будет создан. Длина имени класса не должна превышать 14 символов. • -хпринтер. Этот параметр удаляет принтер из системы печати. Если принтер яв- ляется представителем целого класса принтеров, удаляется весь класс. Ни прин- тер, ни класс не могут быть удалены, если они уже выполняют задание из очереди на печать. Если поставленные в очередь задания мешают удалить принтер, ис- пользуйте команду reject, чтобы предотвратить загрузку в очередь печати новых заданий, а также команды Ipmove и cancel для удаления существующих заданий. Если команда Ipadmin -х по-прежнему не удаляет принтер, последуйте совету, приведенному в конце этого раздела. • -хкласс. Этот параметр удаляет принтер из заданного класса, а не из системы печати. Если указанный принтер является единственным представителем класса, удаляется сам класс. Команда 1р не принимает запросы к новому принтеру, пока ей не поступит таЙе указание от команды accept. Команды печати в системе System V вместо одного пункта назначения часто полу- чают список аргументов, заключенных в кавычки и разделенных запятыми. Например, команда $ sudo /usr/sbin/lpadmin -p”howler-lwzralphie-lw’’ -ceng-printers добавляет принтеры howler-lw и ralphie-lw в класс eng-printers. Флаги, которые используются при вызове программы Ipadmin, перечислены в табл. 26.3. Таблица 26.3. Флаги команды Ipadmin Флаг ' Функция •^принтер -дпункТ-Назначения -хпункТ-Назначения -скласс Задает принтер, к которому относятся все последующие параметры Назначает пункт назначения, используемый по умолчанию Удаляет пункт назначения из системы печати Добавляет принтер в класс -гкласс Удаляет принтер из класса -епункт_назначения ^интерфейс •шмодель -h -уфайл •^“описание” -L“ местоположение” Копирует интерфейсную программу для принтера Задает интерфейс в качестве интерфейсной программы для принтера Назначает модель интерфейсной программой для принтера Определяет, подключен ли принтер физически Определяет полный путь к файлу устройства, связанному с принтером Задает строку описания принтера Задает текстуальное описание местоположения принтера
1094 Часть III. Разное Примеры использования команды Ipadmin Рассмотрим несколько примеров использования команды Ipadmin. $ sudo Ipadmin -phowler-lw -v/dev/ttyO 6 -mPostScript -cpr Эта команда сообщает системе печати, что принтер с именем howler-lw назначен файлу устройства /dev/tty06 и что он должен относиться к классу рг, а также о том, что следует использовать интерфейсную программу для принтеров PostScript. Команда Ipadmin сама создает буферный каталог. Команда $ sudo Ipadmin -dpr задает используемый по умолчанию системный пункт назначения для класса (или прин- тера) рг. Команда $ sudo Ipadmin -phowler-lw -1"Conference room" задает строку описания принтера howler-lw. Команда $ sudo Ipadmin -phowler-lw -rpr -cfast удаляет принтер howler-lw из класса рг и добавляет его в класс fast. Команда $ sudo Ipadmin -xhowler-lw i полностью удаляет принтер howler-lw из системы печати. Команда Ipstat: получение информации о состоянии системы печати Команда Ipstat выдает информацию о состоянии системы печати. Если не указаны аргументы, эта команда сообщает статус всех заданий, которые посланы на печать задав- шим ее пользователем. Если задан аргумент -р, то она выдает информацию о состоянии конкретного принтера. Например, команда $ Ipstat -phowler-lw howler-lw is now printing pr-125. enabled since Jul 4 12:25 выводит информацию о состоянии принтера howler-lw. Статус демона Ipsched можно определить с помощью команды Ipstat -г. $ Ipstat -г scheduler is running В данном случае она сообщает, что все нормально. Флаги команды Ipstat перечис- лены в табл. 26.4. Таблица 26.4. Флаги команды Ipstat ' Флаг_________ Функция_______- ; ; г Выводит информацию о состоянии демона Ipsched * d Выводит информацию о пункте назначения, используемом по умолчанию - скласс Выводит список членов класса
Глава 26. Печать 1095 Окончание табл. 26.4 Флаг Функция , .• : •’’ЖЗЯ® -^аргумент -ипользователь Выводит информацию о состоянии запросов на вывод аргумента Выводит информацию о состоянии заданий, посланных на печать пользователем •^принтер -упринтер -апункт_назначения -S -t Выводит информацию о состоянии принтера Выводит информацию об устройстве вывода, связанном с принтером Выводит информацию о режиме постановки заданий в очередь пункта назначения Выводит краткую информацию о состоянии системы печати Выводит полную информацию о состоянии системы печати Команда cancel: удаление заданий печати Команда cancel удаляет из очереди задания, которые находятся в ней или печата- ются в данный момент. В этой команде можно указывать либо идентификатор задания (он определяется с помощью команды Ipstat), либо имя принтера (тогда отменяется задание, которое выводится на печать в данный момент). Ш Более подробную информацию о выполнении программ с установленным битом setid можно найти в разделе 6.5. Для команды cancel обычно установлены такие права доступа: владелец — псевдо- пользователь 1р, группа — bin, а код прав доступа — 6775, поэтому любой пользователь может выполнить ее и отменить явно фиктивное задание. Если задание отменяет тот, кто его не посылал, владельцу задания посылается сообщение по электронной почте. Если пользователи будут злоупотреблять этой возможностью, установите такой режим, чтобы команда cancel не устанавливала бит setuid. Команды accept и reject: управление очередью печати Если принтер недоступен длительное время (например, из-за неисправности), бу- феризацию заданий, посылаемых на это устройство, следует отключить, чтобы задания пользователей, не знающих о ситуации, не переполнили очередь. Отключение буфери- зации производится с помощью команды reject. Например, следующая команда за- ставляет демон 1р отменить запросы к принтеру howler-lw. $ sudo reject -r"howler-lw will be down until Tuesday" howler-lw Флаг -г является необязательным, однако это отличный способ сообщить пользо- вателям, почему принтер отклоняет запросы. При попытке вывести файл на печать, ко- манда 1р выведет следующее сообщение. $ Ip -dhowler-lw my file Ip: cannot accept requests for destination "howler-lw" — howler-lw will be down until Tuesday Команда accept принтер указывает демону Ip начать прием запросов к принтеру. Команду accept необходимо выполнять один раз для каждого нового принтера, добав- ляемого командой Ipadmin, потому что новые принтеры по умолчанию конфигуриру- ются так, чтобы запросы к ним отклонялись. Для того чтобы обеспечить возможность буферизации для целого класса, в командах accept и reject вместо имени принтера можно указать имя класса.
1096 Часть III. Разное Команды enable и disable: управление печатью Команда disable отдает демону Ipsched указание прекратить посылку заданий на конкретный принтер. В отличие от команды reject, команда disable позволяет утилите 1р продолжать ставить задания в очередь на этот принтер. Однако стоящие в очереди задания не будут выводиться на печать, пока принтер не будет повторно вклю- чен командой enable. Команда disable обычно не прерывает печать текущего зада- ния; это можно сделать с помощью флага -с. Как и команда reject, команда disable поддерживает флаг -г, который позволяет объяснить причину отключения принтера. Например, команда $ sudo disable -r"Being cleaned, back in 5 minutes" howler-lw выключает печать на принтере howler-lw. Для возобновления печати необходимо выполнить следующую команду. $ sudo enable howler-lw Команда Ipmove: перемещение заданий Иногда необходимо переместить задания, стоящие в очереди к одному принтеру или классу принтеров, на другой принтер. Это можно сделать с помощью команды Ipmove, которая получает список идентификаторов заданий и имя нового принтера. Например, команда $ sudo Ipmove howler-lw-324 howler-lw-325 anchor-lj перемещает задания с номерами 324 и 325 из очереди к принтеру howler-lw в очередь к принтеру anchor-lj. В качестве источника в команде Ipmove можно задать принтер или класс принтеров. Например, команда $ sudo Ipmove howler-lw anchor-lj перемещает все задания из очереди к принтеру howler-lw в очередь к принтеру anchor-lj. В этом случае возникает побочный эффект: к исходному принтеру приме-1 няется команда reject. В предыдущем примере демон 1р перестанет принимать запрет сы для принтера howler-lw. БЗ Операционная система HP-UX спроектирована так, чтобы команду Ipmove нельзя было использовать, если выполняется демон Ipsched. Вначале следуй* выполнить команду Ipshut. Интерфейсные программы Интерфейсная программа извлекает данные из файла, заданного демоном Ipsched, форматирует их и посылает в свой стандартный поток вывода. Кроме того, интерфейс- ная программа отвечает за правильную установку режимов на устройстве вывода и за формирование заголовков и завершителей, если они необходимы. Интерфейсные про- граммы, как правило, представляют собой сценарии оболочки, но могут быть и испол- няемыми двоичными файлами. Демон Ipsched вызывает интерфейсные программы со следующими аргументами. идентификатор_задания пользователь заголовок копии опции файл . . . Здесь использованы следующие аргументы. • идентификатор—Задания — назначается программой 1р;
Глава 26. Печать 1097 • пользователь — владелец задания; • заголовок — необязательный заголовок (задается пользователем); • копии — количество печатных экземпляров документа; • опции — указываемые пользователем параметры; • файл — полный путь к файлу, который следует распечатать. Перечисленные аргументы должны указываться при каждом выполнении интерфейс- ной программы, но некоторые из них могут быть пустыми строками. Стандартным вход- ным потоком для интерфейсной программы является файл /dev/null, а стандартные потоки вывода и ошибок направляются на устройство, заданное командой Ipadmin -v. В отличие от систем CUPS и BSD, в которых каждому формату файлов должна со- ответствовать собственная интерфейсная программа, в системе System V интерфейсные программы предназначены для обработки данных всех типов, которые поддерживает принтер. (Получив данные неизвестного типа, такие программы прекращают работу.) По этой причине интерфейсные программы обычно представляют собой сценарии обо- лочки, которые просто обрабатывают аргументы, а для выполнения реального формати- рования вызывают другие программы. По существу, интерфейсный сценарий в системе печати отвечает за весь этап вывода данных. Это облегчает настройку, но вместе с тем приводит к тому, что разные принтеры работают совершенно по-разному. Интерфейсы необходимы, если вы собираетесь печатать что-либо помимо текста, подготовленного специально для печати на PostScript-принтере. В настоящее время поч- ти все принтеры используют интерфейсы. Струйные принтеры обязательно используют интерфейсы для преобразования задания на печать в свой собственный формат. Если интерфейсная программа закончила свою работу успешно, то ее код заверше- ния равен 0; при ошибке он равен целому числу от 1 до 127. Если задание не выведено на печать, интерфейсный сценарий должен предпринять повторную попытку. Если же ошибка оказалась серьезной, интерфейсная программа должна отключить принтер с по- мощью команды disable. Если проблемы с печатью возникают постоянно, причину, скорее всего, следует искать именно в интерфейсном сценарии. Что делать, если система печати вышла из строя Иногда попытки задать или отменить конфигурацию принтера приводят к тому, что система печати выходит из строя. Файлы конфигурации, хранящие информацию о принтере, имеют сложную структуру и очень уязвимы. Один неверный символ может привести принтер в нерабочее состояние. Если каким-то образом вы создали принтер, который вывел систему печати из строя, то лучше всего полностью удалить его и начать все сначала. Иногда система запутывает- ся настолько, что принтер не удается даже удалить. В такой ситуации может спасти только метод грубой силы. В следующем примере мы попытаемся удалить принтер hoser. (Если имя hoser не уникально, этого делать нельзя.) $ sudo Ipshut $ sudo Ipadmin -xhoser $ sudo find /usr/spool/lp -name hoser -exec rm -rf {} ; # удаляем задания $ Ipsched $ Ipstat -t
1098 Часть ill. Разное Первые две команды отключают систему буферизации и пытаются удалить принтер. Если система запуталась, команда Ipadmin -х может не сработать. Команда find удаля- ет все интерфейсные программы и буферные каталоги, соответствующие данному прин- теру. Демон Ipsched перезапускает систему буферизации, а команда Ipstat использу- ется для проверки того, все ли ссылки на принтер hoser в системе печати уничтожены. 26.5. Печать BSD и AIX еМы могли бы назвать этот раздел просто “Печать в системе AIX”, поскольку AIX — единственная среди рассмотренных нами операционных систем, кото- рая все еще поддерживает систему печати BSD. Однако мы сохранили тради- ционное имя этой системы, поскольку ее все же можно обнаружить в некото- рых операционных системах, помимо AIX. Система печати BSD была разработана специально для использования старых иголь- чатых принтеров, но хорошая конструкция этой системы позволяет легко приспосабли- вать ее для поддержки большинства современных принтеров. Сетевая часть системы пе- чати BSD также хорошо масштабируется для использования в крупных неоднородных сетях и позволяет многим компьютерам совместно использовать принтеры. Программа буферизации печати Ipd, относящаяся к системе BSD, получила широкое распростра- нение и применяется во многих сетевых принтерах. Обзор архитектуры системы BSD В системе BSD доступом к принтерам управляет демон Ipd. Он принимает задания на печать от пользователей и других (удаленных) демонов Ipd, обрабатывает их и по- сылает на свободный принтер. Для того чтобы выполнить эти действия, демон Ipd счи- тывает данные о конфигурации принтера из файла /etc/printcap — системной базы данных, содержащей информацию о принтерах. Для отправки своих заданий демону Ipd пользователи вызывают программу 1рг. Эти два процесса взаимодействуют через сокет домена системы UNIX /dev/printer. Для того чтобы определить, какому принтеру послать задание, демон 1рг сначала анализирует командную строку. Если пользователь указал аргумент -Рпринтер, то пун- ктом назначения становится принтер. В противном случае демон 1рг проверяет, опре- делена ли переменная окружения PRINTER. Если эта переменная определена, демон 1рг использует ее значение. Во всех остальных случаях демон 1рг передает задание на общесистемный принтер, заданный по умолчанию. Его имя должно начинаться с букв 1р. Если таких символов нет, то используется первый принтер, указанный в файле /etc/ princap. Почти все команды, связанные с принтерами, включая команды Ipq и Iprm, понимают переменную окружения PRINTER и аргумент -Р. Как только программа 1рг узнает, на какой принтер направляется текущее задание, она начинает искать его в базе данных о принтерах системы /etc/printcap. Прочитав файл printcap, программа 1рг узнает, где хранится задание на печать для данного принтера. Этот буферный каталог обычно называется /var/spool I Ipd/имя_принтера. Для каждого задания программа 1рг создает в буферном каталоге два файла. Имя первого состоит из букв cf (control file) и числа, идентифицирующего задание. Этот файл содержит справочную информацию и информацию об обработке задания, напри- мер сведения о пользователе, который его послал. Числовая часть имени файла может состоять максимум из трех цифр, поэтому если в очереди более 999 заданий, система
Глава 26. Печать 1099 печати дает сбой. Имя второго файла начинается с букв df (data file) и заканчивается тем же числом. Этот файл содержит данные, которые должны быть выведены на печать. Поместив этот файл в очередь печати, программа 1рг уведомляет демона Ipd о суще- ствовании задания. Получив это уведомление, демон Ipd обращается к файлу printcap и выясняет, яв- ляется ли пункт назначения локальным или удаленным. Если принтер подключен ло- кально, демон Ipd проверяет наличие демона печати, обрабатывающего соответствую- щую очередь, и при необходимости создает его (копируя самого себя). Если соответствующий принтер подключен к другому компьютеру, демон Ipd уста- навливает соединение с демоном Ipd удаленного компьютера и пересылает туда файл данных и управляющий файл. Затем демон ipd удаляет локальные копии этих файлов. Планирование заданий печати осуществляется по принципу “первым пришел- первым вышел” (FIFO), но системный администратор может при желании изменить по- рядок печати с помощью команды 1рс. К сожалению, не существует способа постоянно указывать системе печати о том, чтобы она отдавала предпочтение заданиям, направ- ленным на печать конкретным пользователем или компьютером. Когда задание готово к печати, демон Ipd создает ряд каналов UNIX между буфер- ным файлом и печатающим устройством для передачи данных, подлежащих печати. Посредине этой цепочки демон Ipd устанавливает фильтрующий процесс, в задачи ко- торого входит просмотр и, возможно, редактирование содержимого потока данных, пре- жде чем они поступят на принтер. Фильтрующие процессы могут выполнять различные преобразования данных иди вообще ничего не делать. Их главное назначение — обеспечивать форматирование и поддержку любых связанных с устройствами протоколов, которые могут понадобиться для работы с конкретным принтером. Фильтр, заданный по умолчанию для конкретного принтера, указывается в файле /etc/printcap, но с помощью команды 1рг для прин- тера можно назначить другой фильтр. Управление средой печати Для ежедневного сопровождения системы печати достаточно знать всего три коман- ды: Ipq, Iprm и 1рс. Команда Ipq отображает содержимое очереди заданий конкретно- го принтера. Команда Iprm позволяет удалять одно или несколько заданий, при этом из системы печати удаляются соответствующие файлы данных и все ссылки на них. Обе команды доступны для пользователей и могут работать по сети, хотя только суперполь- зователь может удалить чье-то еще задание. Команда 1рс позволяет вносить изменения в среду печати, например отключать принтеры и переупорядочивать задания, стоящие в очереди. Некоторые ее функции до- ступны пользователям, но, в основном, это инструмент администратора. В табл. 26.5 перечислен ряд других команд и демонов системы BSD. Таблица 26.5. Команды системы BSD Команда ' Каталог / 1рс /usr/sbin Позволяет управлять принтером или очередью на печать Ipd /usr/sbin Планирует обработку заданий и направляет их на печать Ipq /usr/bin Отображает содержимое очереди на печать и статус заданий в ней Ipr /usr/bin Ставит задания в очередь на печать
1100 Часть III. Разное Окончание табл. 26.5 Iprm /usr/bin Отменяет задание Iptest/usr/bin Генерирует тестовую ASCII-страницу Демон Ipd: буферизация заданий на печать Демон Ipd, запущенный с флагом -1, регистрирует задания на печать в системе Sys- log от имени средства Ipr. При отсутствии этого флага демон регистрирует только си- стемные ошибки. Контроль доступа осуществляется на уровне отдельных компьютеров. Система BSD не позволяет контролировать конкретных удаленных пользователей. Только компьюте- рам, указанным в файле /etc/hosts.equiv или /etc/hosts.Ipd, разрешено ставить задания в очередь. По соображениям безопасности, использовать файл hosts .equiv не рекомендуется; применяйте лучше файл hosts. Ipd. Команда Ipr: выдача заданий на печать Это единственная команда в системе BSD, которая может помещать задания в оче- редь на печать. Все остальные программы печати файлов (например, enscript и брау- зер) вынуждены вызывать эту команду. Флаг -Ъчисло позволяет напечатать указанное количество копий документа, а флаг -h запрещает печать титульной страницы. Например, для того чтобы напечатать две копии файла thesis на принтере howler-lw, следует выполнить следующую команду. $ Ipr -Phowler-lw -#2 thesis Команда Ipq: просмотр очереди печати Рассматриваемая команда обычно вызывается с опцией -Р для выбора принтера, но есть и опция -1, позволяющая получить более детальный отчет. Выходные данные ко- манды выглядят примерно так. $ Ipq anchor-lj is ready and printing Rank Owner Job Files Total Size active garth 314 domain.2xl.ps 298778 bytes 1st kingery 286 standard input 17691 bytes 2nd evi 12 appendices 828 bytes Выходные строки всегда расположены по порядку: активное задание указывается первым, а последнее — в самом низу. Если первое задание обозначено как 1st, а не как active, значит, демон печати не запущен. Во втором столбце приводится имя пользователя, который послал задание на печать. В третьем столбце указывается идентификатор задания. Его необходимо знать, если за- дание должно обрабатываться с помощью команд Iprm или 1рс. В четвертой колонке перечислены файлы, посылаемые на печать (они были заданы в строке вызова коман- ды Ipr). Если данные для печати поступили через канал (как, например, первое и пятое задания в нашем примере), в этой колонке будет стоять запись standard input. В пя- той колонке указывается размер задания. Это значение соответствует размеру задания до его передачи программе-фильтру и не дает информации о том, сколько страниц займет задание и как долго оно будет печататься.
Глава 26. Печать 1101 Команда Iprm: удаление заданий на печать Самая распространенная форма команды Iprm — Iprm номер, где номер — это идентификатор задания согласно выходным данным команды Ipq. Команда Iprm пользователь удаляет все задания, принадлежащие указанному пользователю. Команда Iprm без аргументов уничтожает активное задание. Команда Iprm - (это дефис) удаляет все задания, посланные на печать текущим пользователем. Если это пользователь root, уничтожаются все задания, стоящие в очереди. Рядовой пользователь не может удалять чужие задания, в отличие от суперпользователя. В противоположность ожидаемому, команда Iprm делает ошибки молча, а при успешном завершении выдает результат. Если вы не видите результат вроде строк dfA621xinet dequeued cfA621xinet dequeued после запуска команды Iprm, значит, команда не была выполнена, т.е. она либо не смогла удалить задание, либо вы ее неправильно вызвали. Система печати записывает узлы, откуда поступило задание, и пользователя, кото- рый его послал. Эта информация учитывается командой Iprm. Таким образом, пользо- ватель garth@boulder не эквивалентен пользователю garth@sigi, и ни один из них не имеет права удалять задания другого. Попытка удалить с помощью команды Iprm активное задание может вызвать про- блемы на некоторых принтерах. Фильтрующий процесс, связанный с заданием, надле- жащим образом не уведомляется о его уничтожении, вследствие чего вся система “за- висает”, а фильтрующий процесс продолжает блокировать порт принтера, не допуская к нему другие процессы. Единственный способ исправить положение — определить идентификаторы филь- трующих процессов с помощью команды ps и вручную уничтожить их. Команда 1рс в такой ситуации бесполезна. В принципе, при зависании демона Ipd можно переза- грузить систему, но это радикальная мера. Прежде чем прибегнуть к ней, попробуйте уничтожить и перезапустить главный процесс Ipd, а также вручную удалить задания из буферного каталога с помощью команды rm. Команда 1рс: внесение административных изменений Команда 1рс выполняет следующие функции: • включение и выключение режима постановки заданий в очередь на конкретный принтер; • включение и выключение печати на конкретном принтере; • удаление всех заданий из очереди принтера; • перемещение задания в начало очереди; • запуск, останов и перезапуск демона Ipd; • получение информации о состоянии принтера. Пока система печати работает нормально, команда 1рс тоже функционирует кор- ректно. Но стоит “зависнуть” фильтру или появиться другой незначительной проблеме, как команда 1рс полностью теряет контроль и начинает просто “врать”: иногда она за- являет, что все исправлено, тогда как на самом деле ничего подобного не произошло. Приходится устранять проблемы вручную и даже отключать и включать питание, если печать выполняется очень плохо.
1102 Часть III. Разное Команду 1рс нельзя вызывать по сети; нужно зарегистрироваться на компьютере, к которому подключен принтер. Обычно команда используется в интерактивном режи- ме, хотя возможен и одноразовый ее вызов путем включения интерактивной директивы в командную строку. Команда 1рс понимает описанные ниже директивы. help [директива] Если директива help вводится без аргументов, то выдается краткий перечень всех поддерживаемых директив. При наличии аргумента выдается однострочное описание указанной директивы. enable принтер disable принтер Эти директивы включают и выключают буферизацию заданий для указанного прин- тера. Если постановка задания в очередь невозможна, пользователю сообщается об этом. Задания, уже находящиеся в очереди, не затрагиваются. Указанные операции реализу- ются путем установки или сброса бита, обозначающего право выполнения для группы, которой принадлежит файл /var/spool/lpd/wpwH/wep/lock. start принтер stop принтер Эти директивы включают и выключают режим печати на указанном принтере. После выполнения директивы stop постановка заданий в очередь продолжается, однако вывод их на печать будет приостановлен до тех пор, пока режим печати вновь не будет вклю- чен. Эти операции реализуются путем установки или сброса бита, обозначающего право выполнения для владельца файла /var/spool/Ipd/принтер/lock. Кроме того, опи- сываемые директивы запускают и уничтожают соответствующие демоны печати. После получения директивы stop сначала завершается активное задание и только затем вы- ключается режим печати. abort принтер Директива abort аналогична директиве stop, но при этом активное задание немед- ленно прерывается. После возобновления печати оно будет печататься заново. down принтер сообщение up принтер Эти директивы влияют и на буферизацию, и на печать. Они используются в слу- чае серьезного сбоя принтера, когда необходимо отключить его на длительное время. Параметр сообщение директивы down может иметь произвольную длину (в пределах одной строки) и не должен заключаться в кавычки. Указанное сообщение помещается в файл /var/spool/Ipd/принтер/status и выдается всем пользователям, которые вы- полняют команду Ipq. Как правило, сообщение содержит краткое разъяснение причи- ны отключения принтера и информацию о том, когда он вновь заработает. Директива up выполняет противоположные действия. clean принтер Эта директива удаляет из очереди на принтер все задания, включая активное. По- скольку демон обработки очереди все равно будет содержать ссылки на файлы текущего задания, Linux не удалит их по-настоящему, и текущее задание будет завершено. topq принтер номер_задания topq принтер имя_пользователя
Глава 26. Печать 1103 Первая директива topq перемещает в начало очереди указанное задание, а вторая — все задания, принадлежащие заданному пользователю. restart принтер Эта директива используется для перезапуска демона печати, который по каким-то причинам завершил работу. При отсутствии демона команда Ipq сообщает: “No daemon present”. На первый взгляд может показаться, что действие директивы restart анало- гично действию связки stop/start, но это не так: если продолжает работать фильтр печати, то с помощью директивы restart перезапустить демон нельзя. status принтер Эта директива сообщает следующие сведения об указанном принтере: включен ли режим буферизации, разрешена ли печать на нем, сколько заданий стоит в очереди и каково состояние демона данного принтера. Если в очереди нет заданий, будет выдано примерно следующее. lpc> status сег сег: queuing is enabled printing is enabled no entries no daemon present Факт отсутствия демона сам по себе не является причиной для беспокойства. Если очередь пуста, демоны печати прекращают работу и запускаются вновь главным процес- сом Ipd только при постановке в очередь нового задания. Файл /etc/printcap Этот файл является главной базой данных системы BSD. В ней содержится инфор- мация, необходимая для печати на локальных и удаленных принтерах. Задания на прин- тер можно передавать только в том случае, если он описан в этом файле. Каждая запись файла printcap начинается со списка имен принтера, разделенных символами вертикальной черты (|). Затем следует ряд конфигурационных параметров, разделенных двоеточиями. Каждый параметр имеет вид хх, хх=строка или хх# число, где хх — двухсимвольное имя параметра, а строка и число — присваиваемые ему значе- ния. Если никакого значения не присваивается, то переменная является булевой и ей соответствует значение “истина”. Допускаются пустые операторы: два двоеточия, стоящих рядом. Рекомендуется начи- нать и заканчивать каждую строку двоеточием, чтобы в будущем легче было вносить из- менения. Комментарии в файле /etc/printcap должны начинаться со знака #. Запись может занимать несколько строк, при этом строки, имеющие продолжение, должны заканчиваться обратной косой чертой. По соглашению, строки продолжения немного сдвигаются вправо по отношению к первой позиции. В качестве иллюстрации приведем небольшой пример, в котором определяется уда- ленный принтер, подключенный к компьютеру anchor. anchor-1j|сег|1-56|LaserJet 5M in cer lab:\ :lp=/var/spool/lpd/anchor-lj/.null:\ :sd=/var/spool/lpd/anchor-lj :\ :lf=/var/adm/lpd-errs:\ :rw:mx#0:rm=anchor:rp=anchor-lj:
1104 Часть III. Разное Из первой строки видно, что cer, anchor-lj, 1-56 и LaserJet 5М in cer lab — эквивалентные имена одного принтера. Принтерам можно присваивать сколько угодно имен, но обязательно следует указывать три формы основного имени: • сокращенную (три-четыре символа, которые удобно вводить, например сег); • полную (имя компьютера и тип принтера, например anchor-lj); • описательную (прочая информация, например LaserJet 5М in cer lab). Следующие три строки примера содержат конфигурационные параметры для име- ни устройства (1р), буферного каталога (sd) и журнала ошибок (If). Последняя стро- ка определяет режим чтения/записи при подключении к принтеру (rw), максимальный размер файла (шх; в данном случае не ограничен), имя удаленного компьютера (rm) и, наконец, имя удаленного принтера (гр). Задания, поступившие в систему печати и не адресованные конкретному принтеру, направляются на первый принтер, среди псевдонимов которого есть 1р. Псевдоним 1р нельзя использовать в качестве основного имени принтера, поскольку замена стандарт- ного принтера в этом случае будет затруднена. Если принтер с именем 1р отсутствует, используется первый принтер, описанный в файле printcap. Переменные файла printcap Своей гибкостью система BSD во многом обязана файлу printcap. Его структура хорошо описана на соответствующей man-странице, поэтому мы рассмотрим лишь са- мые полезные переменные этого файла (табл. 26.6). Таблица 26.6. Наиболее часто используемые переменные файла printcap sd строка Буферный каталог sd=/var/spool/lpd/howler-lw If строка Журнал ошибок lf=/var/log/lpd-errors 1Р строка Имя устройства lp=/dev/lpO af строка Файл учета af=/var/adm/lpr.acct rm строка Имя удаленного компьютера rm=beast.xor.com rp строка Имя удаленного принтера rp=howler-lw of строка Выходной фильтр of=/usr/libexec/lpr/lpf if строка Входной фильтр if=/usr/sbin/stylascii mx число Максимальный размер файла mx#0 sh булев Подавление печати титульных страниц sh Все записи файла printcap должны включать, как минимум, спецификацию буфер- ного каталога (sd), журнала ошибок (If) и устройства печати (1р). Если используется современный принтер, нужно включить режим чтения/записи (rw), чтобы принтер мог возвращать сообщения об ошибках и статусные сообщения. Переменная sd: буферный каталог У каждого принтера должен быть свой буферный каталог. Такие каталоги должны на- ходиться в одном родительском каталоге (обычно это /var/spool/lpd) и называться в соответствии с полными именами обслуживаемых ими принтеров (в нашем примере это anchor-lj). Буферный каталог необходим даже в том случае, когда описываемый прин-
Глава 26. Печать 1105 тер подключен к другому компьютеру. Задания находятся на локальном компьютере до тех пор, пока не будут переданы на печать. При инсталляции нового принтера необходимо создать буферный каталог вручную и назначить ему режим доступа 775. Владельцем этого каталога должен быть пользователь daemon, и группа тоже должна называться daemon. В буферном каталоге находятся два статусных файла: lock и status. Файл status содержит однострочное описание состояния принтера. Эту строку формирует демон Ipd; она отображается командой Ipq. Назначение файла lock заключается в том, чтобы избежать активизации нескольких экземпляров демона Ipd для одной очереди. Кроме того, в нем хранится информация об активном задании. В процессе управления очере- дью печати и печатью на принтере команда 1рс изменяет права доступа к файлу lock. Переменная If: журнал ошибок Сообщения, генерируемые фильтрами печати, помещаются в журнал ошибок. Один общий журнал может совместно использоваться всеми принтерами и располагаться где угодно. В каждой записи этого файла указывается имя соответствующего принтера. Журнальные файлы должны создаваться даже для удаленных принтеров, на случай если вдруг возникнет проблема со связью. Ш Подробнее о журнальных файлах рассказывалось в главе 11. Помните о том, что демон Ipd посылает сообщения об ошибках в систему Syslog. Не- которые фильтры направляют сообщения туда же, ничего не оставляя в журнальном файле. В случае возникновения проблем проверяйте оба источника информации. Переменная 1р: имя устройства Имя устройства должно назначаться только локальному принтеру. Обычно это имя файла в каталоге /dev, связанного с портом, к которому подключен принтер. Демон Ipd проверяет наличие блокировки файла, указанного в переменной 1р, что- бы определить, используется ли принтер. Даже если доступ к принтеру осуществляется через сетевое соединение, переменная 1р обязательно должна быть задана. Необходимо указать уникальный файл, который существует на локальном диске. Переменная rw: режим открытия устройства Если принтер возвращает информацию о своем состоянии через файл устрой- ства, должна быть определена булева переменная rw, запрашивающая открытие файла устройства в режиме чтения/записи. Этот режим используется для учета использования принтера и передачи статусных сообщений, поэтому некоторые фильтры требуют вклю- чения такого режима. Переменная af: файл учета Можно учитывать объем распечатываемой пользователями информации, просто ука- зав файл учета на компьютере, к которому принтер подключен физически. Записи вно- сятся в файл по завершении вывода задания на печать. Для обобщения учетной информации используется команда рас. По соглашению, учетные файлы принтеров называются /var/adm/принтер-acct. В них фиксируется количество страниц, напечатанных по каждому заданию (обычно не соответствующее действительности), имя компьютера, от которого было получено задание, а также имя владельца задания.
1106 Часть III. Разное Записи для учета генерируются входным фильтром печати. Не стоит доверять счет- чику страниц, если только фильтр не запрашивает показания счетчика до и после печати очередного задания. Переменная тх: ограничения на размеры файлов Эта переменная задает предельный объем данных, посылаемых на печать за раз. Это значение имеет смысл только для построчно печатающих принтеров. Небольшие файлы формата PostScript или PCL могут выводить на печать сотни страниц. В некоторых системах значение тх, устанавливаемое по умолчанию, отлично от нуля (О означает отсутствие ограничений), и для того чтобы иметь возможность выводить на печать большие задания, необходимо явно указать тх#0. Отметим, что тх является чис- ловой переменной, поэтому выражение тх=0 ошибочно. Переменные гт и гр: информация об удаленном доступе В большинстве случаев к принтеру необходимо обращаться не с одного, а с несколь- ких компьютеров. Даже если принтер является сетевым устройством, следует выбрать один компьютер и назначить его ответственным за связь с принтером. Все остальные компьютеры должны пересылать ему свои задания. Это позволяет демону Ipd создавать единую очередь заданий, что исключает случаи конфликтов между компьютерами за право управления принтером. Кроме того, если печать не работает, администратор будет знать, где искать причину. В файле printcap удаленного компьютера (не имеющего непосредственного соеди- нения с принтером) будет присутствовать запись, в которой указывается, куда направ- лять задания. Переменная rm определяет компьютер, на который должны посылаться задания, а переменная гр задает имя принтера на этом компьютере. Тот факт, что записи файла printcap для локальных и удаленных принтеров отли- чаются друг от друга, затрудняет совместное использование этого файла на разных ком- пьютерах. Выход заключается в том, чтобы сделать локальное и сетевое имена принтера разными, например howler-lw-local и howler-lw. В такой конфигурации принтер howler-lw будет “удаленным” даже для того компьютера, к которому он непосред- ственно подключен, что вполне допустимо. Однако при работе с командой 1рс придется указывать имя howler-lw-local. Переменные of и if: фильтры печати Фильтры выполняют ряд функций. Фильтр печати, заданный по умолчанию (обыч- но это /usr/lib/lpf), обрабатывает различные управляющие последовательности и, если требуется, генерирует записи для учета. Не существует единого стандарта фильтров. Каждый поставщик стремится разработать свой набор уникальных фильтров, что услож- няет задачу администраторам. Даже если используется лазерный или струйный принтер или даже старинное набор- ное устройство или плоттер, вместе с программным обеспечением принтера обязательно поставляются необходимые фильтры. Фильтры — это, как правило, просто сценарии оболочки, которые вызывают ряд программ преобразования данных. Фильтрующая программа должна принимать зада- ние из стандартного входного потока, преобразовывать его в формат, поддерживаемый устройством, и записывать результат в стандартный выходной поток. Если при вызове команды 1рг пользователь не указал фильтр, будет использовать- ся либо входной (переменная if), либо выходной (переменная of) фильтр. Термины
Глава 26. печать 1107 “входной/выходной фильтр” не должны вводить в заблуждение, так как оба фильтра по- сылают данные на принтер. Если в файле /etc/printcap присутствует переменная if, но нет переменной of, файл устройства будет открываться один раз для каждого задания, а программа-фильтр будет посылать одно задание на принтер и завершать работу. Если определен только выходной фильтр, демон Ipd однократно откроет файл устройства и вызовет программу-фильтр для обработки сразу всех заданий в очереди. Это полезно для тех устройств, соединение с которыми устанавливается очень долго, хотя такие устройства встречаются редко. Если определены оба фильтра, то выходному посылается титульная страница (этот фильтр вызывается даже в том случае, когда печать титульных страниц отключена), а входной обрабатывает остальную часть задания. Такая комбинация слишком сложна для непосвященных, поэтому лучше ее избегать. При написании новых фильтров ориентируйтесь на входные фильтры: их легче от- лаживать. Входные фильтры вызываются с многочисленными аргументами. Наиболее интересные из них — имя пользователя, имя компьютера и имя учетного файла. Если требуется организовать учет работы принтера, то входной фильтр должен генерировать записи для учета и добавлять их в конец учетного файла. Если необходимо ограничить доступ к принтеру (например, запретить печать пользователю guest на всех компьюте- рах), то это тоже должен делать входной фильтр, поскольку демон Ipd не имеет соот- ветствующих встроенных средств. В качестве иллюстрации рассмотрим очень простой пример входного фильтра. В дан- ном случае это фильтр PostScript-принтера, подключенного через последовательней порт к локальному компьютеру. #!/bin/csh -f /usr/local/bin/textps $* | /usr/local/bin/psreverse Поскольку принтер подключен последовательно, демон Ipd открывает файл устрой- ства в соответствующих режимах согласно указаниям файла /etc/printcap. Первой вызывается программа textps, которая анализирует входные данные и определяет их формат. Если это не PostScript (формат, поддерживаемый принтером), выполняется пре- образование. Программа textps принимает все аргументы фильтра ($*) и на основе этой информации генерирует записи для учета. Вторая программа, psreverse, изменяет порядок следования страниц на противоположный. Переменные файла printcap для устройств последовательного доступа Многие переменные и функции из файла printcap используются для работы с уста- ревшими принтерами, подключаемыми к последовательному порту. Если вы устанавли- ваете сетевой принтер, то найдите время и откройте руководство, найдите специфика- ции, касающиеся взаимодействия с принтером, и хорошенько напейтесь. Если же вы не пьете, то потратьте деньги, предусмотренные в смете для покупки алкоголя, на приоб- ретение нового принтера. Расширения файла printcap У системы BSD есть одна прекрасная особенность: если пользователь задает зна- чения нестандартных переменных файла printcap, они игнорируются. Часто, когда конкретному принтеру нужно больше сведений о конфигурации, чем имеется в базовой системе, можно определить в файле printcap дополнительные переменные, которые будут использоваться фильтрами печати.
1108 Часть III. Разное Например, выходному фильтру сетевого принтера может потребоваться сетевое имя этого устройства. В запись файла printcap для этого принтера можно добавить следую- щую установку. :nn=laser.Colorado.edu:\ Использование такого рода расширений позволяет хранить всю информацию о кон- фигурации принтера в одном, удобном для администратора месте. Если вы вдруг увиди- те в файле printcap переменные, не упомянутые на man-странице, поищите их значе- ния в документации к фильтрам принтера. В нашей сети описанным выше способом документируется физическое расположе- ние каждого принтера. Все принтеры имеют установки следующего ввда. :lo=Room 423, Engineering building:\ Мы используем сценарии, которые отслеживают наличие бумаги и запас тонера в принтерах и при возникновении проблем посылают группе технического обслуживания сообщения типа “Добавьте бумагу в принтер, находящийся в комнате 423 здания маши- ностроительного факультета”. 26.6. Долгая странная история Из предыдущих разделов становится ясно, насколько разнятся три основные систе- мы печати’ почему разработчикам стоит отказываться от старых систем и переходить на систему CUPS и почему ее разработчики приняли мудрое решение сохранить команды* напоминающие команды старых систем. Как же все это произошло? Приведем краткое изложение истории систем печати. История печати и появления систем печати Много лет тому назад были распространены игольчатые принтеры. Лазерные прин- теры встречались редко, да и стоили дорого. Для устройств вывода с высоким разрешу нием требовались специальные драйверы и программы для форматирования. ч В настоящее время лазерные принтеры часто подключены к сети TCP/IP через ин- терфейс Ethernet, Wi-Fi или Bluetooth, а не к единственному компьютеру с помощь^ последовательного или параллельного порта. На рынке дешевой продукции лазерные принтеры уступили место струйным. Цветными принтерами, которые когда-то счита- лись роскошью и обеспечивали качество печати, сравнимое с качеством цветной фото- графии и изображений на дисплеях, сегодня никого не удивишь. Найти черно-белый принтер скоро будет также сложно, как черно-белый телевизор, если к тому времени телевизоры вообще сохранятся. Специализированные принтеры, сканеры, копировальные машины и факсы по- степенно вытесняются многофункциональными устройствами, которые способны вы- полнять всю их работу. Некоторые из них уже сейчас могут считывать файлы непосред- ственно из микросхемы памяти на цифровой видеокамере. Прежние принтеры были примитивными, как и их механизмы буферизации. Пред- полагалось (по правилам), что компьютер, на котором вы работали, непосредственно подсоединен к принтеру. Конфигурирование принтера сводилось к ответу на вопрос: “Последовательный или параллельный интерфейс?” Это касалось и операционных си- стем, отличных от UNIX, хотя все они были специализированными: системы IBM зна- ли, как управлять принтерами IBM, компьютеры Apple знали, как управлять принтерами
Глава 26. Печать 1109 Apple, и т.д. Используемый компьютер часто должен был (по правилам) подключаться к принтеру напрямую. Настройка принтера заключалась в предоставлении ответов на вопросы типа “Принтер с последовательным интерфейсом или принтер с параллельным интерфейсом?” Первым коммерческим приложением для системы UNIX, проданным компанией INTERACTIVE Systems Corporation, была система подготовки документов для юридиче- ской фирмы. Основными компонентами этой системы были текстовый редактор, языки разметки (nroff/trof f) и программы для печати. Поскольку технологии становились все сложнее и сложнее, предпринимались по- пытки создать универсальный стандарт, но ни одна из них не имела должного успеха. Используемые протоколы устаревали и работали все хуже и хуже. Системы печати BSD и System V были разработаны довольно давно для игольчатых принтеров. Эти системы, переделанные и перегруженные в попытках догнать развиваю- щиеся технологии, так никогда и не смогли обеспечить поддержку современных прин- теров, и каждая новая функциональная возможность принтеров, например дуплексиро- вание (двусторонняя печать), требовала специальных доработок. Почему же существовали только две конкурирующие системы печати и почему так важны различия между ними? Встаньте посредине группы пользователей и воскликните: “Все, кто использует команду vi вместо emacs, — идиоты!”, а затем приходите и зада- вайте свои вопросы. Когда стали доступны сетевые принтеры, количество проблем только возросло. Первые сетевые системы печати были слишком уникальными и использовали ряд про- токолов для обеспечения связи между принтером и очередью печати, между клиентом и очередью печати и для осуществления обмена сетевым трафиком. Принтеры JetDirect компании HP часто принимали необработанные данные на порт 9100, как это делали принтеры старых разработчиков, принявших правила компании HP. Принтеры с внутренними демонами Ipd (реализациями протокола BSD) принимали задания на порту 515. Стиснув зубы, рабочая группа по решению проблем печати (Printing Working Group) из института IEFT создала протокол IPP (Internet Printing Protocol — протокол печати через Интернет) поверх протокола HTTP. Он не только оформлял взаимодействия в виде простых запросов GET и POST, но и позволял системам печати пользоваться преимуще- ствами стандартных, широко используемых технологий для аутентификации, контроля доступа и шифрования. Майкл Свит (Michael Sweet) и Эндрю Сенфт (Andrew Senft) из компании ESP (Easy Software Products) перенесли IPP в UNIX в виде реализации CUPS. Компания Apple адаптировала систему печати CUPS для операционной системы Mac OS X (и в 2007 году купила ее исходный код), после чего система CUPS стала самой полноценной реализа- цией протокола IPP на планете. Система CUPS является свободно распространяемым проектом с открытым кодом, в котором устранены проблемы, связанные со старыми си- стемами. Разнообразие принтеров Кроме разнообразия систем печати, администраторы столкнулись с разнообразием самих принтеров. Поскольку принтеры могут подключаться к компьютерам, пользователи отождест- вляют их с периферийными устройствами, такими как мышь и мониторы. Однако они
1110 Часть III. Разное представляют собой более сложные устройства. На самом деле они больше напоминают смартфоны или маршрутизаторы, но с движущимися частями. Одно время самым мощным компьютером, который когда-либо создавала компания Apple, был принтер Apple LaserWriter. В настоящее время ваш настольный компьютер, вероятно, мощнее принтера, но принтер остается компьютером. Он имеет центральный процессор, память, операционную систему, а иногда и диск. Сетевой принтер имеет свой сетевой стек и IP-адрес. Если у вас есть сетевой прин- тер, введите его адрес (или имя DNS) в ваш веб-браузер. Скорее всего, принтер обслу- живает несколько веб-страниц, с помощью которых вы можете управлять его аппарат- ными компонентами: принтер запускает свой собственный веб-сервер. Поскольку системные администраторы озабочены вопросами безопасности, вы, воз- можно, уже подумали: “Значит ли это, что принтер можно взломать или подвергнуть атаке на основе отказа в обслуживании?” Увы, да. Вопросы безопасности рассматрива- ются в разделе 26.12. Какая операционная система работает на вашем принтере? Как?! Вы не знаете? Ничего удивительного. Вы, вероятно, не можете найти нужную информацию, даже хо- рошенько покопавшись в документации. Операционные системы принтеров зависят от разработчиков, а иногда даже от модели. Средние и дорогие принтеры могут даже запу- скать операционные системы, производные от UNIX или Linux. Ваш принтер способен выполнять множество протоколов и принимать задания на разных языках, описывающие страницы и документы. Он может даже понимать и рас- печатывать такие форматы, как GIF, JPG и TIFF. Ваш принтер может быть черно-белым или цветным. Он может печатать страни- цы с разрешением от 150 до 2400 точек на дюйм (dpi — dots per inch) и даже страница с асимметричным разрешением, например 1200x600, т.е. 1200 dpi в одном направлении и 600 dpi в другом. Если вы управляете крупной сетью, то вам, вероятно, придется обслуживать несколь- ко моделей принтеров, созданных разными производителями, каждый из которых имеет разные возможности. Это значит, что программное обеспечение для принтеров на ваших компьютерах должно справляться с разнообразным (и часто неизвестным) аппаратный обеспечением с помощью набора протоколов. 26.7. Основные программы печати Печать — это не только буферизация и задания на печать. Даже на системе Ubuntu (которая использует систему печати CUPS) команда $ man -к . | egrep -i ’ ghostscript | cups | print (er | ing | * (job | queue | filter)) ’ отображает более сотни страниц из руководства, посвященных проблемам печати, — и это при поиске “на скорую руку”. (Кстати, изучая связанные с печатью команды, об* ратите внимание на то, что не все команды имеют отношение к печати. Например, apcupsd — это демон, который взаимодействует с устройством Universal Power Supplies, разработанным компанией АРС, и даже команда print не имеет никакого отношения £ печати.) О некоторых из этих команд и утилит стоит знать. В системах BSD и System V недостает многих функций, связанных с преобразования- ми форматов, необходимыми для управления современными принтерами. По этой при- чине многие разработчики, использующие эти системы, имеют хотя бы один набор ин- струментов, реализованных на основе их систем печати, для выполнения этих функций.
Глава 26. Печать 1111 Иногда эти инструменты включаются в операционную систему, но чаще они продаются как надстройки. Широко используются также свободно распространяемые пакеты, раз- работанные сторонними производителями. Утилита рг — это один из самых старых инструментов для печати. Она изменяет формат текстовых файлов так, чтобы он соответствовал формату печатной страницы. В частности, она разбивает содержащиеся в них данные на включающие по 66 строк страницы, добавляет верхние и нижние колонтитулы и, при необходимости, делает меж- ду строками двойной интервал. (Почему 66? Потому что именно столько строк помеща- лось на странице, которая распечатывалась старыми построчными принтерами.) Команда enscript, разработанная компанией Adobe, выполняет похожие преобра- зования с несколькими дополнительными “наворотами”; она тоже выводит данные в формате PostScript. Команда enscript, разработанная в рамках проекта GNU, пред- ставляет собой распространяемую с открытым исходным кодом версию этой коман- ды и имеет обратную совместимость с аналогичной командой Adobe; однако команда enscript предлагает ряд новых функциональных возможностей, в частности, чувстви- тельное к языку выделение, поддержка для различных форматов (размеров бумаги), за- грузка шрифтов и определяемые пользователем заголовки. Одним из главных преимуществ команды enscript была реализация возможности печати сразу двух страниц на одном листе (2-up printing). Те, кто до сих пор пользуется командой enscript из-за этой возможности, могут попробовать применить в системе CUPS команду 1рг -о number-up=2. Одной из самых сложных считается утилита Ghostscript, которую первоначально соз- дал Л. Питер Дойч (L. Peter Deutsch) для того, чтобы иметь возможность печатать до- кументы PostScript на недорогих принтерах PCL. Сегодня программа Ghostscript интер- претирует не только формат PostScript, но и формат PDF. Система CUPS использует ее в качестве фильтра, но программа Ghostscript также может создавать изображения стра- ниц для экрана как самостоятельно, так и при помощи внешних программ наподобие gv, GNOME Ghostview (ggv), или KDE KGhostView. Абсолютно все дистрибутивы Linux поставляются с бесплатной версией программы Ghostscript, подробнее о которой можно узнать на сайте ghostscipt. com. Коммерческая версия Ghostscript с поддержкой доступна на сайте компании Artifex Software. 26.8. Языки принтеров Задание на печать — это на самом деле компьютерная программа, написанная на специальном языке программирования. Они называются языками описания страниц или просто PDL-языками (PDL — Page Description Language). Страницы, кодируемые на языке PDL, могут быть гораздо меньше по размеру (ино- гда больше) и передаваться гораздо быстрее аналогичных необработанных изображений. Кроме того, PDL-описания также могут не зависеть ни от используемых устройств, ни от их разрешающей способности. Наиболее известными PDL-языками на сегодняшний день являются PostScript, PCL5, PCL6 (также называемый “PCL/XL” или “pxl”) и PDF. Многие принтеры спо- собны принимать входные данные на более чем одном языке. Каждый из этих языков кратко описывается в следующих разделах. Принтеры должны интерпретировать задания на этих языках и преобразовывать их в какой-нибудь понятный для используемого устройства обработки изображений формат. Поэтому принтеры содержат языковые интерпретаторы. Точно так же как и у языка С
1112 Часть III. Разное или Java, у этих языков имеется множество версий, и каждая из них работает по-своему. Почти все принтеры PostScript понимают PostScript Level 3, но если вы отправите про- грамму Level 3 на принтер, который понимает только Level 2, принтер, скорее всего, не сможет ее выполнить. Процесс преобразования PDL-описания (или, например, графических файлов) в растровые изображения страниц называется обработкой растровых изображений, а про- грамма, которая выполняет его, — процессором растровых изображений (Raster Image Processor) или просто RIP. Задания на печать можно копировать на компьютер и просматривать на экра- не. Централизованные интерпретаторы, которые позволяют это делать, такие как Ghostscript, описываются в разделе 26.11. В теории можно даже делать следующее: ко- пировать задания на компьютер и затем отправлять готовые (и значительно большие по размеру) растровые изображения на печать какому-нибудь “не очень разумному” устрой- ству печати. На самом деле именно так и работают многие принтеры GDI (Windows), да и в системе Linux этот подход тоже поддерживается до некоторой степени. PostScript Это самый распространенный из всех встречающихся на системах Linux языков семейства PDL. Первоначально PostScript был разработан компанией Adobe Systems, и многие принтеры до сих пор используют интерпретатор, требующий наличия лицен- зии от Adobe. Почти все программы компоновки страниц умеют генерировать данные на языке PostScript, а некоторые вообще работают только с такими данными. PostScript — этот полнофункциональный язык программирования. Почти все напи- санные на нем программы могут просматриваться с помощью текстового редактора или утилиты less. Эти программы отличаются обилием круглых и фигурных скобок, а также символов косой черты и часто начинаются символами %! PS. Хотя эти начальные сим- волы не являются обязательными в самом языке PostScript, PostScript-интерпретаторы и другие программы для печати часто ищут их, пытаясь распознать и классифицировать задания на печать. PCL Одной из альтернатив языка PostScript является разработанный компанией Hewlett- Packard язык PCL (Printer Control Language — язык управления принтерами). Его пони- мают не только принтеры производства Hewlett-Packard, но и принтеры многих других производителей; некоторые принтеры вообще умеют работать только с ним. В отличие от PostScript, который поддерживает все операции Тьюринга и является универсальным языком программирования, PCL просто сообщает принтерам, как им следует печатать страницы. Написанные на PCL задания на печать имеют бинарный, не доступный для понимания человека формат и обычно намного короче аналогичных заданий, написан- ных на языке PostScript. Приложения Linux редко генерируют выходные данные на язы- ке PCL напрямую, но фильтры могут преобразовывать PostScript в PCL. В отличие от языка PostScript, версии языка PCL разнятся лишь немного. Отличия небольшие, но достаточно значительные для того, чтобы вызвать раздражение. Задания, которые печатаются правильно на LaserJet 5si, могут печататься немного не так на LaserJet 5500 и наоборот. И это касается не только этой пары моделей; каждый PCL- принтер имеет свой диалект языка PCL со своими специальными командами, которые извлекают пользу из функциональных возможностей именно этого принтера.
Глава 26. Печать 1113 Например, если указать компьютеру, что используется принтер LaserJet 4500, ког- да на самом деле используется принтер LaserJet 4550, он может сгенерировать какие- нибудь PCL-команды, которые принтер LaserJet 4550 проигнорирует или неправильно интерпретирует. Также, если имеется какое-нибудь сохраненное, написанное на языке PCL задание на печать (скажем, чистый бланк на оформление покупки), а принтер, для которого оно было сгенерировано, заменяется на какой-нибудь более новый, не исклю- чено, что это задание придется генерировать заново. Еще хуже то, что компания HP (Hewlett-Packard) определила два совершенно не свя- занных между собой семейства языков — PCL5 (PLC5C означает “цветной”, PLC5E — “черно-белый”) и PCL6 (второе название — “PCL/XL”). Сегодня новые принтеры HP обычно имеют языковые интерпретаторы для обоих. PDF Разработанный компанией Adobe формат PDF (Portable Document Format — формат переносимых документов) генерируется программой Adobe Acrobat, а многие другие на- стольные средства для издательского дела, такие как OpenOffice, позволяют экспортиро- вать документы в этом формате. PDF-документы не зависят от платформы. Формат PDF очень часто используется для обмена электронными документами с возможностью последующего просмотра и пе- чати. Окончательный вариант текста данной книги, например, передавался на принтер именно в виде PDF-файла. PDF — это язык описания документов, а не просто язык описания страниц. Он по- зволяет описывать не только отдельные страницы, но и общую структуру документа: к каким главам относятся те или иные страницы, какие текстовые столбцы переходят в другие текстовые столбцы и т.д. Он также предлагает ряд различных мультимедийных возможностей для использования на экране. Некоторые принтеры интерпретируют PDF напрямую. Если ваш этого не делает, су- ществует масса программ-трансляторов и программ для просмотра PDF-файлов (среди них Ghostview, xpdf, kpdf, Evince и Acrobat Reader), которые позволяют преобразовать документы в какой-нибудь более универсальный формат (такой, как PostScript например). Ваша система печати может даже скрывать требование на выполнение преобразования от вас и автоматически преобразовывать PDF-документы перед их отправкой на принтер. XPS Стоит также упомянуть язык Paper Specification, разработанный компанией Microsoft. Он также называется XPS или OpenXPS. Этот язык не получил широкого распростране- ния даже в системах Windows. Системы UNIX и Linux слабо поддерживают этот язык, хотя компания Artifex уже создала интерпретатор языка XPS. Дистрибутивные пакеты системы Linux, несомненно, вскоре включат поддержку языка XPS, если он станет по- пулярным. Зачем это может быть нужно пользователям? Представьте, что вы — начальник от- дела маркетинга, просматривая веб-страницы на своем телефоне, вдруг обнаруживаете среди них одну, очень подходящую к теме вашей презентации, которую вы как раз соби- раетесь провести. Вы подходите к ближайшему поддерживающему Bluetooth принтеру и отправляете ему со своего телефона URL-адрес этой страницы. Дальше принтер делает все сам: загружает страницу из Интернета, визуализирует ее и печатает копии. Вы берете копии из лотка и спокойно направляетесь на свою презентацию.
1114 Часть III. Разное PJL PJL (Printer Job Language — язык заданий принтеров; разработан компанией Hewlett- Packard) — это не PDL-язык, а метаязык, который описывает задания принтеров. Мы рассказываем о нем здесь потому, что он будет встречаться в описаниях принтеров. Итак, PJL — это язык управления заданиями, который позволяет указывать, какой PDL-язык должен использоваться для задания, это задание типа дуплекс или симплекс, какой размер бумаги следует использовать и т.д. PJL-команды идут в начале задания, а PJL-операторы все начинаются с символов @PJL. @PJL SET COPIES=3 @PJL COMMENT FOO BAR MUMBLE @PJL SET DUPLEX=ON @PJL SET PAGEPROTECT=OFF @PJL ENTER LANGUAGE=PCL PJL обычно нормально распознается (или преднамеренно игнорируется) принтерами стороннего производства (не Hewlett-Packard), но в случае проблем при распечатке та- кого документа на стороннем принтере попробуйте удалить PJL при помощи текстового редактора и снова отправить задание на печать. Драйверы принтеров и как они обрабатывают PDL-языки А что если принтер поддерживает только некоторые из нужных языков? Что делать, если из Интернета загружен файл PostScript, а имеющийся принтер распознает только PCL5E? Как распечатать PDF-файл, если принтер не интерпретирует PDF напрямую? Один из вариантов — это преобразовать файл вручную. Дистрибутивы Linux постав- ляются со множеством утилит преобразования; практически всегда есть какой-нибудь способ превратить имеющийся документ в документ, который может быть распечатан на принтере. Браузеры, например, позволяют преобразовывать страницы HTML (или XHTML) в PostScript. OpenOffice позволяет преобразовывать файлы MS Word в формат PDF. Ghostscript позволяет преобразовывать PDF-файлы в формат PostScript, а уже из формата PostScript — в почти любой другой формат, включая PCL. Более простой вариант — позволить системе печати сделать все самой. Многие си- стемы имеют встроенные знания о том, какие преобразования должны выполняться, и могут выполнять их автоматически. Если необходимо определить, какой PDL-язык используется в файле, и сделать это по имени файла (например, food.pdf) невозможно, воспользуйтесь командой file (если только файл не начинается с ряда PJL-инструкций, потому что в таком случае ко- манда file вернет просто такое сообщение: “HP Printer Job Language data”, т.е. “данные на языке заданий принтеров”). Сохраните несколько заданий на печать в файлах, вместо того чтобы отправлять их на принтер, и увидите, как выглядит программа на одном из этих языков. Изучив файлы каждого из этих типов минуту или две в своем текстовом редакторе, вы поймете, на- сколько они разные. (Не выводите их прямо на экран при помощи команды cat, по- тому что только PostScript отображается в формате ASCII. Случайные бинарные данные только запутывают интерпретаторов терминалов.) PostScript % IPS-Adobe-3.О %%BoundingBox: 0 0 612 792 %%Pages: 1
Глава 26. Печать 1115 % ... % Draw a line around the polygons... pop pop pop dup 0 setgray 0 0 moveto dup 0 lineto 0.707106781 mul dup lineto closepath stroke PDF %PDF-1.3 %A.A.AA" 81 0 obj /Linearized 1 /0 83 /Н [ 915 494 ] /Т 125075 endobj xref 81 24 0000000016 00000 n A€<8f> ЛРЛ@АпА'<9е> endstream endobj PCL5 л[EA[&llo0olt016DA[&11XA[*r0FA[*v0nlOA[*p4300XA[%1BDT~,1TR0TD1SP1FT10,50 CF3,1LB.~;A[%1AA[*cl00GA[*v2TA[&a0PA[*p0XA[*p0YA[(10UA[(slpl2vsb4148TA[&10 EA[*p0YA[*ct7920YA[(10UA[(slpl2vsb4101TA[&a0PA[&10o66f0EA[9A[&a0PA[*p0XA[* p0YA[*p474YA[*pl41XA[(10UA[(10UA[(slpl2vsb4101TA[*p402YA[*pl86XA[*vOOA[*c9 00a4bl00g2PA[*vlOA[*p250YA[*vOOA[*c900a4bl00g2PA[*vlOA[*vOOA[*c4al56bl00g2 PA[*vlOA[*p251YA[*pl87XA[*vOOA[*c899al54bl0g2PA[*vlOA[*p346YA[*p256X PCL/XL A'XABXABA.<89>AA@A.<86>AACA.<8f>AAA@A.<88>AAAA.<82>HAA@A.(AA@A.%A A. cAAAPA OTimesNewRmnBdA. A. A...UUAOBA. A! Au ABA. A. o<8 5>A"A > ACAABA. Lk AA@A@A.A.dA€A:A@ 26.9. Файлы PPD При вызове демона Ipr для распечатки файла book.ps на цветном принтере Pollux, он может спросить, бумага какого размера должна использоваться для печати. Но подо- ждите, откуда система CUPS знает, что ей нужно указать своему клиенту, демону 1рг, что принтер Pollux может выполнять печать на бумаге размера А4? Откуда система CUPS знает, что он понимает язык PostScript, и что ей делать, если это не так? Где система CUPS находит информацию о том, что Pollux является цветным принтером? Если вы используете систему CUPS, то вся эта информация содержится в файле PPD (PostScript Printer Description — файл описания принтера на языке PostScript), который описывает атрибуты и возможности принтера, поддерживающего язык PostScript. Демон CUPS считывает PPD-файлы обслуживаемых им принтеров и передает информацию о них клиентам и, если необходимо, фильтрам. Файлы PPD изначально разрабатывались для мира Мас, но были быстро переняты системой Windows. Каждый новый принтер поставляется с файлом PPD от производи- теля. Драйверы принтеров Мас и Windows используют файл PPD для выяснения того,
1116 Часть III. Разное как отправлять на принтер задания на языке PostScript. Например, нет никакого смысла просить поддерживающий только одностороннюю печать черно-белый принтер, прода- ваемый в Америке, распечатать двухсторонний цветной документ на европейской бума- ге формата В4. Каждый принтер, поддерживающий язык PostScript, имеет свой собственный файл PPD, хотя его нелегко найти. Проверьте инсталляционный диск и веб-сайт разработчика. Файлы PPD — это просто текстовые файлы. Откройте один из них в текстовом ре- дакторе и посмотрите, какая информация в нем содержится. В сети файл PPD может быть даже удаленным, а пользователи системы CUPS могут получить информацию на соответствующем сервере CUPS. Система CUPS также использует файлы PPD для описания принтеров, у которых нет интерпретатора PostScript. Весь трюк заключается в одном дополнительном поле. $ grep cupsFilter /usг/share/cups/mode 1/pxlmono.ppd *cupsFilter: "application/vnd.cups-postscript 100 pstopxl" *cupsFilter: "application/vnd.cups-pdf 0 pstopxl" Для того чтобы увидеть, чем именно отличаются два типа принтеров, можно срав- нить два связанных друг с другом файла PPD (например, файл pxlmono .ppd и файл pxlcolor .ppd) при помощи команды diff. Если производитель принтера не предоставляет файл PPD — возможно, потому, что у принтера нет интерпретатора PostScript и производителя не волнует ничего, кроме си- стемы Windows, — следует зайти на сайт linuxprinting. org и поискать информацию в базе данных Foomatic. Не исключено, что принтер поддерживается проектом Gutenprint (gutenprint. sourceforge. net). Если доступны несколько или все перечисленные источники файлов PPD и пользователи хотят наилучшего возможного качества, нужно попробовать источник с пометкой “footmatic+gutenprint”. Если отыскать PPD-файл нигде не удается, тогда примите следующие советы. • Вероятно, следовало проверить принтер по базе данных на linuxprinting. org, прежде чем приобретать его. Даже если вы получили принтер по цене металлоло- ма, “свободно распространяемый” не всегда означает “бесплатный”. • Вполне вероятно, что существует какой-нибудь файл PPD, который позволит выполнять печать, хотя и не будет пользоваться преимуществами всех функцио- нальных возможностей принтера. Например, нам удалось использовать типичные драйверы HP на принтерах других компаний. Несмотря на то что система CUPS зависит от файлов PDS, старые системы печати не используют их. Для систем BSD и System V вы можете либо сами настроить механизм PostScript, либо смириться с тем, что получаете по умолчанию. 26.10. Форматы бумаги Пользователи хотят видеть информацию на бумаге. Бумага имеет размер и форму. Для того чтобы пользователи были довольны, следует знать основные факты о форматах бумаги. В США и Канаде самый распространенный формат бумаги Letter размером 8,5x11 дюймов. Некоторые дистрибутивы системы Linux (такие, как пакеты Knopix и SUSE) выпускаются в Европе, где никто даже не знает, что такое дюймы, в Англии знают, что такое дюймы, но не пользуются ими для измерения бумаги. В этих странах и в Японии самый распространенный формат бумаги А4, и все принтеры поставляются с лотками
Глава 26. Печать 1117 размера А4. Поэтому утилиты печати в некоторых дистрибутивах генерируют изображе- ния размером со страницу формата А4 по умолчанию. Лист формата А4 является удобным, потому что он иррационален (с математической точки зрения). Соотношение длины к ширине у листа формата А4 равняется ^2. Если сложить лист А4 пополам горизонтально, получится два листа с одинаковым соотноше- нием длины к ширине. Такой формат листа уже называется А5. Если сложить пополам лист формата А5, получится два листа формата А6. Если пойти в обратном направлении, лист формата АЗ будет по площади в два раза больше листа формата А4, но точно такой же формы, и т.д. Другими словами, можно изготавливать листы формата АО, которые по площади рав- няются одному квадратному метру, и при помощи бумагорезальной машины создавать из них листы необходимых размеров. Единственным распространенным в США форма- том бумаги, с которым можно проворачивать подобное, является формат Ledger (11x17 дюймов, также известный как “таблоид”): если сложить лист такого формата пополам, получится два листа формата Letter. Также еще существуют ISO-форматы серий В и С, которые сохраняют пропор- цию 1:^2, но имеют другую базовую площадь. Формат ВО составляет 1 метр в высоту, а СО имеет площадь 2 м2. Инженеры сразу же увидят, что стороны листа Вл представляют собой среднее геометрическое сторон Ал-7 и Ал, а стороны листа Сл — среднее геоме- трическое сторон Ал и Вл. Что это все означает? Формат Вл выглядит точно так же, как Ал, но он больше, а формат Сл представляет собой нечто среднее между ними двумя. Отчет на листе форма- та А4 прекрасно поместится в папку формата С4. Если сложить пополам письмо форма- та А4, оно превратится в письмо формата А5, которое легко войдет в конверт формата С5. А если его сложить еще раз, оно также легко войдет и в конверт формата С6. Немного усложняет дело то, что в Японии имеется своя серия форматов В, которые немного отличаются. Хоть они и имеют те же пропорции, что и ISO-листы, японский формат В4 представляет собой среднее арифметическое форматов АЗ и А4, что делает его немного больше ISO-формата В4. Японских форматов серии С не существует. Система ISO позволяет копировать две страницы формата В5 на одну страницу фор- мата В4, а также печатать сколько угодно уменьшенных изображений страниц на одном листе. На европейских копировальных машинах часто имеются кнопки, позволяющие уменьшать или увеличивать изображение на множитель 7L Если в системе установлена команда paperconf, можно использовать ее и сделать так, чтобы размеры разных известных форматов бумаги отображались в дюймах, санти- метрах или точках (каждая из которых составляет 1/72 дюйма). В табл. 26.7 перечислены некоторые наиболее распространенные случаи использования основных форматов бу- маги (для американцев). Таблица 26.7. Основные ISO-форматы бумаги Форматы "V — :—” Назначение АО, А1 АЗ, В4 А4 А5 В5.В6 А7 Объявления Газеты Универсальные документы Блокноты (примерно 5x8 дюймов) Книги, открытки, немецкая туалетная бумага Учетные карточки “3x5”
1118 Часть III. Разное Окончание табл. 26.7 Форматы ~ ' , ; ~ ,, , . ~ ? В7 Паспорта (даже в США паспорта имеют формат В7) А8 Визитные карточки В8 Игральные карты К сожалению, бумага формата А4 немного тоньше и длиннее (8,3 х 11,7 дюймов) бу- маги американского формата Letter. Печать документа формата А4 на бумаге формата Letter обычно заканчивается обрезанием таких его важных частей, как верхние колон- титулы, нижние колонтитулы и номера страниц. И наоборот, печать документа формата Letter на бумаге формата А4 приводит к усечению его сторон (хотя это и менее важно). Некоторые программные пакеты имеют собственные параметры по умолчанию для формата бумаги. Например, утилита enscript по проекту GNU обслуживается в Фин- ляндии человеком по имени Маркку Росси (Markku Rossi) и по умолчанию использует формат А4. Те, кто проживают в Америке и пользуются дистрибутивом, в котором ути- лита enscript не была скомпилирована с другим параметром по умолчанию, могут сде- лать только одно — взять исходный код и переконфигурировать его. Однако обычно про- ще поступить следующим образом: указать нужный формат бумаги в командной строке или конфигурационном файле GUI. Если документы печатаются с обрезанными конца- ми или сторонами, причиной, скорее всего, является несовместимость форматов бумаги. Иногда можно настроить используемый по умолчанию формат бумаги для мно- гих связанных с печатью задач при помощи команды paperconfig, переменной сре- ды PAPERSIZE или содержимого файла /etc/papersize. (Обратите внимание: paperconfig ! = paperconf.) Следует признать, что информация выводится не только на бумагу. Если в хлебный отдел крупного супермаркета принести цветную фотографию, то, возможно, кулинары смогут сделать для вас торт, на поверхности которого будет ваше изображение. Такие рисунки печатаются на специализированных растровых принтерах, использующих съе- добные чернила. Крупные прямоугольные торты называются “тортами на противне” (“sheet cake”) и тоже имеют стандартные размеры. К сожалению, мы вынуждены закон- чить наш разговор о форматах бумаги. Мы не можем говорить обо всем на свете ... 26.11. Практические советы Принтеры могут стать причиной беспокойства. Для того чтобы смягчить это бес- покойство, мы решили сформулировать несколько советов. Если все остальные устрой- ства отказали, радуйтесь тому, что вы, по крайней мере, не обязаны до сих пор возиться с игольчатыми принтерами, подсоединенными через последовательный порт RS-232. (Если это так, конечно.) Выбор принтера Если вы используете систему CUPS, то прежде чем покупать принтер или брать “бесплатный” принтер, который кто-то выкидывает, следует заглянуть в базу данных Foomatic на сайте linuxprinting.org (которая поддерживается и финансируется орга- низацией Linux Foundation) и проверить, насколько хорошо он поддерживается в систе- ме Linux. В этой базе данных все принтеры поделены на четыре категории, начиная от категории Paperweight (Пресс-папье) и заканчивая категорией Perfectly (Отлично); нам нужна категория категорию Perfectly.
Глава 26. Печать 1119 Все предпочитают принтеры со встроенным интерпретатором языка PostScript. Эти принтеры обычно имеют простую конфигурацию. Принтеры, не понимающие язык PostScript, тоже поддерживаются, но не так хоро- шо. Для того чтобы выполнять печать на этих принтерах, потребуется специальное про- граммное обеспечение, умеющее преобразовывать задания на печать в предпочитаемый принтером формат PDL или другой формат данных. Не исключено, что такое программ- ное обеспечение удастся найти в пакете CUPS или в одном из других упоминавшихся ранее в этой главе источников. Впрочем, система CUPS поддерживает все эти принтеры очень хорошо. Если вы не используете систему CUPS и работаете с принтером, поддерживающим язык PostScript, то вы, вероятно, в хорошей форме. Если вы работаете с принтером, не по- нимающим язык PostScript, попробуйте использовать программу Ghostscript, чтобы пре- образовать документы на языках Postscript и PDF в нечто понятное для вашего принтера. GDI-принтеры Система Windows по-прежнему имеет два преимущества, одним из которых являет- ся ее поддержка очень старых и дешевых принтеров. Дешевые принтеры, используемые на системах Windows, называются GDI-принтерами или WinPrinter. Такие принтеры об- ладают очень незначительным количеством встроенных логических возможностей и не имеют никаких интерпретаторов для языка PDL. Они ожидают, что растеризация будет выполняться на обслуживающем их компьютере. Часть информации, необходимой для взаимодействия с GDI-принтерами, скрыта в специальном, запатентованном коде Windows. Такая секретность затрудняет разработку поддержки для таких устройств в системе Linux, но сообщество сторонников программ- ного обеспечения с открытым кодом продемонстрировало удивительную способность к воспроизведению структурной схемы и алгоритма работы. Система CUPS поддержи- вает многие принтеры WinPrinter. Вторым преимуществом системы Windows является ее поддержка новейших принте- ров. Точно так же как новые видео- и аудиокарты, новые принтеры сначала выпускаются с драйверами для системы Windows, которые полностью поддерживают все задокумен- тированные и не задокументированные функциональные возможности данной модели. Драйверы для системы Linux обычно выходят с некоторым опозданием. В случае по- купки нового модного принтера с расширенными возможностями, не исключено, что некоторое время им можно будет пользоваться только из Windows. Старые системы UNIX, которые обычно не поддерживают систему CUPS, име- ют с этими принтерами еще больше проблем. Если вы хотите использовать принтер WinPrinter в старой системе UNIX, лучше купите недорогие дистрибутивы систем Мас, Linux или Windows. Вы всегда можете совместно использовать принтер в сети. Двусторонняя печать Дуплексор — это компонент аппаратного обеспечения, который позволяет принте- ру выполнять печать на обеих сторонах страницы. У некоторых принтеров он входит в комплектацию, а у некоторых идет как дополнение. Это удобно, потому что экономит и бумагу, и место. Если у вас нет принтера с возможностью двусторонней печати или желания его ку- пить, можно поступить следующим образом: распечатать на листах бумаги сначала только нечетные страницы, а затем перевернуть листы и распечатать только четные страницы.
1120 Часть III. Разное Однако сначала следует поэкспериментировать с двусторонним документом, чтобы уз- нать, как нужно правильно переворачивать листы бумаги, и только потом давать соот- ветствующие инструкции принтеру. Многие программы печати могут помочь с этим процессом; например, в программе Ghostview (gv) есть пиктограммы, позволяющие отмечать подлежащие печати страницы (четные или нечетные), и опция, позволяющая распечатывать только отмеченные стра- ницы. Версии команд 1р и 1рг в системе CUPS позволяют делать то же самое при по- мощи опций -о page-set=odd и -о page-set=even. В случае частого использования эти опции можно сохранить в “экземпляре принтера” (см. раздел 26.2). Некоторые, особенно недорогие лазерные принтеры разрабатывались без возмож- ности двусторонней печати. Их производители часто предупреждают о непоправимом ущербе, которым может закончиться для принтера печать на обеих сторонах страницы. Мы никогда не слыхали о том, что такой ущерб действительно имел место, но вряд ли производители стали бы предупреждать нас о нем просто так. Не так ли? Другие аксессуары для принтера Помимо дуплексоров, многие принтеры позволяют добавлять память, дополнитель- ные лотки для бумаги, жесткие диски и другие аксессуары. Эти дополнительные компо- ненты могут давать возможность распечатывать задания, печать которых в противном случае была бы невозможна, или просто печатать задания более эффективно. При на- личии проблем с отправкой заданий на печать следует просмотреть журналы ошибок и выяснить, не поможет ли справиться с этой проблемой увеличение памяти. О журналах ошибок подробнее рассказывается в разделе 26.12. Принтеры с последовательным и параллельным интерфейсом Если принтер подключается прямо к компьютеру через кабель, значит, он использует для соединения либо последовательный, либо параллельный порт. Несмотря на то что стандарт параллельных интерфейсов немного устарел, он все- таки подразумевает использование портов, конфигурирование которых требует мини- мальных усилий. Те, кто приобрел принтер с параллельным интерфейсом, скорее всего, смогут установить его без проблем — конечно, если у них на компьютере предусмотрен параллельный порт. Последовательным портом на оборудовании Мас может служить порт FireWire, но в мире Linux в роли такого порта обычно выступает порт USB. Узнать больше об этом можно, заглянув в базу данных о поддерживаемых USB-устройствах на сайте linuxprinting.org. Вероятность приобретения давно устаревшего принтера, подключаемого через после- довательный порт RS-232, очень низка. Но если такое все-таки случилось, чтобы скон- фигурировать его, скорее всего, придется приложить массу дополнительных усилий. Для того чтобы очередь печати могла нормально работать с принтером, ей необходимо знать скорость двоичной передачи (baud rate) и другие требующиеся для взаимодействия через последовательный порт параметры. Указать все эти параметры можно только в иденти- фикаторе устройства URL (Этот процесс подробно описан в руководстве CUPS Software Administrators Manual, размещенном в Интернете.) Пожалуй, легче будет купить другой принтер, чем вычислять точно все параметры, требующиеся для того, чтобы заставить работать данный принтер с последовательным интерфейсом.
Глава 26. Печать 1121 Сетевые принтеры Многие принтеры имеют полнофункциональные сетевые интерфейсы, которые по- зволяют им находиться прямо в сети и принимать задания через одну и более сетей или протоколов печати. На принтеры, подключенные к сети, данные могут отправляться го- раздо быстрее, чем на принтеры, подключенные к последовательному или параллельно- му порту. Лазерные принтеры обычно используются как сетевые. Струйные принтеры реже используются в таком качестве. Если вы хотите узнать, есть ли в вашем распоряжении сетевой принтер, загляните в порт Ethernet или посмотрите на беспроводную антенну на задней панели. Другие советы Некоторые проблемы администрирования не связаны с устройством системы печати. Большей частью они возникают из-за того, что принтеры представляют собой ненадеж- ные механические устройства, которые порождают затраты при каждом их использова- нии. Используйте титульные и завершающие страницы только в случае необходимости Система печати может предварять каждое задание страницей с названием задания и сведениями о том, кто направил его на печать (header page), а также дополнять задание завершающей страницей (trailer page). Такие страницы могут оказаться полезными при организации совместной печати на одном принтере, хотя, в основном, это пустая трата времени и бумаги. Если титульные и завершающие страницы не нужны, запретите их печать в системе BSD, установив булеву переменную sh. В системе System V не используйте сценарий, генерирующий такие страницы. В системе CUPS можно вообще отключить печать титульных и завершающих стра- ниц с помощью графического пользовательского интерфейса или утилиты Ipadmin, а затем включить ее для отдельных заданий. $ Ipr -о -job-sheets=confidential gilly.ps Система CUPS позволяет включать печать титульных страниц для отдельных пользо- вателей с помощью утилиты Ipoptions. Можно также создать экземпляр принтера, ко- торый будет добавлять титульные страницы в задание (см. раздел 26.2). Система CUPS также позволяет создавать индивидуальную заголовочную страницу, копируя ее из ка- талога /usr/share/cups/banners и модифицируя. Сохраните новую страницу среди остальных, присвоив ей новое имя. "Распушивайте" листы Принтеры загружают бумагу по одному листу из лотка за один раз. Иногда листы склеиваются, и принтер втягивает два и даже больше листов. Вероятность этой непри- ятности можно снизить, просто “распушив” стопку бумаги перед тем, как ее загрузить. Держа стопку бумаги за один конец, согните ее и проведите большим пальцем поперек среза, как будто вы тасуете игральные карты. Это просто, бесплатно и полезно. Некоторые струйные принтеры реагируют на то, как листы положены в лоток. В их настройках должна быть указана предпочтительная ориентация.
1122 Часть III. Разное Обеспечьте утилизацию отходов Все виды компьютерной бумаги пригодны к переработке. Коробки, в которых по- ставляется бумага, могут быть использованы в качестве контейнеров для ненужных ли- стов. Пометьте коробки, чтобы в них не сбрасывали посторонние предметы (скрепки, скобы скоросшивателей, газеты). Выполняйте предварительный просмотр Часто после распечатки документа обнаруживается незначительная ошибка в форма- тировании — и приходится все перепечатывать. Ненужного расхода бумаги можно из- бежать, если инсталлировать специальные программы, позволяющие увидеть готовый к печати документ на экране монитора. Просто иметь средства предварительного просмотра недостаточно. Ваши пользовате- ли должны уметь их применять. Впрочем, иногда они не хотят этому учиться. Для того чтобы стимулировать их к этому, введите учет, чтобы выяснить, сколько раз перепечаты- вался один и тот же документ. Это сразу позволит выявить пользователя, который пре- небрегает предварительным просмотром. Средства для предварительного просмотра встроены во многие современные редакто- ры WYSIWYG, браузеры и системы печати. Для документов другого типа следует исполь- зовать иные возможности. Например, для просмотра документов в форматах PostScripr и PDF можно использовать программу Ghostview (gv). Для системы rof f направляй- те вывод в программу Ghostview, а для языка ТеХ применяйте утилиты xdvi, kdvi или Evince. Покупайте дешевые принтеры Современный уровень технологий печати довольно высокий, поэтому на высокопро- изводительные устройства с надежной механикой не приходится тратить много средств. Не гоняйтесь за дорогими принтерами “для рабочих групп”, если в этом нет острой необходимости. Разницы в качестве печати никакой, а по производительности и надеж- ности “персональный” принтер среднего уровня во многих случаях ничуть не уступает принтеру старшей модели, не говоря уже о том, что он на несколько килограммов лег- че. Принтера со скоростью печати 10 страниц в минуту более чем достаточно для пяти штатных клерков или редакторов, так что для группы из 25 сотрудников выгоднее ку- пить пять принтеров за 150 долл., чем один — за 750 долл. Даже если вы предпочитаете продукцию ведущих компаний, помните, что ни один производитель не является совершенным. У нас был отличный опыт эксплуатации принтеров HP. Это надежные устройства, и компания HP очень агрессивно поддер- живает их работу в системах Linux и CUPS. И тем не менее некоторые принтеры HP оказались просто катастрофой. Прежде чем совершать покупку, проконсультируйтесь в Интернете. При этом следует главным преимуществом считать дешевизну: ошибку стои- мостью 150 долл, пережить легче, чем ошибку стоимостью 750 долл. Держите под рукой запасной картридж Бледные или белые области на странице, напечатанной на лазерном принтере, озна- чают, что в картридже заканчивается тонер. Купите запасной картридж заранее. В труд- ную минуту можно просто вынуть картридж из принтера и аккуратно потрясти, чтобы перераспределить оставшийся тонер. Этого часто оказывается достаточно, чтобы напе- чатать еще несколько сотен страниц.
Глава 26. Печать 1123 Полосы и пятна, вероятно, свидетельствуют о том, что вы должны почистить прин- тер. Проверьте, есть ли у принтера “режим очистки”. Если нет или это не помогло, про- читайте инструкции производителя. Большинство картриджей имеет барабан, поэтому попытайтесь поменять картриджи, чтобы узнать, в чем проблема: в принтере или кар- тридже? Если и после этого полосы не исчезнут, отправляйтесь в сервисный центр. Производители принтеров пытаются предотвратить повторное использование вос- становленных картриджей и картриджей со вторичного рынка. Для этого они предпри- нимают разные меры. Многие устройства используют “именные” расходные материа- лы, которые распознаются принтером электронным или физическим способом. Даже если два принтера выглядят одинаковыми, например Xerox Phaser 6120 и Konica-Minolta Magicolor 2450, это не значит, что один и тот же картридж можно использовать на обоих принтерах. Иногда приходится разбирать принтер, чтобы приспособить картридж одного произ- водителя к принтеру другого производителя. Обычно это сопровождается “разведением грязи”. Если вы просыпали тонер, втяните его пылесосом как можно быстрее и вымойте это место холодной водой. Вопреки расхожему мнению, тонер лазерного принтера не токсичен, но он состоит из очень мелких частиц и его не следует вдыхать. Заменив картридж, сохраните коробку и чехол от нового картриджа, чтобы отчитать- ся. Затем найдите компанию, которая заберет у вас старый картридж. Использование “именных” расходных материалов стимулировало быстрый рост ком- паний (“открывай и насыпай”), заново наполняющих старые картриджи за долю цены нового картриджа. Компании, восстанавливающие картриджи, также используют прин- цип “открывай и насыпай”, поэтому вы можете восстановить старый картридж и одно- временно заменить его. Мнения о качестве и сроках службы восстановленных картриджей сильно разнятся. Одна из компаний, известных нам, не желает восстанавливать цветные картриджи или продавать их аналоги, потому что, по их мнению, экономия в этом случае будет меньше, чем стоимость обслуживания принтеров, использующих восстановленные картриджи. Помните о стоимости печати одной страницы Самые дешевые принтеры продаются по цене их производства. Производители по- лучают прибыль за счет непропорционально дорогих расходных материалов. На момент написания книги поиск “на скорую руку” выявил, что компания Amazon продает лазер- ный принтер за 80 долл., а картридж к нему — за 65 долл. Вы можете купить дешевый струйный принтер в магазине Wall-Mart за 50 долл., но вскоре вы будете вынуждены ку- пить набор запасных картриджей, который стоит больше принтера.2 Эмпирическое правило гласит: струйный принтер является дешевым, пока вы на нем не печатаете. Лазерный принтер имеет более высокую начальную цену, но его расходные материалы дешевле и служат дольше. Полноцветная страница, напечатанная на струй- ном принтере, может стоить в 20—50 раз дороже, чем аналогичная страница, напечатан- ная на лазерном принтере. Кроме того, для струйного принтера требуется специальная бумага, и он работает медленнее, чем лазерный. Чернильные картриджи быстро опусто- шаются и часто выходят из строя. Чернила часто расплываются, поэтому не используйте струйный принтер для печати кулинарной книги, которая будет использоваться на кух- не. С другой стороны, на струйном принтере теперь можно распечатывать фотографии, 2 Впрочем, помните, что многие недорогие принтеры поставляются с “родным” картриджем, который стоит меньше, чем запасной картридж.
1124 Часть III. Разное качество которых не уступает специальной фотолаборатории. Лазерные цветные фото- графии? Довольно хороши, но сравнивать их нельзя. Все принтеры имеют уязвимые механические детали. Дешевые принтеры ломаются быстрее. Иначе говоря, все эти моменты являются предметом компромиссов. Если вы приоб- ретаете принтер для персональных нужд и будете использовать его не очень интенсив- но, например распечатывать веб-страницу один-два раза в день или несколько катушек с фотопленкой раз в месяц, то дешевый универсальный струйный принтер — прекрас- ный выбор. Следующий раз, когда вы отправитесь покупать принтер, оцените, как долго, на- сколько интенсивно и для каких целей вы будете его использовать. Вычислите долго- срочную стоимость печати одной страницы для каждого принтера, который вы хотели бы купить. Спросите местную компанию, заправляющую картриджи, восстанавливает ли она картриджи для данного принтера и по какой цене. Организуйте учет использования принтера Учет использования принтера даст вам четкое представление о затраченных ресурсах. В сетях среднего и большого размера рассматривайте как вариант организацию учета ресурсов принтера, даже если вы не собираетесь взимать плату за печать. На скорость печати заданий это почти никак не влияет, зато позволяет в любой момент выяснить, кто и как часто пользуется принтером. Информация об источниках заданий на печать очень полезна при выборе мест для установки новых принтеров. Защищайте принтеры Большинство современных сетевых принтеров допускает дистанционное управле- ние в том или ином виде. Даже если вы не используете систему CUPS и пароль IPP, возможность такого управления очень удобна для системных администраторов, так каК они могут выполнять конфигурирование с помощью веб-браузера через протокол HTTP, или, возможно, SNMP. С помощью удаленного интерфейса администратор может задать по сети IP-адрес принтера, стандартный шлюз, сервер Syslog, групповое имя (пароль^ SNMP, параметры протокола и, что самое важное, пароль доступа. По умолчанию большинство принтеров, допускающих дистанционное администри- рование, не защищено, и пароль для доступа к ним следует задавать в процессе инстал- ляции (или строку имени и пароля в протоколе SNMP). Прочтите руководство по ин- сталляции, предоставленное производителем принтера, чтобы узнать, как это сделать в вашем конкретном случае. Графические средства администрирования, такие как интерфейс браузера CUPS, все чаще скрывают от пользователя варианты разработчиков. Ожидается, что эта тенденция будет продолжаться. 26.12. Советы по выявлению проблем Принтеры сочетают все слабости механического устройства со странностями внеш- ней операционной системы. Они (и программное обеспечение, которое ими управляет) обожают создавать проблемы для вас и ваших пользователей. Рассмотрим несколько со- ветов по борьбе с враждебными принтерами.
Глава 26. Печать 1125 Повторный запуск демона печати Никогда не следует забывать перезапускать демоны после внесения изменений в конфигурационный файл. Перезапустить демона cupsd можно любым способом, который операционная си- стема предусматривает для повторного запуска демонов, — выполнить команду /etc/ init.d/cups restart или аналогичную команду. Теоретически, можно также отпра- вить демону cupsd сигнал HUP, но похоже, что на системах SUSE это приводит к уни- чтожению демона. Кроме того, демона cupsd можно перезапустить с помощью графического интерфей- са системы CUPS или посредством другого графического интерфейса, например при- ложения KDE Print Manager. В других системах существуют свои специальные методы для перезагрузки системы печати; часто они зависят от разработчиков. Например, в системе AIX используется сле- дующая последовательность команд. $ sudo stopsrc -s Ipd $ sudo startsrc -s Ipd Вы так и думали, не так ли? Регистрационные журналы Система CUPS поддерживает три регистрационных журнала: журнал страниц, жур- нал доступа и журнал ошибок. Журнал страниц представляет собой просто список напе- чатанных страниц. Журнал доступа и журнал ошибок похожи на аналогичные журналы в веб-сервере Apache. И в этом нет ничего удивительного, потому что сервер CUPS — это веб-сервер. Уровень регистрации и путь к журнальным файлам задается в файле cupsd. conf. Обычно журнальные файлы сохраняются в каталоге /var/log. Ниже приведен фрагмент из журнального файла, охватывающий одно задание на пе- чать. I I I I I [26/JU1/2006:18:59:08 -0600] [26/Jul/2006:18:59:08 -0600] [26/Jul/2006:18:59:08 -0600] [26/Jul/2006:18:59:08 -0600] (PID 19985) for job 24. [26/Jul/2006:18:59:08 -0600] (PID 19986) for job 24. Adding start banner page "none" to job 24. Adding end banner page "none" to job 24. Job 24 queued on ' Phaser_6120 ’ by ’jsh'. Started filter usr/libexec/cups/filter/pstops Started backend /usr/libexec/cups/backend/usb Проблемы с прямой печатью Удостовериться в наличии физического соединения с локальным принтером можно, напрямую выполнив внутреннюю программу принтера. Например, вот что мы получим, если выполним внутреннюю программу принтера, который подключается через USB- кабель. $ /usr/lib/cups/backend/usb direct usb "Unknown" "USB Printer (usb)" direct usb://XEROX/Phaser%206120?serial=YGG210547 "XEROX Phaser 6120" "Phaser 6120"
1126 Часть III. Разное Если USB-кабель принтера Phaser 6120 отключится, строка для этого принтера ис- чезнет из вывода внутренней программы. $ /usr/lib/cups/backend/usb direct usb "Unknown" "USB Printer (usb)" Проблемы с печатью в сети Прежде чем начинать искать проблему печати в сети, проверьте, выполняется ли пе- чать с компьютера, к которому непосредственно подключен принтер. Ваша “проблема печати в сети” может оказаться просто “проблемой печати”. Также проверьте, все ли в порядке с сетью. Далее попробуйте установить соединение с обслуживающим данный принтер демо- ном cupsd при помощи браузера (имя_узла:631) или команды telnet (telnet имя__ узла 631). Сетевой демон Ipd распечатывает задания, которые он доставил в ТСР-порт 515. Если вы не хотите печатать задания от посторонних лиц, ваш брандмауэр должен бло- кировать весь трафик, поступающий на этот порт из Интернета. Для проверки соедине- ния с удаленным сервером Ipd примените команду telnet к порту 515 на этом сервере. Если можно установить соединение, то, по крайней мере, проверьте работоспособность сети и факт запуска демона Ipd на сервере. В случае возникновения проблем при настройке соединения с сетевым принтером, помните о том, что на клиентском компьютере у вас должна быть очередь для заданий, способ для решения того, куда отправлять задание, и метод отправки задания на ком- пьютер, который отвечает за обслуживание очереди на печать. На сервере печати у вас должно быть место для постановки задания в очередь, соответствующие права доступа для разрешения печати задания и способ для вывода данных на устройство. Для того чтобы выяснить причину этих проблем, возможно, придется заглянуть в не- сколько мест. • Системные журнальные файлы на клиентском компьютере (в случае проблем с распознаванием имен и правами доступа). • Системные журнальные файлы на сервере печати (в случае проблем с правами до- ступа). • Журнальные файлы на клиентском компьютере (если отсутствуют какие-то филь- тры или каталоги или если имеются неизвестные принтеры и т.д.). • Журнальные файлы демона на сервере печати (в случае появления сообщений о неправильных именах устройств, неправильных форматах и т.д.). • Журнальные файлы принтера на компьютере, получившем задание (в случае по- явления ошибок при передаче задания), как указано в переменной If в файле /etc/printcap/ в системе BSD. • Журнальные файлы принтера на компьютере, отправившем задание (в случае по- явления сообщений о неправильной предварительной обработке или ошибочной постановке задания в очередь). Проверьте по системной документации, где находятся журнальные файлы. Путь к журнальным файлам системы указан в файле /etc/syslog. conf, а путь к журнальным файлам CUPS — в файле /etc/cups/cupsd.conf.
Глава 26. Печать 1127 Проблемы с распространением Любая программа содержит ошибки.3 В операционной системе Ubuntu, например, система CUPS обновляется каждый месяц. Одни проблемы бывают хуже других, а дру- гие имеют последствия для безопасности. Например, на более старых версиях Red Hat Enterprise Linux система CUPS постоян- но “взламывается”. Наиболее правильным решением в таких случаях является обновле- ние операционной системы, но если нет возможности установить более новую версию, можно попробовать установить текущую версию системы CUPS. 26.13. Рекомендуемая литература Каждый дистрибутивный пакет и графический пользовательский интерфейс сопро- вождаются специальной документацией, посвященной системе печати. В состав па- кета KDE входят справочные страницы с описанием команд KDEPrint и руководство KDEPrint Handbook. Дополнительную информацию можно найти на сайте printing. kde.org. Все эти источники содержат полезные ссылки на другую документацию. (Даже если у вас нет KDE, в документации по KDE вы сможете найти неплохую общую информацию о CUPS.) Система CUPS поставляется с обширной документацией в формате HTML. Для того чтобы получить к ней доступ, необходимо соединиться с сервером CUPS и щелкнуть на справочной ссылке. Разумеется это не поможет, ели у вас нет связи с этим серве- ром. Впрочем, на вашем компьютере эта документация инсталлируется в каталог /usr /share/doс/cups в форматах HTML и PDE Если ее там нет, обратитесь к менеджеру, поставившему дистрибутивный пакет, или на сайт cups. org. В форуме cups. org можно задавать вопросы, но сначала следует попробовать разо- браться во всем самому и только потом ставить вопросы, причем делать это вежливой Если вы работаете в системе Linux, обратитесь на сайт linuxprinting.org. Он представляет собой обширную коллекцию различных источников информации по пе- чати в системе Linux и является прекрасным местом для поиска ответов на вопросы. На этом сайте также выложено замечательное учебное пособие по CUPS, в котором имеет- ся раздел, посвященный выявлению и устранению проблем. Хорошие обзоры системы CUPS размещены на сайтах Википедии и SUSE. Обзор си- стемы CUPS на сайте SUSE находится по адресу: en. opensuse. org/SDB: CUPS_in__a_ Nutshell. Если вы хотите иметь напечатанное справочное пособие по системе CUPS, то мы ре- комендуем авторитетное руководство по системе CUPS, можно сказать, из первых рук. Sweet Michael R. CUPS: Common UNIX Printing System. Indianaposis, Indiana. Sams Publishing, 2001. 26.14. Упражнения 26.1. Найдите кого-нибудь, кто не разбирается в компьютерах, и научите его распеча- тывать документ PDF в вашей системе. Не испытали ли вы сложности на каком- нибудь этапе? Как облегчить этот процесс для остальных пользователей? 3 И любую программу можно сократить. Следовательно, продолжая эту мысль, можно сказать, что любую программу можно сократить до одной строки, которая не работает.
Часть III. Разное 26.2. Используя веб-браузер, зайдите на ваш сетевой принтер. Если вы работаете с си- стемой CUPS, посетите ее веб-сервер с помощью того же самого браузера. Что ме- шает вам внести изменения в настройки принтеров на этом сервере? 26.3. Зайдите в реальный или виртуальный магазин и выберите три цветных лазерных принтера, которые можно купить дешевле 400 долл. Если вы должны купить прин- тер завтра, то какой бы вы выбрали и почему? Обратитесь за информацией к базе данных на сайте linuxprinting.org. 26.4. Представьте, что вам поручили разработать системное программное обеспечение, которое должно запускаться внутри лазерного принтера, предназначенного для обеспечения работы корпоративных рабочих групп. Какой дистрибутивный пакет вы выберете? Какое дополнительное программное обеспечение вам потребуется? Как учесть потребности клиентов систем Windows и Mac Os X? (Подсказка: про- верьте дистрибутивные пакеты для системы Linux, предназначенные для “встро- енных систем”.)
Глава 27 Центры обработки данных Надежность службы зависит от надежности центра обработки данных, который ее под- держивает. Для специалистов, имеющих практический опыт, это очевидно. Однако высше- му руководству центры обработки данных кажутся чем-то далеким и почти иллюзорным. С появлением настольных рабочих станций и уходом с арены больших железных ящиков, набитых электроникой, показалось, что дни центров обработки данных со- чтены. На самом деле в настоящее время потребность в центрах обработки данных еще выше, чем прежде. Они состоят из чрезвычайно важных серверов (часто работающих под управлением операционных систем UNIX или Linux), поставляющих информацию всем желающим получать оперативные данные и интернет-приложения. Некоторые аспекты центров обработки данных — например, их физическая орга- низация, энергоснабжение и охлаждение — традиционно разрабатывались и поддер- живались “техниками”. Однако бурное развитие информационных технологий и воз- растающая нетерпимость к простоям вынудили специалистов по информационным технологиям и техников стать партнерами при планировании и эксплуатации центров обработки данных. Как системный администратор вы играете важную роль “эксперта по предметной области” в глазах техников.1 Центр обработки данных состоит из следующих компонентов. • Безопасное место. • Стойки с компьютерами, сетевым оборудованием и дисками. • Система энергоснабжения, достаточная для работы инсталлированных устройств. • Система охлаждения для поддержки требуемого температурного режима работы устройств. • Сетевые соединения внутри центра и с внешними рабочими местами (корпора-
1130 Часть III. Разное 27.1. Уровни надежности центров обработки данных На правильное функционирование центра обработки данных влияют следующие аспекты его организации. • Устройства бесперебойного электроснабжения (uninterruptible power supplies — UPSs). Устройства UPS обеспечивают электроснабжение при отказе обычного дол- говременного источника электроэнергии (например, коммерческой электрической сети). В зависимости от размера и емкости, они могут обеспечить от нескольких минут до нескольких часов работы. Сами по себе устройства UPS не могут поддер- живать работу сети при долговременном отключении электроснабжения. • Автономное генерирование электроэнергии. Если коммерческая электрическая сеть не работает, можно подключить автономные генераторы, которые могут за- менить долговременные источники электроэнергии. Генераторы обычно заправля- ются дизельным топливом, сжиженным газом или природным газом и могут под- держивать работу сети, пока не закончится топливо. Целесообразно иметь запас топлива на 72 часа автономной работы и покупать его у разных поставщиков. • Для работы с автономными генераторами также необходимы устройства UPS, что- бы обеспечить кратковременный период (обычно не превышающий 60 секунд), необходимый для запуска генераторов и перехода от электрической сети на пита- ние от генератора. • Дополнительные источники электроэнергии. В некоторых организациях суще- ствует возможность использовать несколько источников электроснабжения от электрической сети (например, от разных электростанций). • Механические системы. Эти системы называются HVAC2, но в контексте центра обработки данных к ним относится только система терморегулирования — тепло для компьютеров не нужно! Для обеспечения работы основной и резервной систе- мы терморегуляции существует множество технологий. Исследованием вопросов, связанных с управлением центрами обработки данных, занимается промышленная группа Uptime Institute. Ее сотрудники разработали четы- рехуровневую систему классификации надежности центров обработки данных, которая представлена в табл. 27.1. В этой таблице обозначение N означает, что в распоряжении центра есть достаточно ресурсов (устройств UPS, генераторов), чтобы обеспечить нор- мальную работу. Обозначение N+1 означает, что у центра есть одна запасная единица оборудования; 2N — что у каждого устройства есть дублирующее оборудование. Таблица 27.1. Система классификации, предложенная промышленной группой Uptime Institute Уровень Генератор UPS Источник энергии HVAC Коэффициент доступности 1 Нет N Один N 99.671% 2 N N+1a Один N+1 99.741% 3 N+1 N+1a Два с возможностью переключения N+1 99.982% _4 2N 2N Два работающих одновременно 2N 99.995% а С запасными компонентами. 2 Heating, ventilation and air conditioning, — отопление, вентиляция и система терморегулирова- ния. — Примеч, ред.
Глава 27. Центры обработки данных 1131 Центры, относящиеся к высшему уровню надежности, должны быть разделены на отсеки, так чтобы сбой систем электроснабжения или терморегуляции одной группы си- стем не приводил к отказу другой. Коэффициент доступности, равный 99,671%, на первый взгляд может выглядеть привлекательным, но это значит, что в течение года система будет примерно 29 часов простаивать. Коэффициент использования, равный 99,995%, означает, что система будет простаивать 26 минут в год. Но kvOv^OAL кА1С01Л,"Л0 kvAjoOtb крОЛХ^ ко кого лил коолалтл, иго ОС/«мАК0&1Л^Ь АиДЛХ U. oSptAAATA. ЛТАлилЛЛ, C&lJlAy kAic'Dbt Htvvy ОН. ИХ O^joAriVlAJl кА кДЛХ^КЛЛА4АкДЛА. Ок. hjoOOv^O *6ocC/^AK£fClAJl 0O|oL^AKjKMjL нАЛОЛ. кА&МЛЛу ^0|оЛЮЧА Ч^О-ЛО к|оО iXie'HwO. . М1Л Q кА|о€ал1ЛЛЬ НА OVtCAjACVVHA. Рис. 27.1. С любезного разрешения сайта xkcd .com Разумеется, никакое количество резервных источников электроснабжения или устройств терморегуляции не спасет систему, если она плохо управляется или непра- вильно спроектирована. Центр обработки данных — это основной структурный элемент, но его недостаточно для обеспечения работы всей организации с точки зрения конечно- го пользователя. Стандарты работоспособности систем, разработанные группой Uptime Institute, мож- но найти на ее веб-сайте uptimeinstitute. org. 27.2. Терморегуляция Как и люди, компьютеры лучше и дольше работают в благоприятной среде. Под- держка безопасной температуры — основное условие их благополучия. Ш Вопросы энергосбережения при эксплуатации центров обработки данных обсуждаются в главе 28. Американская ассоциация инженеров по отоплению, охлаждению и кондициониро- ванию воздуха (American Society of Heating, Refrigerating and Air-conditioning Engineers — ASHRAE) традиционно рекомендует поддерживать температуру воздуха в центрах обра- ботки данных (измеряемую на воздухозаборниках серверов) от 20 до 25°С. Поддерживая попытки организаций сократить потребление электроэнергии, ассоциация ASHRAE вы- пустила в 2008 году новые рекомендации, согласно которым температуру воздуха следует поддерживать в диапазоне от 18 до 27°С. Поддержка требуемой температуры начинается с точной оценки нагрузки на систе- му терморегуляции. Традиционные модели терморегуляции в центрах обработки дан- ных, взятые из учебников (даже из книг, написанных в 1990-х годах), могут на порядки отличаться от сегодняшних реалий, связанных с функционированием высокоплотных шасси на лезвийных серверах. По этой причине мы рекомендуем перепроверять оценки
1132 Часть III. Разное нагрузки на систему терморегуляции, полученные вашими инженерами по отоплению, охлаждению и кондиционированию воздуха. Вы обязаны помочь инженерам HVAC провести вычисления нагрузки на систему терморегуляции, которую оказывают крыша, стены и окна вашего здания (не забудьте о солнечном свете). Инженеры HVAC обычно имеют большой опыт работы с этими ком- понентами и обязаны дать вам точную оценку. Вам, со своей стороны, следует проверить внутреннюю тепловую нагрузку на ваш центр обработки данных. Вы должны проверить тепловую нагрузку, которую оказывают следующие компоненты. • Крыша, стены и окна (от инженеров HVAC). • Электронное оборудование. • Осветительная арматура. • Операторы (люди). Электронное оборудование Для того чтобы определить тепловую нагрузку, которую оказывают ваши серверы (и другое электронное оборудование), следует определить потребление электроэнер- гии серверами. Получить эту информацию лучше всего с помощью прямых измерений. В этом вам может помочь знакомый электрик. Впрочем, вы можете купить недорогой электроизмерительный прибор и выполнить эту работу самостоятельно.3 На большин- стве оборудования указывается максимальный расход мощности, измеренный в ваттах, но реальное потребление обычно значительно меньше максимума. Расход мощности можно преобразовать в стандартную единицу количества тепла BTUH (British Thermal Unit per hour — количество британских тепловых единиц в час), умножив его на коэффициент 3,413 BTUH/Bt. Например, если вы хотите построить центр обработки данных, в котором будет 25 центров, потребляющих по 450 Вт каждый, то вычисления будут выглядеть следующим образом. 25 серверов х 450 Вт/сервер х 3,412 BTUH/Bt = 38 385 BTUH. Осветительная арматура Как и в случае электронного оборудования, оценить тепловую нагрузку от освети- тельного оборудования можно по расходу мощности. Как правило, в офисах в качестве осветительной арматуры используются 40-ваттные люминесцентные лампы. Если в ва- шем новом центре обработки данных шесть таких ламп, то вычисления будут выглядеть следующим образом. 6 ламп х 160 Вт/лампа х 3,412 BTUH/Bt = 3 276 BTUH. Операторы Иногда людям необходимо войти в центр обработки данных, чтобы выполнить какие-то действия. Предположим, что каждый входящий человек создает тепловую на- грузку величиной 300 BTUH. Допустим, что одновременно в центр обработки данных могут войти четыре человека. 4 человека х 300 BTUH/чел = 1 200 BTUH. 3 Самым популярным электроизмерительным прибором является Kill a W^tt компании РЗ сто- имостью около 20 долл.
Глава 27. Центры обработки данных 1133 Общая тепловая нагрузка Вычислив тепловую нагрузку для каждого компонента, просуммируйте их и опреде- лите общую тепловую нагрузку. В нашем примере мы предполагали, что инженер HVAC оценил тепловую нагрузку от крыши, стен и окно равной 20000 BTUH. 20000 BTUH для крыши, стен и окон 38385 BTUH для серверов и другого электронного оборудования 3276 BTUH для осветительной арматуры 1200 BTUH для операторов 62861 BTUH всего Производительность систем терморегуляции обычно измеряется в тоннах. Для того чтобы преобразовать единицы BTUH в тонны, необходимо поделить результат на 12000 BTUH/т. Кроме того, следует допустить, по крайней мере, 50%-ный коэффициент ухуд- шения, чтобы учесть ошибки и будущий рост системы. 62,681 BTUH х 1т/ 12000 х 1,5 = 7,87 тонн охлаждения Проверьте, насколько ваши оценки расходятся с оценками инженеров HVAC. Теплые и холодные отсеки Вы можете резко уменьшить трудности, связанные с охлаждением центра обработки данных, проанализировав схему его устройства. Самой эффективной стратегией являет- ся разделение центра на теплые и холодные отсеки. Устройства, приподнятые над полом и охлаждаемые традиционными средствам# CRAC (кондиционеры воздуха в компьютерных комнатах), часто установлены так, что холодный воздух проходит над полом, поднимается через отверстия в перфорированном покрытии, охлаждает оборудование, а затем, уже в нагретом состоянии, поднимается к потолку и всасывается обратными воздуховодами. Обычно стойки и перфорированные плитки распределяются по центру обработки данных “случайно”, и в результате обеспе- чивается относительно равномерное распределение температуры. Вследствие этого среда становится комфортабельной для человека, но не оптимальной для компьютеров. Лучше было бы чередовать теплые и холодные отсеки, разделяя их стойками. В хо- лодных отсеках есть перфорированные плитки, а в теплых — нет. Сойки следует рас- положить так, чтобы оборудование втягивало воздух из холодного отсека, а отдава- ло — в теплый. Таким образом, стороны выпуска воздуха двух смежных стоек должны располагаться бок о бок. Эта схема изображена на рис. 27.2. Эта схема оптимизирует поток воздуха так, чтобы воздуховоды всегда втягивали холодный, а не теплый воздух, отработанный на охлаждении соседнего сервера. При правильном воплощении стратегия чередующихся стоек позволяет создать заметно холодные и заметно теплые отсеки. Успех охлаждения можно оценить с помощью ин- фракрасного термометра, который является незаменимым инструментом современного системного администратора. Это устройство стоит 100 долл, (например, Fluke 62) и по- стоянно измеряет температуру любого предмета, на который вы его нацелите на рас- стоянии до 20 метров. Только не доставайте его в баре! Если вы обязаны проводить кабель под полом (см. раздел 27.4), проводите кабели пи- тания под холодными отсеками, а сетевые — под теплыми. В помещениях без фальшпола могут использоваться междурядные охлаждающие устройства, например АРС (www.apcc.com). Эти маленькие устройства помещаются между стойками.
1134 Часть III. Разное Рис. 27.2. Холодные и теплые отсеки с фальшполом Принцип работы этой схемы показан на рис. 27.3. Рис. 27.3. Холодные и теплые отсеки с междурядными охлаждающими устройствами Устройства CRAC и междурядные устройства охлаждения должны иметь возмож- ность выводить тепло за пределы центра обработки данных. Это требование обычно удо- влетворяется с помощью циркуляции охлаждающей жидкости (например, охлажденной воды, хладагента Puron/R410A или R22), которая выносит тепло во внешнюю среду. Мы не показали на рис. 27.2 и 27.3 циркуляцию охлаждающей жидкости, чтобы не загро- мождать рисунки, но в большинстве случаев они необходимы. Некоторые комментарии по поводу использования внешнего воздуха для охлаждения в качестве альтернативы ме- ханическому охлаждению читатель найдет в главе 28. Влажность В соответствии с рекомендациями 2008 ASHRAE, влажность воздуха в центре обра- ботки данных должна быть в пределах 30—55%. Если влажность воздуха слишком низ- кая, возникают проблемы из-за статического электричества. Если влажность слишком высокая, конденсация может создать электрические цепи, которые могут вызвать корот-
Глава 27. Центры обработки данных 1135 кое замыкание и окисление. В зависимости от географического расположения, может возникнуть необходимость увлажнения или осушения оборудования, чтобы поддержи- вать требуемый уровень влажности. Мониторинг окружающей среды Если вы обеспечиваете работу чрезвычайно важного вычислительного оборудования, необходимо следить за температурой (и другими факторами окружающей среды, таки- ми как шум и электропитание) в центре обработки данных, когда вы там отсутствуете. Вы будете очень огорчены, придя на работу в понедельник и обнаружив расплавленный пластик на полу вашего центра обработки данных. К счастью, существуют автоматические мониторы, которые могут следить за состоя- нием окружающей среды в ваше отсутствие. Мы сами используем и рекомендуем вам продукцию семейства Sensaphone (sensaphone. com). Эти недорогие устройства для мо- ниторинга следят за такими показателями, как температура, шум и мощность, и звонят вам по телефону или отправляют сообщение на веб-сайт, если возникают проблемы. Фирма Sensaphone находится в Астоне, штат Песильвания (Aston, Pennsylvania). Ее теле- фон: (610) 558-2700. 27.3. Электропитание Компьютерное оборудование требует ровного и стабильного электропитания. В кон- тексте центров обработки данных это значит, что в нем должен работать, по крайней мере, стабилизатор, фильтрующий всплески напряжения и обеспечивающий требуемый уровень напряжения и фазы. Ш Процедуры выключения описаны в разделе 3.7. Серверы и сетевая инфраструктура должны оснащаться бесперебойными источни- ками электроснабжения. Качественные устройства UPS имеют интерфейсы RS-232, Ethernet или USB, позволяющие подключать их к компьютеру, который они обеспечива- ют электричеством, или к централизованной системе слежения, способной обеспечить быстрое реагирование. Такие соединения позволяют пересылать на компьютеры или операторам сообщения об отказе системы электроснабжения и требования выполнить аккуратное выключение компьютеров, пока не разрядились батареи. Устройства UPS имеют разные размеры и емкости, но даже самое большое из них не может служить долговременным источником электроэнергии. Если переключение на резервные источники электроэнергии занимает больше времени, чем могут работать устройства UPS, необходимо включить локальный генератор. Существует широкий выбор резервных генераторов, мощность которых колеблется от 5 до 2500 кВт. Золотым стандартом является семейство генераторов компании Cummins Onan (onan. com). Большинство организаций выбирает дизельное топливо. Если вы ра- ботаете в холодном климате, примите меры, чтобы генератор был заправлен “зимней дизельной смесью”, или замените его авиационным топливом Jet А-1, чтобы предотвра- тить гелеобразование. Дизельное топливо является химически стабильным, но на нем можно выращивать водоросли, поэтому, если вы планируете хранить дизельное топливо долгое время, добавьте в него водоросли. Генераторы и их инфраструктура — дорогое оборудование, но в некоторых ситуациях они могут сэкономить вам деньги. Если вы установите резервный генератор, то ваше устройство UPS должно быть достаточно большим, чтобы охватить промежуток времени между выключением электричества и запуском генератора.
1136 Часть III. Разное Если вы используете устройства UPS или генераторы, чрезвычайно важно периоди- чески их тестировать. Мы рекомендуем тестировать все компоненты резервной системы электроснабжения каждые полгода. Кроме того, вы (или ваш поставщик) должны вы- полнять регламентные работы на этом оборудовании, как минимум, раз в год. Требования к электроснабжению стоек Планирование электроснабжения центра обработки данных — одна из наиболее сложных задач. Как правило, возможность создать новый центр обработки данных или значительно перестроить существующий возникает каждые десять лет, поэтому, обдумы- вая систему электроснабжения, важно заглянуть далеко в будущее. Большинство архитекторов вычисляют мощность, необходимую для обеспечения центра обработки данных, умножают ее на его площадь, а затем на поправочный коэф- фициент. В реальных ситуациях этот подход не эффективен, потому что сам по себе раз- мер центра обработки данных несет мало информации о типе оборудования, которое в нем будет работать. Мы рекомендуем использовать модель энергопотребления в расчете на стойку и не обращать внимания на площадь пола. Традиционно центры обработки данных проектировались так, чтобы на каждую стойку приходилось от 1,5 до 3 кВт мощности. В настоящее время производители стали упаковывать серверы в стойки Ш и создавать шасси блэйд-серверов, в которых разме- щаются более 20 модулей, поэтому мощность, необходимая для питания всей стойки со- временного электронного оборудования, резко увеличилась. Одно из возможных решений проблемы, связанной с плотностью мощности, — раз- мещать в каждой стойке только несколько серверов Ш, оставляя остальную часть стой- ки пустой. Несмотря на то что эта технология устраняет необходимость обеспечения дополнительной мощности для стойки, она приводит к чрезмерному растрачиванию места. Лучше разработать реалистичный проект обеспечения мощности, которая может понадобиться для каждой стойки, и подумать, где ее взять. Требования к мощности у разного оборудования различные, поэтому трудно предска- зать, какая мощность понадобится в будущем. Целесообразно создать систему с разны- ми уровнями потребления мощности, в которой на каждом уровне все стойки получают одинаковую мощность. Эта схема полезна не только для удовлетворения потребностей текущих моделей, но и для планирования будущего использования. Некоторые факто- ры, которые следует учитывать при определении уровней, перечислены в табл. 27.2. Таблица 27.2. Модель распределения мощности по уровням для стоек в центре обработки данных Уровень мощности Х-- •< г . . Ватт/стойка - ' л Сверхвысокая плотностьа 25 кВт Очень высокая плотность (например, блэйд-серверы)6 20 кВт Высокая плотность (например, серверы 1U) 16 кВт Диски 12 кВт Сетевые коммутаторы 8 кВт Обычная плотность 6 кВт а Прогнозируемый верхний уровень в 2015 г. 6 Текущий верхний уровень в 2010 г.
Глава 27. Центры обработки данных 1137 Распределение мощности на верхних уровнях в табл. 27.2 может показаться слиш- ком щедрым, но его не так трудно достигнуть, даже на современном оборудовании. Компания АРС измерила потребление мощности на шасси, содержащем 14 серверов IBM BladeCenter HS20 по 4050 Вт.4 Шесть из этих шасси в стойке потребляли 24,3 кВт. Без охлаждения этой энергии достаточно, чтобы расплавить примерно 23 кг стали, алю- миния или силикона за 15 минут. Не стоит и говорить о том, что для таких конфигура- ций необходимо специальное охлаждающее оборудование. Определив уровни мощности, оцените потребности в стойках для каждого уровня. Затем на плане помещения поместите рядом друг с другом стойки, относящиеся к одно- му и тому же уровню. Такое разделение на зоны концентрирует стойки с высоким по- треблением мощности и позволяет правильно распределить ресурсы охлаждения. Киловольт-ампер или киловатт Одна из основных причин непонимания между специалистами по информацион- ным технологиям, техниками и инженерами UPS заключается в том, что каждая из этих групп использует разные единицы измерения мощности. Объем мощности, который мо- жет обеспечить устройство UPS, обычно измеряется в киловольт-амперах (кВА). Однако инженеры, обслуживающие компьютерное оборудование, и электротехники, обеспечи- вающие работу центра обработки данных, обычно выражают мощность в ваттах (Вт) или киловаттах (кВт). Возможно, вы помните из курса физики, что ватт=вольтхампер. К со- жалению, ваш учитель забыл напомнить, что ватт — это векторная величина, которая для мощности переменного тока, кроме напряжения (вольт) и силы тока (апмер), содер- жит “коэффициент мощности” (pf). Если вы разрабатываете конвейерную линию по разливке пива на пивоваренном за- воде, в которой используется много двигателей и другого тяжелого оборудования, то пропустите этот раздел и наймите квалифицированного инженера, который вычислит коэффициент мощности для вашей установки. При работе с современным компьютер- ным оборудованием вы можете схитрить и использовать константу. Для “приблизитель- ного” преобразования кВА в кВт можно использовать следующие формулы. кВА = вКт/ 0,85 кВт =кВА х 0,85 И наконец, оценивая объем мощности, необходимой для центра обработки данных (или для вычисления размера устройства UPS), следует измерить потребление мощности приборами с помощью амперметра, такого как Fluke 902, а не полагаться на значения, указанные производителем на этикетке (на которой обычно указываются максимальные значения потребления). Удаленное управление Вы можете оказаться в ситуации, в которой необходимо регулярно включать и вы- ключать сервер из-за ошибок в работе ядра или оборудования. Кроме того, возможно, в вашем центре обработки данных установлены серверы, которые работают под управ- лением другой операционной системы, а не UNIX. В этом случае также часто возникает необходимость их регулярного включения и выключения. В любом случае следует рас- смотреть возможность инсталляции системы, позволяющей выполнять эти операции в удаленном режиме. 4 См. отчет “Power and Cooling for Ultra-High Density Racks and Blade Servers” на сайте ape. com.
1138 Часть III. Разное Разумным решением является выбор продукции компании American Power Conversion (АРС). Продукция MasterSwitch похожа на линейку бесперебойного питания, за ис- ключением того, что ею можно управлять с веб-браузера с помощью встроенного порта Ethernet. Связаться с компанией АРС можно по телефону (401) 789-0204 или через веб- сайт ар с. сот. 27.4. Стойки Времена традиционных центров обработки данных с фальшполами, в которых кабели электроснабжения, система охлаждения, сетевые соединения и телефонные линии спрята- ны под полом, прошли. Можете ли вы отследить кабель, который теряется в подпольном лабиринте? Наш опыт подсказывает, что все это выглядит красиво только на картинке, а на самом деле комната с “классическим” фальшполом — это просто скрытая крысиная нора. Сегодня фальшполы используются только для того, чтобы скрыть электрические ка- бели, распределить охлажденный воздух, и больше ни для чего. Сетевые кабели (и медный, и оптоволоконный) должны проходить по внешним специальным каналам. В специализированных центрах обработки данных размещение оборудования в стой- ках (в противоположность, например, расположению на столах или на полу) — един- ственный профессиональный выбор. Самые лучшие схемы расположения запоминаю- щих устройств используют стойки, связанные друг с другом внешними каналами для кабелей маршрутизации. Этот подход обеспечивает высокую технологичность без поте- ри возможности для сопровождения. Лучшие внешние каналы для кабелей производятся компанией Chatsworth Products (Chatsworth, CA, (818) 882-8595; chatsworth.com). Использование стандартных 19-дюй- мовых монорельсовых телекоммуникационных стоек позволяет создавать блоки серве- ров, монтируемых на полках или в стойках. Две смежные 19-дюймовые телекоммуникационные стойки создают высокотехноло- гичную разновидность “традиционной” стойки (для ситуаций, в которых вы вынуждены располагать в соседних стойках оборудование, ориентированное относительно передней и задней панелей). Компания Chatsworth поставляет стойки, каналы для кабелей и вся- кие штучки для кабелей, а также оборудование, необходимое для их монтажа в вашем здании. Поскольку кабели располагаются в доступных каналах, их легко отслеживать и содержать в порядке. 27.5. Инструменты Эффективный системный администратор — это хорошо оснащенный системный ад- министратор. Иметь набор специальных инструментов важно для минимизации време- ни простоя в случае отказа оборудования. В табл. 27.3 перечислены некоторые инстру- менты, которые следует включать в такой набор. Таблица 27.3. Инструментальный набор системного администратора Универсальные инструменты / _____________ Комплект шестигранных ключей (ключей Фигурный молоток, 4 унции Аллена) Ножницы Нож электротехника или складной нож Небольшой светодиодный фонарик Крестообразная отвертка: #0, #1, and #2
Глава 27? Центры обработки данных 1159 Окончание табл. 27.3 Универсальные инструменты < — - - Набор торцевых шестигранных ключей Клещи, игловидные и обычные Детектор неоднородностей Инспекционная микрокамера Ridgid SeeSnake Рулетка Щелевая отвертка: 1/8", 3/16" и 5/16" Набор звездообразных ключей Тогх Миниатюрный пинцет Миниатюрные ювелирные отвертки Специальные.... Цифровой мультиметр (DMM) Кабельная стяжка (и их аналоги на "липучках”) Инфракрасный термометр Комплекс винтов PC (например, на сайте crazypc. com) Щипцы RJ-45 Портативный сетевой анализатор/ноугбук Концевые муфты SCSI Запасные кабели с перекрещивающимися парами категорий 5n6ARJ-45 Запасной кабель питания Запасные разъемы RJ-45 (с твердым ядром и многожильный) Заземляющий браслет для статического Клещи для удаления изоляции (с встроенным инструментом электричества для резки проволоки) Разное Баллон со сжатым воздухом Зеркальце дантиста (желательно телескопическое) Мобильный телефон Комплект первой помощи, включающий ибупрофен и ацета- минофен Изоляционная лента Номер домашнего телефона и служебных телефонов сотруд- ников Ватные палочки Список контактов для срочной связи в случае опасной ситуа- ции8 Шесть банок пива (как минимум) а Номера контрактов на обслуживание. 27.6. Рекомендованная литература • Telecommunications Infrastructure Standard for Data Centers. ANSI/TIA/EIA 942. • ASHRAE Inc. ASHRAE 2008 Environmental Guidelines for Datacom Equipment. Atlanta, GA: ASHRAE, Inc., 2008. • Eubank H., Swisher J., Bums C., Seal J., Emerson B. Design Recommendations for High Performance Data Centers. Snowmass, CO:Rocky Mountain Institute, 2003. 27.7. Упражнения 27.1. Зачем размещать компьютеры в стойках? 27.2. 'Аг Окружающая среда влияет как на людей, так и на компьютеры. Добавьте свои факторы к тем, которые указаны в книге (например, пыль, шум, свет, помехи и др.). Выберите четыре показателя и оцените комфортабельность вашей лаборато- рии для людей и машин.
1140 Часть III. Разное 27.3. На входе рабочей станции сила тока составляет 0,8 А, на входе монитора 0,7 А, а напряжение равно 120 В. а) сколько мощности потребляет ваша система в ваттах? б) допустим, что электричество стоит около 0,12 долл.ДкВт час). Сколько будет стоить круглогодичная работа такой системы? в) сколько вы сэкономите за год, отключая мониторы на 16 часов в день (вруч- ную или с помощью функциональных возможностей Energy Star, таких как стандарт DPMS)? г) чему равна годовая стоимость охлаждения такой системы? (Сформулируйте свои предположения и проведите вычисления.) 27.4. ★★ Разработайте проект новой компьютерной лаборатории для вашей организа- ции. Сформулируйте свои предположения о требуемой площади, количестве ком- пьютеров, типе каждого компьютера и потребляемой мощности. Затем определите требования к мощности и системе терморегуляции в вашей лаборатории. Учтите в проекте как серверы, так и клиентские рабочие станции. Приложите схему комна- ты, освещения и укажите ожидаемую тепловую нагрузку за счет людей.
Глава 28 Экологичные информационные технологии Может показаться, что книга о системном администрировании — это неподходящее место для главы о защите окружающей среды и социальных вопросах. Однако в настоя- щее время, когда крупные организации, внедряющие информационные технологии, уже не редкость, вопросы, связанные с их влиянием на окружающую среду и потребление ресурсов, стали привлекать к себе внимание. Экологичные информационные техноло- гии — это искусство и наука о сокращении скрытых и явных затрат ресурсов. Несмотря на то что каждый из нас может внести маленький вклад в защиту окру- жающей среды, изменив свои привычки и предпочтения, основное влияние все же оказывают централизованные усилия. Например, никакие попытки следовать лозунгу “Выбирайте неэтилированный бензин! В целом, он намного лучше!” нельзя сравнить с эффектом от принятия федерального закона, останавливающего производство авто- мобилей, использующих свинец. Угадайте, кто может отдать подобный приказ вашей организации? Вы! Однако зачем же беспокоиться? Например, чтобы испытывать гордость за то, что ты делаешь полезное дело для всей планеты, хотя существуют и практические причины, чтобы убедить руководителей вашей организации внедрить “зеленые” информационные технологии. • Снижение первоначальных издержек. Минимизируя количество оборудования, при- обретаемого и используемого вашей организацией, вы снижаете капитальные за- траты. Минимизируя размер центра обработки данных, вы снижаете стоимость недвижимости.
1142 Часть III. Разное • Снижение эксплуатационных расходов. Электроэнергия, управление и эксплуата- ция оборудования стоят денег. Эффективное использование меньшего количества устройств означает снижение прямых издержек вашего предприятия. • Экономия накладных расходов. Вы платите за электричество дважды: один раз — за электроснабжение оборудования, а второй — за охлаждение оборудования после того, как оно преобразует дорогую энергию в тепло.1 Чем меньше оборудования, тем меньше его требуется охлаждать, тем меньше нужно ему площади и меньше людей для обслуживания. Чем меньше людей, тем меньше затраты на аренду и кондиционирование офиса, меньше объем заработной платы, премий и матери- альной помощи. В главе рассматриваются основные концепции, позволяющие уменьшить потребле- ние электроэнергии и ресурсов вашей организацией. Мы имеем в виду организации, в центрах обработки данных которых работают от 1 до 500 серверов. Если ваша органи- зация крупнее, следует нанять эксперта по проектированию экологичных центров об- работки данных, чтобы достичь наибольшего эффекта. 28.1. Введение в экологичные ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ Что мы имеем в виду под “экологичными” технологиями? • Более низкое потребление электроэнергии. • Более скромные требования к оборудованию. • Снижение потребления расходных материалов. • Вторичная переработка отходов. В области экологичных информационных технологий нет волшебного решения или единственно возможного пути решения проблем. Несмотря на заверения поставщиков, вы не можете купить одну продукцию, которая решила бы все экологические проблемы в мире. В частности, экологичные информационные технологии — это нечто большее, чем просто серверная виртуализация. Аналогично тому как системное администриро- вание имеет много аспектов, внедрение экологичных информационных технологий — это больше процесс, чем цель. Сначала необходимо представить себе, чего вы хотите достичь, наметить план достижения цели, а затем воплотить его в жизнь. Ключевыми элементами в этом плане должны стать постоянные измерения и мониторинг. Для начала оцените экологичность вашей среды. Сделайте полный обзор всех ин- формационных мощностей вашей организации, и не только для того, чтобы повысить эффективность вашего проекта, но и чтобы убедить людей, что вы не просто сотрясаете воздух. Например, с экологической точки зрения было бы замечательно удалить все сер- веры, но вы скоро поймете, что исключение 50 управляемых вами серверов приведет к тому, что ваши пользователи в ответ купят и установят 600 неконтролируемых серверных систем в своих комнатах. В начале своих экологических исследований необходимо собрать следующую инфор- мацию. 1 Информационная работа, выполняемая компьютерным оборудованием, не является значи- тельной величиной с точки зрения термодинамики. Компьютеры, по существу, представляют со- бой эффективное устройство, которое преобразует 100% электроэнергии в тепло.
Глава 28. Экологичные информационные технологии 1143 • Учет оборудования. Следует учесть все, включая серверы, ноутбуки, мониторы, принтеры, запоминающие устройства, сетевое оборудование, резервное оборудо- вание, устройства UPS и модули охлаждения. Определите их местоположение, но- мер модели, “размер” (в единицах, характерных для выбранного оборудования), а также возраст. • Полезно также узнать уровень потребления мощности для каждой единицы обору- дования. Номинальный уровень потребления мощности может исказить реальное положение дел. Лучше измерить фактическое потребление энергии с помощью прибора Kill a Watt, который стоит около 20 долл.2 Для устройств, имеющих актив- ный и спящий режим (например, принтеров), можно записать средний уровень потребления энергии за день или неделю. • Учет расходных материалов. К ним относятся бумага, тонер, диски. • Показатели работы организации. Эти показатели включают в себя валовой доход, количество сотрудников, количество рабочих мест, общий объем потребления энергии, объем энергии, потребляемой компьютерным оборудованием (в центрах обработки данных), уровень потребления энергии системами терморегуляции в центре обработки данных, общий объем капиталовложений в информационные технологии, общий объем эксплуатационных издержек, связанных с информаци- онными технологиями, и общую стоимость оборудования для центров обработки данных. Собрав эти данные, определите от одной до трех целей для оптимизации. Эти цели должны быть связаны с общей стратегией развития вашего предприятия и демонстриро- вать прогресс в направлении более экологичных информационных технологий. Мы не можем указать, какая цель может оказаться наиболее подходящей для вашей организа- ции, но приведем несколько примеров. • Уровень потребления энергии центром обработки данных в расчете на доллар ва- лового дохода. • Количество сотрудников в расчете на один сервер. • Количество листов бумаги, использованной сотрудниками за месяц. • Среднее потребление энергии оборудованием, расположенным на рабочем месте сотрудника. • Средний срок службы ноутбука. • Уровень потребления энергии центром обработки данных по отношению к обще- му потреблению энергии всем оборудованием.3 Выполняйте повторную оценку состояния вашего компьютерного оборудования не реже одного раза в год, а уровень потребления мощности измеряйте ежемесячно. 2 Этот прибор разработан для североамериканского рынка, но аналогичную продукцию можно найти и на других рынках. Например, аналоги для Великобритании можно найти на сайте геик. со.uk/Buy-UK-Power-Meter.htm. 3 Этот показатель, умноженный на 100, равен процентной доле мощности оборудования, на- правленной на потребление компьютерным оборудованием. В промышленности этот показатель называется DCiE. Это стандартный показатель, который можно использовать для сравнения орга- низаций. Эффективность потребления мощности (PUE — power usage effectiveness) — это показа- тель, обратный к показателю DCiE. Он используется для оценки эффективности крупных центров обработки данных.
1144 Часть III. Разное 28.2. Экологическая пирамида Понять, насколько экологичной является ваша организация, достаточно легко. Труд- нее достичь (и измерить) ее прогресс в направлении улучшения окружающей среды. Для того чтобы вы ориентировались в возможностях, описанных в этой главе, мы разделили стратегии экологического развития компьютерных технологий на три категории, как по- казано на рис. 28.1. Рис. 28.1. Подходы к экологичным информационным технологиям Мы представили эти категории в виде пирамиды, поскольку стратегии, указанные внизу, имеют наибольший эффект и чаще обеспечивают побочную выгоду. По мере подъема по пирамиде, стратегии становятся более дорогостоящими, а усилия менее эф- фективными. Поиск путей к экологичным информационным технологиям всегда следует начинать! с сокращения прямого потребления — лучше меньше да лучше. Если вы можете достичь своей цели с меньшими усилиями и затратами ресурсов, сократите капитальные и экс- плуатационные расходы. Второй по качеству является стратегия уменьшения вторичного потребления. На-? пример, охлаждение, необходимое для работы серверов, относится к вторичному потре- блению, поскольку оно возникает как следствие существования сервера. Оптимизации системы HVAC для минимизации затрат на охлаждение экономит деньги, но это не мо- жет сравниться с экономией от полного отказа от сервера. Возможно, это не логично, но выбор продукции и технологий, называемых эколо- гичными, мы отнесли к последней категории. Это можно описать такой аналогией: сна^ чала мы уменьшаем количество автомобилей на дорогах до минимально возможного й только потом заменяем оставшиеся автомобили эффективными моделями. 28.3. Стратегии разработки экологичных информационных технологий: центр обработки данных Центры обработки данных представляют собой превосходные объекты для экологи- ческих инициатив, потому что они обычно работают по принципу 7x24x365 и находятся под непосредственным контролем специалистов под информационным технологиям.
Глава 28. Экологичные информационные технологии 1145 Исследование компании Lawrence Berkeley Laboratories показало, что центры обработки данных могут потреблять в 40 раз больше энергии, чем обычные офисы.4 При таком уровне потребления необходимы специальные стратегии. Как показано на рис. 28.2, стратегии сокращения прямого потребления, расположенные внизу пира- миды, являются самыми эффективными. В принципе, нет необходимости использовать в конкретной ситуации сразу все стратегии, но каждая из них может внести свой вклад. Оборудование с низким уровнем потребления Рис. 28.2. Экологичные стратегии для центров обработки данных Наименее эффективная Наиболее Поддержание более высокой температуры в компьютерном зале Продление сроков д ействия оборудования Режим ограниченной функциональности для простоев \ Эффективное охлаждение/внешний воздух Облачные вычисления Детальное планирование потребления Установка ^ве^втолькопринеобх^мости Cera SAN вместо локальных дисков |ЩВшциясер£Йр<» кКон(»л^ < Консолидация приложений Со временем организации и департаменты информационных технологий стремятся аккумулировать приложения. Новые приложения поступают для поддержки специфик ческих деловых инициатив и игрушечных проектов директоров, но старые приложения исчезают редко. Чаще они долго не уступают дорогу, и никто не берет на себя риск полг ностью их устранить. Какой бы ни была причина, в устоявшейся организации основной тенденцией является стремление к консолидации приложений до минимального набора, удовлетворяющего текущие производственные потребности. Рассмотрим пример организации, в которой эксплуатируется три приложения: EmployeeLinq, AccountAwesome и ElectricClockster. Несмотря на то что это упрощен- ный пример, он похож на реальную ситуацию, которая сложилась в одной из изучен- ных нами организаций. Каждое из этих приложений имеет сервер базы данных, сервер приложения и веб-сервер. В сумме получаем девять серверов, поддерживающих эти три приложения. На первом этапе в направлении консолидации следует составить список функций, вы- полняемых каждым приложением. Функции, выполняемые приложениями из нашего при- мера, перечислены в табл. 28.1. Как видим, некоторые функции дублируют друг друга. Таблица 28.1. Функциональные возможности трех приложений Кредиторская/дебиторская задолженность X Управление прибылью X X ^Временные данные персонала X X X 4 См. сайт eetd.lbl.gov/emills/PUBS/PDF/ACEEE-datacenters.pdf.
1146 Часть III. Разное Окончание табл. 28.1 функция el аа ЕС Главная бухгалтерская книга X Расчет заработной платы X X Оценка времени X X X Учет отпусков и отгулов X X Эта организация имела три системы для отслеживания времени, две системы — для расчета заработной платы (хотя в каждый момент времени использовалась только одна из них) и многие другие дублирующие функции. Такая ситуация сложилась потому, что три отдела — финансовый, кадров и произ- водственный — использовали свое собственное приложение. Это не только привело к растрате энергии и компьютерных ресурсов, но и усложнило или вообще сделало невозможным интеграцию данных между отделами. В данном случае переход органи- зации на одно прикладное приложение привело к сокращению аппаратного обеспече- ния и затрат энергии на 60%, при этом потоки данных внутри компании стали более согласованными. Ваша ситуация, возможно, выглядит не так трагично, но если вы потратите время на составление таблицы функций, то, вероятно, обнаружите их дублирование. Обосновать консолидацию приложений очень легко, потому что проектируемые ре- зультаты (по крайней мере, частично) можно выразить в сэкономленных долларах. Ин- теграция данных и улучшение функционирования предприятия — это просто дополни- тельное преимущество. Консолидация серверов В большинстве организаций работает, по крайней мере, несколько узкоспециали- зированных серверов, уровень использования которых составляет 10% или меньше. Например, мы видели много организаций, в которых были выделенные серверы NTP (network time protocol). NTP — это низкоуровневый протокол, требующий небольших вычислительных усилий. Резервирование сервера для протокола NTP напоминает neper лет Боинга 767 через всю страну с одним пассажиром на борту. Консолидация серверов очень напоминает консолидацию приложений и является нё менее эффективной, только вместо концентрации многих функций в одном приложен нии мы концентрируем несколько служб на одном серверном компьютере. В отличие от системы Windows, системы UNIX и Linux изначально превосходно реа- лизуют режим приоритетной многозадачности. Хорошим решением в случае протокол# NTP является запуск демона NTP на одних и тех же серверах, обеспечивающих работу таких общих инфраструктурных служб, как DNS и Kerberos.5 Еще одну часто возникающую возможность консолидации серверов предоставляю? серверы баз данных, предназначенные для работы с одним приложением. Если у вас ра- ботают компетентные системный администратор и администраторы баз данных (а также есть хорошие средства мониторинга), то отдельный сервер баз данных может хранить 5 Протокол NTP — это особый случай, в котором задержка ответа может быть небольшой. Однако это не значит, что на той же самой машине вы сможете запустить другие службы. К до- менам сервера NTP обычно применяется утилита nice, чтобы при необходимости предоставить ИМ доступ к центральному процессору (см. раздел 5.6). Аналогичный результат — и даже более надеж- ный — можно получить с помощью серверной виртуализации.
Глава 28. Экологичные информационные технологии 1147 базы данных для многих приложений. Эта консолидация также снижает стоимость ли- цензий, капиталовложения и потребление электроэнергии. В некоторых ситуациях сократить количество серверов можно, заменив старые и ме- нее мощные серверы меньшим количеством новых и более мощных серверов, эффек- тивно потребляющих электроэнергию. Сеть SAN Признаком “ненасытности” информационных технологий является парк серверов, заполненных жесткими дисками. Представьте себе центр обработки данных, состоящий из 100 серверов, каждый из которых содержит шесть дисков емкостью один терабайт. Эти 600 дисков необходимо произвести, обслужить, снабдить электроэнергией, а по- том вынуть и выбросить. Вероятность того, что средняя степень использования этих устройств превысит 50%, равна нулю. Этот подход приводит к чрезмерным расходам, потому что он подразумевает разделе- ние запоминающих устройств на изолированные части, которыми невозможно эффек- тивно управлять, так чтобы для каждого сервера или приложения выделялся “правиль- ный” объем памяти. На некоторых серверах может храниться меньше одного терабайта данных, в то время как другие серверы могут оказаться перегруженными, не имея воз- можности использовать простаивающие диски на соседних шасси. ЕУтипичном центре обработки данных с изолированными дисками на каждом сервере трудно достичь хотя бы 30% использования запоминающих устройств. у Хорошей альтернативой этому подходу является сеть хранения данных, или SAN; она описана в разделе 8.11. Технология SAN обеспечивает высоконадЪкное хранение данных, которое одновременно является экологичным, потому что системные адми- нистраторы могут эффективно выделять память на централизованных запоминающих устройствах. Многие организации превысили 90%-ный уровень использования своих сетей SAN. Это в три раза выше эффективности использования изолированных дисков. Сейчас, когда сети SAN функционируют на интерфейсах Ethernet, больше нет препят- ствий для развертывания этого превосходного инструмента. Серверная виртуализация Одной из самых популярных экологичных информационных технологий является серверная виртуализация, впрочем, частично эта популярность подогревается рекламой, которая оплачивается компаниями, производящими платформы для виртуализации. Серверная виртуализация (подробно описана в главе 24) — действительно фантасти- ческий инструмент. Ее влияние на экологию можно сравнить с консолидацией серверов. В обоих случаях на одном компьютере выполняется несколько приложений или служб. Виртуализация сокращает потребление электроэнергии за счет уменьшения количества шасси, задействованных в производстве, и более эффективного использования осталь- ного оборудования. Виртуализация предлагает дополнительные функциональные возможности, которых нет у консолидации, например возможность легко масштабировать идентичные систе- мы, резервировать часть мощности аппаратного обеспечения для конкретного сервера, а также переносить виртуальные серверы на другие физические шасси. Эти аспекты вир- туализации являются ее преимуществами. Однако у виртуализации есть и недостатки. Приложения с интенсивным вводом- выводом обычно плохо виртуализируются и медленнее работают в виртуализированной
1148 Часть III. Разное среде. Процесс виртуализации сам по себе требует ресурсов, поэтому виртуализиро- ванные системы имеют накладные расходы, которых нет у физических систем. Допол- нительные уровни абстракции, создаваемые из-за виртуализации, вызывают насторо- женность у некоторых системных администраторов, потому что самой виртуализацией необходимо активно управлять и она может влиять на функционирование систем, рас- положенных на конкретном узле. Виртуализацию лучше всего проводить в компаниях с хорошо подготовленными спе- циалистами в области информационных технологий и устоявшимися бизнес-процессами. На данный момент мы не рекомендуем осуществлять серверную виртуализацию начина- ющим системным администраторам. Однако эта технология быстро совершенствуется и становится более простой. Скоро она станет совершенно необходимой. Только самые необходимые серверы При использовании только необходимых серверов, те серверы, которые в данный мо- мент не используются, выключаются. Этот подход лучше всего зарекомендовал себя в ситуациях с предсказуемым циклическим потреблением электроэнергии; например, ког- да сервер связан с циклом бухгалтерских вычислений или работой, которая выполняется только ранним утром. Этот метод не получил широкого распространения, но иногда вне- дрить экологичные информационные технологии можно только с помощью этого трюка. Для того чтобы реализовать эту технологию, нужно иметь несколько схем и удли- нители, соединенные с интерфейсом Ethernet (управляемые). Такие платформы, как RightScale (rightscale. com), распространили эту концепцию на системы с повышен- ными требованиями. С ее помощью можно установить пороговые значения, достигнув которые дополнительные серверы автоматически включаются (или выключаются) в со- ответствии с нагрузкой центрального процессора или объемом трансакций. Использование детализированных данных и планирование потребления В области экологичных информационных технологий, как и в других областях, мож- но управлять только тем, что можно измерить. Тщательный сбор данных играет важную роль в процессе оптимизации вашей среды. Если вы регистрируете использование ресурсов вашей сети, например загрузку цен- тральных процессоров и памяти (см. главу 29), можете планировать установку нового ап- паратного обеспечения так, чтобы не покупать сервер “про запас”. Мониторинг и анализ требуют времени, но они позволяют правильно организовать управление работой центра обработки данных. Покупайте только то, что вам необходи- мо; используйте только то, что должны использовать. Конфигурация серверов, оптимизированная по потреблению энергии Некоторые системы позволяют сэкономить энергию, управляя работой самой системы. Возможности экономии энергии в системе Linux Центральные процессоры и ядра центральных процессоров можно останавливать, чтобы сократить потребление энергии. Для того чтобы свести потребление энергии к
Глава 28. Экологичные информационные технологии 1149 минимуму, следует упаковать как можно больше потоков в одном ядре или центральном процессоре и не активизировать дополнительные ядра и центральные процессоры, пока они не понадобятся. И наоборот, чтобы достичь максимальной производительности, следует распределить потоки среди ядер и центральных процессоров как можно шире, чтобы минимизировать время простоя за счет переключения и поочередного использо- вания кеша. Теоретически, следует пожертвовать частью производительности в пользу уменьшения потребления электроэнергии. На практике возможность отключения части центрального процессора возника- ет только тогда, когда система не загружена. В этой ситуации дополнительные уси- лия на упаковку потоков в одном ядре могут не привести к осязаемому эффекту. Поэкспериментируйте, чтобы увидеть хоть какую-нибудь разницу на фоне вашей кон- кретной рабочей нагрузки. Система управления потреблением электроэнергии, которая является частью плани- ровщика процессов, проверяет две управляющие переменные. Обе они устанавливаются в файлах, расположенных в каталоге /sys/devices/system/cpu. Переменная sched_mcjpower_savings контролирует, все ли ядра центрального процессора используются, прежде чем активизировать другой центральный процессор, а переменная sched_smt_power_savings контролирует, все ли слоты потоков в ядре используются, прежде чем активизировать другое ядро. В обоих случаях значение 0 от- ключает режим экономии электроэнергии, а значение 1 включает его. Например, для того чтобы включить оба режима экономии электроэнергии, можно выполнить следующие команды. / $ sudo sh -с 'echo 1 > / sys/devices/sys tem/cpu/sched_mc_powe г/savings' $ sudo sh -c 'echo 1 > /sys/devices/sys tem/cpu/sched_smt_powe7_savings' Для того чтобы эти изменения применялись при перезагрузке, выполните команду sysctl или добавьте эти строки в стартовый сценарий, например /etc/init.d/local в системах Ubuntu и SUSE (создайте его, если необходимо) или /etc/ге. local в си- стеме Red Hat. Центральный процессор компьютера — один из самых расточительных потребителей электроэнергии (его можно считать поглотителем тепла!), поэтому агрессивное управле- ние его функционированием может значительно снизить потребление электроэнергии системой. Экономия электроэнергии, потребляемой файловыми системами Сэкономить электроэнергию и повысить производительность можно, запретив фай- ловым системам записывать “время последнего обращения” (st_atime) к каждому файлу. Эта информация не очень полезна и теоретически добавляет к каждой файловой опера- ции одну операцию позиционирования и одну операцию записи. (Оценить ее влияние в реальных условиях намного труднее из-за блочного кеширования.) В 2003 году Зедлевски и соавторы (Zedlewski et al.) проанализировали потребление электроэнергии дисками и пришли к выводу, что на диске IBM Microdrive на операцию позиционирования затрачивается 4 миллиджоуля; для стандартных дисков с более круп- ными деталями эту величину следует, по меньшей мере, удвоить. Суммируя затраты на позиционирование и запись, можно вычислить выгоду от запрета записи “времени по- следнего обращения”, которая составит несколько киловатт на один диск в год. Это не много, но заслуживает внимания с точки зрения повышения производительности; эко- номия электроэнергии в данном случае представляет собой побочный эффект.
1150 Часть III. Разное В большинстве файловых систем запретить запоминать время последнего обращения можно с помощью параметра noatime команды mount. $ sudo mount -о remount,noatime I Некоторые системы семейства Linux также поддерживают параметр relatime ко- манды mount, обеспечивая гибридные функциональные возможности. В этом случае время последнего обращения обновляется, только если предыдущее значение предше- ствует моменту модификации файла. Этот режим позволяет таким инструментам, как программа для чтения почты, правильно распознавать ситуации, в которых интересую- щий их файл был изменен, но еще не прочитан. Облачные вычисления Ш Облачные вычисления описываются в разделе 24.1. Сделайте глубокий вдох и посмотрите на проблему с иной точки зрения. Недавно появившаяся возможность “облачных вычислений” принесла массу выгод, одной из ко- торых является экономия электроэнергии. Стремясь организовать дешевые и надежные службы, провайдеры наподобие компании Amazon создали сверхэффективные центры обработки данных и процессы для управления загрузкой оборудования. Эти облачные провайдеры могут предоставить компьютерные циклы, которые являются более эколо- гичными, чем любой самый эффективный центр обработки данных, который вы можете спроектировать самостоятельно. Если нет острой необходимости, чтобы ваши приложения (особенно веб-приложе^ ния) функционировали только в вашем здании, рассмотрите возможность перенести их инфраструктуру в центр облачных вычислений. Вы будете по-прежнему обладать пол- ным административным контролем над виртуальными системами, которые будут функ- ционировать в этой среде. Просто вы никогда не сможете их физически “пощупать”. Свободное охлаждение Представьте себе холодный зимний день. Вы прогуливаетесь вокруг центра обработ- ки данных и видите, как, работая на полную катушку, кондиционер выводит тепло в ат- мосферу. Снаружи 10 градусов мороза, но совершенно очевидно, что инженер HVAC разрабатывал систему терморегуляции, использующую механическое охлаждение (и зна- чительный объем электроэнергии), чтобы выводить тепло за пределы центра обработки данных независимо от температуры окружающей среды. К счастью, некоторые современные инженеры HVAC, специализирующиеся на про- ектировании центров обработки данных, предлагают лучшее решение этой проблемы: использовать для охлаждения оборудования внешний воздух, если его температура до- статочно низкая. Разумеется, это решение подходит не везде и не всегда. Консорциум технологиче- ских компаний Green Grid, специализирующийся на повышении эффективности ис- пользования электроэнергии центрами обработки данных, выпускает карты “свободного охлаждения” для Северной Америки и Европы, на которых показано, сколько часов в год можно охлаждать внешним воздухом центры обработки данных в данной местности. Существует также более подробный калькулятор охлаждения, который можно найти на сайте thegreengrid.org.
Глава 28. Экологичные информационные технологии 1151 Эффективное охлаждение центра обработки данных Для сокращения потребления электроэнергии системой охлаждения центра обработ- ки данных существует несколько способов. Например, можно применить описанную выше схему теплых и холодных отсеков, которая концентрирует охлаждение там, где эго необходимо, и позволяет другим частям вычислительного центра функционировать при более высокой температуре. Более подробное обсуждение некоторых из этих советов изложено в главе 27. Режим ограниченной функциональности во время простоя Многие организации зациклены на эксплуатационной готовности (например, Upti- me). При этом они часто не учитывают дополнительные затраты энергии и ресурсов, необходимые для того, чтобы достичь требуемого уровня эксплуатационной готовности. Внутренние потребители привыкают думать о услугах как о чем-то таком, что либо есть, либо нет. Представьте себе услуги с ухудшенными характеристиками как дополни- тельную возможность управления простоями и спросите себя, как это может удовлетво- рить потребности клиентов. Например, вместо запуска абсолютно избыточного набора оборудования для каждой производственной среды, можно применить серверную виртуализацию и развернуть не- сколько приложений на одном шасси для работы во время простоя. Эта конфигурация может иметь все стандартные функциональные возможности, но работает медленнее, чем обычно. В некоторых ситуациях этот компромисс может сэкономить до 50% капи- тальных затрат предприятия и даже больше. Продление срока эксплуатации оборудования Производство электроники потребляет энергию и генерирует ядовитые отходы, поэтому покупка нового оборудования влечет нагрузку на окружающую среду, которая не всегда отражается на ценнике. К сожалению, промышленность настолько привыкла к быстрым инновациям и'поящтению новых изделий, что производители часто прекра- щают поддержку своей продукции уже через несколько лет после ее выпуска. Если ваше оборудование удовлетворяет ваши потребности и потребляет разумное количество электроэнергии, то подумайте о стратегии, основанной на продлении срока его эксплуатации.6 Такая схема обычно сопровождается поисками на аукционе eBay и в других источниках дешевых подержанных запасных частей для аналогичных систем и превращением своего рабочего места в выставку антиквариата. Это позволяет прод- лить функционирование системы на два-три года, хотя в одном случае нам таким обра- зом удалось заставить систему проработать на восемь лет больше положенного срока. Если старое оборудование не удовлетворяет требованиям, предъявляемым к уровню производительности, или для него нет запасных частей, можно купить новое оборудова- ние для производственного отдела, а старое передать отделу проектирования, где произ- водительность и надежность не так важны. Этот подход не позволяет вообще избежать покупки нового оборудования, но откладывает покупку для отдела проектирования на один-два года. 6 Если же ваше оборудование не является эффективным с энергетической точки зрения, то лучше заменить его немедленно, чтобы сэкономить на потреблении электроэнергии, даже с учетом стоимости его размещения и замены.
1152 Часть III. Разное Если оборудование просто устарело, примите меры, чтобы передать его компании, занимающейся утилизацией компьютеров, которая разберет его на запасные части и каждую из них соответствующим образом утилизирует. Убедитесь, что у этой компа- нии есть сертифицированная программа утилизации, чтобы ваши данные не попали кому-то еще. Компьютеры содержат удивительно много ядовитых веществ. Что бы ни случилось, не выбрасывайте компьютер в мусорный контейнер, поскольку оттуда он, скорее всего, попадет на свалку, не предназначенную для хранения электронных устройств. В некоторых регионах существуют организации, бесплатно осуществляющие утили- зацию компьютеров. Например, в Портленде, штат Орегон, существует программа ути- лизации (freegeek.org). Более высокая температура в центре обработки данных Примерно треть электроэнергии, потребляемой обычным центром обработки дан- ных, уходит на охлаждение. Ранее температура воздуха в центрах обработки данных под- держивалась в диапазоне от 20 до 25°С. Сейчас эти оценки кажутся слишком консерва- тивными. В начале 2009 года Американская ассоциация инженеров по отоплению, охлажде- нию и кондиционированию воздуха (American Society of Heating, Refrigerating and Air- conditioning Engineers — ASHRAE) выпустила руководство, в котором указан приемле- мый диапазон температуры для центров обработки данных от 18 до 27°С. Повышение температуры воздуха в центре обработки данных на три градуса экономит примерно 12% стоимости охлаждения. Дополнительные советы по системе охлаждения можно найти в главе 27. Энергосберегающее оборудование Покупая новое оборудование, посвятите время выбору продукции с минимальным влиянием на окружающую среду. Организация IEEE стандартизировала критерии для оценки влияния электроники на окружающую среду в публикации IEEE Р1680. Оценочная система, основанная на доку- менте IEEE Pl680, Electronic Products Environmental Assessment Tool (EPEAT), учитывает большой спектр потенциальных факторов, которые могут иметь место в производстве. Это позволяет осуществлять правильную оценку продукции. В настоящее время эта си- стема охватывает производство настольных компьютеров и ноутбуков, “тонких клиен- тов”, рабочих станций и компьютерных мониторов. Ее оценки являются обязательными при осуществлении правительственных закупок. (Посетите сайт EPEAT epeat. net.) Обратите внимание на то, что от потребления электроэнергии система ЕРЕАТ требу- ет согласованности со стандартом Energy Star (версия 5.0, 1 июля 2009 года). Некоторые производители серверов (включая Dell, Sun, IBM и HP) предлагают эко- логически ориентированные линейки продукции. Однако даже экологичные серверы влияют на окружающую среду и потребляют энергию. Существование такой продукции еще не дает право приписывать к названию оборудования слова “экологичное”. В пер- вую очередь следует определить количество необходимых серверов и только затем вы- бирать самые экологичные.
Глава 28. Экологичные информационные технологии 1153 28.4. Экологические информационные стратегии: рабочее место пользователя Еще одна возможность для внедрения экологичных технологий — рабочее место пользователя. Некоторые подходы к реализации этих технологий проиллюстрированы на рис. 28.3. Работа в дистанционном режима Утилизация бумаги и тонера Наименее эффективная Наиболее Рис. 28.3. Стратегии для создания экологичных рабочих мест пользователей Утилизация на рабочем месте Продление срока эксплуатации оборудования Утилизация оборудования Более высокая температура воздуха в офисе Электронная документация ^т^Знн^Аечать и печать двух страниц Огказ от обогревания пустого пространства Обоснованный выборразмера Одна рабочая станция на человека СпяЩий режимво время простоя ЗаменаЭЛТнаЖКД- Образование пользователей - - Ниже указано, на что может влиять экологичная информационная технология. Большинство соображений вполне очевидно, и многие из них можно найти в других пу- бликациях. (Вполне возможно, что вы об этом уже знаете.) • Образование пользователей. Поощряйте пользователей отключать оборудование, когда оно не нужно, думать, прежде чем распечатывать документы на принтере, и переводить настольные системы в энергосберегающий режим вместо запуска экранной заставки (а еще лучше, выключать их). • Мониторы. Заменяйте электроннолучевые трубки (ЭКТ) на жидкокристалличе- ские дисплеи (LCD). Последние тратят намного меньше электроэнергии и содер- жат меньше токсичных элементов. • Простои рабочих станций. Централизованно настройте рабочие станции так, чтобы во время простоя они переходили в спящий режим или отключались на заданный период (например, на 30 минут). • Считайте рабочие станции. Ограничьте количество рабочих станций — не больше одной станции на человека. Пользователи, заявляющие, что им нужно несколько станций, должны использовать виртуального клиента. • Размер станции должен соответствовать поставленной задаче. Не покупайте одина- ковые для всех рабочие станции. Выберите три-четыре уровня спецификаций, что- бы пользователи могли выбрать конфигурацию, соответствующую их заданиям. • Персональные обогреватели. Вообще-то, эта тема не относится к информационным технологиям, но это досадный фактор, который замечают только компьютерщи- ки. Не разрешайте использовать персональные обогреватели в офисах и рабочих отсеках. Объясните пользователям, что эти обогреватели создают порочный круг, в котором система терморегуляции офиса и обогреватель борются друг с другом,
1154 Часть III. Разное преследуя противоположные цели. Если температура воздуха на рабочем месте пользователя действительно является некомфортной, поставьте этот вопрос перед группой обслуживания HVAC. (Возможно, в обмен на особые услуги в области ин- формационных технологий.) • Двусторонняя печать. По умолчанию настройте принтеры на двустороннюю печать, по две страницы на листе. Этого вполне достаточно для рутинных распечаток, и пользователи всегда могут выбрать другие настройки, если им понадобится иначе распечатать документы. • Электронные документы. Начните кампанию или проведите конкурс внутри вашей организации, чтобы найти способ исключить использование бумажных документов. • Температура в офисе. Поскольку компьютерное оборудование офиса предназначе- но для работы при значительно более высоких температурах, чем привыкли люди, поднимите уровень охлаждения в офисе до 27°С и выше. • Утилизация оборудования. Один-два раза в год проводите дни утилизации оборудо- вания, в течение которых сотрудники могут избавиться от нежелательного, ненуж- ного или слишком старого оборудования и сдать его компании, занимающейся утилизацией компьютеров. Если вас действительно беспокоит состояние окру- жающей среды, разрешите вашим сотрудникам принести для утилизации старые компьютеры из дома. • Продление сроков эксплуатации оборудования. Как только рабочая станция стала слишком старой или медленной, чтобы использовать ее для интенсивной работы, передайте ее сотрудникам, которых устроят ее характеристики. Они будут рады полу- чить новую технику, а у вас появится один-два дополнительных года эксплуатации. • Утилизация на рабочем месте. Начните программу утилизации использованной бу- маги на рабочем месте. Многие компании по переработке отходов, кроме бумаги, принимают пластик (пластиковые бутылки и т.д.). • Утилизация бумаги и картриджей. Станьте потребителем повторно используемых товаров. Покупайте для ваших принтеров и копировальных машин бумагу, изготов- ленную только из макулатуры, а также восстановленные картриджи. Рекомендуем универсальную и недорогую бумагу Boise Aspen 100, изготовленную из макулатуры и обладающую превосходными экологическими характеристиками. • Работа в дистанционном режиме. Стимулируйте сотрудников один-два дня в неделю работать дома в дистанционном режиме, установив и эксплуатируя средства дис- танционного доступа, такие как сеть VPN, служба VOIP и веб-приложения. Кроме выгоды для ваших сотрудников, работа в дистанционном режиме уменьшает на- грузку на транспорт и вспомогательные службы офиса. Однако примите меры, чтобы сотрудники, работающие в дистанционном режиме, выключили оборудова- ние, которое они в данный день не используют. В противном случае эта стратегия принесет обратный эффект, по крайней мере с точки зрения энергопотребления. 28.5. Компании, поддерживающие экологичные ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ Если вас интересует, кто еще разрабатывает экологичные информационные техноло- гии, вы можете найти и помощь единомышленников в разных организациях. Некоторые из них перечислены в табл. 28.2.
Глава 28. Экологичные информационные технологии 1155 Таблица 28.2. “Зеленая мафия” Организация Веб-сайт Energy Star ЕРЕАТ French Green IT energystar.gov epeat.net greenit.fr Green IT Observatory Green IT Promo Council Green Standards Trust IT Industry Council Less Watts The Green Grid greenit.bf.rmit.edu.au greenit-pc.jp greenstandards.org itic.org lesswatts.org thegreengrid.org Стандарты потребительской продукции Производство экологичной электроники Французский блог, посвященный экологичным ин- формационным технологиям Исследования в области экологичных информацион- ных технологий Экологичные информационные технологии для Японии и Азии Утилизация офисного оборудования Наилучшие стратегии для информационных техно- логий Экономия электроэнергии с помощью системы Linux Центры обработки данных Кроме экологических идей, многие из этих организаций имеют собственные наборы стандартных показателей, которые можно использовать для сравнения организаций по размерам и сферам деятельности. 28.6. Упражнения 28.1. С помощью электроизмерительного прибора Kill a Watt измерьте уровень потре- бления электроэнергии вашей рабочей станцией при разных уровнях нагрузки, включая спящий режим и режим пониженного энергопотребления. Сколько энер- гии можно сэкономить, если отключать вашу рабочую станцию каждый вечер? 28.2. Напишите сценарий, который будет посылать системному администратору элек- тронную почту, когда нагрузка центрального процессора достигнет уровня, при котором следует подключать новый сервер. 28.3. Создайте список основных приложений, используемых в вашей организации в на- стоящий момент. Какие из них дублируют друг друга? 28.4. Зайдите на сайт thegreengr id. org и определите, стоит ли для охлаждения ваше- го офиса использовать внешний воздух. 28.5. ★ Такие организации, как TerraPass и Carbonfund.org, продают “компенсаторы’ С02, с помощью которых организации могут возместить свои выбросы углекисло- го газа. Например, организации, осуществляющие компенсацию, могут субсиди- ровать разработку источников энергии, не связанной с выбросом углекислого газа (например, солнечной энергии или энергии ветра), чтобы снизить эмиссию этого газа в будущем. Эти программы оказались спорными. Некоторые наблюдатели сомневаются в реаль- ности заявленных целей, а другие критикуют программу с философских позиций.
1156 Часть III. Разное 28.6. Выберите поставщика компенсаторов и оцените целесообразность предлагаемой им стратегии. Хорошо ли документированы его программы, чтобы правильно оце- нить их качество?7 Оценила ли этого провайдера независимая группа, и если да, к каким выводам она пришла? 7 Разработчик из компании WorldPress Марк Жаке (Mark Jaquith) написал: “Представьте себе, что вас убили, а потом убийцу стали убеждать убить на одного человека меньше. Мы не должны вступать в переговоры с убийцами. Вас все равно убили. Убеждать кого-то сократить выбросы — совсем не значит, что ваши выбросы исчезнут”. Мы не разделяем это мнение, но такая точка зре- ния на вопросы компенсации является довольно типичной.
Глава Анализ производительности Анализ производительности и ее настройку часто относят к магической стороне си- стемного администрирования. Конечно же, магии здесь никакой нет, но можно гово- рить о симбиозе науки и искусства. “Научная” часть включает тщательное проведение количественных измерений и применение научного подхода. Составляющая “искусства” связана с необходимостью сохранять баланс ресурсов на практическом уровне, посколь- ку оптимизация для одного приложения или пользователя может отрицательно повли- ять на другие приложения или на других пользователей. Как это часто бывает в жизни, невозможно сделать счастливыми всех сразу. В блогосфере бытует мнение, что сегодня проблемы производительности кардиналь- но отличаются от аналогичных проблем предыдущих десятилетий. Но это не совсем так. Да, системы стали гораздо сложнее, но определяющие факторы производительности и высокоуровневые абстракции, используемые для ее измерения и управления, не ме- няются. К сожалению, повышение производительности систем сильно коррелирует со способностью соответствующего сообщества создавать новые приложения, которые по- глощают все доступные ресурсы. В этой главе мы сосредоточим внимание на производительности серверных систем. В настольных системах проблемы, характерные для серверов, обычно не возникают, поэтому ответ на вопрос о том, как повысить производительность настольной системы, обычно прост: “Провести модернизацию”. Пользователям такой ответ нравится, по- скольку это означает, что у них появятся новые модные системы. Одним из аспектов, отличающих UNIX и Linux от других основных операционных систем, является объем данных, которые они предоставляют о своих внутренних опера- циях. Детальная информация доступна буквально по каждому уровню системы, благода-
1158 Часть III. Разное ря чему администраторы могут настраивать различные параметры именно так, как нуж- но. Если установить источник проблем с производительностью никак не удается, всегда можно просмотреть исходный код. По этим причинам UNIX и Linux часто считаются наиболее подходящими операционными системами для пользователей, которых особен- но беспокоит тема производительности. Даже при этих условиях настройка производительности не является простой зада- чей. Как пользователи, так и администраторы часто думают, что если бы они владели нужными “магическими” приемами, их системы работали бы в два раза быстрее. Одним из наиболее распространенных заблуждений является убеждение в том, что настроить производительность может помочь манипулирование переменными ядра, которые от- вечают за управление системой страничного обмена и буферными пулами. В наши дни ядра основных дистрибутивов изначально настроены на достижение разумной (хотя и не оптимальной) производительности при различных уровнях загруженности. Если попытаться оптимизировать систему по какому-то конкретному показателю производительности (например, по степени использования буферов), весьма вероятно, что поведение системы ухудшится в отношении других показателей и режимов работы. В этой главе будет рассказываться о том, как можно настроить производительность на уровне системы; возможность рассказать о настройке производительности на уровне приложений мы оставили другим. Как системному администратору, вам необходимо помнить о том, что разработчики — тоже люди. (Сколько раз вы говорили или думали, что проблема кроется в сети?) При таком уровне сложности современных приложений некоторые проблемы можно решить только посредством сотрудничества их разработ- чиков, системных администраторов, проектировщиков серверов, администраторов баз данных, администраторов памяти и архитекторов сети. В этой главе мы поможем вам определить, какие данные следует предъявить этим специалистам, чтобы они смогли ре- шить проблемы производительности (если в действительности эти проблемы лежат в их области). Такой подход гораздо эффективнее, чем просто сказать: “Все выглядит пре- красно, это не моя проблема”. В любом случае, никогда не доверяйте полностью тому, что пишут в Интернете. Ка- кие только аргументы не приводятся в дискуссиях о производительности систем! При этом сторонники всевозможных теорий не обладают, как правило, ни знаниями, ни дис- циплиной, ни временем, необходимыми для проведения достоверных экспериментов. Широкая поддержка пользователей еще ничего не значит, ибо каждое глупое предложе- ние очень часто сопровождается хором восторженных комментариев: “Я увеличил раз- мер кеш-буфера в десять раз, как он предложил, и система заработала гораздо, гораздо быстрее!!!” Да уж, конечно! Ниже перечислены некоторые правила, которыми следует пользоваться. • Собирайте и анализируйте хронологические данные о работе системы. Если еще неделю назад производительность системы была нормальной, а сейчас все изме- нилось, то сравнение характеристик системы в двух состояниях позволит выявить источник проблемы. Всегда держите под рукой список оптимальных параметров производительности. А также первым делом просматривайте журнальные файлы, чтобы выяснить, не связана ли возникшая проблема с появлением какой-нибудь неполадки в оборудовании. • В главе 21 рассказывалось о некоторых средствах трендового анализа, которые также подходят для мониторинга производительности. Утилита sar, которая будет описываться чуть позже в этой главе, тоже может использоваться в качестве сред- ства трендового анализа.
Глава 29. Анализ производительности 1159 • Всегда настраивайте систему так, чтобы потом иметь возможность сравнить ре- зультаты с предыдущими показателями производительности системы. • Всегда проверяйте наличие плана отката на случай, если внесенные “чудодействен- ные” изменения окажутся вовсе не чудодейственными и лишь только ухудшат дело. • Не перегружайте умышленно свои системы или свою сеть. Ядро создает для каж- дого процесса иллюзию бесконечности ресурсов. Но как только в дело вступают все 100% ресурсов системы, операционной системе приходится работать очень напряженно. На поддержку иллюзии расходуется ощутимая доля самих ресурсов. В результате выполнение процессов замедляется. • Как в физике элементарных частиц, чем больше данных вы собираете с помощью утилит мониторинга системы, тем большее влияние вы оказываете на исследуемую систему. Для наблюдения за системой лучше всего полагаться на простые инстру- менты, которые работают в фоновом режиме (например, sar или vmstat). Если они обнаружат что-то существенное, то для более глубокого анализа можете вос- пользоваться и другими инструментами. 29.1. Способы повышения производительности Ниже перечислены конкретные действия, которые можно выполнить, чтобы улуч- шить производительность. • Убедиться в том, что память доступна в достаточном объеме. В следующем раз- деле вы увидите, что объем памяти очень сильно влияет на производительность. Устройства памяти сегодня стоят довольно недорого, так что обычно оснастить по максимуму любой компьютер, от которого требуется высокая производитель- ность, — не проблема. • Если UNIX- или Linux-система используется в качестве веб-сервера или сетевого сервера приложений, можно попробовать распределить трафик между нескольки- ми компьютерами с помощью какого-нибудь коммерческого приложения для ба- лансирования нагрузки, такого как Content Services Switch производства компании Cisco (cisco. com), Serverlron производства компании Brocade (brocade. com) или Alteon Web Switch производства компании Nortel (nortelnetworks. com). • Эти устройства делают так, что несколько физических серверов выглядят для внеш- него мира как один логический сервер. Они распределяют нагрузку согласно од- ному из нескольких выбираемых пользователем алгоритмов типа “минимальное время отклика” или “циклический алгоритм обслуживания”. • Тщательно проверить конфигурацию системы и отдельных приложений. Многие приложения могут резко увеличить производительность, если их правильно на- строить (распределить данные между дисками, не осуществлять динамический по- иск имен в DNS, запустить дополнительные экземпляры сервера и т.д.). • Устранить проблемы, связанные с использованием ресурсов. Проблемы могут соз- даваться как “реальными заданиями” (одновременный запуск слишком большого количества серверов, неэффективные методы программирования, выполнение па- кетов заданий с завышенным приоритетом, запуск ресурсоемких программ в не- подходящее время), так и самой системой (ненужные демоны). • Ликвидировать по возможности зависимость ресурсов памяти от механических операций. В настоящее время широко доступны полупроводниковые диски (Solid
1160 Часть III. Разно# state disk drives — SSDs), которые могут обеспечить быстрый рост производитель- ности, поскольку они не требуют физического движения диска для считывания битов информации. SSD-диски легко устанавливаются вместо “старых добрых” дисковых накопителей1. • Организовать жесткие диски и файловые системы так, чтобы нагрузка на них бы- ла равномерной, и тем самым максимально повысить пропускную способность каналов ввода-вывода. При наличии специфических приложений, таких как базы данных, можно попробовать использовать какую-нибудь модную многодисковую технологию вроде RAID для оптимизации процессов обмена данными. За реко- • мендациями следует обращаться к производителю базы данных. Для систем Linux | нужно удостовериться в том, что для диска выбран самый подходящий из доступ-; ных в Linux планировщик ввода-вывода. 1 • Обратить внимание на то, что разные приложения и СУБД ведут себя по-разному при размещении на нескольких дисках. Технология RAID поставляется в несколь- ких вариантах, поэтому следует потратить время и выяснить, какой из них лучше всего подходит для данного конкретного случая (если вообще подходит). • Провести мониторинг сети, чтобы убедиться в том, что она не перегружена тра* ! фиком и что количество ошибок в ней минимально. Очень много такой полезной < информации о сети можно собрать с помощью команды netstat, которая описы- валась в разделе 21.5. Также можно еще раз перечитать главу 21. $ • Определить ситуации, в которых система совершенно не удовлетворяет предъяв- ; ляемым к ней требованиям. Нельзя настраивать производительность без учета та- ких ситуаций. л Эти меры перечислены в порядке убывания эффективности. Добавление памяти и распределение трафика между несколькими серверами может значительно повысить ’ производительность. Степень эффективности остальных мер варьируется от значитель- : ной до нулевой. ’ Анализ и оптимизация структур данных и алгоритмов программ почти всегда ведет к существенному повышению производительности. Однако эти вопросы обычно находят- ся вне компетенции системного администратора. 29.2. Факторы, влияющие на производительность Производительность системы во многом определяется базовыми характеристиками системных ресурсов и эффективностью их распределения и совместного использования. Определение термина “ресурс” весьма расплывчато. Оно может подразумевать даже та- кие компоненты, как кеш содержимого регистров центрального процессора и элементы таблицы адресов контроллера памяти. Однако в первом приближении серьезное влия- ние на производительность оказывают только четыре фактора: • время использования центрального процессора; • память; 1 У современных SSD-дисков есть два основных недостатка. Во-первых, они на порядок до- роже (в расчете на гигабайт), чем традиционные жесткие диски. Во-вторых, их можно перезапи- сывать только ограниченное число раз. Их перезаписывающая способность достаточно высока и вполне приемлема для настольных компьютеров (десятки тысяч записей на блок), но может ока- заться потенциальным камнем преткновения для сервера с большой рабочей нагрузкой. Подробнее о SSD-дисках см. в разделе 8.2.
Глава 29. Анализ производительности 1161 • пропускная способность дисковой подсистемы ввода-вывода; • пропускная способность сетевой подсистемы ввода-вывода. Если после выполнения активных процессов остались свободные ресурсы, можно считать, что производительность системы является удовлетворительной. Когда ресурсов не хватает, процессы становятся в очередь. Процесс, не имеющий не- медленного доступа к необходимым ресурсам, должен ждать, ничего при этом не делая. Время, затрачиваемое на ожидание ресурсов, — один из основных показателей ухудше- ния производительности. Самый простой, с точки зрения учета, ресурс — использование центрального про- цессора (ЦП). В распоряжении системы всегда имеется примерно одна и та же часть его мощности. Теоретически эта величина составляет все 100% циклов ЦП, но “наклад- ные расходы” и другие причины приводят к снижению этого показателя примерно до 95%. Для процесса, занимающего более 90% времени ЦП, ограничивающим фактором является быстродействие центрального процессора. Такой процесс потребляет большую часть вычислительных мощностей системы. Многие считают, что быстродействие ЦП — основной фактор, влияющий на общую производительность системы. При наличии неограниченных объемов всех остальных ре- сурсов или для определенных типов приложений (например, программ численного мо- делирования) быстродействие ЦП действительно играет роль. Но в повседневной жизни этот показатель значит относительно мало. Настоящим узким местом является канал обмена данными с жестким диском. Жест- кие диски представляют собой механические системы, поэтому на поиск нужного бло- ка, выборку его содержимого и активизацию ожидающего его процесса уходят десятки миллисекунд. Задержки такого порядка отодвигают на второй план все остальные факто- ры ухудшения производительности. Каждое обращение к диску вызывает приостановку активного процесса “стоимостью” несколько миллионов инструкций ЦП. Эту проблему можно решить, например, с помощью полупроводниковых дисковых накопителей, ко- торые работают значительно быстрее, чем диски с движущимися деталями. Благодаря использованию виртуальной памяти, скорость дискового обмена может быть непосредственно связана с объемом имеющейся памяти, если потребность в физи- ческой памяти превышает ее реальный объем. Ситуации, в которых физической памяти становится недостаточно, часто приводят к необходимости записывать содержимое ее страниц на диск, чтобы эти страницы можно было восстановить и использовать для дру- гой цели. Это означает, что обращение к памяти по своей “стоимости” приближается к работе с диском. Избегайте таких ловушек, если характеристики производительности имеют для вас большое значение; побеспокойтесь о том, чтобы каждая система имела достаточно физической памяти. Пропускная способность сети подвержена примерно тем же ограничениям, что и скорость дискового обмена. Ее ухудшение связано со всевозможными задержками. Но возникающие проблемы охватывают целые сообщества пользователей, а не отдельные компьютеры. Кроме того, сети восприимчивы к проблемам аппаратного обеспечения и перегрузкам серверов. 29.3. Как анализировать проблемы ПРОИЗВОДИТЕЛЬНОСТИ В сложной системе нелегко выделить именно проблемы производительности. Сис- темные администраторы часто получают частные (несистематические) отчеты о пробле-
1162 Часть III. Разное мах, которые содержат эмоциональные описания конкретных случаев или сложных ситуа- ций (например, “веб-сервер застопорился из-за всех этих проклятых AJAX-вызовов...”). Вы, конечно, должны обратить внимание на эту информацию, но не воспринимайте ее как достоверную и надежную; проводите собственное исследование. Строгая и прозрачная научная методика поможет вам сделать правильные выводы, которым ваши сотрудники и вы сами можете доверять. Научный подход позволит дру- гим оценить ваши результаты, повысит доверие к вашей работе и увеличит вероятность того, что предлагаемые вами изменения смогут реально решить проблему. Применение научного подхода не означает, что вы должны собирать все релевантные данные сами. Весьма полезной бывает и “внешняя” информация. Не стоит тратить часы на изучение вопросов, ответы на которые можно легко почерпнуть из разделов FAQ (Frequently Asked Questions — часто задаваемые вопросы). Мы предлагаем вам выполнить следующие пять действий. Шаг 1. Сформулируйте вопрос. Поставьте конкретный вопрос в определенной функциональной области или сфор- мулируйте предварительное заключение или рекомендацию, которую вы обдумали. Будь- те точны, говоря о технологиях, компонентах и альтернативах, которые вы предлагаете рассмотреть, и результатах, которые могут быть достигнуты. Шаг 2. Соберите и классифицируйте факты. Проведите систематический поиск в документации, базах знаний, известных вам из- даниях, блогах, технических описаниях, форумах и прочих информационных ресурсах с целью выявления внешних фактов, имеющих отношение к вашему вопросу. В собствен- ных системах зафиксируйте телеметрические данные и (по возможности или необходи- мости) оснастите инструментальными средствами конкретные интересующие вас обла- сти в системе или отдельных приложениях. Шаг 3. Критически оцените данные. Просмотрите каждый источник данных на предмет релевантности и критически оце- ните его с точки зрения достоверности. Выделите ключевые данные и обратите внима- ние на качество источников информации. ~ Шаг 4. Подытожьте данные вербально и графически. Представьте сведения, взятые из нескольких источников, в словесной (вербальной^ по возможности графической форме. Данные, кажущиеся сомнительными при выражвт нии в числовой форме, могут оказаться убедительными в виде диаграммы. Шаг 5. Сформулируйте заключение. Представьте свои выводы в лаконичной форме (как ответ на поставленный вами же вопрос). Поставьте оценку, чтобы обозначить уровень силы или слабости доказательств, которые поддерживают ваши заключения. 29.4. Проверка производительности системы Хватит обобщать — пора рассмотреть некоторые конкретные инструменты и “зоны интереса”. Прежде чем переходить к измерениям, необходимо знать, что именно вы хо- тите получить. Инвентаризуйте свое оборудование Начните с оценки своего оборудования, особенно ЦП и ресурсов памяти. Инвен- таризация поможет вам интерпретировать данные, представленные с помощью других
Глава 29. Анализ производительности 1163 инструментов, а также построить реалистичные ожидания касательно верхних границ производительности. В системах Linux именно в файловой системе /ргос стоит искать ответ на вопрос, какое, с точки зрения вашей операционной системы, вы используе- те оборудование (более детальную информацию об аппаратуре можно найти в каталоге /sys; см. раздел 13.8). Некоторые ключевые файлы перечислены в табл. 29.1. Общую информацию о файловой системе /ргос можно найти в разделе 13.3. Таблица 29.1. Источники информации об оборудовании в системах Linux Файл Содержимое /proc/cpuinfo Тип и описание ЦП /proc/meminfo Размер памяти и коэффициент загрузки /ргос/diskstats Дисковые устройства и статистика их использования Четыре строки в файле /proc/cpuinfo помогут вам идентифицировать ЦП в си- стеме: vendor_id, cpu family, model, и model name. Некоторые из этих значений не- понятны, поэтому лучше всего узнать о них в интерактивной справочной системе. Точная информация, содержащаяся в файле /proc/cpuinfo, зависит от системы и процессора. Рассмотрим типичный пример содержимого этого файла. suse$ cat /proc/cpuinfo processor : 0 vendor__id : Genuinelntel cpu family : 6 model : 15 model name : Intel(R) Xeon(R) CPUE53100 1.60GHz stepping : 11 cpu MHz : 1600.003 cache size : 4096 KB physical id : 0 cpu cores : 2 siblings : 2 Этот файл содержит по одной записи для каждого процессорного ядра, видимого операционной системой. Конкретные данные незначительно варьируются в зависимости от версии ядра. Значение поля processor уникально идентифицирует ядро. Значения поля physical id являются уникальными для каждого физического сокета на печатной плате, а значения id values уникальны для ядра в физическом сокете. Ядра, которые поддерживают гиперпотоковый режим работы (дублирование контекстов ЦП без ду- блирования других характеристик обработки), идентифицируются значением ht в поле flags. Если в системе действительно реализован гиперпотоковый режим работы, поле siblings для каждого ядра показывает, сколько контекстов доступно на данном ядре. Существует еще одна команда, которая позволяет получить информацию об аппарат- ных характеристиках вашего компьютера. Речь идет о команде dmidecode. Она выводит содержимое системной таблицы DMI (Desktop Management Interface — интерфейс управ- ления настольными системами), также известной под именем SMBIOS. Самой полезной опцией этой команды является -t тип (допустимые типы представлены в табл. 29.2).
1164 Часть III. Разное Таблица 29.2. Значения типов для команды dmidecode -t Значение ' Описание Ч УГ - 1 ---- ' ' ......*....................................... — 1 Система 2 Материнская плата 3 Корпус 4 Процессор 7 Кеш-память 8 Разъемы портов 9 Системные разъемы 11 ОЕМ-строки 12 Опции системной конфигурации 13 Язык BIOS 16 Массив физической памяти 17 Устройство памяти 19 Отображаемый адрес массива памяти 32 Загрузка системы 38 1РМ1-устройство Следующий пример демонстрирует получение типичной информации. suse$ sudo dmidecode -t 4 # dmidecode 2.7 SMBIOS 2.2 present. Handle 0x0004, DMI type 4, 32 bytes. Processor Information Socket Designation: PGA 370 Type: Central Processor Family: Celeron Manufacturer: Genuinelntel ID: 65 06 00 00 FF F9 83 01 Signature: Type 0, Family 6, Model 6, Stepping 5 Биты информации о сетевой конфигурации разбросаны “по всей системе”. Лучшим источником IP- и МАС-информации для каждого сконфигурированного интерфейса служит команда ifconfig -а. В системах Solaris лучшим источником информации о ЦП и ресурсах памяти sotaris являются команды psrinfo -v и prtconf соответственно. Вот пример ре- зультата выполнения этих команд. solaris$ psrinfo -v Status of virtual processor 0 as of: 01/31/2010 21:22:00 on-line since 07/13/2009 15:55:48. The sparcv9 processor operates at 1200 MHz, and has a sparcv9 floating point processor. Status of virtual processor 1 as of: 01/31/2010 21:22:00 on-line since 07/13/2009 15:55:49. The sparcv9 processor operates at 1200 MHz, and has a sparcv9 floating point processor.
Глава 29. Анализ производительности 1165 Solaris$ prtconf System Configuration: Sun Microsystems sun4v Memory size: 32640 Megabytes System Peripherals (Software Nodes): SUNW,Sun-Fire-T200 В системах HP-UX информацию о конфигурации аппаратных средств компью- тера можно получить с помощью одной-единственной команды machinf о. Вот типичный пример ее выполнения. hp-ux$ sudo machinfо CPU info: 1 Intel(R) Itanium 2 processor (1.5 GHz, 6 MB) 400 MT/s bus, CPU version Bl Memory: 4084 MB (3.99 GB) Firmware info: Firmware revision: 02.21 FP SWA driver revision: 1.18 BMC firmware revision: 1.50 Platform info: Model: "ia64 hp server rx2600" OS info: Nodename: hpuxll Release: HP-UX B.11.31 Machine: ia64 • В системах AIX для получения информации о ЦП и памяти придется выпол- нить несколько действий. Сначала с помощью команды Iscf g найдите имена инсталлированных процессоров. aix$ Iscfg | grep Processor + procO Processor + proc2 Processor Затем для получения описания каждого процессора можно использовать команду Isattr. aix$ Isattr -Е -1 ргосО frequency 1898100000 Processor Speed False smt_enabled true Processor SMT enabled False smt_threads 2 Processor SMT threads False state enable Processor state False type Powe г PC_POWER5 Processor type False С помощью команды Isattr можно также узнать объем физической памяти в си- стеме. aix$ Isattr -Е -1 sysO -a realmem realmem 4014080 Amount of usable physical memory in Kbytes
1166 Часть III. Разное Сбор данных о производительности Программы анализа производительности в большинстве своем сообщают о том, что происходит в системе в данный момент времени. Но следует учесть, что структу- ра и характер нагрузки меняются в течение дня. Поэтому до принятия мер обязательно проведите всесторонний анализ данных, касающихся производительности. Истинная производительность выясняется только после длительного (месяц или даже больше) на- блюдения за системой. Особенно важно собирать данные в периоды пиковой загружен- ности системы. Ограничения на использование ресурсов и ошибки в конфигурации си- стемы часто выявляются только в таких условиях. Анализ использования центрального процессора Обычно собирают три вида данных о центральном процессоре: общий показатель использования, показатели средней загруженности и потребление ресурсов отдельны- ми процессами. Первая характеристика определяет, является ли быстродействие самого процессора узким местом. Показатели средней загруженности дают возможность оце- нить общую производительность системы. Данные, касающиеся отдельных процессов, позволяют выявить наиболее ресурсоемкие процессы. Сводную информацию выдает команда vmstat. Она принимает два аргумента: вре- мя (в секундах), в течение которого необходимо наблюдать за системой для получения каждой строки выходной информации, и необходимое количество отчетов. Если не ука- зать число отчетов, команда будет выполняться до тех пор, пока пользователь не нажмет комбинацию клавиш <Ctrl+C>. В первой строке отображаемых данных сообщаются средние значения, измеренные с момента запуска системы. В последующих строках выдаются результаты по каждому очередному замеру, стандартная продолжительность которого составляет пять секунд. $ vmstat 5 5 procs — -memory— — -swap- - —io— -system— — —cpu— — г Ь swpd free buff cache si so bi bo in cs us sy id wa 1 0 820 2606356 428776 487092 0 0 4741 65 1063 4857 25 1 73 0 1 0 820 2570324 428812 510196 0 0 4613 11 1054 4732 25 1 74 0 1 0 820 2539028 428852 535636 0 0 5099 13 1057 5219 90 1 9 0 1 0 820 2472340 428920 581588 0 0 4536 10 1056 4686 87 3 10 0 3 0 820 2440276 428960 605728 0 0 4818 21 1060 4943 20 3 77 0 Несмотря на то что содержимое этих колонок может не совпадать в разных системах, статистические данные показателей использования ЦП практически не различаются среди платформ. Пользовательское время, системное время (время ядра), время простоя и время ожидания для каналов ввода-вывода (I/O) показаны в колонках us, sy, id и wa соответственно. Большие числа в колонке us обычно означают вычисления, а в колонке sy они свидетельствуют о том, что процессы осуществляют очень много системных вы- зовов или выполняют операции ввода-вывода. Выработанное нами за многие годы эмпирическое правило для серверов общего на- значения, справедливое для большинства систем, гласит следующее: система должна тратить примерно 50% рабочего времени на обслуживание пользовательских запросов и столько же на системные запросы. Общее время простоя не должно быть нулевым. Если сервер выделяется под одно единственное, но интенсивно использующее ЦП приложе- ние, большая часть времени должна тратиться на обработку пользовательских запросов.
Глава 29. Анализ производительности 1167 В колонке cs показано число переключений контекста за данный период, т.е. сколь- ко раз ядро переключало процессы. В колонке in отображается число прерываний, ге- нерируемых аппаратными устройствами или компонентами ядра. Слишком большие значения в этих колонках свидетельствуют о неправильно работающем аппаратном устройстве. Остальные колонки важны для анализа использования памяти и жесткого диска, о чем будет рассказываться позже в этой главе. Длительные измерения показателей, характеризующих работу центрального процес- сора, позволяют определить, достаточно ли его ресурсов для нормальной работы систе- мы. Если процессор регулярно часть времени простаивает, значит, есть запас по такто- вой частоте. В этом случае увеличение быстродействия процессора ненамного улучшит общую производительность системы, хотя может и ускорить выполнение отдельных операций. Как видно из показанного примера, центральный процессор постоянно переключа- ется из режима интенсивного использования в режим полного бездействия и обратно. Поэтому необходимо наблюдать за показателями, соответствующими обоим режимам, и выводить среднее за определенный период времени. Чем меньше интервал наблюдения, тем ниже достоверность оценок. В мультипроцессорных системах команды вроде vmstat сообщают средние значе- ния по всем процессорам. Но существует и команда xnpstat, которая выдает отчет по каждому процессору. В системах Linux, Solaris и AIX с помощью флага -Р можно вы- брать один конкретный процессор. Этой командой удобно пользоваться при отладке программ, поддерживающих симметричную многопроцессорную обработку. Интересно также узнать, насколько система эффективно (или неэффективно) работает с несколь- кими процессорами. Рассмотрим пример отображения статуса каждого из четырех процессоров. linux$ mpstat -₽ ALL 08:13:38 PM CPU %user 08:13:38 PM 0 1.02 08:13:38 PM 1 0.28 08:13:38 PM 2 0.42 08:13:38 PM 3 0.38 %nice %sys %iowait %irq %soft %idle intr/s 0.00 0.49 1.29 0.04 0.38 96.79 473.93 0.00 0.22 0.71 0.00 0.01 98.76 232.86 0.00 0.36 1.32 0.00 0.05 97.84 293.85 0.00 0.30 0.94 0.01 0.05 98.32 295.02 Центральный процессор однопользовательской рабочей станции обычно простаива- ет большую часть времени. Когда запрашивается прокрутка содержимого окна или об- новляется веб-страница, ЦП справляется с этой операцией за считанные секунды. В та- кой ситуации долгосрочный средний показатель использования ЦП практически лишен смысла. Еще одним статистическим показателем, полезным для оценки интенсивности ис- пользования системы, является показатель “средняя загруженность”, который представ- ляет собой среднее количество выполняемых процессов. Он дает достаточное представ- ление о том, сколько процессов требуют свою долю процессорного времени. Узнать его значение можно с помощью команды uptime. $ uptime 11:10am up 34 days, 18:42, 5 users, load average: 0.95, 0.38, 0.31 Выдаются три значения, которые соответствуют средней загруженности за пять, де- сять и пятнадцать минут. Как правило, чем выше средняя загруженность, тем важнее общая производительность системы. Если выполняется всего лишь один процесс, то он обычно ограничен одним ресурсом (центральным процессором или пропускной способ-
1168 Часть III. Разное ностью дискового канала ввода-вывода). Пиковый спрос на этот ресурс и становится определяющим фактором производительности. Когда в системе одновременно работает несколько процессов, нагрузка распределя- ется более равномерно. Если все работающие процессы потребляют ресурсы ЦП, диска и памяти, то зависимость производительности системы от ограниченных возможностей какого-то одного ресурса снижается. В такой ситуации гораздо важнее следить за сред- ними показателями загруженности, в частности за общим временем использования цен- трального процессора. Ш О приоритетах рассказывалось в конце раздела 5.1. Обычно в однопроцессорных системах значение 3 показателя средней загруженности свидетельствует о сильной загруженности системы, а значение 8 и выше — считается критическим. Такие значения являются сигналом о том, что пора начать поиск путей искусственного перераспределения нагрузки, например назначить процессам приорите- ты с помощью команды nice. Показатель средней загруженности отлично подходит для повседневного контроля системы. Если известен показатель работающей системы и он находится в диапазоне, характерном для перегрузки, значит, следует искать внешний источник проблемы (это может быть, к примеру, сеть). В противном случае нужно проверить процессы самой си- стемы. Еще один способ контроля над использованием ЦП — посмотреть, какую часть его времени отнимает каждый процесс. Для этого служит команда ps с аргументами (-aux — в системах Linux и AIX; -elf — в системах HP-UX и Solaris). Зачастую в ин- тенсивно эксплуатируемой системе минимум 70% времени ЦП отнимается одним-двумя процессами. Запуск таких процессов в другое время суток или снижение их приоритетов позволит высвободить ЦП для выполнения других процессов. Ш Подробнее об утилите top рассказывалось в разделе 5.8. Прекрасной альтернативой команде ps является утилита top. Она выдает примерно туже информацию, что и ps, но в “живом”, постоянно обновляемом формате, позволяв ющем наблюдать за изменением состояния системы во времени2. В системе AIX можно^ воспользоваться даже более эффективной командой topas. < В виртуализированных системах ps, top и другие команды, которые отображай^ данные о показателях использования ЦП, могут вводить в заблуждение. Виртуальной машина, которая не использует все виртуальные циклы своего центрального процессору позволяет другим виртуальным машинам использовать (заимствовать) эти циклы. Любой измерение, которое имеет отношение к операционной системе (например, количество “тиков” системных часов в секунду), должно быть вами тщательно проанализировано, чтобы вы до конца понимали результаты своих измерений. О различных технологиях виртуализации можно подробнее см. в главе 24. Управление памятью в системе В UNIX- и Linux-системах память организована в виде модулей, называемых стра- ницами, размер которых составляет 4 Кбайт или больше. Когда процессы запрашивают у операционной системы память, ядро выделяет им виртуальные страницы. Каждой такой странице соответствует настоящее физическое хранилище, такое как ОЗУ или “резерв- 2 Утилита top потребляет довольно много ресурсов, поэтому пользуйтесь ею в разумных преде- лах.
29. Анализ производительности 1169 ное ЗУ” на жестком диске. (Резервное ЗУ обычно представляет собой просто простран- ство в области подкачки, но для страниц, которые содержат текст исполняемой програм- мы, резервное ЗУ — это самый настоящий исполняемый файл. Аналогично резервное ЗУ для некоторых файлов данных может представлять собой сами файлы.) Информация о связях между виртуальными и реальными страницами хранится в таблице страниц. Ядро способно эффективно обслуживать запросы процессов, выделяя для них столь- ко памяти, сколько им нужно. Это реализуется дополнением реального ОЗУ областью подкачки. Поскольку процессы ожидают, что их виртуальные страницы будут отобра- жаться в реальной памяти, ядру постоянно приходится перемещать страницы между ОЗУ и областью подкачки. Такие операции называются страничным обменом (paging)3. Ядро старается управлять памятью так, чтобы страницы, к которым недавно обра- щались, хранились в физической памяти, а менее активные страницы выгружались на диск. Этот алгоритм известен под названием LRU (least recently used — замещение наи- менее используемых элементов), поскольку те страницы, к которым долго никто не об- ращался, перемещаются на диск. Впрочем, отслеживать все обращения к страницам было бы слишком накладно для ядра, поэтому оно использует страничный кеш-буфер, анализ содержимого которого и позволяет принять решение о том, какие именно страницы оставить в памяти. Точный алгоритм этого механизма зависит от конкретной системы, но везде действует примерно одинаковый принцип. Такой вариант гораздо проще в реализации, чем LRU-система, а результаты дает почти такие же. В случае нехватки памяти ядро пытается определить, какие страницы из “неактив- ного” списка давно не использовались. Если при последнем обращении такие страницы модифицировались процессом, ядро считает их “грязными”; они обязательно должны быть выгружены на диск, прежде чем память будет повторно использована. Все осталь- ные страницы считаются “чистыми” и могут быть переданы другому процессу. Когда выполняется обращение к странице из “неактивного” списка, ядро возвра- щает ссылку на нее в таблицу страниц, обнуляет ее “возраст” и переводит страницу из “неактивного” списка в “активный”. Страницы, выгруженные на диск, должны быть прочитаны с диска, прежде чем их можно будет активизировать. Когда процесс обра- щается к неактивной странице, находящейся в памяти, происходит сбой программной страницы (это так называемая “мягкая ошибка”). В случае обращения к нерезидентной (выгруженной) странице имеет место отказ страницы диска (а это уже “жесткая ошиб- ка”). Другими словами, при возникновении ошибки второго типа (в отличие от первого) требуется прочитать страницу с диска. Ядро старается прогнозировать потребности системы в памяти, поэтому операции выделения и выгрузки страниц не обязательно взаимосвязаны. Цель системы — обеспе- чить наличие достаточного объема свободной памяти, чтобы процессам не приходилось ждать выгрузки страниц всякий раз, когда им нужна свободная память. Если в периоды сильной загруженности системы страничный обмен резко возрастает, имеет смысл ку- пить дополнительную память. Д Система Linux по-прежнему быстро эволюционирует, и ее система виртуаль- ной памяти продолжает развиваться, причем несколько неровно и даже неу- клюже. Можно настроить параметр “подкачки” (/ргос/sys/vm/swappiness) и тем самым дать ядру подсказку о том, насколько быстро оно должно делать 3 Когда-то имела место иная операция, именуемая подкачкой (или свопингом), посредством которой все страницы некоторого процесса одновременно переписывались на диск. Теперь же во всех случаях обязательно используется страничный обмен (paging).
1170 Часть III. Разное страницы пригодными для возврата из процесса в случае нехватки памяти. По умолчанию для этого параметра устанавливается значение 60. Если для него установить значение 0, ядро будет забирать страницы, которые были назна- чены процессу, только тогда, когда испробует все остальные возможности. Если для него установить значение 60 или выше (максимальным значением является 100), ядро, скорее всего, будет забирать страницы из процесса. Если возникает желание изменить этот параметр, значит, возможно, пришла пора увеличить ОЗУ. Когда ядру не хватает как физической памяти, так и области подкачки, это означа- ет, что виртуальная память исчерпана. В данной ситуации включается режим “прину- дительного уничтожения”. Чтобы освободить память, системе приходится уничтожать целые процессы. И хотя выбираются наименее важные для системы процессы, все равно это очень неприятная процедура, ведь значительная часть ресурсов системы тратится не на полезную работу, а на управление памятью. Анализ использования памяти Интенсивность операций с памятью количественно представляется двумя показа- телями: общим объемом задействованной виртуальной памяти и страничного обмена. Первый показатель характеризует общую потребность в памяти, а второй указывает на то, какая доля этой памяти активно используется. Задача администратора заключается в снижении интенсивности использования или увеличении объема памяти до тех пор, пока не будет достигнут приемлемый уровень страничного обмена. Страничный об- мен — процесс неизбежный, поэтому не пытайтесь полностью избавиться от него. У вас есть возможность определить размер текущей области подкачки. Для этого в Linux выполните команду swapon -s, в Solaris и AIX—команду swap -1, а в HP-UX — команду swapinfo. linux$ swapon -s Filename Type Size Used Priority /dev/hdbl partition 4096532 0 -1 /dev/hda2 partition 4096564 0 -2 solaris$ swap -1 swapfile dev swapl blocks free /dev/dsk/c0t0d0sl 32,1 16 164400 162960 hp-ux$ swapinfo Kb Kb Kb PCT START/ Kb TYPE AVAIL USED FREE USED LIMIT RESERVE PRI NAME dev 8388608 0 8388608 0% 0 1 /dev/vg00/lvol При выполнении команд swapinfo и swapon значения выводятся в килобайтах, а команда swap -1 использует 512-байтовые дисковые блоки. Значения размеров, выво- димые этими командами, не включают содержимое памяти ядра, поэтому вам придется вычислить общий объем виртуальной памяти самостоятельно. VM = ОЗУ + используемый_объем_области__подкачки В системах UNIX вывод статистических показателей страничного обмена, получен- ных с помощью команды vmstat, подобен результату выполнения команды в системе Solaris. solaris$ vmstat 5 5 procs memory page disk faults
Глава 29. Анализ производительности 1171 г b w swap free re mf Pi po fr de sr sO s6 s4 — in sy cs 0 0 0 338216 10384 0 3 1 0 0 0 0 0 0 0 0 132 101 58 0 0 0 341784 11064 0 26 1 1 1 0 0 0 0 10 150 215 100 0 0 0 351752 12968 1 69 0 9 9 0 0 0 0 2 0 173 358 156 0 0 0 360240 14520 0 30 6 0 0 0 0 0 0 10 138 176 71 1 0 0 366648 15712 0 73 0 8 4 0 0 0 0 36 0 390 474 237 Из этого примера удалена информация об использовании центрального процессора. Под заголовком procs показано количество процессов, готовых к немедленному вы- полнению, заблокированных в ожидании ввода-вывода, а также готовых к выполнению, но перекачанных на диск. Если значение в колонке w когда-нибудь станет отличным от нуля, это будет означать, что объем системной памяти не соответствует текущей на- грузке. Колонки, объединенные под общим заголовком раде, содержат данные о выполне- нии страничного обмена. Во всех этих колонках представлены средние значения: коли- чество в секунду (табл. 29.3). В колонке swap выдается объем доступной виртуальной памяти в килобайтах. В ко- лонке free отображается объем (в килобайтах) списка неиспользуемых страниц систе- мы. Если приведенные в ней числа не достигают 3% от общего объема системной памя- ти, это говорит о наличии проблем. Таблица 29.3. Описание статистических показателей, выводимых командой vmstat Колонка ' 0писайиегюказате|й / - \ re Количество восстановленных страниц, т.е. возвращенных из списка неиспользуемых mf Количество незначительных ошибок (связанных с небольшим числом страниц) Pi Объем подкачанных данных в килобайтах PO fr Объем выгруженных данных в килобайтах Объем списка неиспользуемых страниц в килобайтах de Объем “ожидаемого краткосрочного дефицита памяти” в килобайтах sr Количество страниц, обработанных по алгоритму часов Содержимое колонки de — самый надежный показатель возникновения серьезных проблем с памятью. Если находящееся в ней число зачастую “зашкаливает” за 100, это значит, что компьютеру нужно больше памяти. К сожалению, во многих версиях коман- ды vmstat это значение не выводится. В системах Linux статистические показатели, получаемые с помощью команды vmstat, могут иметь следующий вид. linux$ vmstat 5 5 procs memory -swap- io— -system- CpU г b swpd free buff cache si so bi bo in cs us sy id wa st 5 0 0 66488 40328 597972 0 0 252 45 1042 278 3 4 93 1 0 0 0 0 66364 40336 597972 0 0 0 37 1009 264 0 1 98 0 0 0 0 0 66364 40344 597972 0 0 0 5 1011 252 1 1 98 0 0 0 0 0 66364 40352 597972 0 0 0 3 1020 311 1 1 98 0 0 0 0 0 66364 40360 597972 0 0 0 21 1067 507 1 3 96 0 0 Как и в результате выполнения команды vmstat при использовании системы UNIX, количество процессов, готовых к немедленному выполнению и заблокированных в ожидании ввода-вывода, выводится под заголовком procs. Статистические показатели
1172 Часть III. Разное страничного обмена ограничены двумя колонками: si и so, которые представляют ко- личество подкачанных и выгруженных страниц соответственно. Кажущиеся несоответствия между колонками, большей частью, иллюзорны. В одних колонках указывается число страниц, в других — объем в килобайтах. Все значения яв- ляются округленными средними величинами. Более того, одни из них — средние ска- лярных величин, а другие — средние изменений. С помощью полей si и so можно оценить интенсивность страничного обмена в си- стеме. Операция загрузки (поле si) не обязательно означает, что из области подкачки восстанавливается страница. Это может быть исполняемый код, постранично загружае- мый из файловой системы, или копия страницы, создаваемая в режиме дублирования при записи. Оба случая вполне типичны и не обязательно означают нехватку памяти. С другой стороны, операция выгрузки (поле so) всегда означает принудительное изъя- тие данных ядром. Система, в которой непрерывно происходят операции выгрузки, скорее всего, выи- грает от добавления памяти. Если же это случается лишь время от времени и не вызы- вает жалоб со стороны пользователей, то можно не беспокоиться. В остальных случаях дальнейший анализ будет зависеть от того, что нужно сделать, — оптимизировать систе- му для интерактивного режима (например, как рабочую станцию) или сконфигуриро- вать ее для одновременной работы пользователей (например, как сервер приложений). При использовании обычного жесткого диска можно считать, что каждые 100 опе- раций выгрузки создают задержку примерно в одну секунду4. Соответственно, если для прокрутки окна требуется 150 операций выгрузки, придется ждать около полутора се- кунды. Исследователи пользовательских интерфейсов утверждают, что среднестатисти- ческий пользователь считает систему “медленной”, когда время ее реакции превышает семь десятых секунды. Анализ операций обмена с диском Производительность жесткого диска можно контролировать с помощью команды iostat. Как и vmstat, эта команда поддерживает дополнительные аргументы, задаю- щие интервал времени в секундах между моментами выдачи статистических данных за истекший период и число повторений. Команда iostat выдает также сведения об ис- пользовании ЦП. Приведем небольшой пример для системы Solaris. solaris$ iostat 5 5 tty sdO sdl nfsl cpu tin tout kps tps serv kps tps serv kps tps serv us sy wt id 0 1 5 1 18 14 2 20 0 0 0 0 0 0 99 0 39 0 0 0 2 0 14 0 0 0 0 0 0 100 2 26 3 0 13 8 1 21 0 0 0 0 0 0 100 3 119 0 0 0 19 2 13 0 0 0 0 1 1 98 1 16 5 1 19 0 0 0 0 0 0 0 0 0 100 Колонки разделены по темам (в данном случае их пять: tty, sdO, sdl, nf si и cpu). В разных системах данные, выводимые командой iostat, выглядят по-разному. В разделе tty содержатся данные о терминалах и псевдотерминалах. В общем-то, это неинтересная информация, хотя она и может оказаться полезной для оценки пропуск- ной способности модема. В колонках tin и tout дается среднее суммарное число сим- волов, введенных и выведенных всеми терминалами системы за секунду. 4 Мы считаем, что половину операций страничного обмена составляет выгрузка.
Глава 29. Анализ производительности 1173 Информация о каждом жестком диске размещается в колонках kps, tps и serv: объем данных, пересланных за секунду (в килобайтах); общее количество пересылок за секунду; и среднее время позиционирования головки в миллисекундах. Одно обраще- ние к диску может затронуть сразу несколько его секторов, поэтому соотношение между числами, приведенными в колонках kps и tps, говорит о структуре пересылок: толи это несколько крупных пересылок, то ли множество мелких. Крупные пересылки бо- лее эффективны. Механизм вычисления времени позиционирования, похоже, работает только на некоторых дисковых накопителях и иногда дает странные результаты (к дан- ному примеру это не относится). Результат выполнения команды iostat в системах Linux, HP-UX и AIX может вы- глядеть примерно так. aix$ iostat Device: tps Blk_read/s Blk_wrtn/s Blk_read Blk_wrtn hdiskO 0.54 0.59 2.39 304483 1228123 hdiskl 0.34 0.27 0.42 140912 216218 hdisk2 0.01 0.02 0.05 5794 15320 hdisk3 0.00 0.00 0.00 0 0 Для каждого жесткого диска сообщается число операций ввода-вывода в секунду (tps), количество операций блочного чтения и блочной записи в секунду (Blk_read/s и Blk_write/s), общий объем прочитанных (Blk_read) и записанных (Blk_wrtn) блоков. Размер дискового блока обычно равен 1 Кбайт (KiB), поэтому можно легко опреде- лить реальную скорость обмена данными с диском в килобайтах в секунду. В то же время понятие операции ввода-вывода несколько размыто. Один запрос на пересылку данных может включать в себя несколько запросов ввода-вывода к различным секторам. Время, затрачиваемое на поиск блока, — основной фактор, влияющий на производи- тельность жесткого диска. В первом приближении скорость вращения диска и быстро- действие шины, к которой он подключен, не имеют особого значения. Современные ди- ски могут пересылать сотни мегабайтов данных в секунду, если эти данные считываются из смежных секторов. Вместе с тем количество операций поиска составляет от 100 до 300 в секунду. Если после каждой операции поиска будет читаться один-единственный сектор, легко подсчитать, что в таком режиме задействуется менее 5% максимальной пропускной способности канала обмена данными с диском. Затраты времени на поиск блока возрастают, если головке приходится перемещать- ся на большие расстояния. Когда есть диск с файловой системой, расположенной в не- скольких разделах, и файлы считываются из каждого раздела в случайной последова- тельности, то для перехода из одного раздела в другой головка вынуждена преодолевать очень большой путь. С другой стороны, файлы в одном разделе расположены относи- тельно близко друг к другу. Разбивая новый диск на разделы, необходимо принять во внимание факторы, влияющие на производительность, и постараться поместить файлы, обращение к которым осуществляется одновременно, в одну файловую систему. Для достижения максимальной производительности нужно помещать файловые си- стемы, которые используются одновременно, на разные диски. Хотя тип шины и драй- веры устройств влияют на степень эффективности, большинство компьютеров может работать с несколькими дисками параллельно, что значительно повышает пропускную способность дисковой подсистемы. Например, данные и журнальные файлы веб-сервера имеет смысл размещать на разных дисках.
1174 Часть III. Разное Особенно важно распределить область подкачки между несколькими дисками, если это возможно, поскольку страничный обмен обычно замедляет работу системы в целом. Многие системы позволяют создавать как выделенные разделы подкачки, так и файлы подкачки, записываемые в обычную файловую систему. Кроме того, многие системы позволяют создавать “резидентные” файловые систе- мы. Фактически это то же самое, что и виртуальный диск ПК. Специальный драйвер выдает себя за драйвер диска, хотя на самом деле записывает данные в память. Во мно- гих организациях виртуальные диски применяются для хранения файловой системы /tmp и других часто используемых файлов, например журналов веб-сервера и почтовых буферов. Это приводит к уменьшению объема общедоступной памяти, но значительно ускоряет чтение и запись временных файлов. Как правило, такой подход оказывается весьма эффективным. Ш Подробнее о командах Isof и fuser см. в разделе 6.2. Команда Isof, которая выводит список открытых файлов, и команда fuser, которая перечисляет процессы, использующие файловую систему, могут оказаться весьма полез- ными для выявления проблем, связанных с операциями обмена с диском. Эти команды отображают взаимодействия между процессами и файловыми системами и могут указать на непредусмотренные вами взаимосвязи. Например, если некоторое приложение ре- гистрирует свои события на то же устройство, которое используется и журналами реги- страции базы данных, то в результате этот диск может стать “узким местом” системы. Утилита xdd: анализ производительности дисковой подсистемы Современные системы хранения информации могут включать сети или SAN-эле- менты, RAID-массивы и другие уровни абстракции. Для измерения и оптимизации этих сложных систем имеет смысл воспользоваться утилитой xdd, которая доступна под от- крытой лицензией (GPL) и выполняется во всех наших примерах систем (не говоря уже о Windows). Утилита xdd измеряет параметры подсистемы ввода-вывода на отдельном компьюте- ре и на кластерах систем. Она хорошо описана и обеспечивает точные и воспроизводи- мые измерения производительности. Подробнее о ней см. на сайте ioperformance. com. Команда sar: сбор статистических данных и генерирование отчетов по ним Команда sar — предназначенный для мониторинга производительности инструмент, который “проверен временем” (эта команда появилась еще во времена AT&T UNIX) на системах UNIX и Linux и все еще остается актуальным, несмотря на использование “старого-доброго” синтаксиса командной строки. На первый взгляд может показаться, что команда sar отображает ту же информа- цию, что и команды vmstat и iostat. Однако имеется одно очень важное отличие: sar “умеет” предоставлять отчеты как по старым (накопленным), так и текущим данным. £3 Пакет Linux, который содержит команду sar, называется sysstat. Без опций команда sar предоставляет отчет о том, как ЦП использовался в течение того или иного дня каждые 10 минут, начиная с полуночи. Получение такой коллекции накопленных данных делает возможным сценарий sal, который является частью паке-
Глава 29. Анализ производительности 1175 та sar и требует указания интервала времени, через который он должен запускаться из демона cron. Все данные, которые собирает команда sar, она сохраняет в бинарном формате в каталоге /var/log. linux$ sar Linux 2.6.18-92.ELsmp (bajafur.atrust.com) 01/16/2010 12:00:01 AM CPU %user %nice %system %iowait %idle 12:10:01 AM all .10 0.00 0.04 0.06 99.81 12:20:01 AM all 0.04 0.00 0.03 0.05 99.88 12:30:01 AM all 0.04 0.00 0.03 0.04 99.89 12:40:01 AM all 0.09 0.00 0.03 0.05 99.83 12:50:01 AM all 0.04 0.00 0.03 0.04 99.88 01:00:01 AM all 0.05 0.00 0.03* 0.04 99.88 Помимо информации о ЦП, sar также может предоставлять отчеты по метрическим показателям, таким как показатели дисковой и сетевой активности. Команда sar -d отображает сводку данных об активности диска за сегодняшний день, sar -n DEV — ста- тистические данные о сетевом интерфейсе, a sar -А — всю доступную информацию. Команда sar имеет некоторые ограничения и потому хорошо подходит только для быстрого получения кратких накопленных сведений. Тем, кто решил “всерьез и надолго” заняться мониторингом производительности, лучше установить специальную платформу с возможностями сбора коллекций данных и представления их в виде графиков, такую как платформа Cacti. Эта платформа “пришла к нам” из мира сетевого управления, но действительно умеет отображать произвольные метрические показатели системы, та&ие как показатели использования ЦП и памяти, в виде графиков. Пример отображаемого Cacti графика с дополнительными комментариями приводился в разделе 21.12. nmon и nmon_analyser: мониторинг производительности в системе AIX ®В системах AIX утилиту nmon системные администраторы часто выбирают в качестве инструмента измерения и настройки производительности. Она во многом напоминает утилиту sar. Стивен Аткинс (Stephen Atkins), сотрудник компании IBM, разработал крупноформатную электронную таблицу nmon_ analyser, которая обрабатывает данные, собираемые утилитой nmon. Данная утилита позволяет специалистам по производительности просматривать данные в формате большой таблицы, находить “плохие” данные и составлять графики, которые можно показать клиентам. Она выполняет более сложный анализ, чем утилита sar. Например, она вычисляет взвешенные средние числа для анализа пиковых точек, отображает загруженность устройства, размер считанных и за- писанных данных за день для системы хранения IBM и строит отдельные диа- граммы для систем хранения ЕМС. И хотя утилита nmon_analyser официаль- но не поддерживается компанией IBM, вы можете найти ее на сайте IBM: ibm.com/developerworks/aix/library/au-nmon_analyser. Выбор Linux-планировщика ввода-вывода ®В системах Linux используется алгоритм планирования подсистемы ввода- вывода, который выступает в роли “арбитра” между соревнующимися за дис- ковый ввод-вывод процессами. Он оптимизирует порядок и время запросов
1176 Часть III. Разное для обеспечения наилучшей возможной производительности подсистемы ввода-вывода для данного приложения или ситуации. В ядро Linux 2.6 встроены четыре разных алгоритма планирования. Можно выби- рать любой. К сожалению, алгоритм планирования устанавливается во время загрузки (при помощи атрибута ядра е1еуаЬог=алгоритм) и поэтому его не легко изменить. Алгоритм планирования системы обычно указывается в файле конфигурации начально- го загрузчика GRUB grub. config. Все доступные алгоритмы перечислены ниже. Comletely Fair Queuing (elevator=cfq). Этот алгоритм используется по умолчанию и обычно является наиболее подходящим вариантом для серверов общего назначения. Он старается равномерно предоставлять доступ к подсистеме ввода-вывода. (Во всяком случае этот алгоритм заслуживает награды за маркетинг: кто скажет “нет” совершенно справедливому планировщику?) Deadline (elevator=deadline). Этот алгоритм “старается” сводить к минимуму время задержки для каждого запроса. Он изменяет порядок запросов для повышения производительности. NOOP (elevator=noop). Этот алгоритм реализует простую очередь типа FIFO (First In, First Out — первым пришел, первым обслужен). Он предполагает, что запросы к под- системе ввода-вывода уже были (или еще будут) оптимизированы или переупорядоче- ны драйвером или устройством (каковым вполне может быть какЙЙ-нибудь контроллер со встроенной логикой). Он может быть наиболее подходящим вариантом в некоторых SAN-средах и для SSD-устройств. Определив, какой из этих алгоритмов планирования является наиболее подходящим для данной среды (что может потребовать перепробовать все четыре варианта), возмож- но, вам удастся улучшить производительность подсистемы ввода-вывода. Программа oprofile: универсальный профилировщик системы Linux ©Программа oprofile — это чрезвычайно мощная, интегрируемая в систему программа профилирования для систем Linux с ядром версии 2.6 или выше. Профилированию могут подвергаться все компоненты системы Linux: аппа- ратные и программные обработчики прерываний, модули ядра, само ядро, со- вместно используемые библиотеки и приложения. При наличии свободного времени и желания точно знать, как используются ре- сурсы системы (до самых мельчайших деталей), стоит рассмотреть вариант установки oprofile. Эта утилита особенно полезна для тех, кто разрабатывает свои собственные приложения или код ядра. В состав дистрибутива oprofile, который доступен для загрузки на сайте sourceforge. net, входят как модули ядра, так и ряд пользовательских утилит. В начале 2010 года на горизонте появилась новая система отслеживания производи- тельности. Известная как подсистема событий производительности (“perf events”), она обеспечивает уровень оснащенности, никогда ранее не виданный в ядре Linux. По всей вероятности, эта система в будущем заменит программу профилирования производи- тельности в системах Linux oprofile.
Глава 29. Анализ производительности 1177 29.5. Помогите! Моя система почти остановилась! В предыдущих разделах речь шла, в основном, о средней производительности систе- мы. Для ее повышения требуется корректировать конфигурационные параметры или модернизировать систему. Но даже правильно сконфигурированные системы иногда работают медленнее обыч- ного. К счастью, нерегулярные проблемы обычно легко диагностируются. В большин- стве случаев они создаются “ненасытным” процессом, который потребляет так много ресурсов процессора, жесткого диска или сетевой подсистемы, что остальные процессы буквально останавливаются. Иногда процесс намеренно захватывает ресурсы, чтобы за- медлить работу системы или сети. Это называется атакой типа “отказ в обслуживании”. Очень часто, чтобы определить, какой конкретно ресурс исчерпан, не нужно даже за- пускать диагностическую программу. Если система начинает “подвисать”5 или подозри- тельно долго обращаться к диску, то проблема, скорее всего, связана с пропускной спо- собностью дисковой подсистемы или дефицитом памяти. Если же производительность приложений падает ниже критического уровня, проблема, возможно, в загрузке ЦП. Первый шаг в диагностировании проблемы — запуск команды ps auxww (ps -elf в Solaris и HP-UX) или top для выявления явно неуправляемых процессов. Любой про- цесс, отнимающий более 50% времени ЦП, можно с большой долей вероятности считать ненормальным. Если столь непомерную долю ресурсов ЦП не получает ни один про- цесс, посмотрите, сколько процессов получают минимум по 10%. Когда их больше двух- трех (не считая самой команды ps), средняя загруженность, скорее всего, будет очень высокой. Такая ситуация сама по себе является причиной низкой производительности. Проверьте среднюю загруженность системы с помощью команды uptime, а затем выпол- ните команду vmstat или top, чтобы узнать, простаивает ли когда-нибудь процессор. Если конкуренции за право использования центрального процессора не наблюдает- ся, выполните команду vmstat, чтобы посмотреть, какова интенсивность страничного обмена. Следует обращать внимание на все операции обмена с диском: множество опе- раций выгрузки может означать соперничество за память, а наличие дискового трафика в отсутствие страничного обмена говорит о том, что какой-то процесс монополизировал диск, непрерывно читая и записывая файлы. Нельзя непосредственно сопоставить дисковые операции с выполняющими их про- цессами, но с помощью команды ps можно сузить круг “подозреваемых”. Любой про- цесс, работающий с диском, должен отнимать какую-то часть времени ЦП. Как пра- вило, всегда можно сделать обоснованное предположение о том, какой конкретно из активных процессов захватил ресурсы6. Для проверки своей теории на практике выпол- ните команду kill -STOP. Предположим, процесс-виновник найден. Что с ним делать дальше? Как правило, ничего. Некоторые операции действительно требуют много ресурсов и неизбежно за- медляют работу системы, но это вовсе не означает, что они незаконны. Но с помощью 5 Другими словами, требуется больше времени на переключение между приложениями, хотя скорость выполнения отдельных заданий приемлема. 6 Ранее признаками этого служили большой размер области данных процесса, размещенной в виртуальной памяти, либо неестественно большой объем занимаемой процессом физической памяти, но появление совместно используемых библиотек сделало эти показатели не столь по- лезными. Команда ps не умеет отделять общесистемные совместно используемые библиотеки от адресного пространства отдельных процессов. Кажется, что многие процессы занимают десятки мегабайтов физической памяти, хотя на самом деле это не так.
1178 Часть III. Разное команды renice можно изменить приоритет процесса, для которого ограничивающим фактором является быстродействие ЦП. Иногда правильная настройка приложения мо- жет привести к значительному снижению потребления ресурсов. Этот эффект особенно заметен в сетевых серверных программах, например в веб-приложениях. Процессы, интенсивно использующие диск и память, нелегко поддаются воздей- ствию. Команда renice обычно не помогает. Можно уничтожить или остановить про- цесс, но, на наш взгляд, такая мера оправдана только в экстренных ситуациях. Лучше прибегнуть к административной мере: попросить владельца запустить процесс позже. Ядро позволяет процессу ограничивать объем потребляемой им самим физической памяти при помощи системного вызова setrlimit7. Эта возможность также доступна в оболочке С в виде встроенной команды limit. Например, команда % limit memoryuse 32m ограничивает использование физической памяти для всех последующих пользова- тельских команд тридцатью двумя мегабайтами (в системе Solaris вместо команды memoryuse используется команда memory size). Ее действие примерно эквивалентно действию команды renice в отношении процессов, ограничивающим фактором для ко- торых является объем памяти. Если неуправляемый процесс не является источником снижения производитель- ности, нужно проанализировать две другие возможные причины. Первая — перегруз- ка сети. Многие программы настолько тесно связаны с сетью, что иногда трудно по- нять, где речь идет о производительности системы, а где — о производительности сети. Подробная информация о средствах контроля над работой сети приведена в главе 21. В некоторых случаях проблемы, связанные с перегрузкой сети, выявить сложно, по- тому что они возникают и исчезают очень быстро. Например, если на всех компьютерах сети каждый день в определенное время с помощью демона cron запускается какая-то сетевая программа, то в сети может возникать кратковременный, но серьезный затор. Все компьютеры “зависнут” секунд на пять, после чего ситуация нормализуется. Вторая причина — задержки, связанные с серверами. UNIX- и Linux-системы по- стоянно обращаются к удаленным серверам NFS, Kerberos, DNS и т.п. Если сервер не работает или какая-то иная проблема привела к тому, что связь с ним стала ненадежной, это ощущают на себе все клиентские системы. Предположим, что в интенсивно эксплуатируемой системе какой-то процесс каждые несколько секунд вызывает библиотечную функцию gethostent. Если сбой в работе DNS заставляет эту функцию тратить на свое выполнение две секунды, будет заметно общее снижение производительности системы. На удивление, большое число проблем с производительностью серверов связано с неправильной конфигурацией прямого и об- ратного поиска в DNS. 29.6. Рекомендуемая литература • Cockcroft Adrian and Bill Walker. Capacity Planning for Internet Services. Upper Saddle River, NJ: Prentice Hall, 2001. • Drepper Ulrich. What Every Programmer Should Know about Memory, lwn.net/ Articles/250967. 7 Более тонкое управление ресурсами может быть достигнуто посредством CKRM-функций (Class-based Kernel Resource Management — управление ресурсами ядра на базе классов); см. скгт. sourceforge. net.
Глава 29. Анализ производительности 1179 • Ezolt Phillip G. Optimizing Linux Performance. Upper Saddle River, NJ: Prentice Hall PTR, 2005. • Johnson S., et al. Performance Tuning for Linux Servers. Indianapolis, IN: IBM Press, 2005. • Loukides, Mike and Gian-Paolo D. Musumeci. System Performance Tuning (2nd Edition). Sebastopol, CA: O’Reilly & Associates, 2002. • Tufte, Edward R. The Visual Display of Quantitative Information (2nd Edition). Cheshire, CT Graphics Press, 2001. 29.7. Упражнения 29.1. Определите возможную причину проблем в каждом из перечисленных ниже слу- чаев. а) при переключении между приложениями возникает заметная пауза и слышно, как диск интенсивно перекачивает данные; б) программа численного моделирования выполняется дольше, чем нужно, но системная память практически свободна; в) пользователи интенсивно эксплуатируемой ЛВС жалуются на медленный до- ступ через NFS, но показатель средней загруженности сервера остается очень низким; г) В процессе работы команда часто сообщает о нехватке памяти. 29.2. ★ Системы балансирования нагрузки способны существенно влиять на произво- дительность серверов. Перечислите несколько механизмов, которые могут исполь- зоваться для распределения нагрузки. 29.3. ★ Перечислите четыре основных фактора, влияющих на производительность. Для каждого из них приведите пример приложения, способного легко захватить весь ресурс. Укажите способы решения проблемы в каждом конкретном случае. 29.4. ★ Напишите три простые программы (или сценарии). Первая должна увеличить процессорное время, выделяемое на выполнение системных задач, а вторая — на выполнение пользовательских задач. Третья не должна влиять ни на один из этих параметров, но должна иметь большую продолжительность выполнения (elapsed time). Используйте свои программы в сочетании с командами, описанными в раз- деле “Анализ использования центрального процессора” (выше в этой главе), что- бы узнать, что произойдет при воздействии на систему различными способами. 29.5. ★ Напишите две простые программы (или сценарии). Первая должна интенсивно выполнять операции чтения, а вторая — операции записи. Используйте свои про- граммы с командами, приведенными в разделе “Анализ операций обмена с дис- ком” (выше в этой главе), чтобы узнать, что произойдет при воздействии на си- стему различными способами. (В качестве дополнительного условия предложите каждой из своих программ по выбору использовать модель либо произвольного, либо последовательного доступа.) 29.6. ★ Выберите любые две программы, потребляющие заметный объем системных ресурсов. Воспользуйтесь командой vmstat и другими рассмотренными в этой главе средствами для анализа работы каждой программы. Укажите, какие действия программы приводят к повышенному потреблению ресурсов. Подтвердите свои выводы конкретными числами.
глава 30 Взаимодействие с системой Windows Сегодня администраторы очень часто работают со средами, в которых установлены одновременно и Windows-, и UNIX-системы. Поэтому они должны знать о том, что су- ществует немало способов, которыми эти операционные системы могут помогать друг другу. Например, Windows-приложения, помимо всего прочего, могут запускаться с ра- бочего стола UNIX или получать доступ к находящимся на сервере UNIX принтерам и файлам, а UNIX-приложения могут отображать свои пользовательские интерфейсы на рабочем столе Windows. Обе платформы имеют сильные стороны, и их можно заставить работать совместно. Windows — это популярная и удобная настольная система, способная выступать в роли “мостика” между пользователем и выходящим из стены сетевым кабелем. С другой сто- роны, UNIX — это надежная и масштабируемая инфраструктурная платформа. Так что давайте не будем ссориться, ладно? 30.1. Вход в систему UNIX из Windows У пользователей может возникнуть желание поработать в сеансе оболочки С или bash, не вставая из-за своего компьютера Windows. Лучшим инструментом для удаленного до- ступа в системах UNIX и Linux является протокол оболочки безопасности SSH. Ш О протоколе SSH более подробно рассказывалось в разделе 22.10. Существует несколько реализаций протокола SSH для системы Windows. Протокол SSH также поддерживает передачу файлов, а пакет PuTYY включает две предназначен- ные для этой цели клиентские программы с интерфейсом командной строки: psf tp
Глава 30. Взаимодействие с системой Windows 1181 и pscp. Приверженцам системы Windows, которые никогда не имели дела с командной строкой, скорее всего, придется по душе имеющая графический интерфейс клиентская программа WinSCP, доступная по адресу: winscp.net. Еще один неплохой вариант — установить общий пакет UNIX-on-Windows Cywin и запускать доступные в нем SSH-утилиты из эмулятора rxvt. Пакет Cygwin описывается в разделе 30.4. Модную, не имеющую пока никаких негативных отзывов Java-реализацию прото- кола SHH под названием MindTerm предлагает компания AppGate (appgate. com). Для личного использования программа MindTerm доступна бесплатно. Она запускается на любой системе, которая поддерживает язык Java, и может конфигурироваться различ- ными способами. Среди коммерческих реализаций клиента протокола SSH нашим фаворитом являет- ся программа SecureCRT компании VanDyke Software. Ее можно приобрести на сайте vandyke.com. Программа SecureCRT поддерживает все необходимые терминальные функции. Кроме того, компания VanDyke предлагает прекрасное обслуживание заказ- чиков и стимулирует их предлагать новые функции. Как и в программе PuTTY, функции программы SecureCRT встроены в программное обеспечение протокола для передачи файлов SFTR Интересной функцией протокола SSH является способность перенаправлять порты TCP между клиентом и сервером. Например, эта функция позволяет администратору настроить на клиенте локальный порт, который будет перенаправлять входящее сое- динение на другой порт, находящийся на машине, доступ к которой возможен только с сервера. Хотя эта функция открывает множество новых возможностей, она потенци- ально опасна и потому должна учитываться администратором при предоставлении SSH- доступа к своему серверу. К счастью, ее можно отключить на стороне сервера и тем са- мым ограничить возможности SSH только доступом к терминалу и передачей файлов. 30.2. Получение доступа к удаленным НАСТОЛЬНЫМ СРЕДАМ Графические настольные среды в системе UNIX связаны с распространяемой бес- платно системой X Window System, которая не имеет никакого отношения к Micro- soft Windows. Система X Windows была разработана в исследовательских центрах Массачусетсского технологического института в средине восьмидесятых годов прошло- го столетия и принята как стандарт всеми производителями рабочих станций UNIX и дистрибутивов системы Linux. Она претерпела несколько серьезных обновлений; ста- бильная база была окончательно достигнута лишь в версии 11, которая была впервые опубликована в начале девяностых годов прошлого века. Номер версии протокола был добавлен к ее названию — "XII”; под этим именем она известна сегодня. (Слово “Windows”, используемое само по себе, всегда — как в этой главе, так и в реальном мире — означает операционную систему Microsoft Windows.) XI1 — это клиент-серверная система. Сервер X Server отвечает за отображение дан- ных на экране пользователя и за получение входных данных с клавиатуры или от мыши пользователя. Он взаимодействует с клиентскими приложениями через сеть. Вовсе не обязательно, чтобы сервер и клиенты запускались на одной и той же машине. Ш Архитектура X Windows более подробно описывалась в главе 25.
1182 Часть III. Разное Запуск сервера X Server на компьютере Windows XI1 — это богатый протокол, в который за последние годы было добавлено мно- го расширений. Поэтому реализация сервера X Server является довольно сложной. Несмотря на это, сегодня реализации сервера X Server существуют практически для каждой операционной системы. Сама система X Windows безразлична к операционной системе, так что клиенты протокола XII, работающие на UNIX-компьютере, могут ото- бражать сервер X Server, работающий под управлением системы Microsoft Windows, и по- зволять пользователю управлять ими точно так же, как если бы этот пользователь сидел за системной консолью. К сожалению, первые разработчики протоколов X не уделили должного внимания вопросам безопасности. Каждая программа, которая подключается к серверу X Server, может считывать все, что вводит с клавиатуры обслуживающий этот сервер администра- тор, и видеть все, что он отображает на своем экране. Еще больше ухудшает дело то, что удаленным программам даже не нужно отображать окно при получении доступа к серве- ру X Server: они могут просто “ тихонько прокрадываться” на заднем фоне. Со временем для защиты протокола XI1 было предложено несколько методов, но все они оказались несколько сложными. Вывод таков: лучше не разрешать никаких удален-, ных подключений к своему серверу X Server, если нет уверенности в том, что делаешь. Большинство серверов X по умолчанию конфигурируется так, чтобы они не допускали удаленных соединений, так что угрозы безопасности быть не должно, по крайней мере до тех пор, пока не будет запущена программа xhosts (или ее аналог), предоставляю- щая права на удаленный доступ. К сожалению, предоставление прав на удаленный доступ — это единственный путь, когда нужно сделать так, чтобы программы выполнялись в системе UNIX, а их интер- фейсы отображались в системе Windows. Как же запустить удаленное приложение, не предоставив разрешения на удаленный доступ серверу X Server? Наиболее распростра- ненный метод — использовать функциональную возможность протокола SSH, которая была специально разработана для поддержки протокола XI1. В таком случае между клин ентами системы X, работающими на удаленном хосте, и локальным сервером X будет создан безопасный канал. Программы, запускаемые на удаленном хосте, будут автома- тически отображаться на локальной машине, но благодаря чудодейственным операциям; протокола SSH локальный сервер X будет воспринимать их так, будто они были запуще- ны локально. Ш О протоколе SSH более подробно рассказывалось в разделе 22.10. Обратите внимание на то, что переадресация системы X будет работать, только если ее функции переадресации включены как на стороне сервера SSH, так и на стороне кли- ента SSH. Например, если используется SSH-клиент PuTTY в системе Windows, функ- цию переадресации протокола XI1 можно включить прямо на его экране установки И потом на стороне сервера SSH (соответственно, на стороне клиента XI1, т.е. на компью- тере с системой UNIX), удостовериться в том, что файл /etc/ssh/sshd_config содер- жит такую строку. XllForwarding yes , В случае изменения конфигурации SSH-сервера, следует перезапустить процесс sshd для того, чтобы новая конфигурация вступила в силу. Параметр XllForwarding преду-< смотрен в большинстве систем UNIX, реализующих протокол OpenSSH.
Глава 30. Взаимодействие с системой Windows 1183 Как заметил наш технический редактор Дан Фостер (Dan Foster), перенаправление соединений в системе X в рамках протокола XII “может быть мучительно медленным, даже в системе LAN, причем ситуацию ухудшает наличие задержек в сети”. Альтернати- вой является система VNC. В то время как компания Apple предоставляет бесплатную версию сервера X Server для операционной системы Mac OS X, компания Microsoft, к сожалению, ничего по- добного для системы Windows не предлагает. Однако существует одна бесплатная версия сервера X Server, доступная на сайте проекта Cygwin (cygwin. com), которая работает очень хорошо после того, как ее сконфигурировать. Прекрасной альтернативой, допу- скающей намного более простое конфигурирование, является сервер Xming для системы Windows. К коммерческим версиям X Server для Windows относятся Exceed и X-Win32. Эти версии предлагают более простую процедуру конфигурации, но по довольно высо- кой цене. VNC: система виртуальных сетей В конце девяностых годов предыдущего столетия несколько человек из исследова- тельского центра AT&T Labs в Кембридже (Великобритания) разработали систему для удаленного доступа к настольным системам под названием VNC. Их идеей было “под- ружить” считающиеся уже примитивными, но зато простые терминалы с современ- ными оконными системами. В отличие от протокола XII, протокол VNC не работает с отдельными приложениями. Он создает виртуальный рабочий стол (или предостав- ляет удаленный доступ к существующему) в виде отдельного компонента. В системе VNC специальный сервер XI1 функционирует на центральной машине, а для получения к нему доступа используется специальное приложение типа программы просмотра. Компания AT&T опубликовала программное обеспечение VNC под либеральной лицензией на программное обеспечение с открытым исходным кодом. Это позволило другим разработчикам подхватить эту идею и создать дополнительные реализации сер- вера и программы просмотра, а также улучшить ограниченную пропускную способность протокола. Сегодня VNC-программы просмотра доступны для большинства устройств, имеющих хоть какие-нибудь средства для графического отображения. VNC-серверы для систем UNIX, Linux и Windows тоже доступны повсеместно. Реализация VNC-сервера для системы UNIX, по сути, представляет собой эмуля- тор графического адаптера, который подключается к серверу X.Org X Windows. Запуск vncserver через учетную запись системы UNIX приводит к созданию нового вирту- ального рабочего стола, который функционирует на машине UNIX в своем собствен- ном, отдельном, мире. После этого пользователи могут использовать VNC-программу просмотра и получать доступ к этому рабочему столу удаленно. Мы рекомендуем перед первым запуском сервера выполнить команду vncpasswd, чтобы установить пароль для соединения. Протокол VNC не запоминает состояние и использует двоичное отображение. Сле- довательно, пользователи могут свободно присоединяться и отсоединяться. Более того, несколько программ для просмотра могут иметь доступ к одному и тому же серверу од- новременно. Последнее свойство особенно полезно для поддержки удаленного доступа и отладочных настроек. Кроме того, оно облегчает доступ к консоли для системных ад- министраторов. VNC-серверы в мире Windows обычно не создают никакого дополнительного рабо- чего стола: они просто экспортируют стандартный рабочий стол системы Windows в том
1184 Часть III. Разное виде, в котором он отображается на экране. Главным приложением для этой технологии является удаленная поддержка. В наши дни первые создатели VNC уже владеют собственной компанией, которая называется RealVNC (realvnc. com). Авторы проекта UltraVNC (ultravnc. com) зани- маются разработкой очень быстрой и многофункциональной реализации VNC-сервера для системы Windows, а участники проекта TightVNC (tightvnc. com) работают над по- вышением степеней сжатия. Все они обязательно обмениваются информацией между собой, поэтому между разными приложениями происходит взаимное обогащение. Протокол VNC совершенствуется с учетом возможности расширения. Все програм- мы просмотра и серверы могут работать друг с другом в любой комбинации: они подби- рают наилучший вариант протокола, понятный обеим сторонам. Функциональные воз- можности, наличие которых зависит от конкретной реализации (такие, как возможность передачи файлов), обычно доступны только при использовании сервера и клиента из одного и того же проекта. Протокол RDP в системе Windows Начиная с версии Windows 2000 Server каждая система Windows имеет техническую возможность предоставлять графический удаленный доступ нескольким пользователям одновременно. Компонент удаленного доступа, называемый Remote Desktop, использует протокол RDP (Remote Desktop Protocol — протокол для удаленных дисплеев) для обе- спечения связи между клиентом и сервером. Клиенты протокола RDP в системе UNIX позволяют администраторам управлять системой Windows с рабочего стола UNIX. Это неоценимый инструмент для системных администраторов UNIX, которым приходится иметь дело с системой Windows. Для того чтобы воспользоваться протоколом RDP, необходимо активизировать сер- верную сторону (систему Windows) и обеспечить клиенту доступ к ней. Для этого в си- стеме Windows 7 следует зайти на панель управления System, щелкнуть на пиктограмме Remote и выбрать параметр на панели Remote Desktop. 30.3. Запуск системы Windows и Windows-приложений Как указывалось в главе 24, коммерческий продукт VMware Server (vmware. com) по- зволяет запускать на оборудовании персонального компьютера несколько операцион- ных систем одновременно. Программа VMware эмулирует все виртуальные “гостевые” машины поверх базовой операционной системы, в роли которой выступает либо Linux, либо Windows. Какой бы ни была базовая операционная система, на виртуальных ма- шинах VMware может быть установлена любая Intel-совместимая операционная систе- ма. С точки зрения гостевой машины, операционная система работает точно так же, как она работала бы на “родном” аппаратном обеспечении, и приложения инсталлируются нормально. Другими средствами виртуализации являются программы KVM и VirtualBox, которые также запускают систему Windows и должны рассматриваться как средства для запуска Windows-приложений. Система Wine (winehq.com) работает иначе. Она реализует в среде UNIX API-интер- фейс программирования Windows, тем самым позволяя запускать Window-приложения прямо поверх системы X. Эта бесплатно доступная программа транслирует “родные” вызовы API-интерфейса Windows в их UNIX-аналоги и может делать это, не используя
Глава 30. Взаимодействие с системой Windows 1185 никакого кода компании Microsoft. Кроме того, она поддерживает протоколы TCP/IP, устройства последовательного доступа и звуковые платы. Она работает в системах Linux, BSD, Mac OS и Solaris. Многие приложения Windows запускаются без проблем, но некоторые можно за- ставить работать лишь при помощи определенных уловок; подробнее об этом можно узнать на официальном веб-сайте проекта Wine. К сожалению, заставить приложения выполняться под управлением системы Wine часто не так-то просто. Талантливые раз- работчики на сайте codeweavers. com написали небольшую коммерческую программу- инсталлятор, которая умеет вынуждать “упрямые” приложения Windows работать так, как надо. Если выбранное приложение поддерживается программой Code Weavers — замеча- тельно. Если нет, нужно дать ему шанс, а вдруг оно сможет приятно удивить. Но если приложение не хочет работать само и никакие заготовленные подсказки отыскать не удается, будьте готовы потратить время, чтобы придать ему нужную форму, если уж ре- шили сделать это своими силами. При наличии бюджетных средств можете попробовать договориться с Code Weavers о помощи. Коммерческой альтернативой программе Wine является программа Win4Lin компа- нии NeTraverse. Разработчики программы Win4Lin утверждают, что она более устойчива и поддерживает немного больше приложений компании Microsoft, чем программа Wine. Однако она требует модификации ядра, в то время как программа Wine обходится без этого. Программу Win4Lin можно приобрести на сайте win41 in. com. Двухвариантная загрузка и почему ею не стоит пользоваться Тем, кто хоть когда-нибудь устанавливал систему Linux на компьютер, на котором ра- нее была установлена Windows, несомненно, предлагалось создать конфигурацию с двух- вариантной загрузкой. В наши дни такие конфигурации функционируют во многом так, как обещают. Сегодня даже можно монтировать Windows-разделы под управлением системы Linux и получать доступ к файловой системе Linux под управлением Windows. О том, как именно можно настроить конфигурацию с двухвариантной загрузкой, под- робно рассказывалось в разделе 3.3. Но не стоит спешить! Тем, кто действительно работает как с Windows, так и с UNIX и нуждается в доступе к ним, следует очень скептично относиться к конфигурации с двухва- риантной загрузкой. Такие конфигурации представляют собой воплощение закона Мэр- фи в его самом худшем виде: они, кажется, почти всегда загружают не ту операционную систему, и из-за этого даже самая простая операция обычно заканчивается выполнением нескольких повторных загрузок. Сегодня компьютеры стоят так дешево и удаленный доступ настраивается так легко, что, как правило, нет никакого смысла подвергать себя таким бесконечным мучениям. Альтернативы Microsoft Office Несколько лет назад компания Sun выпустила новую версию пакета StarOffice, ко- торый является аналогом пакета Microsoft Office. Эта версия, также распространяемая с открытым исходным кодом, называется OpenOffice.org. В этот пакет входят основные офисные утилиты, такие как редактор электронных таблиц, текстовый редактор, пакет средств для создания презентаций и приложение для рисования. Эти программы могут
1186 Часть III. Разное читать и записывать файлы, сгенерированные их Microsoft-аналогами. Загрузить пакет OpenOffice.org можно по адресу: openoffice. org. Пакет OpenOffice.org доступен на всех основных платформах, включая Windows, Linux, Solaris, Mac OS X и многие другие версии UNIX. Если нужен пакет с контрактом о поддержке, можно приобрести пакет StarOffice, который отличается от OpenOffice.org только наличием более мощного механизма проверки правописания и базы данных. Компания Google выпустила конкурентное приложение Google Apps. Кроме мощ- ных приложений Gmail и Google Calendar, компания разработала текстовый процессор и электронные таблицы. Эти свободно распространяемые программы включают взаимо- действующие функции, позволяющие пользователям одновременно редактировать до- кументы, расположенные в разных местах. Поскольку все приложения компании Google запускаются в веб-браузере, их можно использовать буквально в любой системе. Кроме того, можно экспортировать и импортировать содержимое файлов в разных форматах, включая форматы приложений Microsoft Office. 30.4. Использование утилит командной СТРОКИ В СИСТЕМЕ WINDOWS Чего многим пользователям системы UNIX не хватает при работе на системах Windows, так это командной строки. И не просто старого консольного приложения или чего-то вроде DOS Box, а настоящей программы xterm, поддерживающей изменение размеров, цветовые схемы, управление мышью и все модные управляющие последова- тельности. Хотя автономного (т.е. не зависящего от системы X) родного порта xterm для си- стемы Windows не существует, имеется небольшая аккуратная программа rxvt, которая очень близка к идеалу. Она является частью системы Cygwin, которую можно загрузить с сайта cygwin. com. Если вы установите сервер X Server, поставляемый с системой Cygwin, сможете пользоваться настоящей программой xterm. Эта система распространяется под общедоступной лицензией GNU General Public License и включает довольно обширный дополнительный набор общих команд UNIX, а также переносимую библиотеку, которая реализует API-интерфейсы POSIX под Windows. Ее подход к согласованию обозначений командной строки и файловых систем UNIX и Windows довольно хорошо продуман и “умудряется” наделять родные команды Windows многими удобными возможностями оболочки UNIX. Cygwin не только позволяет поль- зователям UNIX чувствовать себя в Windows “как дома”, но и упрощает запуск про- граммного обеспечения UNIX под Windows. Подробнее о Cygwin можно узнать на сайте cygwin.com. Пакет MKS Toolkit представляет собой коммерческий аналог Cygwin. Более под- робную информацию о нем можно найти на сайте MKS, который находится по адресу: mkssoftware.com. Список программ UNIX, которые могут сами запускаться на Windows, постоянно растет; на текущий момент в него уже входят Apache, Perl, BIND, PHP, MySQL, Vim, Emacs, Gimp, Wireshark и Python. Прежде чем пытаться заставить приложение работать под управлением системы Windows с помощью инструмента вроде Cygwin, поищите его “родную” реализацию.
Глава 30. Взаимодействие с системой Windows 1187 30.5. Совместимость Windows со стандартами ЭЛЕКТРОННОЙ ПОЧТЫ И ВЕБ В идеальном мире все бы пользовались для связи открытыми стандартами и были счастливы. Но наш мир не идеален, и многие ругают систему Windows за то, что она представляет собой кучу запатентованных протоколов и неисправных реализаций ин- тернет-стандартов. Пожалуй, они частично правы, но, тем не менее, существует много областей, благодаря которым система Windows вполне может нормально функциониро- вать в мире стандартов. Этими областями являются службы электронной почты и веб. За всю богатую историю веб, многие корпорации пытались охватить и расширить веб-возможности, чтобы защититься от конкуренции и увеличить свои доходы во много раз. Компания Microsoft по-прежнему ведет такую борьбу на уровне браузера с его мно- гочисленными расширениями, подходящими исключительно для Internet Explorer. На базовом уровне протокола HTTP, однако, система Windows и Windows-браузеры практи- чески не зависят от платформы. Компания Microsoft предоставляет свой собственный веб-сервер — IIS, но его про- изводительность всегда была ниже производительности сервера Apache, запускаемого в системе Linux, причем намного. Тем, кто не “зациклился” на серверной технологии типа ASP, использовать Windows-машины в качестве веб-серверов вовсе не обязательно. Что касается электронной почты, то компания Microsoft усиленно предлагает в каче- стве предпочтительной серверной технологии свой продукт Exchange Server. По правде сказать, возможности программы Exchange Server действительно превосходят возмож- ности почтовых систем интернет-стандарта, особенно когда почтовые клиенты пред- ставляют собой компьютеры Windows, запускающие Microsoft Outlook. И это еще не все: программа Exchange Server также может использовать протокол SMTP для входящей и исходящей почты и передавать почту UNIX-клиентам при помощи стандартных Прото- колов IMAP и POP. На стороне клиента программа Outlook и ее бесплатный аналог Outlook Express мо- гут подключаться к серверам UNIX IMAP и POP (как и большинство аналогичных про- грамм, созданных сторонними разработчиками). Экспериментируйте с любыми комби- нациями и выбирайте наиболее подходящую. О протоколах POP и IMAP более подробно рассказывалось в разделе 20.1. 30.6. Совместное использование файлов при помощи Samba и CIFS В начале 1980-х годов компания IBM разработала API-интерфейс, который позволял компьютерам в одной и той же подсети общаться друг с другом, используя не замысло- ватые номера, а имена. Этот интерфейс получил такое название: Network Basic Input/ Output System (Сетевая базовая система ввода-вывода), сокращенно — NetBIOS. Его расширенная версия, включающая исходный базовый сетевой протокол транспортного уровня, была названа так: NetBIOS Extended User Interface (Расширенный пользователь- ский интерфейс NetBIOS), сокращенно — NetBEUI. API-интерфейс NetBIOS стал до- вольно популярным и потому был адаптирован для использования поверх ряда различ- ных сетевых протоколов, таких как IPX, DECNet и TCP/IP.
1188 Часть III. Разное Компании Microsoft и Intel разработали на базе NetBIOS протокол совместного ис- пользования файлов и назвали его “основным протоколом” (core protocol). Позже он был переименован в протокол Server Message Block (Блок сообщений сервера) или, со- кращенно, SMB. Далее протокол SMB эволюционировал в систему CIFS (Common Internet File System — Общая межсетевая файловая система), которая, по сути, пред- ставляла собой улучшенную и настроенную для работы в глобальных сетях версию SMB. Эта система CIFS по сей день остается главной технологией для совместного исполь- зования файлов на компьютерах, работающих под управлением операционной системы Windows. В мире Windows файловая система или каталог, который доступен через сеть, является совместно используемым ресурсом. Этот термин звучит немного странно для пользовате- лей UNIX, но при описании файловых систем CIFS мы будем пользоваться именно им. Samba: сервер CIFS для UNIX Чрезвычайно популярный пакет Samba распространяется на условиях открытой лицензии GNU и реализует серверную часть CIFS в системах UNIX и Linux. Он был создан австралийцем Эндрю Триджеллом (Andrew Tridgell), который путем “обратного” проектирования воссоздал код протокола SMB и опубликовал полученный результат в 1992 году. Здесь мы рассмотрим пакет Samba версии 3. Сегодня пакет Samba хорошо поддерживается и постоянно совершенствуется для расширения его функциональных возможностей. Он предоставляет собой стабильный, надежный механизм для интеграции в сеть UNIX, состоящую из компьютеров, работаю- щих под управлением системы Windows. Прелесть пакета заключается в том, что уста- навливать его нужно только на сервере — на Windows-компьютере никакого дополни- тельного программного обеспечения не требуется. Система CIFS предоставляет пять основных служб. • Совместное использование файлов. • Сетевая печать. • Аутентификация и авторизация. • Разрешение имен. • Объявление служб (“обзор” сервера файлов и принтера). Пакет Samba не только обрабатывает файлы с помощью системы CIFS, но и выпол- няет основные функции контроллера службы Windows Active Directory. Как контроллер домена, пакет Samba поддерживает такие функциональные возможности, как регистра- ция доменов Windows, роуминг профилей пользователей Windows и буферизация зада- ний на печать в системе CIFS. Большинство функциональных возможностей пакета Samba реализуется двумя демо- нами: smbd и nmbd. Демон smbd реализует обслуживание файлов и заданий на печать, а также выполняет аутентификацию и авторизацию. Демон nmbd обслуживает другие основные компоненты системы CIFS: разрешение имен и объявление служб. В отличие от файловой системы NFS, которая тесно связана с ядром, пакет Samba не требует модификации ядра и запускается исключительно как пользовательский процесс. Он устанавливает соединения с сокетами, через которые посылаются NBT-запросы, и ждет клиентских запросов на доступ к ресурсам. Как только запрос поступил и был ау- тентифицирован, демон smbd создает новый экземпляр самого себя, который работа- ет от имени пользователя, сделавшего запрос. В результате все права доступа к файлам
Глава 30. Взаимодействие с системой Windows 1189 (включая групповые права) остаются ненарушенными. Единственная дополнительная функциональная возможность, которую демон smbd реализует, — это сервис блокировки файлов, позволяющий клиентским персональным компьютерам придерживаться при- вычной для них семантики блокировок. Установка Samba Пакет Samba может работать со всеми рассмотренными нами операционными систе- мами.1 Это относится и к системе Linux. Заплатки, документация и другие файлы можно загрузить с сайта samba. org. Обязательно следует убедиться в том, что используются новейшие из доступных для данной системы пакеты Samba, потому что дефекты пре- дыдущих версий чреваты потерей данных и возникновением проблем с безопасностью. Во всех системах придется отредактировать файл smb. conf (который должен нахо- диться либо в каталоге /etc/samba/smb. conf, либо /etc/smb. conf), чтобы задать по- ведение пакета Samba. В этом файле указываются каталоги и принтеры, которые долж- ны использоваться совместно, права доступа к ним и общие рабочие параметры пакета Samba. Кроме того, в состав пакета Samba входит образец файла smb. conf, который содержит подробные комментарии и может стать хорошей отправной точкой для зада- ния новой конфигурации. Обратите внимание на то, что после запуска Samba проверяет свой конфигурационный файл каждые несколько секунд и загружает все появившиеся изменения. Также важно помнить о проблемах безопасности, которые могут возникать при со- вместном использовании файлов и других ресурсов по сети. Для типичного сайта можно обеспечить базовый уровень безопасности, выполнив два действия. • Явно указав, каким клиентам разрешается получать доступ к ресурсам Samba. За эту часть конфигурации отвечает находящаяся в файле smb. conf конструкция hosts allow. Всегда проверяйте, чтобы в ней содержались только необходимые IP-адреса (или диапазоны адресов). • Заблокировав возможность получения доступа к серверу людьми, де работающими в данной организации. Samba использует шифрование только для аутентифика- ции пароля. При транспортировке данных шифрование не применяется. В зависи- мости от природы хранящихся на сервере Samba данных, администратор может за- блокировать возможность получения доступа к серверу за пределами организации, дабы исключить вероятность случайной загрузки файлов посторонними людьми. Это обычно делается на уровне сетевого брандмауэра; Samba использует UPD-nop- ты 137-139 и ТСР-порты 137, 139 и 445. После выхода версии Samba 3 превосходная документация стала доступна на сайте samba.org. Пакет Samba поставляется с разумными значениями по умолчанию для большинства его конфигурационных опций, поэтому для большинства сайтов будет вполне достаточ- но небольшого конфигурационного файла. При помощи команды testparm -v можно отобразить перечень всех конфигурационных опций Samba и значений, которые для них установлены на текущий момент. Этот перечень будет включать как параметры, задан- ные в файле smb. conf, так и параметры, установленные по умолчанию. Параметры в файле smb. conf лучше не изменять, если только они не отличаются от параметров по умолчанию или имеется веская причина их заблокировать. Преиму- 1 Компания HP предлагает производный от пакета Samba продукт, который называется HP CIFS Server. Его можно загрузить из хранилища программного обеспечения компании HP
1190 Часть III. Разное ществом такого подхода является то, что в таком случае при обновлении до более новой версии Samba текущая конфигурация будет автоматически адаптировать параметры, ре- комендуемые авторами Samba. Приняв во внимание сказанное выше, обязательно проверяйте, чтобы была включе- на функция шифрования паролей. encrypt passwords = true Эта опция отвечает за шифрование паролей, которыми обмениваются клиенты Win- dows и сервер Samba. На текущий момент она является параметром по умолчанию, и се- рьезной причины, по которой ее действительно лучше было бы отключить, не существует. Функция шифрования вынуждает сервер Samba сохранять специальный, имеющий вид хеш-значения Windows-пароль для каждого пользователя. Windows-пароли работают совершенно не так, как UNIX-пароли, и поэтому использовать их из каталога /etc/ shadow невозможно.2 Пакет Samba предоставляет для установки этих паролей специальную утилиту — smbpasswd. Например, попробуем добавить пользователя tobi и установить для него пароль. $ sudo smbpasswd -a tobi New SMB password: <пароль> Retype new SMB password: <пароль> Пользователи тоже могут изменять свои собственные пароли в системе Samba при помощи smbpasswd. $ smbpasswd -г smbserver -U tobi New SMB password: <пароль> Retype new SMB password: <пароль> В этом примере на сервере smbserver изменяется пароль пользователя tobi. Кодирование имен файлов Начиная с версии 3.0 все имена файлов в пакете Samba кодируются в формате UTF-8. Тем, у кого сервер работает в режиме кодировки UTF-8, очень повезло: у них будет иде- альная совместимость.3 Тем, кто находится в Европе и до сих использует на своем сер- вере один из режимов кодировки ISO 8859, повезло меньше: их имена файлов, содержа- щие специальные символы, наподобие а, о, и или е, будут выглядеть довольно странно при вводе команды 1s в каталоге, в котором эти файлы были созданы в пакете Samba с помощью кодировки UTF-8. Решением является указать пакету Samba использовать тот же режим кодировки символов, что и на сервере. unix charset = ISO8859-15 display charset = ISO8859-15 Правильность режима кодировки лучше проверять сразу. Иначе количество файлов со странно закодированными именами начнет расти, и их исправление позже может оказаться довольно нелегкой задачей. 2 При установлении соединения система Windows передает мандаты пользователя серверу Samba, поэтому пароли пользователя в пакете Samba выбираются так, чтобы они совпадали с их паролями в системе Windows. 3 Проверить, может ли система работать в режиме кодировки UTF-8, можно при помощи ко- манды echo $LANG.
Глава 50. Взаимодействие с системой Windows 1191 Аутентификация пользователей В системах аутентификации Windows клиент не доверяет серверу, т.е. пароль поль- зователя никогда не передается по сети в виде открытого текста. Вместо этого система Windows использует алгоритм типа “запрос-ответ” протокола Kerberos. Клиент Windows также может аутентифицироваться у пакета Samba с помощью протокола Kerberos. Если при входе в систему Windows предоставить имя пользователя и пароль, Windows сохранит их и будет пытаться использовать эту информацию для аутентификации вез- де, где это необходимо, при помощи соответствующего аутентификационного запро- са. Таким образом, если пользователь имеет такое же имя пользователя и пароль на Windows-компьютере, как и на Samba-сервере, Samba не будет явно запрашивать у него пароль при получении им доступа к совместно используемым ресурсам Samba. Вся про- цедура аутентификации будет выполняться незаметно на заднем фоне. Недостатком подхода с аутентификацией типа “запрос-ответ” является то, что серве- ру приходится сохранять пароли в формате, эквивалентном открытому тексту. В действи- тельности серверные копии паролей локально шифруются, но это защищает их только от случайного просмотра. Злонамеренный пользователь, получивший доступ к зашиф- рованным таким образом паролям, сможет использовать их для получения доступа к ас- социируемым с ними учетным записям без какого-либо дополнительного “взламыва- ния”. Пароли Samba следует защищать даже более тщательно, чем файл /etc/shadow. В сложных средах со множеством серверов Samba имеет смысл использовать центра- лизованную службу каталогов, проверяющую, чтобы на всех серверах был указан оди- наковый пароль. В качестве аутентификационных служб Samba позволяет использовать службу LDAP и Windows. Служба LDAP описана в главе 19. Существует два основных способа объединить системы аутентификации Windows и UNIX. Во-первых, можно сконфигурировать сервер Samba так, чтобы он выступал в роли первичного контроллера домена Windows Active Directory (см. раздел 30.9). Во- вторых, можно установить на Windows-клиентах приложение pGina (sourceforge. net/ projects/pgina). Это интеллектуальное приложение заменяет стандартную систему регистрации Windows на каркас, который поддерживает все стандартные службы аутен- тификации, включая LDAP и NIS. Совместное использование основных файлов Когда у каждого пользователя имеется свой домашний каталог, имеет смысл сделать доступными для совместного использования домашние каталоги. [homes] comment = Home Directories (Домашние каталоги) browseable = no valid users = %S writeable = yes guest ok = no Эта конфигурация, например, позволит пользователю oetiker получать доступ к своему домашнему каталогу через путь \\сервер—San?ba\oetiker с любой системы Windows. На некоторых сайтах установленные стандартные разрешения на домашних катало- гах системы UNIX позволяют людям просматривать файлы друг друга. Поскольку пакет Samba ограничивает доступ на основании разрешений, имеющихся у файлов системы UNIX, пользователи системы Windows, заходящие через CIFS, тоже смогут просматри-
1192 Часть III. Разное вать домашние каталоги друг друга. Однако, как показывает опыт, такое поведение ча- сто смущает пользователей Windows и вызывает у них чувство, будто бы они находятся у всех на виду. Строка valid users в показанном выше фрагменте конфигурации ука- зывает Samba предотвращать подключения к домашним каталогам других людей. Не до- бавляйте ее, если такое поведение вас не устраивает. Пакет Samba обращается к своему волшебному разделу [homes] только в крайнем случае. Если в конфигурации для домашнего каталога пользователя явно указан какой- нибудь определенный совместно используемый ресурс, установленные там параметры перекрывают значения, указанные в разделе [homes]. Групповые ресурсы Пакет Samba может отображать списки управления доступом в системе Windows либо в разрешения файлов, либо в списки ACL (если лежащая в основе файловая система поддерживает их). На практике концепция списков ACL часто оказывается слишком сложной для большинства пользователей. Поэтому администраторы обычно просто создают отдельный совместно используемый ресурс для каждой группы пользователей, которые в таковом нуждаются, и конфигурируют сервер Samba так, чтобы он сам за- ботился о предоставлении нужных разрешений. Дальше, когда пользователь пытается смонтировать этот сетевой каталог, Samba проверяет, является ли он членом соответ- ствующей группы пользователей UNIX, и заменяет его уникальный идентификатор (UID) на идентификатор владельца этого группового сетевого ресурса (т.е. созданного специально для этой цели псевдопользователя). Рассмотрим пример. [eng] comment = Group Share for engineering ; Каждый, кто является членом группы eng, может получать доступ к этому ; совместно используемому ресурсу comment = Group Share for engineering ; Каждый, кто состоит в группе eng, может получать доступ к этому ; совместно используемому ресурсу ; Пользователям придется входить в систему при помощи своей ; учетной записи Samba) valid users = @eng ; Мы создали специальную пользовательскую учетную запись по имени "eng". ; Все записываемые в этот каталог файлы будут принадлежать этой учетной ; записи, а также группе eng force user = eng force group = eng path = /home/eng ; Отключаем все ACL-списки NT, потому что мы не собираемся ; использовать их здесь nt acl support = no ; Делаем так, чтобы у всех файлов были приемлемые разрешения create mask = 0660 force create mask = 0660 security mask = 0000 directory mask = 2770 force directory mask = 2770 directory security mask = 0000 /Обычные параметры для совместного пользования browseable = no
Глава 30. Взаимодействие с системой Windows 1195 writeable = yes guest ok = no Подобного эффекта можно добиться и при помощи такой опции пакета Samba, как inherit permissions. Если активизировать эту опцию на совместно используемом ре- сурсе, все новые файлы и каталоги будут наследовать свои параметры от родительского каталога. [eng] comment = Group Share for engineering path = /home/eng nt acl support = no browseable = no writeable = yes inherit permissions = yes Поскольку теперь пакет Samba будет брать параметры из родительского каталога, важно не забыть правильно установить разрешения на корневом каталоге этого совмест- но используемого ресурса. $ sudo chmod u=rw,g=rws ,о= /home/eng $ sudo chgrp eng /home/eng $ sudo chown eng /home/eng Обратите внимание на то, что при такой конфигурации все равно нужно создать псевдопользователя eng, который будет выступать в роли владельца данного совместно используемого каталога. Прозрачная переадресация при помощи MS DFS MS DFS (Microsoft’s Distributed File System — Распределенная файловая система про- изводства компании Microsoft) позволяет каталогам внутри совместно используемого ре- сурса заставлять клиентов автоматически монтировать другие совместно используемые ресурсы, как только к ним будет получен доступ. Для постоянных пользователей систем UNIX и Linux в этом нет ничего удивительного, но для системы Windows эта концепция, в целом, является довольно революционной и неожиданной. Приведем пример. [global] ; Включить поддержку MS DFS для данного сервера Samba host msdfs = yes [mydfs] ; Эта строка указывает Samba искать символические ссылки ; в каталоге данного совместно используемого ресурса msdfs root = yes path = /home/dfs/mydfs Для того чтобы настроить автоматическое монтирование, нужно создать соответ- ствующие символические ссылки в каталоге /home/dfs/mydfs. Например, показанная ниже команда превращает “каталог” junq? в ссылку на один из двух каталогов на других серверах. (Обратите внимание на одинарные кавычки. Они необходимы для защиты об- ратной косой черты.) Если указывается несколько источников (как здесь), Windows будет выбирать какой- нибудь один из них. Другими словами, пользователи, получающие доступ к каталогу \\server\mydfs\ jump, теперь фактически будут считывать файлы либо из источника
1194 Часть III. Разное shareX на сервере serverX, либо из источника shareY на сервере shareY, в зависимости от того, какой из них будет доступен. Если файловые системы экспортируются с разреше- ниями не только на чтение, но и на запись, обязательно нужно позаботиться о механиз- ме для синхронизации файлов. На эту роль может подойти приложение rsync. Пакет Samba также позволяет делать так, чтобы все клиенты, получающие доступ к определенному источнику совместного пользования, перенаправлялись на какой- нибудь другой сервер. Windows-сервер такого не позволяет. [myredirect] msdfs root = yes msdfs proxy = WserverZ\shareZ Обратите внимание на то, что система DFS будет работать только для тех пользова- телей, которые имеют одинаковое имя пользователя и пароль на всех задействованных серверах. Программа smbclient: простой клиент CIFS Помимо множества серверных функциональных возможностей, в состав пакета Sam- ba также входит удобная программа для пересылки (передачи) файлов с интерфейсом командной строки, которая называется smbclient. Этой программой можно пользо- ваться для получения прямого доступа к любому серверу Windows или Samba. $ smbclient //redmond/joes -U joe Password: <пароль> Doman=[REDMOND] 0S=[Windows 5.0] Server=[Windows 2000 LAN Manager] smb: \> После успешной регистрации на файловом сервере можно приступать к навигации и передаче файлов, используя для этого стандартные команды в стиле ftp (такие, как get, put, cd, led и dir). Поддержка системы CIFS на клиентской стороне системы Unux Система Linux включает прямую клиентскую поддержку для файловой системы SMB/CIFS. Это значит, что в любой файловой системе Linux можно смонтировать CIFS- ресурс совместного пользования, который ядро будет понимать непосредственно. # mount -t smbfs -о username=joe //redmond/joes /home/joe/mnt Хотя эта функциональная возможность и является полезной, следует помнить о том, что система Windows воспринимает монтируемые сетевые каталоги как устанавливаемые определенным пользователем (отсюда и опция usemame=joe в показанной выше стро- ке), в то время как система UNIX воспринимает их больше как принадлежащие системе в целом. Windows-серверы обычно не могут понять концепцию, подразумевающую, что к смонтированному сетевому Windows-каталогу могут получать доступ несколько разных пользователей. С точки зрения UNIX-клиента, все файлы в смонтированном каталоге принадлежат пользователю, который его смонтировал. Другими словами, если сетевой каталог смон- тировать от лица пользователя root, тогда все файлы в нем будут принадлежать пользо- вателю root и, следовательно, обычные пользователи не смогут записывать в него ника- кие файлы на Windows-сервере. Опции монтирования uid, gid, fmask и dmask позволяют настраивать эти параме- тры так, чтобы права владения и доступа более точно отражали предусматриваемую для
Глава 30. Взаимодействие с системой Windows 1195 данного сетевого каталога политику. Подробнее об этом поведении можно узнать на странице руководства mount. smbf s. Для того чтобы позволить пользователю самостоятельно монтировать сетевой Win- dows-каталог, можно добавить в файл /etc/fstab следующую строку. //redmond/joes /home/joe/mnt smbfs username=joe, fmask=600,dmask=700, user, noauto 0 0 Благодаря указанной здесь опции user, пользователи теперь смогут монтировать фай- ловую систему путем выполнения следующей команды. $ mount /home/joe/mnt Команда mount будет предлагать пользователю ввести пароль, прежде чем монтиро- вать сетевой каталог. Хотя стандартной сетевой файловой службой для UNIX является NFS, в некоторых ситуациях для обмена файлами между компьютерами UNIX и Linux лучше использо- вать Samba или CIFS. Например, опасно позволять пользователям выполнять NFS- монтирование корпоративных файловых систем со своих персональных ноутбуков4. Однако можно безопасно использовать CIFS для предоставления этим ноутбукам досту- па к домашним каталогам их владельцев. Ш Об NFS более подробно рассказывалось в главе 18. 30.7. Совместное использование принтеров при помощи Samba Простой способ обеспечить возможность совместного использования принтеров — добавить в файл smb. conf раздел [printers ] :. Это заставит пакет Samba сделал. До- ступными для совместного пользования все локальные принтеры. Для выполнения сво- ей работы пакет Samba пользуется командами системы печати, но поскольку печать в системе UNIX не очень стандартизирована, может понадобиться указать Samba/какая именно система печати используется на сервере, путем установки для опции printing соответствующего значения. Перечень поддерживаемых на текущий момент систем пе- чати доступен на справочной странице smb. conf. [printers] ; Где должны сохраняться файлы, прежде чем они будут переданы системе печати? path = /var/tmp ; Пользоваться принтерами разрешается всем guest ok = yes ; Пусть Samba знает, что в данном случае совместно используемым ресурсом ; является принтер printable = yes ; Показывать принтеры всем, кто их ищет browseable = yes ; Указать Samba, какая подсистема печати используется в системе printing = LPRNG 4 Механизм безопасности в службе NFSv3 основан на идее, что пользователь не имеет прав суперпользователя на клиентском компьютере и что идентификаторы на клиентской и серверной сторонах совпадают. Для самоуправляемых машин это неестественно. Система NFSv4 лучше осу- ществляет отображение пользовательских идентификаторов и намного безопаснее.
1196 Часть III. Разное Windows-клиенты теперь смогут пользоваться этими принтерами как сетевыми, точно так же как если бы те обслуживались Windows-сервером. Однако существует небольшая проблема. Windows-клиенты захотят знать, принтер какого именно типа им достался, и пригласят пользователя выбрать подходящий драйвер принтера. Это чревато посту- плением довольно большого количества просьб о помощи от пользователей, которые не знают, как поступать в такой ситуации. А если какой-то из имеющихся принтеров требу- ет драйвер, не поставляемый с Windows, тогда этих просьб будет еще больше. Ш Более подробно о печати рассказывалось в главе 26. К счастью, сервер Samba можно сконфигурировать так, чтобы он предоставлял не- обходимые Windows-драйверы принтеров всем Windows-клиентам. Однако прежде чем это делать, нужно выполнить кое-какие подготовительные операции. Следует гаранти- ровать, что пакет Samba будет вести себя как сервер печати, добавив соответствующие записи в раздел [global] файла smb. conf. [global] ;Кто у нас отвечает за администрирование принтеров printer admin = printadm ; Следующий параметр по умолчанию всегда имеет указанное справа значение disable spoolss = no ; Не пытайтесь отобразить эту информацию; вы все равно ; не можете добавлять принтеры show add printer wizard = no ; Если нужно, чтобы выполнять печать могли все guest ok = yes browseable = no Теперь программа Samba знает, что является сервером печати, и будет воспринимать пользователя printadm как своего администратора. Если вы собираетесь предоставлять драйверы принтера для своих Windows-клиентов, тогда у вас должно быть место для хранения этих драйверов. Таким местом может быть специальный сетевой каталог (share) [print$ ]. [print$] comment = Printer Driver Area ; Место для хранения драйверов принтеров path = /var/lib/samba/printers browseable = yes guest ok = yes read only = yes /Кому разрешено администрировать репозиторий драйверов принтеров write list = printadm Прежде чем загружать драйверы принтеров на новый сервер печати, следует позабо- титься еще о нескольких деталях на уровне системы. Во-первых, нужно удостовериться в том, что учетная запись printadm существует и имеет права на получение доступа к серверу Samba. $ sudo useradd printadm $ sudo smbpasswd -a printadm Во-вторых, система Samba сможет сохранять драйверы принтеров только при усло- вии, если соответствующая структура каталогов уже существует и ее владельцем являет- ся пользователь printadm (как указано в опции write list).
Глава 30. Взаимодействие с системой Windows 1197 $ sudo mkdir -р /var/lib/samba/printers $ sudo cd /var/lib/samba/printers $ sudo mkdir W32X86 WIN40 $ sudo chown -R printadm . Здесь возможно два варианта: либо загрузить драйверы принтеров с Windows- компьютера, либо воспользоваться средствами системы Samba и сделать это все из ко- мандной строки. К сожалению, простого способа узнать, что именно должно устанав- ливаться для конкретного драйвера, нет, поэтому в большинстве случаев рекомендуется первый вариант. Только если предстоит повторно устанавливать драйвер на множестве серверов, имеет смысл изучить процедуру его установки и научиться воспроизводить ее при помощи средств командной строки. Установка драйвера принтера из системы Windows Для того чтобы установить драйверы принтеров с Windows-клиента, установите со- единение с сервером Samba путем ввода в диалоговом окне Run, появляющемся после выбора в меню Start команды Run, следующей строки: \ \ сервер-Samba. example. com. Windows попросит ввести имя пользователя и пароль для входа на сервер Samba. Введите имя пользователя и пароль учетной записи printadm. Если все пойдет хорошо, появит- ся окно со списком имеющихся на этом сервере сетевых папок. Отыщите подпапку Printers; в ней должны отображаться принтеры, которые были сделаны доступными для совместного использования. Щелкните правой кнопкой мыши на каком-нибудь пустом месте между пиктограммами принтеров, чтобы отобразить диа- логовое окно Server Properties, и добавьте свои любимые драйверы принтеров через вкладку Drivers. Загружаемые драйверы будут помещаться в каталог, указанный в [ print $ ]. На этом этапе можно будет быстренько заглянуть в свойства того или иного загруженного драй- вера. Именно этот список файлов придется предоставлять утилите командной строки Samba, если когда-нибудь возникнет желание автоматизировать процесс загрузки этого драйвера. Загрузив все необходимые драйверы, следует связать их с конкретными принтерами. Для того чтобы сделать это, отобразите панель Properties каждого принтера по очереди (щелкая правой кнопкой мыши и выбирая в появляющемся контекстном меню коман- ду Properties) и выберите подходящий драйвер на вкладке Advanced. Затем откройте диалоговое окно Printing Defaults и измените параметры печати. Даже если указанные параметры печати вас устраивают, все равно внесите хоть какое-нибудь небольшое из- менение, чтобы вынудить систему Windows сохранить структуры данных конфигурации на сервере Samba. Тогда система Samba будет предоставлять эти данные получающим доступ к принтеру клиентам. Невыполнение последнего шага может привести к сбоям на клиентах, из-за невозможности отыскать подходящую конфигурацию при попытке использования принтера. Инсталляция принтера из командной строки Как вы уже, наверняка, догадались, некоторые из перечисленных шагов довольно трудно воспроизвести, не используя систему Windows, особенно это касается установ- ки принтерных параметров по умолчанию. Но если на сервере Samba нужно установить сотни принтеров, все-таки имеет смысл попробовать сделать это из командной строки. Такой метод особенно хорошо подходит для PostScript-принтеров, потому что Windows-
1198 Часть III. Разное драйвер для PostScript-принтеров работает правильно и без информации о конфигура- ции по умолчанию. Итак, если вы знаете, какие файлы требуются для данного драйвера, сможете устано- вить этот драйвер из командной строки. Для того чтобы сделать это, сначала скопируйте требующиеся файлы в каталог [print$]. $ cd ~/туdriver $ smbclient -U printadm '//samba-server/print$' -c 'input *.*' Далее назначьте драйвер определенному принтеру. Предположим, что используется простой PostScript-принтер со специальным PPD-файлом. $ rpcclient -U printadm -с "\ adddriver \ "Windows NT х8б\" \"Our Custom PS:\ PSCRIPT5. DLL: CUSTOM. PPD: PS5UI. DLL: PSCIPT. HLP: NULL:NULL: PSCRIPT. NTF\ " " \ samba-server Символы обратной косой черты в конце строк позволяют разбить команду на не- сколько отдельных строк для ясности; вы можете опустить их и ввести команду в виде одной строки, если хотите. Символы обратной косой черты перед двойными кавычками указывают на наличие вложенных наборов кавычек. В длинной строке приведенного выше примера содержится информация, отображае- мая в диалоговом окне свойств принтерного драйвера, которое доступно, когда драйвер принтера устанавливается из Windows. • Длинное имя принтера. • Имя файла драйвера. • Имя файла данных. • Имя конфигурационного файла. • Имя справочного файла. • Имя языкового монитора (указывайте здесь значение NULL, если языкового мо- нитора нет). • Тип данных по умолчанию (указывайте здесь значение NULL, если такого типа данных нет). • Разделенный запятыми список дополнительных файлов. Сконфигурировать принтер так, чтобы он использовал один из загруженных драйве- ров, можно, выполнив такую команду. $ rpcclient -U printadm -с "\ set driver \"myprinter\" \"Our Custom PS\"" samba-server 30.8. Отладка сервера Samba Обычно сервер Samba работает нормально, не требуя никакого особого внимания. Но если проблема все-таки появилась, попробовать выявить ее источник можно при помо- щи двух таких основных источников отладочной информации, как журнальные файлы отдельных клиентов и команда smbstatus. Для начала нужно удостовериться в наличии соответствующих параметров журнальных файлов в своем конфигурационном файле. [global] ; Комбинация символов %т указывает, что для каждого клиента должен ; записываться отдельный файл.
Глава 30. Взаимодействие с системой Windows 1*199 log file = /var/log/samba.log.%m max log size = 1000 ; Объем подлежащей регистрации (занесению в журнал) информации. ; Также можно указывать уровень регистрации для компонентов системы. ; (Здесь указывается, что в общем должен использоваться уровень 3, ; но для аутентификации должен использоваться уровень 10.) log level = 3 auth: 10 Чем выше уровень регистрации, тем больше объем отладочной информации. На за- несение данных в журналы тратится определенное время, поэтому не стоит требовать слишком большого количества деталей до тех пор, пока они не понадобятся для отлад- ки, потому что это может замедлить работу системы. Ниже показаны журнальные записи, сгенерированные после одной неуспешной и одной успешной попыток соединения. [2004/09/05 16:29:45, 2] auth/auth.c:check_ntlm_password(312) check_ntlm__password: Authentication for user [oetiker] -> [oetiker] FAILED with error NT_STATUS_WRONG_PASSWORD [2004/09/05 16:29:45, 2] smbd/server.c:exit_server(571) Closing connections [2004/09/05 16:29:57, 2] auth/auth.c:check_ntlm_password(305) check_ntlm_password: authentication for user [oetiker] -> [oetiker] -> [oetiker] succeeded [2004/09/05 16:29:57, 1] smbd/service.c:make_connection_snum(648) etsuko (127.0.0.1) connect to service oetiker initially as user oetiker (uid=1000, gid=1000) (pid 20492) [2004/09/05 16:29:58, 1] smbd/service.c:close_cnum(837) etsuko (127.0.0.1) closed connection to service oetiker [2004/09/05 16:29:58, 2] smbd/server.c:exit_server(571) Closing connections Команда smbcontrol позволяет изменять уровень отладки на функционирующем сервере Samba без внесения изменений в файл smb. conf. Рассмотрим пример. $ sudo smbcontrol smbd debug "4 auth: 10" Эта команда установила бы для общих отладочных данных уровень 4, а для данных, связанных с аутентификацией, — уровень 10. Аргумент smbd указывает, что такие уров- ни отладки должны быть установлены для всех демонов smbd в системе. Выполнит^ от- ладку конкретного установленного соединения можно следующим образом: использо- вать команду smbstatus для выяснения того, какой демон smbd обслуживает данное соединение, а затем передать его идентификатор (PID) команде smbcontrol, чтобы та выполнила отладку именно этого соединения. При уровнях журнализации свыше 100 в журналах начнут появляться (зашифрованные) пароли. Команда smbstatus отображает информацию об активных соединениях и заблоки- рованных файлах. Эта информация может особенно пригодиться при выявлении про- блем блокировки (например, для выяснения, кто из пользователей открыл файл xyz для чтения/записи в монопольном режиме). В первом разделе ее выходных данных перечис- ляются все ресурсы, к которым подключался пользователь, а во втором — любые актив- ные блокировки файлов. Samba version 3.0.5 PID Username Group Machine 13036 zauck ее zhaka (192.168.1.228) 29857 milas guests beshil (192.168.1.123)
1200 Часть III. Разное Service pid machine Connected at milasa 29857 beshil Fri Sep 3 17:07:39 2004 zaucker 13036 zhaka Thu Sep 2 12:35:53 2004 Locked : files: Pid DenyMode Access R/W Oplock Name 29857 DENY_NONE 0x3 RDWR NONE /home/milasa/hello.dba 13036 DENY_NONE 0x2019f RDWR NONE /home/zaucker/aufbest.doc Если уничтожить демон smbd, ассоциируемый с определенным пользователем, все его блокировки исчезнут. Некоторые приложения умеют справляться с этим и бу- дут просто заново ставить блокировку, если она им нужна. Другие приложения (такие, как MS Access) будут зависать или “умирать страшной смертью”, требуя выполнения множества щелчков на стороне Windows только для того, чтобы их закрыли. И как бы странно это ни звучало, но такая процедура все-таки пока еще никогда не приводила к повреждению. Но в любом случае к заявлениям системы Windows о том, файлы были заблокированы каким-нибудь другим приложением, все-таки следует относиться с осто- рожностью. Нередко система Windows оказывается права, и проблему можно устранить, просто закрыв приложение на клиентской стороне, вместо того чтобы применять к нему “грубую силу” на стороне сервера. 30.9. Аутентификация службы Active Directory Рабочие столы системы Windows, притаившиеся в вашей сети, скорее всего, исполь- зуют систему Active Directory компании Microsoft для аутентификации, доступа к ката- логам и выполнения других сетевых операций. Служба Active Directory собирает пользо- вателей, группы, компьютеры и правила операционной системы под общим зонтиком, централизуя и упрощая системное администрирование. Кроме того, это одна из основных причин, по которым система Windows занимает устойчивое положение на многих предприятиях. Система UNIX собрала воедино неко- торые фрагменты этой головоломки, но ни одно из реализованных в системе UNIX ре- шений не было так отшлифовано и широко признано, как служба Active Directory. Ш Информацию о системе РАМ можно найти в разделе 22.5. Пользуясь хитроумными способами, разработчики проекта Samba сделали много ша- гов в направлении поддержки службы Active Directory в системах UNIX и Linux. С по- мощью пакета Samba системы семейства Linux могут присоединять домен Active Direc- tory и открывать доступ в систему по учетным записям, определенным в службе Active Directory и не отраженным в файле /etc/passwd. Идентификаторы пользователей в системе Linux выведены из своих аналогов, суще- ствующих в системе Windows и известных как идентификаторы безопасности, или SID. С помощью системы РАМ можно автоматически создать домашний каталог для поль- зователя, который его еще не имел. Эта система интеграции позволяет даже выполнять команду passwd, чтобы изменить пароль пользователя в службе Active Directory. Вся эта магия интеграции, присущая системе Windows, осуществляется компонентом пакета Samba под названием winbind. Служба Active Directory включает в себя и расширяет несколько стандартных про- токолов, в частности LDAP и Kerberos. Стремясь максимально удовлетворить запросы
Глава 30. Взаимодействие с системой Windows 1201 администраторов информационных систем, компания Microsoft, к сожалению, пожерт- вовала совместимостью с оригинальными протоколами, создав токсичные зависимо- сти сети веб от лицензионных технологий удаленного вызова процедур (RPC — Remote Procedure Call). Ш Информация о переключении службы имен изложена в разделе 19.5. Для эмуляции поведения клиента службы Active Directory демон winbind вносит из- менения в протоколы РАМ, NSS и Kerberos. Он преобразует запросы на аутентифи- кацию и получение системной информации в соответствующие форматы, характерные для продуктов компании Microsoft. С точки зрения системы UNIX, служба Active Direc- tory — это просто другой источник информации о каталоге LDAP и данных аутентифи- кации по протоколу Kerberos. Вы должны выполнить следующие процедуры, связанные с конфигурированием, прежде чем система Linux сможет войти в сферу действия службы Active Directory. • Инсталлируйте пакет Samba с поддержкой службы Active Directory и преобразова- нием идентификаторов. • Конфигурируйте переключение службы имен nsswitch. conf, чтобы использо- вать демона winbind как источник информации о пользователе, группе и пароле. • Конфигурируйте систему РАМ для обслуживания запросов на аутентификацию с помощью демона winbind. • Конфигурируйте службу Active Directory как сферу действия протокола Kerberos. Ш Более подробно система DNS описана в главе 17. Клиенты службы Active Directory в системах UNIX и Linux также должны использо- вать контроллеры этой службы, чтобы обслуживать свои DNS-запросы и согласовывать свою работу с протоколом NTP. Кроме того, следует принять меры, чтобы полностью определенное системное имя домена было указано в файле /etc/hosts. В некоторых ситуациях в файл etc/hosts необходимо также добавить IP-адрес контроллера домена. Однако мы не рекомендуем это делать, если вы используете службу Active Directory для работы с системой DNS. Демон winbind отлично работает в системе Linux, но система UNIX осталась за бор- том. Нам известны отчеты о сайтах UNIX, в которых успешно развернута общая схема, описанная выше, но каждая система имеет свои тонкости, а интеграция в системе UNIX выполняется не так безукоризненно, как в системе Linux. Для систем UNIX мы предла- гаем один из описанных ниже вариантов. Подготовка к интеграции службы Active Directory Пакет Samba по умолчанию включен в большинство дистрибутивов системы Linux, но некоторые дистрибутивы не содержат службы отображения идентификаторов, необ- ходимые для полной реализации клиента службы Active Directory. Компилируя модули из исходного кода, придется тщательно настраивать эти компоненты, поэтому мы ре- комендуем инсталлировать готовые пакеты исполняемых модулей, если есть такая воз- можность. С другой стороны, компоненты Samba должны быть как можно более современны- ми. Интеграция службы Active Directory представляет собой одну из новейших функцио- нальных возможностей пакета Samba, поэтому загрузка последней версии кода с сайта samba. org поможет избежать неприятных ошибок.
1202 Часть III. Разное Если вы создаете систему Samba на основе исходного кода, настройте ее с помощью совместно используемых модулей idmap__ad и idmap_rid. Соответствующий аргумент в сценарии . /configure должен иметь следующий вид. —wi th-shared-modules=idmap_ad , idmap__rid Соберите и инсталлируйте систему Samba с помощью уже знакомой вам последова- тельности команд make, sudo make install. Если система инсталлирована правильно, библиотека winbind будет размещена в ка- талоге /lib. ubuntu$ Is -1 /lib/libnss_winbind.so.2 -rw-r—r— 1 root root 21884 2009-10-08 00:28 /lib/libnss_winbind.so.2 Демон winbind останавливается и запускается с помощью обычных системных про- цедур. После изменения файлов nsswitch.conf, smb.conf или файла конфигурации протокола Kerberos krb5. conf его следует запустить повторно. Его не следует запускать, пока не выполнено конфигурирование других служб. Конфигурирование протокола Kerberos для интеграции службы Active Directory Протокол Kerberos не удобен для сложной конфигурации, особенно на серверной стороне. К счастью, нам достаточно настроить только клиентскую сторону протокола Kerberos, что представляет собой намного более простую задачу. Файл конфигурации имеет имя /etc/krb5. conf. Во-первых, следует убедиться, что полное системное имя домена включено в файл /etc/hosts и что протокол NTP использует сервер Active Directory для привязки по времени. Затем отредактируйте файл krb5. conf и добавьте в него приведенные ниже строки. Замените свой домен Active Directory на ULSAH. СОМ. [logging] default = FILE:/var/log/krb5.log [libdefaults] clockskew = 300 default_realm = ULSAH.COM kdc_timesync = 1 ccache_type = 4 forwardable = true proxiable = true [realms] ULSAH.COM = { kde = dc.ulsah.com admin_server = dc.ulsah.com default_domain = ULSAH } [domain_realm] .ulsah.com = ULSAH.COM ulsah.com = ULSAH.COM В этом примере представляют интерес несколько значений. Даже несмотря на при- вязку по времени с помощью протокола NTP, допускается пятиминутное расхождение. Это дает определенный запас времени, если с протоколом NTP возникнет проблема. По умолчанию областью считается домен Active Directory, а центр распределения ключей
Глава 30. Взаимодействие с системой Windows 1203 (KDC — key distribution center) конфигурируется как домен контроллера Active Directory. Для отладки удобно пользоваться файлом krb5. log. Запросите билет у контроллера службы Active Directory, выполнив команду kinit. Укажите корректную учетную запись пользователя домена. Для проверки подойдет имя “administrator”, хотя учетная запись может быть любой. Когда получите приглашение, введите пароль домена. ubuntu$ kinit administrator@ULSAH.COM Password for administrator@ULSAH.COM: <password> Для демонстрации билета Kerberos следует использовать команду klist. ubuntu$ klist Ticket cache: FILE:/tmp/krb5cc_1000 Default principal: administrator@ULSAH.COM Valid starting Expires Service principal 10/11/09 13:40:19 10/11/09 23:40:21 krbtgt/ULSAH.COM@ULSAH.COM renew until 10/12/09 13:40:19 Kerberos 4 ticket cache: /tmp/tktlOOO klist: You have no tickets cached Если билет выведен на экран, значит, аутентификация прошла успешно и протокол Kerberos сконфигурирован правильно. В данном случае билет действует еще 10 часов и может быть возобновлен через 24 часа. (Для отмены билета можно использовать коман- ду kdestroy.) Остальные параметры конфигурации можно найти на справочной странице krb5. conf. Программа Samba как член домена Active Directory Как и остальные компоненты пакета Samba, конфигурация демона winbind запи- сана в файле smb. conf. Конфигурируйте пакет Samba как член домена Active Directory с помощью параметра security = ads. Ниже приведена работоспособная конфигурация. Мы задали область Kerberos и ука- зали аутентификацию пакета Samba в контроллере домена. Мы также задали отображе- ние идентификаторов с помощью параметра idmap в файле smb.conf. Обратите внима- ние на то, что конфигурация отдельных общих ресурсов в файле smb. conf производится отдельно от конфигурации служб аутентификации Active Directory. [global] security = ads realm = ULSAH.COM password server = 192.168.7.120 workgroup = ULSAH winbind separator = + idmap uid = 10000-20000 idmap gid = 10000-20000 winbind enum users = yes winbind enum groups = yes template homedir = /home/%D/%U template shell = /bin/bash client use spnego = yes client ntlmv2 auth = yes encrypt passwords = yes
1204 Часть III. Разное winbind use default domain = yes restrict anonymous = 2 Большинство параметров очевидно, а детали можно найти на справочной странице smb. conf. Особого внимания заслуживает параметр winbind use default domain. Если вы используете несколько доменов Active Directory, то это значение должно быть равным по. Однако если вы используете только один домен, то присвоение этому параметру значе- ния yes позволит пропустить домен в ходе аутентификации (например, можно исполь- зовать домен “ben” вместо “ULSAH\ben”). Кроме того, значение winbind separator задает альтернативу обратной косой черте при указании имен пользователей. Значение workgroup должно быть коротким именем домена. Например, значение параметра workgroup для домена linux.ulsah.com может быть равным LINUX. Задав конфигу- рацию системы Samba, запустите ее и службы winbind снова, чтобы новые установки вступили в силу. И наконец, присоединим систему к домену; воспользуемся инструментом net из па- кета Samba, который позаимствовал синтаксис у команды системы Windows с тем же именем. Команда net принимает в качестве аргументов протоколы для взаимодействия с системой Windows. Для службы Active Directory мы используем параметр ads. Убедитесь, что билет существует, выполнив команду klist (и запросите его с по- мощью команды kinit, если билета еще нет), а затем для присоединения к домену ис- пользуйте следующую команду. ubuntu$ sudo net ads join -S DC.ULSAH.COM -U administrator Enter administrator’s password: <password> Using short domain name — ULSAH Joined 'UBUNTU' to realm 'ulsah.com' В командной строке мы указали сервер службы Active Directiry de. ulsah. com (что необязательно) и учетную запись администратора. По умолчанию служба Active Directory добавляет новую систему в раздел Computer иерархии домена. Если система оказывается в разделе Computers OU внутри оснастки Users and Computers службы Active Direc- tory, то операция присоединения к домену прошла успешно. Состояние системы можно также проверить с помощью команды net ads status. Дополнительные параметры, в том числе операции поиска протокола LDAP, указаны на справочной странице net. Конфигурация переключения службы имен проста. Сначала следует проверить си- стемные файлы passwd и group, а затем запустить службу Active Directory с помощью демона winbind. Этот трюк описывается в файле nsswitch. conf следующим образом. passwd: compat winbind group: compat winbind shadow: compat winbind После конфигурирования системы NSS можно выполнить распознавание пользова- теля и группы в службе Active Directory с помощью команды wbinf о. Для того чтобы увидеть список пользователей домена, используется команда wbinf о -и, а список групп выводит команда wbinfо -д. Команда getent passwd показывает учетные записи поль- зователей во всех источниках в формате /etc/passwd. ubuntu$ getent passwd root:x:0:0:root:/root:/bin/bash daemon:x:1:1:daemon:/usr/sbin:/bin/sh bwhaley:x:10006:10018::/home/bwhaley:/bin/sh
Глава 30. Взаимодействие с системой Windows 1205 guest:*:10001:10001:Guest:/home/ULSAH/guest:/bin/bash ben:*:10002:10000:Ben Whaley:/home/ULSAH/ben:/bin/bash krbtgt:*:10003:10000:krbtgt:/home/ULSAH/krbtgt:/bin/bash Отличить локальных пользователей от учетных записей домена можно только по идентификатору пользователя и по пути ULSAH в домашнем каталоге, который можно увидеть в последних трех записях. Если ваш сайт использует несколько доменов или параметр winbind use default domain не установлен, к учетной записи домена приписывается его короткое имя (на- пример, ULSAH\ben). Конфигурация системы РАМ Ш Общее описание системы РАМ дано в разделе 20.5. В данный момент мы настроили систему на взаимодействие со службой Active Direc- tory с помощью программы Samba, но аутентификация еще не сконфигурирована. На- строить систему РАМ на аутентификацию с помощью службы Active Directory довольно сложно, в основном, потому, что ее специфика зависит от конкретного дистрибутива системы Linux. Общая идея заключается в конфигурировании демона winbind как модуля аутен- тификации для всех служб, которым необходима поддержка службы Active Directory. В некоторых дистрибутивных пакетах, например в системе Red Hat, все службы удобно настраиваются в одном файле. В других, например в системе Ubuntu, параметры конфи- гурации распределены по нескольким файлам. В табл. 30.1 перечислены соответствую- щие файлы для каждого дистрибутивного пакета системы Linux. Таблица 30.1. Файлы конфигурации системы РАМ для поддержки демона winbind —----------------,.л............... ..................... , , .—-R'"" ;; Сеанс Ubuntu common-account, common-auth, sudo common-session SUSE common-auth, common-password, common-account common-session Red Hat system-auth common-auth Для того чтобы включить аутентификацию winbind, добавьте строку auth sufficient pam_winbind.so в начало каждого файла. Исключение составляет файл common-password в системе SUSE, в котором ключевое слово auth необходимо заменить словом password. password sufficient pam_winbind.so Система РАМ может автоматически создавать домашние каталоги при регистрации новых (для системы) пользователей. Поскольку пользователей службы Active Directory невозможно добавить стандартной командой useradd, которая обычно создает до- машние каталоги, эта функциональная возможность оказывается довольно удобной. Добавьте в файл конфигурации сессии системы РАМ, указанный в табл. 30.1, следую- щую строку. session required pam_mkhomedir.so umask=0022 skel=/etc/skel В этой конфигурации система РАМ создает домашние каталоги с разрешением на доступ в восьмеричном виде, равным 755, и профилями учетных записей, скопирован- ными из каталога /etc/skel.
1206 Часть III. Разное Вы можете также ограничить доступ к локальной системе для пользователей, входя- щих в конкретную группу Active Directory. Для этого следует добавить в файл конфигу- рации сессии службы РАМ следующие строки. session required /lib/security/$ISA/pam_winbind.so use_first_pass require_membership_of=unix_users В данном случае регистрироваться могут только пользователи из группы unix users службы Active Directory. Альтернатива демону winbind Несмотря на то что свободное подключение к службе Active Directory, описанное вы- ше, работает вполне хорошо, оно уязвимо к ошибкам и выглядит довольно сложным. Для администраторов, желающих осуществить относительно простую инсталляцию и по- лучить поддержку при устранении ошибок, существует альтернатива. Программы компании Likewise Software автоматизируют работу демона winbind, пе- реключение службы имен, протокола РАМ и конфигурирование отображения идентифи- каторов для более чем 100 дистрибутивных пакетов системы Linux и вариантов системы UNIX, включая все системы, рассмотренные в книге. Кроме того, они включают в себя агента групповой политики, который позволяет проводить централизованное конфигу- рирование систем UNIX, оснащенных службой Active Directory. Несколько надстроек к графическим пользовательским интерфейсам, включая консоль управления и оснаст- ку службы Active Directory, также упрощают инсталляцию и конфигурирование. Версии этого программного обеспечения с ограниченными функциональными возможностями доступны бесплатно, а полнофункциональные варианты и сопровождение предлагаются на коммерческой основе. Детали можно найти на сайте likewise. com. Еще одна возможность, которая позволяет полностью обойтись без демона winbind, — это комплект инструментов Quest Authentication Services. Он предлагает те же самые функциональные возможности, что и программы компании Likewise, но имеет дополнительные функции для управления групповой политикой. Приготовьте свои бу- мажники, потому что инструменты Quest недешевы. Полный список продукции можно найти на сайте quest. com/authentication-services. 30.10. Рекомендуемая литература • Terprstra, John Н. Samba-3 by Example: Practical Exercises to Successfill Deployment 2nd Edition. Upper Saddle River, NJ: Prentice Hall PTR, 2006. (Электронная версия этой книги доступна на сайте samba. org.) • Terprstra, John H., Jelmer R. Vemooij. The Official Samba-3 HOWTO and Reference Guide. (2nd Edition). Upper Saddle River, NJ: Prentice Hall PTR, 2006. (Электронная версия этой книги доступна на сайте samba. org.) 30.11. Упражнения 30.1. Зачем может понадобиться блокировать доступ через Интернет к портам 137-139 и 445 на сервере Samba?
Глава 30. Взаимодействие с системой Windows 1207 30.2. Инсталлируйте программу Cygwin на компьютере с системой Windows и восполь- зуйтесь утилитой ssh в эмуляторе rxvt, чтобы подключиться к компьютеру с си- стемой UNIX. Какие изменения появились в программе PuTTY? 30.3. ★ Сравните производительность работы клиента, имеющего доступ к файлам с по- мощью системы Samba, с производительностью клиента, имеющего доступ к фай- лам через “родной” сервер CIFS (т.е. компьютер с системой Windows). Ели на этих двух серверах установлено разное аппаратное обеспечение, целесообразно нивели- ровать влияние аппаратного обеспечения, чтобы влияние программного обеспече- ния проявилось ярче. (Может потребоваться доступ с правами суперпользователя.) 30.4. ★★ Воспользуйтесь анализатором пакетов (типа tcpdump или Wireshark) для пе- рехвата telnet-сеанса между Windows и UNIX, Инсталлируйте программу PuTTY и повторите процедуру. Проанализируйте результаты обеих проверок. (Необходим доступ с правами суперпользователя.) 30.5. Сконфигурируйте сервер печати Samba так, чтобы он использовал драйверы принтеров Windows для всех обслуживаемых им принтеров. Удостоверьтесь в том, что принтеры имеют приемлемую конфигурацию по умолчанию. 30.6. ★★ Настройте систему так, чтобы она аутентифицировала среду Active Directory. Примите меры, чтобы была возможность изменять пароль и при регистрации но- вых пользователей домашние каталоги создавались автоматически.
Глава 31 Последовательные устройства и терминалы Операционная система с сорокалетней историей, естественно, обросла хламом. К ка- тегории хлама можно отнести поддержку последовательных устройств, аргументируя это тем, что эту технологию доисторических времен лучше забыть. По сравнению с совре- менными мультимегабитовыми последовательными интерфейсами, такими как USB, тра- диционные последовательные порты кажутся медленными и пустячными. Понимание принципов работы последовательных интерфейсов — важная составляю- щая подготовки любого системного администратора. Хорошо ли, плохо ли, но интерфейс командной строки в системе UNIX основан на старинной концепции последовательного терминала и связанных с ней командах и управляющих устройствах, используемых и по сей день. Даже если вы никогда не приближались ближе 50 метров к кабельному терми- налу, по-прежнему используете функциональные возможности операционной системы, которые его поддерживают. Например, консольное окно на рабочем столе системы UNIX или Linux на самом деле представляет собой псевдотерминал, поскольку оно является устройством, с которым вы устанавливаете соединение, регистрируясь в сети. Настоящие последовательные порты RS-232 также используются до сих пор. Они больше не относятся к основным функциональным возможностям, но в некоторых си- туациях по-прежнему важны. Их можно использовать в качестве “общего знаменателя” для всех типов аппаратного обеспечения, от серверных менеджеров промышленного класса до встроенных систем миниатюрного масштаба, включая специальные проекты. Эту среду можно использовать для работы с устаревшими системами. В некоторых си- туациях их можно даже обнаружить под фальшполом. В этой главе рассказывается о том, как подключать к системе устройства после- довательного доступа RS-232 и использовать их в современной среде. В начале главы познакомимся с устройствами последовательного доступа и соответствующими кабель-
Глава 31. Последовательные устройства и терминалы 1209 ными системами. Затем речь пойдет о программном обеспечении, которое традиционно применялось для поддержки аппаратных и псевдотерминалов, которые их эмулируют. Оставшаяся часть главы содержит базовые сведения об использовании последователь- ных консолей в системах UNIX и Linux. 31.1. Стандарт RS-232C Большинство медленных последовательных портов работает в соответствии с одним из вариантов стандарта RS-232C. Этот стандарт определяет электрические характеристи- ки и назначение каждого сигнального провода, а также разводку контактов традицион- ного 25-контактного последовательного разъемного соединения DB-25 (рис. 31.1). Разъем Номера контактов Рис. 31.1. Вилка разъема DB-25 Поскольку стандарт RS-232C1 предназначен для распространения сигналов, многие из которых не используются в основных режимах передачи данных, в практической ра- боте полный набор сигнальных проводов не используется. Кроме того, разъемные сое- динения DB-25 слишком громоздки. Поэтому сейчас широко применяются альтерна- тивные модели 9-контактных разъемов, а не оригинальные 25-контактные. Кроме того, если возникает необходимость применять структурированные кабельные системы, аль- тернативой является разъем RJ-45. Эти разъемы описаны в разделе 31.2. На рис. 31.1 изображена вилка DB-25. Во всех последовательных разъемных соеди- нениях номера контактов на розетке зеркально отражают номера на вилке, чтобы при стыковке разъемов контакты с одинаковыми номерами совпадали. Схема в правой части рисунка соответствует показанной в левой части ориентации вилки. Обратите внимание: у разъема, изображенного на рисунке, всего семь штырьков. Это наиболее типичный случай. Сигналы интерфейса RS-232 и соответствующие им контак- ты разъемного соединения DB-25 перечислены в табл. 31.1. На практике используются только сигналы 1—8, остальные можно игнорировать. В отличие от стандартов разъемов, таких как USB и Ethernet, имеющих “защиту от дурака”, разъем RS-232 требует от пользователя, чтобы тот знал, какой тип устройства к нему подключен. Для последовательных устройств существует две конфигурации ка- бельной системы: DTE (Data Terminal Equipment — терминальное оборудование) и DCE (Data Communications Equipment — коммуникационное оборудование). Эти конфигура- ции определяют, какие сигналы устройство будет ожидать на тех или иных контактах разъемного соединения. 1 С технической точки зрения сегодня правильнее называть его стандартом EIA-232-E. Но если вы будете так говорить, вряд ли вас кто-нибудь поймет.
1210 Часть III. Разное Таблица 31.1. Сигналы интерфейса RS-232 и соответствующие им контакты разъемного соединения DB-25 Контакт Сигам г ... Контакт Дина», . • 1 FG — корпусная земля 14 STD — вторичный сигнал TD 2 TD — передаваемые данные 15 ТС — синхронизация передачи 3 RD — принимаемые данные 16 SRD — вторичный сигнал RD 4 RTS — готовность к передаче 17 RC — синхронизация приема 5 CTS — готовность к приему 18 Не назначен 6 DSR — готовность данных 19 SRTS — вторичный сигнал RTS 7 SG — сигнальная земля 20 DTR — готовность терминала 8 DCD — обнаружение несущей 21 SQ — детектор качества сигнала 9 Положительное напряжение 22 RI — индикатор вызова 10 Отрицательное напряжение 23 DRS — селектор скорости передачи данных 11 Не назначен 24 SCTE — внешняя синхронизация передачи 12 SDCD — вторичный сигнал DCD 25 BUSY—занято 13 SCTS — вторичный сигнал CTS Устройства конфигурируются либо в режиме DTE, либо в режиме DCE, хотя некото- рые поддерживают оба варианта (но не одновременно). Компьютеры, терминалы и прин- теры чаще всего относятся к типу DTE, тогда как модемы являются DCE-устройствами. Последовательные порты DTE- и DCE-устройств могут взаимодействовать друг с другом в произвольных сочетаниях, но в каждом конкретном случае требуются разные кабели. Смысла в одновременном существовании двух конфигураций нет, поскольку для всего оборудования может использоваться одна и та же разводка контактов. Просто это одно из многих бессмысленных наследий стандарта RS-232. Ниже перечислены особенности обеих конфигураций. • Разводка контактов в любом разъемном соединении RS-232 всегда одинакова, неза- висимо от того, вилка это или розетка (штырьки всегда совпадают с соответствую- щими отверстиями) и где находится разъем: на кабеле, DTE- или DCE-устройстве. • Спецификация RS-232 основана на модели прямого соединения DTE- и DCE-уст- ройств. Под “прямым” соединением понимается подключение линии TD DTE- устройства к линии TD DCE-устройства и так далее, т.е. все одноименные контак- ты соединяются друг с другом. • Названия сигналов отражают работу DTE-устройств. Например, название сигнала TD (transmitted data — передаваемые данные) в действительности означает “дан- ные, передаваемые от DTE-устройства к DCE-устройству”. Несмотря на это кон- такт TD служит для приема данных на DCE-устройстве. Аналогичным образом контакт RD является входным на DTE-устройстве и выходным на DCE-устройстве. • Когда кабелем соединяются два DTE-устройства (компьютер и терминал либо два компьютера), их нужно заставить воспринимать противоположную сторону как DCE-устройство. Например, оба устройства будут предполагать передачу данных по линии TD и прием — по линии RD, поэтому необходимо соединить провода крест-накрест, связав выходной контакт одного устройства с входным контактом другого и наоборот.
Глава 31. Последовательные устройства и терминалы 1211 • Подобное “перекрещивание” при соединении двух DTE-устройств требуется для трех групп сигналов: 1) TD и RD, о чем говорилось выше; 2) RTS и CTS; 3) кон- такт DTR должен быть соединен с контактами DCD и DSR на противоположном конце. Кабель, соединяющий два DTE-устройства, называют ну ль-модемным. Несмотря на это подключать к нему модемы нельзя, ведь модем — это DCE-устройство! Кабель для модемов называется просто “модемным” или “прямым”. На рис. 31.2 изображены разводки контактов и схемы соединений нуль-модемным и прямым кабелями. Показаны только “полезные” сигналы, используемые на практике. Легенда Прямо Нуль-модем Корпусная земля FG Передаваемые данные TD Принимаемые д анные rd Готовность к передаче RTS Готовность к приему CTS Готовность данных DSR Сигнальная земля SG Обнаружение несущей DCD Готовность терминала DTR Рис. 31.2. Разводки контактов и схемы соединения кабелей для разъемов DB-25 31.2. Альтернативные разъемные соединения В следующих подразделах описываются наиболее распространенные альтернатив- ные разъемные соединения: DB-9 и RJ-45. Несмотря на конструктивные различия, эти соединения обеспечивают передачу тех же электрических сигналов, что и разъем DB-25. Устройства, в которых используются разные разъемы, всегда совместимы, если правиль- но выбран переходный кабель. Разъем DB-9 Девятиконтактный разъем DB-9 (внешне напоминающий уменьшенный DB-25) обычно применяется в персональных компьютерах. Он обеспечивает передачу восьми сигналов стандарта RS-232 (рис. 31.3). Рис. 31.3. Вилка разъема DB-9
1212 Часть III. Разное У местных поставщиков персональных компьютеров обычно можно приобрести го- товые переходные кабели DB-9/DB-25. Соответствующая разводка контактов представ- лена в табл. 31.2. Таблица 31.2. Разводка контактов для прямого кабельного перехода DB-9 DB-9 Сигнал 3 TD — передаваемые данные 2 RD — принимаемые данные 7 RTS — готовность к передаче 8 CTS — готовность к приему 6 DSR — готовность данных 5 SG — сигнальная земля 1 DCD — обнаружение несущей 4 DTR — готовность терминала Разъем RJ-45 RJ-45 — это 8-проводной модульный телефонный разъем. Он облегчает прокладку последовательных соединений через существующую разводку, если здание оборудовано витой парой Ethernet. Гнезда RJ-45 практически не встречаются в компьютерах и обычных последователь- ных интерфейсах, но их часто применяют в качестве промежуточных соединителей при разводке линий последовательной передачи данных через коммутационные панели. Иногда их можно встретить в тех устройствах, где на небольшой площади размещено много портов (например, в терминальных серверах). Разъемы RJ-45, как правило, ис- пользуются не с витой парой, а с плоским телефонным кабелем. Оба варианта допу- стимы в последовательных соединениях, но витая пара обеспечивает лучшее качество сигнала при передаче данных на большие расстояния. Для работы с разъемными соеди- нениями RJ-45 требуется недорогой инструмент. Разъем Номера контактов Вид сверху Рис. 31.4. Вилка разъема RJ-45 Существует несколько стандартов, определяющих соответствие контактов разъема RJ-45 контактам разъема DB-25. В табл. 31.3 описан официальный стандарт RS-232D, который почти не используется. Другой стандарт — это система Дэйва Йоста (Dave Yost), в которой каждое устройство снабжено гнездом RJ-45 и используются стандартизированные кабели, позволяющие соединять как DCE-, так и DTE-устройства (yost. com/computers/RJ45-serial).
Глава 31. Последовательные устройства и терминалы 1213 Таблица 31.3. Разводка контактов для прямого кабельного перехода RJ-45/DB-25 1 6 2 8 3 20 4 7 5 3 6 2 7 5 8 4 DSR — готовность данных DCD — обнаружение несущей DTR — готовность терминала SG — сигнальная земля RD — принимаемые данные TD — передаваемые данные CTS — готовность к приему RTS — готовность к передаче 31.3. Аппаратная и программная несущие При подсоединении и включении устройства система UNIX ожидает, что сигнал об- наружения несущей (DCD) перейдет на высокий уровень (положительное напряжение). Этот сигнал подается на восьмой контакт разъемного соединения DB-25. Если в после- довательном кабеле есть линия DCD и компьютер “обращает на нее внимание”, значит, используется аппаратная несущая. В большинстве систем допускается также применение программной несущей, когда компьютер “делает вид”, что сигнал DCD всегда присутствует. Для некоторых устройств (в частности, для терминалов) программная несущая — это подарок судьбы. Она позволяет в каждом последовательном соединении обходиться все- го тремя линиями: передаваемых данных, принимаемых данных и сигнальной земли. Но в модемных соединениях сигнал DCD обязателен. Если терминал подключен через модем и сигнал обнаружения несущей пропадает, модем должен разрывать соединение (особенно при междугородных звонках). Режим программной несущей для последовательного порта обычно задается в кон- фигурационном файле (например, /etc/gettydef s или /etc/inittab, в случае реги- страционного терминала, и /etc/printcap, в случае принтера) той клиентской про- граммы, которая обслуживает этот порт. Если нужно включить этот режим “на лету”, воспользуйтесь командой stty -clocal. Например, команда suse$ sudo stty -clocal < /dev/ttySl включает программную несущую для порта ttySl. 31.4. Аппаратный контроль передачи данных Назначение сигналов CTS и RTS — обеспечить такую скорость передачи данных, что- бы приемное устройство успевало их обрабатывать. Например, если существует опасность переполнения буфера модема (возможно, из-за того, что соединение с удаленным узлом Работает медленнее, чем последовательный канал между локальным компьютером и мо- демом), модем может приказать компьютеру сделать паузу, пока буфер не освободится. Контроль передачи данных имеет большое значение для принтеров и высокоскорост- ных модемов. В системах, где аппаратный контроль передачи отсутствует (из-за того, 470 последовательные порты не поддерживают этот режим, либо из-за того, что в после- довательном кабеле выводы CTS и RTS не подключены), его иногда можно имитировать Программным путем с помощью управляющих ASCII-символов XON и XOFE Однако
1214 Часть III. Разное программный контроль должен явно поддерживаться высокоуровневым программным обеспечением, хотя даже в этом случае его реализация затруднена. Символам XON и XOFF соответствуют комбинации клавиш <Ctrl+Q> и <Ctrl+S>. Это представляет проблему для пользователей редактора emacs, где при нажатии комби- нации клавиш <Ctrl+S> по умолчанию вызывается команда поиска. Во избежание этого необходимо связать команду поиска с другой комбинацией клавиш или воспользоваться командами stty start и stty stop для изменения установок драйвера терминала. Большинство терминалов игнорирует сигналы CTS и RTS. Те немногие терминалы, которые для установления связи требуют, чтобы по этим линиям была проведена про- цедура квитирования, можно обмануть, соединив перемычкой контакты 4 и 5 на том конце кабеля, который подключен к терминалу. В результате, когда терминал посылаем сигнал на вывод 4, заявляя “я готов”, с вывода 5 он получает этот же сигнал обратно^ что означает “начинай”. Таким же способом можно решить вопрос с квитированием по линиям DTR/DSR/DCD. Как и в случае программной несущей, параметрами аппаратного контроля передачи можно управлять посредством конфигурационных файлов или команды stty. На аппаратном обеспечении компании Sun контроль передачи данных для soians встроенных последовательных портов можно настроить с помощью команде eeprom. [КЯ На некоторых платформах компании HP возникает необходимость настраи- вать встроенные последовательные порты с помощью системы Guardia» Service Processor (GSP). 31.5. Файлы последовательных устройств Последовательные порты представляются в системе файлами устройств, расположен- ными в каталоге /dev или его подкаталогах. Даже сегодня у большинства компьютеров имеется два встроенных последовательных порта: /dev/ttya и /dev/ttyb, впрочем их часто называют /dev/ttySO и /dev/ttySl соответственно. Иногда на один и тот же последовательный порт ссылается несколько устройств: Например, в системе /dev/cua/a означает тот же порт, что и /dev/term/а. Однако порт /dev/cua/a имеет другой, младший номер устройства. solaris$ Is -IL /dev/term/а /dev/cua/a crw -------i uucp uucp 37, 130172 Jan 11 16:35 /dev/cua/a crw-rw-rw- 1 root sys 37, 0 Jan 11 16:35 /dev/term/a Как обычно, имена файлов устройств не имеют значения. Отображение устройств^ определяется его старшими и младшими номерами, а имена файлов устройств введены просто для удобства пользователей. Несколько файлов устройств одновременно используется, в основном, для под- держки модемов, обрабатывающих входящие и исходящие звонки. В схеме Solaris драйвер позволяет открыть порт /dev/term/а, только когда модем получает сигнал на контакт DCD, означающий наличие активного (входящего) соединения (при усло- вии что на порт не установлена программная несущая). Порт /dev/cua/a может от- крываться независимо от состояния контакта DCD; он используется при соединении с модемом, чтобы тот принял звонок. Если используется одно устройство, то доступ другого блокируется.
Глава 31. Последовательные устройства и терминалы 1215 ИСЯ В системе HP-UX файлы последовательных устройств не всегда создаются ав- тематически. Для того чтобы заставить систему их найти, можно использовать следующую команду. hp-ux$ sudo ioscan -С tty -fn Файлы устройств можно также создать с помощью такой команды. hp-ux$ sudo mfsf -Н порт-с-вывода-устройства-ввода-вывода -d asioO -аО -i -v Похоже, что система AIX целиком отказалась от поддержки последовательных _ ' интерфейсов. В частности, если в вашей системе несколько LPAR (см. гла- ву 24), то последовательные интерфейсы не доступны по умолчанию. В этом случае вам, видимо, придется купить специальное оборудование. 31.6. Команда setserial: передача драйверу ПАРАМЕТРОВ ПОСЛЕДОВАТЕЛЬНОГО ПОРТА В СИСТЕМЕ LlNUX Последовательным портам персональных компьютеров можно назначать различные адреса ввода-вывода и номера запросов на прерывание (IRQ). Параметры портов счи- тываются из BIOS при включении питания компьютера. Менять их приходится, только если какое-нибудь “вредное” устройство соглашается работать лишь при выделении ему ресурсов, обычно закрепленных за одним из последовательных портов. К сожалению, драйвер последовательных портов не всегда способен распознать подобные изменения конфигурации без посторонней помощи. В системе UNIX эта проблема традиционно решается указанием параметров после- довательного порта на этапе компиляции ядра. К счастью, в системе Linux этого можно избежать, воспользовавшись командой setserial. При наличии флага -д она отобра- жает текущие установки порта. ubuntu$ setserial -g /dev/ttySO /dev/ttySO, UART: 16550A, Port: 0x03f8, IRQ: 4 Задавая параметры порта, нужно сначала указать файл устройства, а затем — после- довательность названий параметров и их значений. К примеру, команда ubuntu$ sudo setserial /dev/ttySl port 0x02f8 irq 3 устанавливает адрес ввода-вывода и номер прерывания для порта ttySl. Важно уяс- нить, что эта команда ни в коей мере не меняет аппаратную конфигурацию системы. Она лишь сообщает конфигурационные параметры драйверу последовательных портов в системе Linux. Физические установки изменяются через системный BIOS. Изменения, производимые командой setserial, не сохраняются при перезагрузке системы. Стандартного способа сделать их постоянными не существует; в каждом дис- трибутиве это делается по-разному. й В системе Ubuntu для инициализации последовательных портов использует- ДА ся сценарий /etc/init. d/setserial. Он считывает параметры для каждого порта из файла /var/lib/setserial/autoserial.conf. /CSfe В системе SUSE для инициализации последовательных портов используется * 11 ,г сценарий /etc/init. d/serial. К сожалению, этот сценарий не имеет файла
1216 Часть III. Разное конфигурации; для того чтобы отразить команды, которые вы хотите выпол- нить, его приходится редактировать непосредственно. Бедная система SUSE! Этот сценарий написан на своем собственном метаязыке, позволяющем соз- давать строки команд setserial, но, к счастью, в нем достаточно много хо- рошо прокомментированных примеров. В системе Red Hat сценарий /etc/rc.d/rc.sysinit проверяет наличие сценария /etc/rc. serial и, если он существует, выполняет его на этапе на- чальной загрузки. Готового примера сценария нет, поэтому его придется соз- дать самостоятельно. Просто перечислите команды setserial, которые нуж- но выполнить, по одной на строку. Для надежности можно добавить в начало файла строку #! /bin/sh и сделать сам файл исполняемым, хотя это необяза- тельно. 31.7. Псевдотерминалы Терминалы с электронно-лучевыми трубками сегодня представляют собой не более чем музейные экспонаты, но их дух сохранился в виде псевдотерминалов. Эти пары файлов устройств эмулируют текстовый интерфейс терминалов со стороны служб, на- пример, виртуальных консолей, виртуальных терминалов (например, xterm) и служб сетевой регистрации (например, telnet и sh). Рассмотрим принцип их работы. Каждая пара файлов устройств имеет доступ к одно- му и тому же драйверу устройства внутри ядра. Подчиненное устройство имеет имя вро- де /dev/ttypl. Процесс, который мог бы нормально взаимодействовать с терминалом, например оболочка, использует подчиненное устройство вместо физического, например /dev/ttySO. Главный процесс, например sshd или telnetd, открывает соответствую- щее главное устройство, в нашем примере — /dev/ttypl. Драйвер псевдотерминала переносит коды нажатых клавиш и введенный текст между этими двумя устройствами, скрывая, что физического терминала не существует. Несмотря на то что псевдотерминалы не имеют скорости двоичной передачи или стратегии управления передачей данных, к ним можно применить большинство других атрибутов и настроек, описанных в главе. Язык сценария expect использует псевдотер- минал для управления процессами (например, ftp или parted), которые могут взаимо- действовать с пользователем. Он довольно полезен для автоматизации некоторых адми- нистративных задач. 31.8. Конфигурирование терминалов За последнее десятилетие дешевые компьютеры практически вытеснили с рынка тек- стовые терминалы. Но даже “терминальные” окна, работающие в графическом режиме, используют те же драйверы и файлы конфигурации, что и реальные терминалы, поэтому системные администраторы должны знать, как они работают. При настройке терминала нужно решить две важные задачи: закрепить за термина- лом процесс, который будет принимать поступающие от него запросы на регистрацию, и обеспечить доступность информации о терминале после входа пользователя в систе- му. Однако прежде чем приступать к решению этих задач, давайте рассмотрим, как осу- ществляется регистрация в системе.
Глава 51. Последовательные устройства и терминалы 1217 Процедура регистрации в системе В ходе регистрации задействуется несколько программ, самая важная из них — демон init. Одна из его задач заключается в порождении процесса, обобщенно называемо- го getty, на каждом терминальном порту, который определен в файле /etc/inittab. Демон getty устанавливает начальные характеристики порта (в частности, скорость передачи и режим контроля четности) и выводит на экран приглашение к регистрации. Q О демоне init рассказывалось в разделе 3.5. Д Реальное имя демона getty зависит от дистрибутива системы Linux, а в неко- торых дистрибутивах существует даже несколько реализаций демона. В систе- мах Red Hat и SuSE используется упрощенная версия, называемая mingetty, которая обрабатывает запросы, поступающие от виртуальных консолей. Для работы с терминалами и модемами предназначен демон mgetty, разработан- ный Гертом Дорингом (Gert Doering). В системе Ubuntu используется утилита getty, созданная Вице Венема (Wietse Venema). Она есть и в системе SuSE под названием age tty. Более старая реализация, называемая uugetty, в основном, вытеснена демоном mgetty. И наконец, популярный открытый сервер факсов HylaFAX (hylafах. org) имеет свою собственную версию де- мона getty, которая называется faxgetty. Для того чтобы сориентироваться в этом многообразии, рассмотрим утилиты с точки зрения сложности. Проще всех демон mingetty. Он способен лишь обрабатывать за- просы, поступающие от виртуальных консолей системы Linux. На следующем уровне иерархии находится демон agetty, который умеет обрабатывать запросы, поступающие от последовательных портов и модемов. Наконец, на вершине иерархии находится де- мон mgetty. Он может обрабатывать не только запросы на регистрацию, но и команды факсов, а также координировать работу модемов, чтобы один и тот же модем мог управ- лять как входными, так и выходными потоками. Последовательность событий при регистрации в системе такова. • Демон getty отображает содержимое файла /etc/issue, а также приглашение к регистрации. • Пользователь вводит регистрационное имя в строке приглашения. • Демон getty запускает программу login, передавая ей в качестве аргумента вве- денное имя. • Программа login запрашивает пароль и сверяет его с записями в файле /etc/ shadow или административной базе данных, например NIS или LDAP. • Программа login выводит на экран “сообщение дня”, хранящееся в файле /etc/ motd, и запускает интерпретатор команд. • Интерпретатор выполняет соответствующие сценарии конфигурации2. • Интерпретатор отображает на экране приглашение командной строки и переходит в режим ожидания команд. Когда пользователь выходит из системы, управление возвращается демону init, ко- торый “пробуждается” и порождает новый процесс getty для порта терминала. 2 Файл .profile — в случае sh/ksh; файлы .bash__profile и .bashrc — в случае bash; фай- лы . cshrc и . login — в случае csh/tcsh.
1218 Часть III. Разное Большинство параметров каждого терминального порта сосредоточено в файлах ка- талога /etc. К ним относятся приглашение к регистрации и процесс getty, связанный с портом, скорость передачи двоичных данных и тип терминала, соединенного с портом. К сожалению, среди разработчиков нет согласия по поводу конфигурации терминалов. В табл. 31.4 перечислены конфигурационные файлы, используемые в разных системах. Таблица 31.4. Конфигурационные файлы терминалов Система Вкл/выкл Тип терминала Параметры Монитор ч Ubuntua /etc/event.d/tty6 /etc/ttytype /etc/getttydefs getty SUSE /etc/inittab /etc/ttytype /etc/getttydefs getty Red Hat /etc/inittab /etc/ttytype /etc/getttydefs getty SolarisB _sactab .sactab zsmon/_pmtab ttymon HP-UX /etc/inittab /etc/ttytype /etc/getttydefs getty AIXr /etc/inittab /etc/security/login.cfg База данных ODM getty а Для управления демоном TTY/getty в системе Ubuntu используется не демон init, а демон ipstart. 6 Виртуальные консоли определены в файле /etc/default/console-setup. в Конфигурационные файлы системы Solaris хранятся в каталоге /etc/saf и управляются демоном sacadm. г Для обеспечения согласованности следует для модификации параметров T7Y использовать систему SMIT. Файл /etc/ttytype Во многих системах информация о типе терминала хранится в файле /etc/ttytype. Формат записи в файле ttytype имеет следующий вид. тип_терминала устройство Здесь устройство — это короткое имя файла устройства, соответствующего порту, a term type — запись в базе данных termcap или terminfo. Когда вы регистрируетесь, переменной окружения TERM присваивается значение этого поля. Рассмотрим пример файла ttytype. wyse console dialup ttyiO dialup ttyil vt320 ttyi2 Ы9 ttyi3 dialout ttyi4 Файл /etc/gettytab Файл gettytab ассоциирует символические имена, например std. 9600, с профиля- ми конфигурации портов, содержащих такие параметры, как скорость, четность и пред- ложение зарегистрироваться. Рассмотрим пример. # Запись, используемая, чтобы задать значения по умолчанию # для остальных записей, а также в ситуациях, когда демон getty # вызывается без конкретного имени записи. default:\ :ар:lm=\r\n%h login\72 :sp#9600: # Параметры фиксированной скорости
Глава 31. Последовательные устройства и терминалы 1219 2|std.9600|9600-baud:\ :sp#9600: h|std.38400|38400-baud:\ :sp#38400: Этот формат совпадает с форматом файлов printcap или termcap. Строки с имена- ми, разделенными вертикальными чертами (|), перечисляют имена каждой конфигура- ции. Другие поля в записях задают параметры, используемые последовательным портом. Файл /etc/gettydefs Как и файл gettytab, файл gettydefs определяет конфигурации портов, исполь- зуемые демоном getty. Каждая система может использовать только один из этих двух файлов. Файл gettydef s выглядит следующим образом. console# В9600 HUPCL # В9600 SANE IXANY #login: #console 19200# B19200 HUPCL # B19200 SANE IXANY #login: #9600 9600# В9600 HUPCL # B9600 SANE IXANY HUPCL #login: #4800 4800# В4800 HUPCL # B4800 SANE IXANY HUPCL #login: #2400 2400# В2400 HUPCL # B2400 SANE IXANY HUPCL #login: #1200 1200# В1200 HUPCL # B1200 SANE IXANY HUPCL #login: #300 300# B300 HUPCL # B300 SANE IXANY TAB3 HUPCL #login: #9600 Формат записи имеет следующий вид. метка# инит_ флаги # финал_флаги # приглашение #следующий Демон getty пытается сравнить свой второй аргумент с меткой. Если он вызывается без второго аргумента, то используется первая запись в файле. Поле инит_ флаги со- держит флаги ioctl(2), которые должны быть установлены на порту, пока выполняется регистрация. Поле финал_флаги устанавливает флаги, которые должны использоваться в дальнейшем. В файле должна существовать запись, задающая скорость соединения в наборах фла- гов инит_флаги и финал_флаги. Набор флагов зависит от системы; полную информа- цию о них можно найти на справочных страницах gettydef s или mgettydef s. Поле приглашение определяет строку приглашения зарегистрироваться, которая может содержать символы табуляции и перехода на новую строку с помощью обратной косой черты. Поле следующий задает метку записи inittab, которая должна заменяться текущей меткой, если поступила команда на прерывание. Это было полезно десятки лет тому назад, когда модемы не согласовывали скорость автоматически и вы должны были согласовывать ее вручную с помощью серии прерываний. Сегодня это уже анахронизм. Для аппаратного терминала поле следующий должно ссылаться на метку текущей записи. Каждый раз, изменяя файл gettydefs, вы должны выполнять команду getty -с gettydefs, которая проверяет синтаксис этого файла, чтобы убедиться, что все записи являются правильными. Файл /etc/inittab Демон init поддерживает различные “уровни выполнения”, которые определяют, какие системные ресурсы задействуются. Существует семь уровней выполнения, про- нумерованных от 0 до 6, плюс уровень “s”, являющийся синонимом уровня 1 (одно- пользовательский режим). При выходе из однопользовательского режима демон init приглашает пользователя ввести номер уровня выполнения, если только в файле /etc
1220 Часть III. Разное /inittab не задан параметр initdef ault, как описано ниже. Затем демон просматри- вает файл inittab в поиске всех строк, соответствующих указанному уровню. Ш Демон init описан в разделе 3.5. Уровни выполнения обычно устанавливаются таким образом, чтобы у пользователя был один уровень, на котором доступна только консоль, и другой уровень, на кото- ром доступны все терминалы. Можно задавать уровни выполнения так, как того тре- бует конкретная система, но мы рекомендуем не слишком отклоняться от значений по умолчанию. Записи файла inittab имеют следующий формат. идентификатор: уровни_выполнения: действие: процесс Приведем примеры записей в файле inittab. # Обработка команды <Ctrl+Alt+Del> са::ctrlaltdel:/sbin/shutdown -t3 -r now # Запуск демонов getty на стандартных уровнях 1:2345:respawn:/sbin/mingetty ttyl 2:2345:respawn:/sbin/mingetty tty2 Здесь поле идентификатор — это одно- или двухсимвольная строка, идентифицирую- щая запись. Поле идентификатора может быть пустым. Для терминалов в качестве иден- тификатора обычно указывают номер терминала. В поле уровни_выполнения перечислены номера уровней выполнения, к которым от- носится запись. Если уровни не заданы (как в первой строке), то запись действительна для всех уровней. В поле действие указывается, как трактовать поле процесс', наиболее распространенные значения приведены в табл. 31.5. Таблица 31.5. Возможные значения поля действие файла /etc/inittab wtle'lw.fl'l© Ждать? жифацтмй» '' initdefault — Задает исходный уровень выполнения boot Нет Процесс запускается при первом чтении файла inittab bootwait Да Процесс запускается при первом чтении файла inittab ctrlaltdel Нет Процесс запускается в ответ на нажатие комбинации клавиш <Ctrl+Alt+Del> once Нет Процесс запускается однократно wait Да Процесс запускается однократно respawn Нет Процесс постоянно поддерживается в рабочем состоянии powerfail Нет Процесс запускается при получении демоном init сигнала сбоя питания powerwait Да Процесс запускается при получении демоном init сигнала сбоя питания sysinit Да Процесс запускается перед обращением к консоли off - Прерывает выполняемый процесс в некоторых системах Если одно из значений в поле уровни_выполнения совпадает с номером текущего уровня, а значение поля действие свидетельствует об актуальности записи, то демон init с помощью интерпретатора sh выполняет команду, заданную в поле процесс (или прекращает ее выполнение). В столбце “Ждать?” табл. 31.5 указано, в каких случаях демон init ожидает завершения команды, прежде чем продолжить работу. В приведенном выше примере в последних двух строках порождаются демоны mingetty для первых двух виртуальных консолей (консоли переключаются нажатием
Глава 31. Последовательные устройства и терминалы 1221 комбинаций клавиш <ALT+F1> и <Alt+F2>). При добавлении в систему аппаратных терминалов или модемов соответствующие записи файла inittab будут примерно та- кими же, только в качестве команды должна быть указана строка вызова демоня mgetty или getty (agetty в SuSE), поскольку демон mingetty не работает с этими устрой- ствами. Как правило, в качестве значения поля действие выбирается respawn, а в поле уровни_выполнения указывают 2345. Команда telinit -q заставляет демон init повторно прочитать файл inittab. а Различные версии демона getty конфигурируются по-разному. Версия getty/agetty, имеющаяся в SuSE и Ubuntu, немного проще в этом плане, чем mgetty, потому что берет свою конфигурационную информацию из ко- мандной строки (содержащейся в файле /etc/inittab). Общий формат строки имеет следующий вид. /sbin/getty порт скорость тип_терминала Здесь порт — это файл устройства для данного порта (имя файла указано относительно каталога /dev); скорость — это скорость передачи в бодах (например, 38400), а поле тип_ терминала определяет стандартный тип терминала, подключаемого к данному пор- ту. Последнее поле является ссылкой на запись базы данных terminfo. Большинство эмуляторов имитирует работу терминала VT100 компании DEC, обозначаемого как vtlOO. Существует и много других параметров, в основном связанных с управлением модемами. Демон mgetty обладает более сложными средствами работы с модемами, чем agetty, и к тому же понимает входные и выходные команды факсов. Его конфигурация рассредоточена среди большего количества файлов. Помимо обычных флагов команд- ной строки, демон mgetty может принимать ссылку на файл /etc/gettydefs, в кото- ром указаны детали конфигурации драйвера последовательных портов. Необходимость в этом возникает только при сложной настройке модемов. Информацию о файле gettydefs можно получить с помощью команды man mgettydef s. Соответствующая страница названа так во избежание конфликта со старой man-страницей gettydefs, которая больше не существует ни в одной системе Linux. Строка вызова демона mgetty для аппаратного терминала выглядит примерно так. /sbin/mgetty -rs скорость устройство Параметр скорость — это скорость передачи в бодах (например, 38400), а устройство — это файл устройства для последовательного порта (указывайте полный путь к нему). Если требуется задать тип терминала по умолчанию, это придется сделать в отдель- ном файле, /etc/ttytype, а не в командной строке демона mgetty. Формат записей этого файла описан выше. Демон Upstart в системе Ubuntu ®В системе Ubuntu демон init заменен его модифицированным вариан- том Upstart, который запускает и останавливает службы в ответ на события. Однако выполняемый файл демона Upstart имеет прежнее имя /sbin/init. Демон Upstart использует один файл для каждого активного терминала, указанного в файле /etc/event .d. Например, если мы хотим применить демон getty к термина- лу ttySO, то файл /etc/event.d/ttySO может иметь следующий вид.
1222 Часть III. Разное # ttySO - getty # Эта служба поддерживает работу демона getty на терминале ttysO # с момента запуска системы до ее остановки start on runlevel 2 start on runlevel 3 start on runlevel 4 start on runlevel 5 stop on runlevel 0 stop on runlevel 1 stop on runlevel 6 respawn exec /sbin/getty 38400 ttySO Дополнительные комментарии по поводу программы Upstart можно найти в разде- ле 3.5. система Solaris и демон sacadm soiaris Вместо традиционных демонов getty из системы UNIX, которые следили за работой каждого порта и выдавали приглашение зарегистрироваться, в системе Solaris существует запутанная иерархия Service Access Facility, управляющая мониторами TTY, мониторами портов и многими другими сложными, но почти бесполезными функциями. Для того чтобы последовательный порт выдавал приглашение зарегистрировать- ся, сначала необходимо сконфигурировать “монитор”, следящий за состоянием порта (ttymon). Затем следует сконфигурировать монитор порта, который следит за монито- ром TTY. Например, чтобы настроить монитор, работающий со скоростью 9 600 бод, на терминал ttyb и заставить его выдавать приглашения зарегистрироваться с помощью терминала типа VT100, необходимо выполнить следующие команды. solaris$ sudo sacadm -а -р myttymon -t ttymon -c /usr/lib/saf/ttymon -v 1 solaris$ sudo pmadm -a -p myttymon -s b -i root -fu -v 1 -m ” 'ttyadm -d /dev/term/b -1 9600 -T vtlOO -s /usr/bin/login'" Файл /etc/ttydefs используется почти так же, как и файл gettydefs в других си- стемах, чтобы задать параметры скорости и четности. Информацию о демонах saf, sacadm, pmadm, ttyadm и ttymon можно найти на со- ответствующих справочных страницах и в главе о терминалах в книге Solaris AnswerBook. Развлекайтесь! 31.9. Специальные символы и драйвер терминала Драйвер терминала поддерживает несколько специальных функций, доступ к кото- рым осуществляется нажатием особых комбинаций клавиш (как правило, в эти комби- нации входит клавиша <Ctrl>). Привязку функций к клавишам можно задать с помощью команд tset и stty. Некоторые из этих функций и соответствующие им комбинации клавиш приведены в табл. 31.6. В зависимости от желания разработчика, значением по умолчанию для функции erase может быть либо комбинация клавиш <Ctrl+H>, либо символ удаления. (Реаль- ная клавиша на клавиатуре может быть помечена как “backspace” или “delete” или стрелка, направленная влево.) К сожалению, существование двух различных стандартов порождает многочисленные проблемы.
Глава 31. Последовательные устройства и терминалы 1223 Таблица 31.6. Специальные символы и функции драйвера терминала Название — —~ > Стандартная комбинация клавиш функция , v - . erase <Ctrl+?> Стирает один введенный символ werase <Ctrl+W> Стирает одно введенное слово kill <Ctrl+U> Стирает всю строку eof <Ctrl+D> Посылает терминалу признак конца файла intr <Ctrl+C> Прерывает выполнение текущего процесса quit <Ctrl+\> Уничтожает текущий процесс, создавая дамп памяти stop <Ctrl+S> Останавливает вывод на экран start <Ctrl+Q> Возобновляет вывод на экран susp <Ctrl+Z> Приостанавливает текущий процесс Inext <Ctrl+V> Игнорирует специальное значение следующего символа Можно воспользоваться командой stty erase, чтобы сообщить драйверу терминала о том, какой символ на самом деле используется. Однако некоторые программы (напри- мер, текстовые редакторы и командные интерпретаторы с режимом редактирования ко- мандной строки) имеют “собственное представление” о том, каким должен быть символ возврата, поэтому они не всегда обращают внимание на установку драйвера терминала. Часть программ поддерживает оба варианта. Может даже оказаться, что в локальной си- стеме принята одна установка, а в удаленной системе, в которой вы зарегистрировались по сети, — другая. В целом, не существует простого, универсального, решения подобных конфликтов. С каждой конкретной программой приходится разбираться отдельно. Есть два полезных ресурса на эту тему: документ Linux Backspace/Delete mini-HOWTO на узле tldp.org и статья Анне Баретта (Anne Baretta) по адресу: ibb.net/-anne/keyboard.html. 31.10. Команда stty: задание параметров терминала Команда stty позволяет непосредственно изменять и запрашивать значения различ- ных параметров драйвера терминала. Существует множество опций, большинство кото- рых можно проигнорировать. Обычно названия опций команды stty совпадают с теми, которые указаны на man-странице termios, хотя бывают и расхождения. Вот хорошее сочетание опций для простого терминала. solans $ stty intr АС kill AU erase AH -tabs Здесь параметр -tabs запрещает драйверу терминала задействовать встроенный ме- ханизм табуляции, поскольку многие эмуляторы не поддерживают его в полной мере. Остальные параметры назначают специальным символам прерывания (intr), удале- ния строки (kill) и удаления символа (erase), соответственно, комбинации клавиш <Ctri+C>, <Ctrl+U> и <Ctrl+H> (возврат с удалением). Команду stty можно использовать для анализа текущих режимов драйвера термина- ла и их включения. Команда stty без аргументов выдает такую информацию. solaris$ stty speed 38400 baud; erase = AH;eol = М-л?; eol2 = М-л? swtch = <undef>; ixany tab3
1224 Часть III. Разное Более детальный отчет можно получить с помощью команды stty -а. solaris$ stty -а speed 38400 baud; rows 24; columns 80; intr = AC; quit = A\; erase = AH; kill = AU; eof = AD; eol = M-A?; eol2 = M-A?; swtch = <undef>; start = AQ; stop = AS; susp = AZ; dsusp = AY; rprnt = AR; werase = AW; Inext = AV; flush = AO; -parenb -parodd cs8 hupcl -cstopb cread -clocal -crtscts -ignbrk brkint -ignpar -parmrk -inpck -istrip -inlcr -igncr icrnl ixon - ixoff -iuclc ixany imaxbel opost -olcuc -ocrnl onlcr -onocr -onlret -ofill -ofdel nlO crO tab3 bsO vtO ffO isig icanon iexten echo echoe echok -echonl -noflsh -xcase -tostop -echop rt echoctl echoke Формат вывода остался прежним, но отображена вся имеющаяся информация. О на- значении параметров в большинстве случаев можно догадаться интуитивно. Команда stty работает с файловым дескриптором своего стандартного входного по- тока, поэтому с помощью оператора переадресации, предусмотренного в интерпретаторе команд (<), можно устанавливать и запрашивать режимы не только текущего, но и дру- гих терминалов. Изменять режимы чужих терминалов имеет право только пользователь root. 31.11. Команда tset: автоматическое ЗАДАНИЕ ПАРАМЕТРОВ ТЕРМИНАЛА Команда tset переводит драйвер терминала в режим, соответствующий типу терми- нала. Тип терминала можно задать в командной строке. Если он не указан, используется значение переменной окружения TERM. Синтаксис команды tset предусматривает возможность изменения значений пере- менной окружения TERM. Это удобно, если вы часто регистрируетесь в системе через модем или коммутатор данных и хотите, чтобы драйвер был сконфигурирован в расчете на реальный терминал, который используется на другом конце соединения, а не на не- что общее и бесполезное вроде “коммутируемого терминала” (тип “dialup”). Предположим, к примеру, что на домашнем компьютере используется программа xterm, а система, в которой вы регистрируетесь по модему, воспринимает тип термина- ла модема как “dialup”. Тогда, если добавить команду tset -m dialup:xterm в файл . login или .profile, драйвер терминала всегда будет настроен на работу с про- граммой xterm. К сожалению, команда tset не так проста, как кажется. Для того чтобы заставить ее не только задавать режим работы терминала, но и менять значения переменных среды, нужно воспользоваться следующим мини-сценарием. set noglob eval 'tset -s -Q -m dialup:xterm' unset noglob Здесь подавляется обычный вывод команды tset (флаг -Q), а вместо этого запра- шивается вывод команд интерпретатора, устанавливающих значения переменных среды (флаг -s). Поскольку присутствуют обратные кавычки, командные строки, отобража- емые командой tset, перехватываются и подаются на вход интерпретатора благодаря
Глава 31. Последовательные устройства и терминалы 1225 встроенной команде eval. В результате команды будут выполнены так, как если бы их ввел сам пользователь. Команда set noglob запрещает интерпретатору раскрывать метасимволы, такие как и ‘?’, в выводе команды tset, а команда unset noglob восстанавливает нормаль- ный режим работы интерпретатора. Это не нужно в интерпретаторах sh/ksh, посколь- ку обычно они не раскрывают специальные символы, которые заключены в обратные кавычки. Вид самой команды tset не зависит от интерпретатора: проверяя значение переменной среды SHELL, она определяет, какие команды следует генерировать. 31.12. Как справиться с "зависшим” терминалом Некоторые программы (например, редактор vi) в процессе работы вносят серьезные изменения в параметры драйвера терминала. Пользователь, как правило, этого не за- мечает, поскольку при завершении или приостановке программы состояние терминала полностью восстанавливается. Однако существует опасность, что программа завершит работу аварийно или ее выполнение будет прекращено до завершения процедуры вос- становления. Если это случится, терминал может начать вести себя очень странно: пере- стать правильно обрабатывать символы новой строки, отображать вводимые символы и адекватно выполнять команды. Еще один способ нарушить работу терминала — применить к бинарному файлу команду cat или more. В большинстве таких файлов содержится причудливая смесь управляющих символов, которая, наверняка, окажется “смертельной” для недостаточно устойчивых эмуляторов. Для того чтобы решить эту проблему, можно воспользоваться командой reset или stty sane. Первая из них является всего лишь ссылкой на команду tset и может при- нимать большинство ее аргументов, хотя, как правило, вызывается без аргументов. Обе команды — и reset, и stty sane — восстанавливают работоспособность драйвера тер- минала и посылают терминалу соответствующий код сброса, который берется из базы данных termcap/terminfo, если таковая имеется. Во многих случаях сброс необходим потому, что терминал был оставлен в особом со- стоянии, когда вводимые пользователем символы не обрабатываются. В этом состоянии большинство терминалов при нажатии клавиши <Retum> или <Enter> генерирует толь- ко символ возврата каретки (<Ctrl+M>), а символ новой строки, при получении которо- го текущая команда посылается на выполнение, не генерируется. Чтобы ввести символ новой строки непосредственно, вместо клавиши <Retum> нажмите комбинацию кла- виш <Ctrl+J> или клавишу перевода строки (если таковая имеется). 31.13. Отладка последовательной линии Наладить работу последовательной линии несложно. Приведем перечень типичных ошибок. • Вы забыли дать демону init указание повторно прочитать свои конфигурацион- ные файлы. • Вы забыли установить режим программного управления потоком при использова- нии трехпроводных кабелей. • Вы используете несоответствующий нуль-модемный кабель. • При пайке или обжиме проводов вы перевернули вверх ногами разъем DB-25.
1226 Часть III. Разное • Вы подключили устройство не к тому проводу из-за того, что монтажные схемы оказались неправильными или неточными. • Вы неверно задали параметры терминала. Коммутационный тестер — незаменимое средство устранения проблем в кабельных системах. Он подключается к последовательной линии и показывает наличие сигналов в каждом проводе кабеля. У качественных коммутационных тестеров на каждой стороне есть и вилки, и розетки, поэтому они могут подключаться самыми разными способами. С каждым из представляющих интерес контактов связаны индикаторы, которые подсве- чиваются, когда контакт активен. Одни коммутационные тестеры позволяют только наблюдать за сигналами, другие дают возможность осуществлять повторную разводку соединений и подтверждают на- личие напряжения на контакте. Например, если есть подозрение, что кабель нужно сде- лать нуль-модемным, то можно с помощью коммутационного тестера изменить имею- щуюся разводку. 31.14. Соединение с консолями ПОСЛЕДОВАТЕЛЬНЫХ УСТРОЙСТВ Вероятно, самым распространенным и полезным приложением порта RS-232 в на- стоящее время является соединение с последовательной “консолью” другого устройства. Этим устройством может быть все, что угодно, — от управляемого устройства UPS или коммутатора сети до встроенной системы Linux вроде системы TiVo в вашем телевизоре. Например, вы можете установить последовательное соединение с устройством UPS, ко- торое служит источником электроэнергии для вашего оборудования в удаленном центре обработки данных, чтобы дистанционно отключать его в случае опасности. Перечислим основные этапы соединения с последовательной консолью. • Соедините кабелем последовательный порт в вашей системе UNIX и устройство, с которым хотите работать. Типы соединений и разъемов, которые могут вам по- надобиться, описаны выше. Вероятно, вам также понадобится нуль-модемный ка- бель. Его можно купить в любом магазине, торгующем компьютерной техникой. • Инсталлируйте или укажите программное обеспечение для работы с терминалом, которое вы будете использовать в системе UNIX или Linux. Десятки лет тому на- зад для этого использовались команды си или tip. Вы можете использовать их и сегодня, но лучше применить современные варианты — minicom и picocom. Дистрибутивы системы Linux обычно содержат эти утилиты; в других системах вам, вероятно, придется самостоятельно инсталлировать это программное обеспе- чение (см. freshmeat.net/projects/minicom и freshmeat.net/projects/ picocom соответственно). • Конфигурируйте ваше программное обеспечение для работы с терминалом так, чтобы оно открывало правильный файл устройства (см. выше). Обычно этими файлами являются /dev/ttya, /dev/tty 1, /dev/ttySO или /dev/SO. • Установите скорость передачи двоичных данных, биты остановки и поток управле- ния в соответствии со стандартными установками целевого устройства. Эти пара- метры обычно описаны в документации по устройству, но вы можете попробовать применить все возможные комбинации. Если вы не знаете правильной скорости передачи двоичных данных, примените старый трюк: установите соединение и на-
Глава 31. Последовательные устройства и терминалы 1227 берите несколько символов. Если вам приходится набирать несколько символов, чтобы получить один символ мусора, значит, скорость передачи данных слишком высокая. Если набор одного или двух символов создает много символов мусора, значит, скорость передачи данных слишком низкая. Тсс... не говорите никому! • Если вы успешно установили соединение, то должны иметь возможность вводить команды на удаленной консоли. Если устройство вдруг надолго зависает, значит, вы неправильно настроили поток управления; иногда в этих ситуациях помогает нажатие клавиш <Ctrl+Q>. Если возникли проблемы с соединением, в первую очередь удалите перекрещива- ние в кабеле или добавьте еще один кабель, если одного недостаточно. Не забывайте, если вы соединяетесь с удаленным блоком UNIX, необходимо настроить демон getty на удаленном конце, чтобы он прослушивал ваше соединение и выдавал приглашение зарегистрироваться. 31.15. Упражнения 31.1. Что такое нуль-модемный кабель? Как он используется при подключении DCE- и DTE-устройств? 31.2. Можно ли использовать трехпроводной последовательный кабель для подключе- ния модема? А для последовательного принтера? Почему? 31.3. Как осуществляется аппаратный контроль передачи данных? Что можно сделать, если система не поддерживает аппаратный контроль? 31.4. Что такое псевдотерминал? Какие программы работают с псевдотерминалами? 31.5. Создайте в файле /etc/inittab записи, которые осуществляют следующее: а) запускают программу server-fallback и дожидаются ее завершения, а затем немедленно останавливают работу системы, если поступает сигнал сбоя пита- ния; б) перезапускают серверную программу unstable-srv в случае сбоя; в) запускают сценарий clean- temp, который удаляет все временные файлы при каждом перезапуске системы. 31.6. Ваш друг забыл выйти из Linux-системы, оставив ее включенной на ночь в ла- боратории. На следующий день он столкнулся со странными проблемами при за- пуске программ в интерпретаторе команд. Программы внезапно завершались или зависали, а введенные символы исчезали при вводе определенных команд или символов. В то же время некоторые программы работали вполне корректно. Чем могут быть вызваны подобные аномалии? Как это проверить? Как устранить про- блему? Кто мог так “пошутить”?
Глава Управление, стратегия и политика Можно иметь самую профессиональную команду администраторов в мире, но без со- ответствующего технического руководства не обойтись. Эта глава посвящена рассмотре- нию нетехнических аспектов создания успешного отдела информационных технологий, а также нескольких технических вопросов, затрагивающих связанную с управлением часть системного администрирования. Большинство представленных в этой главе тем и идей не относится ни к какой опре- деленной области. Они касаются как одного системного администратора, работающе- го на полставки, так большой группы профессионалов, работающих на полную ставку над каким-нибудь большим проектом. Они подобно зелени подходят каждому, какое бы “блюдо” ни готовилось. Хорошие администраторы должны одинаково хорошо разбираться как в аппаратном, так и программном обеспечении. Способность организовать группу администраторов и принять меры, чтобы они полностью удовлетворяли потребности организации, отличает просто хорошего администратора от выдающегося. Кроме советов, касающихся управления, глава содержит разделы по таким темам, как политика в области информационных технологий, эффективные методы работы и соответствие стандартам. 32.1. Цель информационных технологий Отдел информационных технологий — это нечто большее, чем просто группа техни- ческих специалистов, умеющих ремонтировать принтеры и компьютеры. Со стратегиче- ской точки зрения, это коллектив людей, которые обслуживают организацию, поддер-
Глава 32. Управление, стратегия и политика 1229 живая работу пользователей и системы. Никогда не следует забывать золотое правило администратора: производство должно управлять информационными технологиями, а не наоборот. Для того чтобы достичь максимальной результативности, отдел информационных технологий должен взаимодействовать с другими подразделениями организации. В част- ности, необходимо согласовывать свои действия в области расходов, политики, управле- ния и качества оказываемых услуг (service level agreements — SLA). Во многих организациях — особенно в небольших компаниях и маленьких подраз- делениях внутри больших компаний — системный администратор совмещает несколько обязанностей, возможно, включая роль начальника отдела или менеджера. Понимание ключевых областей, в которых отдел информационных технологий взаимодействует с остальной частью организации, поможет сделать это взаимодействие намного эф- фективнее. Перечислим минимальные обязанности отдела информационных технологий. • Вести список нерешенных задач. • Расставлять приоритеты задач и распределять ресурсы для их решения. • Сообщать о состоянии задачи пользователям и сотрудникам предприятия. • Взаимодействовать с сотрудниками предприятия, чтобы правильно удовлетворять их потребности. • Осуществлять мониторинг компьютерного окружения, включая систему безопас- ности. • Следить за появляющимися технологиями. • Развивать навыки своих сотрудников. • Способствовать соблюдению требований регулирующих органов. • Разрабатывать инструкции по выполнению повторяющихся процессов и строго им следовать. • Измерять прогресс в достижении поставленной цели. • Быть готовым к катастрофам и иметь соответствующий план действий. • Быть достаточно гибким, чтобы удовлетворять потребности пользователей, и до- статочно дисциплинированным, чтобы удовлетворять потребности руководства. Составление сметы и расходование средств Расходование средств отделом информационных технологий должно соответствовать Целям всей организации. Бюджет отдела информационных технологий оказывает огром- ное влияние на диапазон и качество услуг, которые он может оказывать другим подраз- делениям организации, поэтому крайне важно, чтобы сотрудники этого отдела помогали всем понять эту связь и достигали необходимых компромиссов. Доля расходов на информационные технологии в общем бюджете организации от- носительно невелика, хотя и представляет собой нетривиальный компонент сметы. Среднестатистическая организация тратит на них от 2 до 9% своего бюджета. Эта ве- личина зависит от конкретной отрасти промышленности, но в среднем составляет при- мерно 4-5%. Этот общий бюджет впоследствии подразделяется на капитальные затраты и экс- плуатационные расходы. Капитальные затраты обычно связаны с приобретением обо- рудования. Эксплуатационные расходы включают стоимость труда и услуг, например
1230 Часть III. Разное поддержание работы глобальной сети. Существует много способов конвертировать за- траты одного типа в затраты другого. Например, аренда оборудования преобразует капи- тальные затраты в эксплуатационные расходы, а предварительно оплаченные контракты на техническое обслуживание позволяют капитализировать расходы по обслуживанию. Вероятно, вас не интересуют различия между этими видами расходов, а вот ваших бух- галтеров они очень даже интересуют, так что вам придется в этом разбираться. Системные администраторы должны понимать, как составляется бюджет, потому что от этого зависит их способность планировать свою работу на год. Например, если адми- нистратор хочет реализовать и систему централизованной регистрации, и систему мо- ниторинга безопасности, то его желания будут ограничены бюджетом. Если бюджетных средств хватает только на один сервер, то администратор должен либо изменить прио- ритеты проектов, либо принять решение, позволяющее запустить обе системы на одном сервере. (Отличным вариантом в этом случае станет виртуализация, но в других ситуа- циях совместное использование сервера осуществить не так легко и стоит дороже.) Если администратор может влиять на составление бюджета, он может способствовать выде- лению больших средств, если сможет обосновать, как информационная инфраструктура сможет повысить доходы компании. Стратегия в области информационных технологий Стратегии в области информационных технологий влияют на работу всей органи- зации, поэтому они являются важными компонентами общей стратегии компании. Основной вклад в разработку и реализацию стратегий в области информационных тех- нологий вносят системные администраторы. Администраторы иногда несут прямую от- ветственность за стратегию развития; в других случаях их могут попросить дать отзыв на стратегии, разработанные другими членами организации. В любом случае системные администраторы вносят ценный вклад в разработку об- щей стратегии организации. Многие организации имеют один набор стратегий для ко- нечных пользователей и другой — для администраторов. Администраторы должны быть знакомы с обоими наборами стратегий и обязаны разрабатывать организационные ме- роприятия, направленные на их поддержку. Ведение документации, тесно связанное с разработкой стратегии, иногда игнориру- ется или считается маловажным по сравнению с “реальной работой”. Большинство си- стемных администраторов не любят писать документы, хотя это важно для нормального функционирования информационной системы. Настройте систему wiki или используйте другие инструменты, с помощью которых администраторы могут делать короткие замет- ки, и помогите другим размещать релевантную информацию для последующего разбора или использования. Для этой цели хорошо подходят пакеты MediaWiki и Confluence. Программа MediaWiki, основанная на Википедии, — это свободно распространяемый пакет, написанный на языке PHP (mediawiki. org). Программа Confluence — это промышленное коммерче- ское приложение, разработанное для средних и крупных предприятий. Вы можете ин- сталлировать его на своем сервере или взять в аренду (hosted solution), если не хотите управлять им локально (atlassian.com). “Список вики-приложений” на странице Википедии содержит много пунктов, а сделать правильный выбор на основе сравни- тельного анализа вам поможет сайт wikimatrix. org. Конкретные стратегии и способы их согласованной реализации обсуждаются в раз- деле 32.7.
Глава 32. Управление, стратегия и политика 1231 Соглашения о качестве оказываемых услуг Системное администрирование — это услуга, а получателями этой услуги являют- ся люди и компьютеры. Для того чтобы отдел информационных технологий успешно справлялся со своими обязанностями, стараясь угождать пользователям и удовлетворяя потребности предприятия, все детали необходимо согласовать и зафиксировать в согла- шении о качестве оказываемых услуг. Хорошее соглашение предусматривает соответ- ствующий уровень обслуживания и является документом, на который можно ссылаться в проблемных ситуациях. (Однако помните, что отдел информационных услуг помогает, а не мешает пользователям!) Пользователи довольны, если выполняются следующие условия. • Их компьютеры в порядке, и они могут на них зарегистрироваться. • Их другие ресурсы, такие как принтеры и файловые серверы, доступны. • Их файлы с данными сохраняются, когда они их оставляют на время. • Их прикладное программное обеспечение установлено и работает, как положено. • При необходимости они получают дружественную и компетентную помощь. Пользователи хотят, чтобы эти условия выполнялись 24 часа в сутки, 7 дней в неде- лю. Желательно бесплатно. Пользователи недовольны в следующих случаях. • У них возникает простой, намеченный или незапланированный. • Из-за модернизации происходят внезапные, несовместимые изменения. • Они получают непонятные сообщения от системы или системных администра- торов. • Они получают долгие объяснения того, почему все это не работает. Когда что-то выходит из строя, пользователи хотят знать, когда это будет исправле- но. Их не интересует, какой жесткий диск или генератор сломались или почему; оставь- те эту информацию для своих административных отчетов. С точки зрения пользователя никакие новости не являются хорошими. Система или работает, или нет, и в последнем случае не имеет значения почему. Максимальное удо- вольствие наши клиенты получают, если они даже не замечают, что мы существуем! Грустно, но факт. Не менее важно, чтобы были довольны и ваши сотрудники. Хороших администра- торов трудно найти, и их потребности нужно учитывать при настройке системы управ- ления вашей организацией. Системные администраторы и другой технический штат до- вольны, если выполняются следующие условия. • Их компьютеры и системы поддержки пребывают в работоспособном состоянии. • У них есть необходимые ресурсы, чтобы выполнять свою работу (двойные мони- торы!). • Они имеют новейшее и лучшее программное и аппаратное обеспечение. • Они имеют стимул для работы или, по крайней мере, интересную работу (мини- мум тяжелой работы). • Их никто постоянно не дергает. • Они могут проявлять творческий подход без оглядки на босса, постоянно во все вмешивающегося и подсказывающего. • Их часы работы и уровень стресса не выходят за пределы разумного.
1232 Часть III. Разное Для того чтобы двигаться вперед, технические сотрудники нуждаются не только в зарплате в конце месяца. Они должны чувствовать, что у них есть степень творческого контроля над своей работой и что их ценят коллеги, босс и их пользователи. Некоторые условия, при которых довольны и пользователи, и технический персонал, совпадают. Однако некоторые факторы кажутся несовместимыми или даже находятся в прямом противоречии. Босс должен удостовериться, что все эти противоречия можно сгладить или устранить. Соглашение о качестве оказываемых услуг помогает помирить конечных пользова- телей и технический персонал. Хорошо написанное соглашение учитывает каждую про- блему, упомянутую в следующих разделах. Спектр услуг и их описание В соглашении о качестве оказываемых услуг описывается то, что организация может ожидать от отдела информационных технологий. Он должен быть написан в терминах, которые могут быть поняты нетехническими сотрудниками. Перечислим в качестве при- мера некоторые из этих услуг. • Электронная почта. • Интернет и веб-доступ. • Файловые серверы. • Бизнес-приложения. • Печать. В соглашении также должны быть определены стандарты, которых будет придержи- ваться отдел информационных технологий. Например, раздел о доступности услуг дол- жен определять часы работы, согласованные окна обслуживания и ожидаемое время, в течение которого будет доступен технический персонал, чтобы обеспечить интерактив- ную поддержку. Одна организация могла бы решить, что регулярная поддержка должна быть доступна с 8:00 до 18:00 в будние дни, а чрезвычайная поддержка — круглосуточно. Другая организация могла бы решить, что нуждается в стандартной интерактивной под- держке, доступной всегда. Представим список проблем, которые следует рассмотреть, документируя ваши стан- дарты. • Время отклика. • Обслуживание (и время отклика) в течение выходных и неурочных часов. • Посещения на дому (поддержка для домашних компьютеров). • Специальное (уникальное или патентованное) аппаратное обеспечение. • Политика модернизации (устаревшие аппаратные средства, программное обеспе- чение и Т.Д.). • Поддерживаемые операционные системы. • Стандартные конфигурации. • Истечение сроков действия резервных магнитных лент. • Программное обеспечение специального назначения. • Вспомогательная работа (чистка экранов и клавиатур, прочистка вентиляционных решеток).
Глава 32. Управление, стратегия и политика 1233 Рассматривая стандарты услуг, имейте в виду, что многие пользователи захотят само- стоятельно настроить свою среду (или даже свои системы), если не будет установлено программное обеспечение, чтобы это предотвратить. Стереотипный ответ на эти попыт- ки — запретить всем пользователям осуществлять любые модификации. Это упрощает работу отдела информационных технологий, но не всегда является лучшей стратегией для всей организации. Укажите эту проблему в своем соглашении о качестве оказываемых услуг и попытай- тесь стандартизировать ее решение на нескольких определенных конфигурациях. Иначе ваше стремление к легкому обслуживанию и быстрому росту в рамках всей организации встретят серьезные препятствия. Поощряйте своих творческих сотрудников предлагать модификации, в которых они нуждаются, и будьте заботливы и щедры, учитывая их предложения в своих стандартных конфигурациях. Если вы не сделаете этого, то ваши пользователи будут упорно нарушать ваши правила. Стратегии управления очередями Пользователи должны знать не только, какие услуги им будут оказаны, но и схему приоритетов, используемую для управления очередью заданий. Схемы приоритетов всегда оставляют возможность для маневра, но все же попытайтесь спроектировать та- кую схему, которая охватывала бы большинство ситуаций, почти или вовсе не прибегая к исключениям. Некоторые факторы, связанные с приоритетом, перечислены ниже. • Важность услуги для всей организации. • Влияние на безопасность (там было нарушение?). • Оплаченный или оговоренный уровень сервисного обслуживания. • Количество задействованных пользователей. • Важность любого релевантного крайнего срока. • Скандальность задействованных пользователей (“писклявые колеса”). • Важность задействованных пользователей (это дело тонкое, но будем честными: у некоторых людей в вашей организации есть больше авторитета, чем у других). Хотя на ваше ранжирование будут влиять все эти факторы, мы рекомендуем подхо- дить к исключениям с простым сводом правил и долей здравого смысла. В основном, мы используем следующие приоритеты. • Много людей не могут работать успешно. • Один человек не может работать успешно. • Запросы на усовершенствования. Если два или больше запросов имеют высший приоритет и они не могут выполнять- ся параллельно, мы делаем выбор, основываясь на серьезности проблемы (например, неработающая электронная почта доставляет неудобства почти всем, тогда как времен- ное отсутствие веб-службы могло бы помешать только нескольким людям). Очереди с более низкими приоритетами обычно обрабатываются по принципу FIFO. Пользователи предполагают, что все их важные данные хранятся на резервных маг- нитных лентах, которые будут заархивированы навсегда. Однако резервные носители не хранятся неопределенно долго; магнитные носители имеют конечный срок годности, после наступления которого чтение данных затрудняется. (Вы должны периодически перезаписывать свои данные, возможно, на более новые носители, если хотите хранить их в течение долгого времени.) Резервные магнитные ленты могут также быть затребова-
1234 Часть III. Разное ны в суд. Таким образом, ваша организация, возможно, не захочет, чтобы старые данные остались доступными навсегда. В этом случае лучше всего совместно с руководителями, отвечающими за такие решения, составить письменное соглашение, которое определяет, сколько времени резервные копии должны храниться, следует ли их обновлять (обяза- тельно? возможно? никогда?) и где эти копии должны храниться. Эти решения должны быть приняты в контексте политики хранения данных всей организации. Такой тип стратегий описан в этой главе позже, но, вообще, вы должны классифицировать свои данные и разработать график хранения для каждого класса. Доведите стратегию резервирования и хранения данных до ваших пользователей. Эта мера будет способствовать реалистическим ожиданиям и относительно резервных ко- пий, и относительно возможности их восстановления. Она также позволит уведомить пользователей, что они должны принять собственные меры предосторожности, если считают, что нуждаются в лучшей защите данных, чем предусмотрено в их соглашении о качестве оказываемых услуг. В частности, пользователи должны понять, будут ли сохраняться файлы на их мест- ных автоматизированных рабочих местах. Многие организации поддерживают свои цен- трализованные файловые серверы, но не отдельные автоматизированные рабочие места. Обычно автоматизированные рабочие места клонируются на основе системных образов и считаются доступными. Пользователи должны знать об этом, чтобы правильно хра- нить важную информацию. Роли и обязанности Вы должны зафиксировать в документе, кто и за что отвечает. Организации, которые не делят обязанности, становятся непроизводительными и неэффективными. Задачи остаются “беспризорными”, потому что не ясно, где заканчивается одна область компе- тенции и начинается другая. Задачи могут также стать жертвой группового мышления, где одну задачу решают два или три администратора. Перечислим примеры определен- ных ролей. • Администратор резервного копирования • Знаток сетей хранения и файловых серверов • Прикладной спорщик • Царь безопасности и заплат • Парень, который никогда не уверен в том, что он делает1 В качестве альтернативы вы могли бы распределять роли и обязанности согласно описаниям услуг, которые вы уже определили. Этот подход может подразумевать, что вы должны очертить обязанности с точки зрения администрации, а не с точки зрения пользователя. Не забывайте включать обязанности “дублера” в свою таксономию. Сотрудники не будут присутствовать в офисе каждый день, и вы должны знать, кто куда идет, когда основной администратор домена отсутствует. Показатели соответствия Соглашение о качестве оказываемых услуг должно определить, как организация из- меряет ваш успех при выполнении условий соглашения. Цели и ориентиры позволяют 1 Ну хорошо, возможно, в вашем коллективе эта роль не нужна. Но она предусмотрена про- мышленным стандартом.
Глава 32. Управление, стратегия и политика 1235 работникам совместно стремиться к общему результату и могут заложить основу для со- трудничества во всей организации. Конечно, вы должны удостовериться, что у вас есть инструменты, позволяющие измерить согласованные показатели. Как минимум, вы должны отследить следующие показатели вашей информационной инфраструктуры. • Процент или количество проектов, законченных вовремя и в пределах бюджета. • Процент или количество выполненных пунктов соглашения о качестве оказывае- мых услуг. • Процент продолжительности работы системы (например, электронная почта до- ступна через службу Q1 в течение 99,92% времени). • Процент или число билетов, которые были удовлетворительно распознаны. • Среднее время распознания билета. • Процент или количество нарушений техники безопасности, зарегистрированных согласно установленной процедуре. 32.2. Информационная структура организации Теперь, когда мы рассмотрели общую схему функционирования отдела информаци- онных технологий, остановимся на структуре организации. По мере развития органи- зации становится очевидным, что не каждый член группы может или должен знать все о ее инфраструктуре. Вместо этого необходимо найти баланс между эффективностью и разделением обязанностей. Ролевое разделение добавляет уровень сдержек и противовесов к структуре организа- ции. Со временем эта особенность становится более важной, а стандарты и инструкции внедряются в даже самую маленькую организацию. Рассмотрим, например, американскую компанию с 20 сотрудниками, которая раз- работала дистанционное приложение для медицинских учреждений. Если это прило- жение хранит какую-либо защищенную медицинскую информацию (protected health information — PHI), то все системы организации должны соответствовать суровому Закону об отчетности и безопасности медицинского страхования (Health Insurance Portability and Accountability — HIPAA). Между прочим, это законодательство требует, чтобы вы определили роли, чтобы защитить доступ к конфиденциальным данным. На- пример, определением уровня доступа, который должен иметь пользователь, и фактиче- ским обеспечением этого доступа обязаны заниматься два разных человека. В центре типичной информационной структуры организации лежит система отсле- живания запросов (ticketing system), а также сервисная служба, группа архитектуры пред- приятия, оперативная группа и уровень управления. Как показано на рис. 32.1, каждая часть организации взаимодействует с системой отслеживания запросов. Основы: система отслеживания запросов и управления задачами Система отслеживания запросов и управления задачами лежит в основе функциони- рования каждого отдела информационных технологий. Наличие хорошей системы по- может вашим сотрудникам избежать двух наиболее распространенных ловушек техноло- гического процесса, перечисленных ниже.
1236 Часть III. Разное Рис. 32.1. Типичная информационная структура организации • “Беспризорные” задачи, о которых все думают, что о них заботится кто-то другой. • Ресурсы, растраченные впустую из-за дублирования усилий, когда несколько лю- дей или групп работают над той же самой проблемой без координации. Общие функции систем отслеживания запросов Система отслеживания запросов на устранение неисправностей принимает заявки через различные интерфейсы (электронная почта, веб-формы и командные строки, яв- ляющиеся наиболее распространенными инструментами) и отслеживает их от момен- та подачи до решения проблемы. Менеджеры могут пересылать заявки специальным * группам или отдельным сотрудникам. Штат может запросить у системы, чтобы видеть > очередь поданных заявок и, возможно, удовлетворить некоторых из них. Пользователи могут узнать статус запроса и видеть, кто работает над ним. Менеджеры могут извлечь следующую информацию высокого уровня. • Количество поданных заявок • Среднее время удовлетворения заявки • Производительность системных администраторов • Процент неудовлетворенных заявок • Распределение рабочей нагрузки во время поиска решения История заявки, сохраненная в системе отслеживания запросов, становится истори- ей проблем, существующих в вашей информационной инфраструктуре, и их решений. Если эта история легко доступна для поиска, то это становится неоценимым ресурсом для системного администратора. Сообщения о решенных проблемах можно послать начинающему системному ад- министратору и стажерам, поместить в систему часто задаваемых вопросов или просто зарегистрировать. Новые сотрудники могут извлечь выгоду из получения копий удо- влетворенных запросов, потому что эти запросы содержат не только техническую ин- формацию, но и примеры тона и коммуникационного стиля, которые являются подхо- дящими для общения с клиентами.
Глава 32. Управление, стратегия и политика 1237 Как и все документы, исторические данные системы отслеживания запросов могут потенциально использоваться против вашей организации в суде. Следуйте инструкциям по хранению документов, установленным вашим юридическим отделом. Большинство систем, отслеживающих запросы, автоматически подтверждают по- лучение новых запросов и назначают им номер, который сотрудник, подавший запрос, может использовать, чтобы отследить его или его статус. В ответе, который отсылается автоматически, должно быть ясно указано, что это — только подтверждение. Оно долж- но сопровождаться немедленным сообщением от живого человека, который объяснит план устранения проблемы или обработки запроса. Владение запросом Работу можно разделить, но, как показывает опыт, ответственность меньше под- дается распределению. Каждая задача должна иметь одного владельца. Этот человек не должен быть наблюдателем или менеджером, желающим действовать только как ко- ординатор. Этот кто-то должен быть готов сказать: “Я беру на себя ответственность за решение задачи”. Важный побочный эффект этого подхода состоит в том, что он позволяет выяснить, кто что сделал и кто какие изменения внес. Эта прозрачность становится важной, если вы хотите выяснить, почему что-то было сделано именно так или почему что-то работа- ет не так или не работает вообще. Быть “ответственным” за задачу — не значит быть козлом отпущения, если возника- ют проблемы. Если ваша организация определяет ответственность как “наказуемость”, то вы можете обнаружить, что количество доступных владельцев проектов быстро ис- тощилось. Ваша цель в назначении ответственности состоит в том, чтобы просто устра- нить двусмысленность в отношении того, кто должен решать каждую проблему. Не на- казывайте сотрудников за то, что они попросили помощи. С точки зрения клиента, хорошая система назначения — та, в которой проблемы по- падают к компетентному человеку, способному решить проблемы быстро и полностью. Но с организаторской точки зрения, назначения должны быть стимулом для сотруд- ников, чтобы они продолжали совершенствоваться. Ваша работа состоит в том, чтобы уравновесить возможности сотрудников и стимулировать их, одновременно удовлетво- ряя все желания клиентов. Большие задачи могут быть разными, включая полноценные проекты по разработке программного обеспечения. Эти задачи могут потребовать использования методов фор- мального управления проектом и инструментов программирования. Мы не описываем эти инструменты здесь; однако они важны и не должны быть пропущены. Иногда системные администраторы знают, что конкретная задача должна быть сде- лана, но они не делают этого, потому что эта задача неприятна. Системный админи- стратор, указавший на заброшенную, беспризорную или непопулярную задачу, веро- ятно, и получит ее “в награду”. Эта ситуация создает конфликт интересов, потому что заставляет системных администраторов замалчивать такие ситуации. Не позволяйте этому происходить в вашей организации; дайте вашему системному администратору свободу безбоязненно указывать на проблемы. Вы можете позволить им поднимать во- просы, не назначая владельца или привязывая их непосредственно к проблеме. Кроме того, вы можете создать почтовый псевдоним, на который можно послать сообщения о проблемах.
1238 Часть III. Разное Система отслеживания запросов с точки зрения пользователей Получение быстрого ответа от человека является критерием удовлетворенности по- требителя, даже если личный ответ содержит не больше информации, чем автоматизи- рованный. При возникновении большинства проблем человеку, подавшему заявку, бо- лее важно знать, что она была рассмотрена человеком и что это поможет немедленно решить проблему. Пользователи понимают, что администраторы получают много запро- сов, и они готовы ждать вашего внимания разумно долгое время. Но они не желают, чтобы их игнорировали. Механизм, посредством которого пользователи представляют запросы, затрагива- ет их восприятие системы. Удостоверьтесь, что вы понимаете культуру своей органи- зации и предпочтения своих пользователей. Они хотят использовать веб-интерфейс? Прикладную программу? Почтовый псевдоним? Возможно, они хотят делать только телефонные звонки! Также важно, чтобы администраторы не торопились и удостоверились, что они пони- мают то, о чем фактически просят пользователи. Это кажется очевидным, но вспомните последние пять писем, которые вы послали по электронной почте псевдониму техниче- ской поддержки или обслуживания клиентов. Держим пари, что было, по крайней мере, несколько случаев, когда ответ не имел никакого отношения к вопросу — не потому, что те компании не были компетентны, а потому, что точный анализ заявок на устранение неисправности более труден, чем это кажется. Как только вы прочитали первую часть запроса и поняли, о чем спрашивает клиент, остальная часть запроса часто перестает вас интересовать и заменяется фразой “и тому подобное”. Боритесь с этим! Клиенты очень не любят, когда их запрос был неправиль- но понят и должен быть повторно представлен или вновь заявлен. Перечитайте его еще раз. Запросы часто бывают неопределенными или неточными, потому что сотрудники, которые их подают, не обязаны иметь техническую подготовку, чтобы описывать про- блему так, как хочет системный администратор. Как бы то ни было, это не мешает поль- зователям высказывать их собственные предположения относительно того, что случи- лось. Иногда эти предположения совершенно правильные, а иногда вы должны сначала расшифровать запрос, чтобы определить то, что пользователь думает о проблеме, а затем проследить ход его мыслей, чтобы интуитивно постигнуть основную проблему. Типичные диагностические системы В табл. 32.1 и 32.2 перечислены характеристики нескольких известных диагностиче- ских систем. В табл. 32.1 содержатся характеристики общедоступных систем, а в табл. 32.2 представлены коммерческие системы. Таблица 32.1. Открытые диагностические системы Название МЙШг Double Choco Latte w PHP PM dcl/sourceforge.net Mantis WE PHP M mantist.org OTRS WE Perl PMOD otrs.org RT Request Tracker WE Perl M bestpractical.com
Глава 32. Управление, стратегия и политика 1239 Окончание табл. 32.1 Название Ввод* Язык Прикладная часть6 веб-caftr ’ Scarab WE Java м scarab.tigris.org Trouble Ticket Express WEB Perl FMB troubleticketexpress.com а Типы ввода: W — веб, Е — электронная почта. 6 Прикладная часть: М — MySQL, Р — PostgreSQL, О — Oracle, D — DB2, F — простые файлы. в Для использования электронной почты и MySQL необходимо купить модули надстроек (правда, они недо- рогие). Таблица 32.2. Коммерческие диагностические системы Название Масштаб ~Веб*е«йг EMC lonix (Infra) Огромная infra-corp.com/solutions HEAT Средняя frontrange.com Remedy (сейчас BMC) Огромная remedy.com ServiceDesk Огромная ca.com/us/service-desk.aspx Track-lt! Средняя numarasoftware.com Нам очень нравится система Mantis. Первоначально она была разработана для от- слеживания неполадок в программном обеспечении видеоигр. Она запускается на Linux, Solaris, Windows, Mac OS и даже OS/2, занимает мало места, проста, легко изменяется и конфигурируется. Требует наличия РНР, MySQL и веб-сервера. Но ее самым важным качеством является хорошая документация! OTRS (Open Ticket Request System) — тоже неплохая система. В ней доступны интер- фейсы как для клиентов, так и для системных администраторов, а также интерфейс для электронной почты. OTRS позволяет настраивать очень много параметров (например, она позволяет по очереди настраивать приветственные сообщения) и умеет даже фикси- ровать время, затраченное на обработку сообщений о неполадках. В табл. 31.2 представлено несколько коммерческих программ для управления запро- сами. Их язык реализации и базы данных здесь не указаны, потому что эта информация в полном объеме доступна на посвященных им веб-сайтах. Некоторые из этих коммерческих систем настолько сложны, что для их сопровожде- ния, настройки и поддержания в рабочем состоянии нужно нанимать отдельного чело- века или даже двух (для тех, кто не знает, сообщаем, что в данном случае речь идет о системах Remedy и ServiceDesk). Такие системы подходят для организаций с большим штатом IT-сотрудников и являются неудачным выбором при наличии типичной, не- большой команды IT-специалистов, которые и так постоянно завалены работой. Распределение сообщений о неполадках В большой организации, даже в той, где установлена замечательная диагностиче- ская система, все равно необходимо решить еще одну проблему. Не очень хорошо, когда системным администраторам приходится разрываться между задачей, над которой они сейчас работают, и очередью запросов, особенно если запросы поступают по электрон- ной почте прямо в их личный почтовый ящик. Мы применили два подхода для решения этой проблемы. Вначале мы организовали для наших системных администраторов смены по полдня. Каждый во время своей смены должен был стараться ответить на как можно большее
1240 Часть III. Разное количество поступивших запросов. Проблемой этого подхода было то, что не у всех системных администраторов были навыки, необходимые для ответа на все вопросы и устранения всех проблем. Иногда ответы были некорректными из-за того, что заступив- ший на смену человек был новичком и еще плохо знал клиентов, их среды или преду- смотренные в их контракте услуги поддержки. В результате старшим администраторам все равно приходилось присматривать за всеми остальными, из-за чего они, естествен- но, не могли полностью сконцентрироваться на своей работе. В конечном итоге каче- ство обслуживания только ухудшилось, и никакой пользы этот подход не принес. После такого неудачного опыта мы придумали роль “диспетчера”, которая ежеме- сячно переходит от одного старшего администратора к другому. Диспетчер отвечает за проверку системы отслеживания запросов на наличие новых записей и распределяет за- дачи между конкретными сотрудниками. При необходимости диспетчер связывается с пользователями и узнает у них дополнительные сведения, необходимые для определения степени важности запросов. Диспетчер пользуется специальной базой данных о навыках сотрудников, созданной в организации своими силами, для принятия решений о том, у кого в группе поддержке имеются необходимые навыки и время. Кроме того, диспетчер также следит за тем, чтобы запросы обрабатывались своевременно. Перечень навыков Никто не раздражает опытного пользователя больше, чем человек из команды под* держки, который, пока на самом деле просто пытается отыскать в базе данных инфор- мацию о клиенте, спрашивает: “А вы подключили кабель питания?”. С другой стороны* заставлять опытного администратора объяснять пользователю-новичку, как отыскать клавишу <Del> в какой-нибудь системе обработки текстов, — это тоже просто неэффек- тивное использование ресурсов. У нас каждый сотрудник обязательно должен отработать в службе поддержки опреде- ленное количество часов в неделю. Сотрудники отдела поддержки включают это время в свой еженедельный план работ и затем вызывают человека, когда для него появля;- ется задание. Задания распределяются в соответствии с навыками, требующимися для устранения проблемы, и количеством времени, оставшимся у каждого в еженедельном резерве отдела поддержки. Для того чтобы эта схема работала успешно, необходим сбалансированный перечень навыков сотрудников. На протяжении определенного времени каждый сотрудник должен отработать свое количество часов в службе поддержки. В целом, сотрудник, имеющий ' множество записей в списке навыков, является более “ценным”. Однако в сотруднике с меньшим количеством навыков тоже нет ничего плохого, если для всех хватает работы* Точный список навыков помогает определить, достаточно ли в организации сотруд- ников с определенными навыками, чтобы можно было не волноваться, если кто-то из них уйдет на больничный или в отпуск. Список навыков можно составлять постепенно, по мере появления проблем и их решения различными сотрудниками, включая в него наименование проблемы, имя занимавшегося ею сотрудника и продемонстрированный им при ее решении уровень мастерства. Навыки следует описывать с определенной степенью точности, т.е. и не слишком конкретно и не слишком обще. Приведенный ниже в качестве примера список демон- стрирует наиболее оптимальный вариант перечисления навыков. • Создание и удаление пользователей, установка паролей, изменение квот. • Создание учетных записей CVS или SVN.
Глава 32. Управление, стратегия и политика 1241 • Интегрирование новых драйверов оборудования в RIS (Windows). • Упаковка Windows-приложения в формате MSI. • Создание и установка пакетов программ в Linux. • Анализ журнальных файлов. • Устранение неполадок, связанных с почтовым сервером. • Отладка проблем, связанных с печатью. • Устранение общих неполадок с оборудованием. • Внесение записей в службу DNS. • Решение вопросов, касающихся лицензий на программное обеспечение. • Умение отвечать на вопросы, касающиеся безопасности в системах Windows. • Умение отвечать на вопросы, касающиеся безопасности в системах UNIX. • Разрешение запросов по пакету Samba. • Конфигурирование сервера DHCP. • Настройка сервера LDAP. • Добавление и удаление веб-сайтов (конфигурирование сервера Apache). Управление временем Системное администрирование подразумевает такое количество переключений с од- ного контекста на другой за день, которое нигде не встретишь и за целый год, и, в ос- новном, с этим хаосом приходится справляться именно сотрудникам отдела поддержки пользователей. Каждый администратор должен обладать навыками распределения вре- мени. Без них он не сможет справляться со своими повседневными обязанностями и, следовательно, станет раздражительным или вообще впадет в депрессию. (Если же он уже находится в раздраженном или депрессивном состоянии, ему станет еще хуже.) Системные администраторы “изнашиваются” очень быстро. Многих из них хватает всего лишь на несколько лет. Никто не хочет, чтобы его все время вызывали и постоянно вычитывали. Умение эффективно распределять время и успевать обслуживать пользова- телей так, чтобы они оставались довольны, является очень выигрышным качеством. 32.3. Служба поддержки Служба поддержки — главная составляющая структуры отдела информационных тех- нологий, представленной на рис. 32.1. Задача службы поддержки — взаимодействие с людьми, которые используют компьютерные системы, которые вы обслуживаете. Диапазон услуг Сотрудники службы поддержки выполняют те разделы соглашения о качестве ока- зываемых услуг, в которых определено, какие виды прямой помощи человек в пределах организации может получить. Проблемы, решаемые службой поддержки, включают во- просы эксплуатации настольных систем, сопровождение приложений и такие первоо- чередные проблемы системного администрирования, как отключение электропитания сервера, сбой в сети и восстановление файлов. Кроме обычных услуг, предоставляемых диагностической системой или системой экстренной поддержки, это подразделение может также предложить вспомогательные
1242 Часть III. Разное услуги, такие как учебные семинары. Эти меры помогают увеличить самостоятельность клиентов и сокращают количество запросов поддержки. Кроме того, важно сформулировать правила эскалации. Служащие должны знать, что сделать, когда их потребности не удовлетворяются или когда они хотят выразить благо- дарность за хорошо сделанную работу. Доступность службы поддержки Хороший отдел информационных технологий состоит из квалифицированных со- трудников, всегда готовых прийти на помощь клиентам. Большинство проблем незначительны и могут безопасно включаться в очередь на об- служивание. Другие проблемы приводят к простою и требуют пристального внимания. Автоматизированные ответы от системы отслеживания запросов и записанные телефон- ные сообщения, объявляющие о рабочем расписании, только вызывают раздражение. Обеспечьте пользователям доступ к последней инстанции, если возникает такая необхо- димость. Как правило, для этого достаточно мобильного телефона, которым обменива- ются системные администраторы во внеурочное время. Зависимость от службы поддержки К сожалению, превосходная поддержка иногда порождает зависимость. Пользователи могут легко привыкнуть консультироваться со службой поддержки, даже когда это не является необходимым. Если вы понимаете, что кто-то использует систему поддержки для ответов, которые они легко могли найти в справочнике или в системе Google, то можете попытаться ответить на такие вопросы, указывая соответствующую справочную страницу или идентификатор URL. Однако будьте осторожны: эта тактика может дей- ствительно возмутить пользователей, если не проявить при этом предельное уважение. 32.4. Архитектура предприятия Еще одна информационная составляющая (рис. 32.1) — архитектура предприятия — состоит из администраторов, имеющих полное техническое представление об органи- зации. Эта роль почти всегда подразумевает некоторое количество администраторов систем UNIX или Linux. Эти люди рассматривают как непосредственное, так и долго- срочное влияние новых систем на общую инфраструктуру. Они понимают, как организа- ция будет развиваться в ближайшие годы и как сегодняшние требования станут основой для будущих модификаций. Архитекторы предприятия также ответственны за понимание принципов взаимодей- ствия систем. Например, в организации, которая хранит конфиденциальную информа- цию о клиентах, архитекторы должны понимать, как возможность шифрования базы данных будет воздействовать на конечных пользователей, и определять, является ли это воздействие приемлемым. Следующие разделы представляют собой перечень наилучших архитектурных реше- ний, которыми следует пользоваться при планировании структуры отдела информаци- онных технологий в своей организации. Эти принципы особенно важны, когда кон- фигурация, которая будет поддерживаться, является новой или необычной, потому что примеры таких ситуаций очень сложно отыскать в реальном мире. Все хорошо спроек- тированные процессы подразумевают соблюдение этих или близких к ним принципов.
Глава 52. Управление, стратегия и политика 1243 Процессы должны быть воспроизводимыми Системное администрирование — это не показательное выступление. Все, что дела- ется, должно делаться последовательно и многократно. Обычно это означает, что низ- коуровневые изменения должны вноситься сценариями или конфигурационными про- граммами, а не самими системными администраторами. Расхождения в конфигурации должны перехватываться и фиксироваться в конфигурационных файлах соответствую- щего, предназначенного для администрирования программного обеспечения. Например, сценарий, настраивающий новый компьютер, не должен задавать вопро- сов о номерах IP-адресов и пакетах, которые нужно установить. Вместо этого, он должен проверять каталог конфигурации системы и извлекать всю необходимую информацию оттуда. Он может отображать эту информацию для подтверждения, но выбираемые па- раметры должны быть предопределены. Чем меньше будет участвовать в этом процессе пользователь, тем меньше шансов, что он допустит какую-нибудь ошибку. Но давайте уточним: мы не описываем здесь организацию, где все стратегические решения принимаются администраторами “высшего ранга” и беспрекословно выполня- ются глупыми трутнями. Возможность воспроизведения не менее важна и тогда, когда вы являетесь единственным администратором в своей организации. Незапланированных конфигурационных решений, не оставляющих никаких данных для аудита, лучше не принимать. Если требуется что-то изменить, изменяйте центральную конфигурацион- ную информацию и распространяйте изменения уже оттуда. Сохранение отладочных данных Кто сделал, что сделал и зачем? В случае появления проблем в системе, наличие воз- можности вернуться к последнему рабочему состоянию или, по крайней мере, выяснить, что изменилось с тех пор, позволит устранить их быстрее. Важно знать не только “что” изменилось, но и “кто” внес это изменение и “почему”. Беседа с человеком, реализо- вавшим приведшее к возникновению проблем изменение, часто позволяет увидеть суть. Возможно, изменение удастся быстро отменить, но иногда бывает так, что изменение было внесено в благих целях и его отмена может только ухудшить дело. Системы контроля изменений являются одним из наиболее удобных способов их от- слеживания. Они предоставляют как хронологический перечень фактических данных, так и информацию о том, каким из системных администраторов было внесено то или иное изменение. При правильном использовании каждое изменение сопровождается комментарием, в котором объясняется причина его внесения. Автоматизированные средства могут проверять конфигурационные файлы, которые они изменяют, и указывать на себя в этих комментариях. Благодаря этому выявить не- правильно работающий сценарий и отменить внесенные им изменения совсем не трудно. Ш Системы контроля изменений описаны в разделе 12.9. Если ваша организация использует систему отслеживания запросов, в ней также удобно хранить изменения. Для каждого изменения можно создать запрос, в который включается информация о том, кто, что, когда, где и почему сделал. Кроме того, не ме- нее важно то, что этот запрос может содержать план возврата. Иначе говоря, если од- нажды ночью что-то пойдет не так, то дежурному администратору будет не обязательно будить системного администратора. И вы, и ваши сотрудники должны дисциплинированно обращаться с каждым запро- сом на изменение. Системы отслеживания запросов приносят пользу только при усло- вии, что их используют все администраторы при каждом изменении.
1244 Часть III. Разное Осознание важности документации На самом деле документация настолько важна для масштабируемой инфраструктуры, что мы посвятили ей целый подраздел в разделе 32.5. Настройка и кодирование Использовать существующие средства — это хороший подход, и так следует посту- пать всегда, когда это возможно. Но двух абсолютно одинаковых организаций не бы- вает, и каждая организация обязательно имеет какие-нибудь уникальные требования. Информационная инфраструктура, которая в точности удовлетворяет требования орга- низации, увеличивает конкурентоспособность этой организации в целом и продуктив- ность ее сотрудников в частности. Благодаря гибкости в плане написания сценариев и обилию средств с открытым ис- ходным кодом, система UNIX является идеальной базой для создания хорошо отрегули- рованной инфраструктуры. С нашей точки зрения, группа системных администраторов, не умеющая выполнять такую функцию, как разработка программного обеспечения, яв- ляется слабой. Содержание системы в чистоте Системное управление заключается не только в установке, добавлении и конфигу- рировании программного и аппаратного обеспечения; оно также предполагает наличие знаний о том, что следует сохранить, выкинуть и обновить. Мы называем эту концеп- цию “устойчивым управлением”. Иметь возможность добавить новый компьютер в сре- ду за пять минут и создать новую учетную запись пользователя за десять секунд — это замечательно. Но если заглянуть в будущее, станет ясно, что наличие возможности от- ыскивать и удалять старые учетные записи и компьютеры организованным образом яв- ляется не менее важным. Устойчивость в системном управлении означает, что у вас есть концепции и средства, необходимые для того, чтобы вы могли выполнять свою работу организованным образом в течение длительного срока. 32.5. Операции В заключение рассмотрим последнюю роль в этой главе — операции. С деловой точ- ки зрения, под операциями подразумеваются “ежедневные рутинные действия, которые и представляют собой цель бизнеса”. С технической точки зрения, операции — это ис- точник проблем, которые должен решать системный администратор. В качестве приме- ра операций назовем возврат, мониторинг, установку заплат, обновление, инсталляцию нового программного обеспечения и отладку. Оперативная группа отвечает за установку и сопровождение информационной ин- фраструктуры. Как правило, оперативная группа имеет дело с компьютерами и прово- дами, а справочная служба — с людьми. Оперативная группа фокусируется на создании стабильной и заслуживающей дове- рия среды для клиентов. Доступность и надежность являются ее ключевыми задачами. Сотрудники этой группы не должны ни проводить никаких экспериментов, ни делать никаких неожиданных исправлений или улучшений по пятницам. Просто вероятность того, что это закончится появлением проблем (заметить которые на выходных смогут только клиенты), слишком высока.
Глава 32. Управление, стратегия и политика 1245 Время простоев должно быть минимальным Многие люди зависят от предоставляемой нами вычислительной инфраструктуры. Внутреннее подразделение, пожалуй, сможет какое-то время обходится без своего веб- сайта, а вот компания, принимающая заказы по почте через Интернет, такая как компа- ния Amazon.com, — нет. Некоторые даже не заметят, что сервер печати не работает, но сотрудника, которого поджимают сроки сдачи документа, это действительно очень рас- строит. В большинстве организаций потеря доступа к электронной почте обычно всех выводит из себя. Центральные файловые серверы тоже являются потенциальным источ- ником неприятностей. В некоторых организациях придется обеспечивать наличие “аварийной службы”. В коммерческой среде это может означать круглосуточное присутствие на месте опыт- ных системных администраторов. Даже если бюджет не позволяет явно обеспечить круглосуточное дежурство, нужно быть готовым к вызову любых администраторов, которые окажутся доступны в позднее время суток или в выходной день. Дежурный мобильный телефон или другая система уведомления часто являются “довольно хорошим” средством. Проверьте, чтобы пользо- ватели могли получать доступ к этому средству каким-нибудь простым и хорошо извест- ным способом; например, создайте адрес-псевдоним и сделайте так, чтобы все посту- пающие на этот адрес SMS-сообщения автоматически и немедленно перенаправлялись на дежурный мобильный телефон. Документирование зависимостей Для того чтобы делать точные предположения о доступности оборудования или пе- риоде безотказной работы, нужно знать не только о своих сильных и слабых местах (сте- пени надежности устанавливаемого оборудования), но и о зависимостях информацион- ных систем от другого оборудования, программного обеспечения и персонала. • Питание. Независимые источники и схемы питания, защита от перепадов напря- жения, резервные системы питания, такие как генераторы и источники беспере- бойного питания, разводка кабелей электропитания в здании, карты электропита- ния определенных компонентов оборудования. • Сеть. Проводка в здании, резервные линии связи, служба работы с клиентами для интернет-провайдеров, топология сети, контактная информация для других отде- лов в организации, выполняющих свою собственную роль в сетевом управлении. • Оборудование. Системы высокой степени готовности и процедуры для их исполь- зования, горячие и холодные резервы, запасные детали, договоры на техническое обслуживание оборудования. Переналадка или списывание старого оборудования Для того чтобы поддерживать свою инфраструктуру, нужно покупать новые компью- теры, переналаживать устаревшие и выкидывать совсем старые. О закупке оборудования мы расскажем позднее, но отметим, что многие сотрудники не желают расставаться со своими “любимцами”. Поскольку пользователям и менеджерам часто не очень хочется обновлять устарев- шее оборудование, вы иногда должны брать инициативу в свои руки. Финансовая ин- формация является самым убедительным доказательством. Если вам удастся на бумаге
1246 Часть III. Разное продемонстрировать, что стоимость обслуживания старого оборудования превышает стоимость средств, требующихся на его замену, многие возражения по поводу обнов- ления отпадут сразу. Иногда разнородное оборудование полезно заменить хотя бы для того, чтобы сэкономить время и усилия, требующиеся на поддержание различных версий операционных систем и программного обеспечения на уровне современных требований. Недорогое оборудование Intel/PC является стандартной архитектурной базой на- стольных систем, особенно теперь, когда продукция компании Apple поставляется на оборудовании компании Intel. Распространенность персональных компьютеров за по- следние годы сместила затраты со стороны оборудования в сторону программного обе- спечения и его поддержки. Для того чтобы поддерживать актуальную инфраструктуру, необходимо действовать на опережение. Разработайте правила, которые регламентируют срок использования разных систем. Например, ноутбуки следует использовать не более трех лет, настольные системы — четыре года, а серверы — пять лет. Эти показатели могут зависеть от произ- водителей и контракта на поддержку. Планирование замены старого оборудования экономит время и снижает вероятность сбоев. Если ноутбуки меняются каждые три года, то вряд ли вы посреди ночи получите сообщение, что ваш исполнительный директор, находящийся в командировке, не может получить электронные сообщения, потому что его ноутбук вышел из строя. Поддержка локальной документации Точно так же как большинство людей верят в то, что физические упражнения и све- жие овощи благотворно влияют на организм, каждый ценит хорошую документацию и знает о ее важности. К сожалению, это вовсе не означает, что она будет составляться и обновляться ими без напоминаний. Действительно, почему мы должны волноваться о документации? • Документация снижает вероятность одиночных сбоев. Замечательно, когда есть программы, которые позволяют мгновенно разворачивать рабочие станции и рас- пространять заплаты и обновления при помощи одной-единственной команды, но они становятся практически бесполезными, если по ним нет никакой документа- ции, а умеющий с ними обращаться специалист ушел в отпуск или вообще уволился. • Документация способствует воспроизводимости. Если правила и процедуры не хранятся в документах организации, ими вряд ли будут пользоваться регулярно. Когда администраторы не могут отыскать информацию о том, как следует посту- пать в том или ином случае, им приходится импровизировать. • Документация экономит время. Когда пишешь документацию, вовсе не кажется, что ты экономишь время, но, потратив несколько дней на решение проблемы, которая когда-то раньше решалась, но как именно уже никто не помнит, боль- шинство администраторов соглашаются, что написание документации более чем оправдывает себя. • И, наконец, самое главное: документация делает систему более понятной и по- зволяет вносить последующие изменения с учетом архитектуры системы. Когда изменения вносятся на основе только частичных знаний, они часто не совсем вписываются в имеющуюся архитектуру. Со временем степень несоответствия уве- личивается, и система даже работающим с ней администраторам начинается ка- заться беспорядочной коллекцией компонентов. В конечном итоге часто возника- ет желание удалить все компоненты и начать все заново.
Глава 32. Управление, стратегия и политика 1247 Локальная документация удобна во многих ситуациях. Доводилось ли вам заходить в машинный зал для выполнения перезагрузки одного сервера и сталкиваться с ряда- ми стоек с похожей и в то же время разной аппаратурой, никак не помеченной? При- ходилось ли вам устанавливать устройство, с которым вы уже имели дело когда-то дав- но, но сейчас помните только то, что настраивать его было очень трудно? Локальная документация должна храниться в четко установленном месте. В зави- симости от объема выполняемых операций, это может быть либо каталог на файловом сервере, смонтированный на всех компьютерах, либо даже домашний каталог, принад- лежащий какой-нибудь специальной учетной записи в системе. Убедив системных администраторов описывать в документах конфигурации и дей- ствия, важно защитить саму документацию. Злонамеренный пользователь может прине- сти много вреда, исказив документацию организации. Примите меры, чтобы сотрудни- ки, которым нужна документация, могли найти и прочитать ее (организуйте ее порск) и чтобы каждый, кто поддерживает эту документацию, мог изменить ее. Однако следует уравновешивать доступ и защиту. Документация, основанная на системе Wiki, особенно хороша, если вам необходимо легко устранить злонамеренные искажения. Другие системы можно защитить аналогич- ным образом с помощью системы контроля вариантов. Стандартизированная документация Как показывает наш опыт, самым простым и эффективным способом ведения доку- ментации является стандартизация небольших, простых документов. Вместо того чтобы писать целое руководство по системному управлению для своей организации, лучше на- писать ряд одностраничных документов, посвятив каждый из них какой-нибудь одной конкретной теме. Начните с общей темы, а затем разбейте ее на подтемы, содержащие дополнительную информацию. Если где-то необходимо добавить больше деталей, на- пишите дополнительный документ и перечислите в нем шаги, которые являются слож- ными или запутанными. Такой подход имеет несколько преимуществ. • Начальника, наверняка, интересует только общая настройка компьютерной среды в организации. Этого будет вполне достаточно, чтобы ответить на все вопросы как начальства, так и менеджеров. В подробности лучше не вдаваться, а то начальник еще решит разобраться во всем. • То же верно и для клиентов. • Любому сотруднику, переведенному на новую должность, необходимо быстро оз- накомиться с инфраструктурой, чтобы нормально включиться в производствен- ный процесс. “Загружать” таких сотрудников деталями не имеет никакого смысла, это только замедлит их адаптацию на новом месте. • Намного эффективнее и быстрее выбрать один подходящий короткий документ, чем искать нужную информацию в длинном руководстве. • Можно индексировать страницы, чтобы их было легко найти. Чем меньше време- ни администратор проводит в поиске, тем лучше. • Поддерживать документацию в “текущем” состоянии намного проще, если можно обновлять по одной странице.
1248 Часть III. Разное Последнее особенно важно. Обновление документации — это непростая задача; ее часто откладывают, когда не хватает времени. Имеется несколько подходов, которые по- зволяют поддерживать документацию в порядке. Во-первых, нужно установить правило, что документация должна быть краткой, важ- ной и вовсе не обязательно “отшлифованной”. Главное — передать суть. Ничто так не отбивает желание составлять документацию, как осознание того, что придется писать целую “диссертацию” на тему проектирования. Предъявление высоких требований к составлению документации приведет только к тому, что никто вообще не будет ее со- ставлять. Разработайте простую форму или шаблон для системных администраторов. Стандартная структура помогает системным администраторам регистрировать важную информацию, не раздувая документацию. Во-вторых, нужно внедрить документацию в процессы. Комментарии в конфигура- ционных файлах являются чуть ли не самой лучшей документацией. Они всегда там, где нужны, и их сопровождение (обновление) занимает совсем немного времени. Во многие стандартные конфигурационные файлы разрешается добавлять комментарии, и даже в те из них, которые не очень “дружат” с комментариями, часто все равно можно вставить какую-нибудь дополнительную информацию. Создаваемые локально средства могут требовать документацию в качестве части их стандартной конфигурационной информации. Например, программе, выполняющей установку нового компьютера, может быть нужна информация о владельце компьюте- ра, размещении, уровне поддержки и оплате, даже если эти факты не влияют непосред- ственно на конфигурацию программных средств компьютера. Документация не должна приводить к информационной избыточности. Например, если в организации имеется главный конфигурационный файл, в котором перечисляют- ся все компьютеры и их IP-адреса, больше нигде эта же информация не должна обнов- ляться вручную. Это чревато не только тратой дополнительного времени на обновление многочисленных источников, но и неизбежным появлением в них через какое-то вре- мя определенных несоответствий. При необходимости использовать эту информацию в другом контексте или другом конфигурационном файле, следует просто написать сце- нарий, который будет извлекать ее из главного конфигурационного файла (или обнов- лять ее там). Если устранить все избыточные источники не представляется возможным, нужно хотя бы определиться с тем, какой из них будет главным, а также написать про- грамму для перехвата несоответствий и сделать так, чтобы она запускалась регулярно, например, из программы сгоп. Появление таких инструментов, как Wiki, блоги и другие простые системы управле- ния знаниями, намного упростило отслеживание документации по информационным технологиям. Выберите одно место, в котором можно найти и отредактировать все ваши документы. Одну страницу Wiki с 200 дочерними страницами в одном списке очень трудно использовать. Не забудьте включить функцию поиска в вашу систему. Маркировка оборудования Иногда документация оказывается наиболее удобной, когда она написана на бумаге, приклеенной к устройству. Например, в случае отказа всей системы или сети от перечня действий мало толку, если он хранится на сломавшемся или недоступном компьютере. Нужно, чтобы каждый компьютер можно было идентифицировать без включе- ния и прохождения регистрации, потому что эти операции не всегда будут возможны. Промаркируйте все рабочие станции каким-нибудь уникальным образом (например, путем указания имени узла и его IP-адреса) и наклейте на них бумажки с контактной информацией службы поддержки.
Глава 32. Управление, стратегия и политика 1249 В серверном зале все системы и их внешние устройства должны иметь уникальные метки с обеих сторон компьютеров (особенно тех, что установлены в узких стойках), чтобы, при необходимости отключить и снова включить какой-нибудь компьютер, мож- но было быстро отыскать выключатель, отключающий именно его питание. При наличии множества систем разных типов полезно добавить дополнительную ин- формацию, такую как сведения об архитектуре, инструкции по загрузке, специальные последовательности нажатия клавиш, ссылки на дополнительную документацию, теле- фон “горячей линии” производителя или номер телефона человека, который за все это отвечает. Записывание последовательностей нажатия клавиш может показаться немного глупым занятием, но серверы часто подключены к устаревшему терминалу или консоли, а не к специальному монитору. Копию информации со всех наклеек следует обязательно сохранить также и в цен- тральном хранилище записей или инвентаризационных данных. Она пригодится, если вы решите управлять своими компьютерами через TCP/IP-соединение с сервером кон- соли, вместо того чтобы проводить рабочий день в шумном машинном зале. Если в организации есть много специфичных компьютерных данных, необходимо подумать о внедрении системы штрихкодов, которая позволит хранить всю релевантную документацию на ноутбуке. (Разумеется, такая мобильная система сама не должна за- висеть от работы сети или сервера баз данных.) Сетевая документация Сетевая проводка должна быть тщательно документирована. Подпишите все кабели, обозначьте коммутационные панели и сетевые розетки и пометьте сетевые устройства. Всегда делайте так, чтобы электрику было удобно обновлять документацию; повесьте на стенку в коммутационном шкафу ящик с карандашом и формами, для того чтобы он мог всегда быстро записать, что такой-то кабель был отключен от одного устройства и подключен к другому. И не забывайте регулярно переносить эти данные в электронное хранилище. Большинство сетевых устройств (например, маршрутизаторы и коммутаторы) могут быть переконфигурированы по сети. Хотя это и позволяет управлять компьютерами в разных подсетях, не выходя из своего удобного кабинета, документация становится еще более важной. В таком случае следует соблюдать еще большую осторожность, потому что можно быстро и безнадежно испортить гораздо большую часть инфраструктуры. Следует подумать об использовании специального программного обеспечения, такого как Rancid, чтобы отслеживать конфигурации устройств. Эти инструменты могут перехва- тывать случайные и забытые изменения, что поможет резко сократить время простоев. Документация для пользователей Неплохой идеей является подготовка печатного документа, который можно будет вы- давать новым пользователям. В этом документе следует перечислить местные “обычаи”, правила уведомления о проблемах, имена и местонахождение принтеров, расписания резервного копирования и простоев и т.д. Такой документ может сэкономить системным администраторам и пользователям огромное количество времени. Эту информацию так- же следует сделать доступной в сети веб. Печатный документ дает большую уверенность в том, что новые пользователи его все-таки прочитают, зато на веб-страницу удобно ссылаться в случае возникновения вопросов. Поэтому лучше сделать и печатную, и веб- версию документа и не забывать регулярно их обновлять. Ничто не раздражает так, как устаревшие электронная документация или раздел часто задаваемых вопросов (FAQ).
1250 Часть III. Разное Помимо документа с информацией о локальной компьютерной среде, можно так- же подготовить какой-нибудь вводный материал по системе UNIX. Мы предоставляем нашим пользователем одностраничные “шпаргалки”, в которых перечислены наиболее часто используемые в нашей среде команды и приложения. Разделение окружающей среды Организации, которые пишут и развертывают свое собственное программное обеспе- чение, должны разделить разработку, тестирование и производство, чтобы выпуски мог- ли быть организованы с помощью структурированного процесса. Разделяйте окружаю- щую среду, но примите меры, чтобы после обновления системы изменения учитывались в средах для тестирования и производства. Конечно, обновления самой конфигурации должны подвергнуться тому же самому виду структурированного контроля версий, что и код. “Изменения конфигурации” включают все: от заплат операционных систем до при- кладных обновлений и административных изменений. Очень важно защитить вашу производственную среду путем ролевого разделения в рамках процесса продвижения кода. Например, разработчики, имеющие администра- тивные привилегии в среде проектирования, не должны иметь административных прав и привилегий продвижения кода в другой окружающей среде. Раздраженный разработ- чик с правами продвижения кода может специально вставить вредоносный код на ста- дии разработки и затем продвинуть его на этап производства. Если вы распределяете обязанности одобрения и продвижения среди разных людей, то проблемы могут попасть на этап производства, только если много людей тайно сговорятся или сделают ошибки. Зафиксируйте в документах процесс продвижения кода и следуйте ему неукосни- тельно. Не делайте исключений! Если вы находите, что регулярный процесс не доста- точно эффективен для экстренных изменений, опишите в документации этот процесс экстренных изменений и затем удостоверьтесь, что он выполняется. Вы должны также перепроверить процесс продвижения кода и при необходимости внести корректировки. Разработчиков иногда расстраивает уровень документации, который требуется в этом типе системы. Проведите несколько встреч за обеденным столом и помогите им понять побудительные мотивы ваших требований. Разработчики, которые стали вашими единомышленниками, более вероятно, будут следовать стандартным процедурам. Автоматизируйте, автоматизируйте, автоматизируйте! Ваша система управления организацией должна содержать следующие главные эле- менты. • Автоматизированная установка новых компьютеров. Это относится не только к ин- сталляции операционных систем, но и ко всему дополнительному программному обеспечению и локальным конфигурациям, необходимым для того, чтобы вклю- чить компьютер в производственный процесс. Ваш сайт неизбежно должен будет поддерживать несколько типов конфигурации, поэтому следует сразу включить разные типы компьютеров в свои планы. • Систематическое внесение исправлений и обновление существующих машин. Когда вы выявляете проблему со своей установкой, нуждаетесь в стандартизированном й легком способе развертывания обновлений на всех затронутых машинах. Отметьте, что, поскольку компьютеры не включены все время (даже если это предполага- ется), ваша схема обновления должна правильно обращаться с выключенными компьютерами во время инициирования обновлений. Поиск обновлений можно
Глава 32. Управление, стратегия и политика 1251 выполнять на этапе загрузки или по расписанию. Дополнительную информацию можно найти в главе 12. • Система мониторинга. Вашим пользователям не придется звонить вам, чтобы ска- зать, что сервер “упал”. Мало того, что это непрофессионально, но и вы понятия не имеете, надолго ли “упала” система. Вы должны обнаружить проблему еще до того, как вам позвонят первые пострадавшие. Вам нужна определенная система мониторинга, которая поднимет тревогу, как только проблемы станут очевидны- ми. Однако сигнализация — тонкая вещь. Если сигналов слишком много, систем- ные администраторы начинают их игнорировать, а если слишком мало, то важные проблемы остаются незамеченными. • Система связи. Следите за потребностями ваших пользователей; их поддержка яв- ляется конечной целью всего, что вы делаете как системный администратор. Сис- тема отслеживания запросов — это необходимость (см. раздел 32.2). Кроме того, по- лезно организовать централизованное место, где пользователи могут найти инфор- мацию о состоянии системы и контактную информацию (как правило, в сети веб). 32.6. Управление Главной задачей руководства отдела информационных технологий является опреде- ление общей информационной стратегии и управление работой отдела. На плечи менед- жера ложится много обязанностей. • Выполнение роли руководителя группы, определение цели и предоставление не- обходимых ресурсов. • Набор, увольнение, оценка и развитие навыков персонала. • Распределение заданий и контроль за ходом их выполнения. • Проверка и оценка качества работы. • Согласование изменений и дополнений к соглашению о качестве оказываемых услуг. • Взаимодействие с менеджерами в рамках всей организации. • Решение проблем: конфликты между сотрудниками, недовольные пользователи, старое оборудование и т.д. • Выполнение роли “высшей инстанции”, к которой пользователи могут обращать- ся со своими проблемами. • Контроль над разработкой масштабируемой инфраструктуры. • Составление планов на случай аварии и других чрезвычайных обстоятельств. • Извлечение документации из “замороченных” голов системных администраторов. • Разработка и реализация стратегии обеспечения безопасности (как пользователей, так и администраторов). Может показаться, что в этом списке не хватает такой обязанности, как общение с клиентами. Однако мы считаем, что эта роль больше подходит техническому персоналу. Менеджерам обычно не хватает технических знаний для того, чтобы правильно оценить степень сложности и выполнимости требований клиента. Сюрпризов будет меньше для обеих сторон, если в определении сроков доставки и составлении графиков выполнения будут принимать участие именно те, кто и будет этим непосредственно заниматься.
1252 Часть III. Разное Руководство Да, это трудно описать. Но когда оно отсутствует или плохо осуществляется, это сразу же становится заметно. В некотором роде руководство — это “системное адми- нистрирование” организаций: оно тоже подразумевает выбор направления, проверку компонентов “на совместимость” и поддержание всей “системы” в рабочем состоянии с наименьшим возможным количеством “сообщений об ошибках”. К сожалению, технические навыки, позволяющие человеку стать замечательным администратором компьютерных систем, вовсе не означают, что он сможет хорошо справляться с ролью руководителя, которая требует, скорее, умения работать с людьми. Совладать с людьми гораздо сложнее, чем с языком Perl, например. Новым менеджерам с хорошими техническими навыками может быть особенно трудно сфокусироваться на выполнении роли руководителя и избежать соблазна заняться разработ- кой. Намного проще и интереснее погрузиться в решение технической проблемы, чем вести длительные беседы с “проблематичным” сотрудником. Но что важнее для организации? Проще всего определить свой уровень как руководителя так: составить список задач, над которыми сейчас работает организация, одним цветом выделить области, в которых всем руководишь ты, а другим — области, в которых всем руководит кто-то другой, а ты лишь ему подчиняешься, и потом посмотреть, какой цвет преобладает. Управление персоналом Это особенно трудная задача. Выполняя руководящую роль, приходится иметь дело как с техническими, так и с личностными качествами сотрудников. Согласно стереоти- пу, системные администраторы, гениальные с технической точки зрения, как правило, совсем не умеют общаться и порой лучше ладят с машинами, чем с людьми. Менеджер должен следить за кривой роста у сотрудников в обеих этих областях. Стимулировать и оценивать технический рост довольно легко, но личностный рост не менее важен. Ниже приведено несколько важных вопросов, которые следует задавать при оценке “пользовательского интерфейса” сотрудника. • Вписывается ли поведение этого человека в вашу рабочую среду? • Как этот человек общается с начальством, клиентами и поставщиками? • Ладит ли этот человек с другими членами команды? • Имеются ли у этого человека задатки руководителя, которые следовало бы развить? • Как этот человек реагирует на критику и технические споры? • Старается ли этот человек устранить пробелы в своих знаниях? • Каковы коммуникативные навыки этого человека? • Может ли этот человек спланировать, реализовать и продемонстрировать проект клиента? • Чувствует ли этот человек ответственность за выполнение поставленной задачи? • Стремится ли этот человек решать задачи или видит одни препятствия? Набор персонала Оценивать подобным образом следует не только уже работающих сотрудников, но и тех, кто претендует на работу в данной организации. Личностные качества кандидатов часто не учитываются или недооцениваются. Будьте внимательными, чтобы потом не пришлось пожалеть!
Глава 32. Управление, стратегия и политика 1253 Существует два подхода к формированию штата системных администраторов. • Нанимать опытных специалистов. • Растить своих собственных. Опытные специалисты обычно быстрее включаются в работу, но всегда есть что-то, от чего их нужно отучать. Неопытных специалистов, наоборот, придется интенсивно учить. Как бы то ни было, желательно иметь точно сформулированные и зафиксиро- ванные в документе правила и процедуры. Если существующий штат сотрудников имеет ясную цель и понимает ваши правила, они могут сами стать лидерами и помочь аккли- матизироваться новичкам. Некоторые качества хорошего системного администратора противоречат друг другу. Администратор должен быть достаточно дерзким для того, чтобы не бояться принимать неординарные решения при возникновении сложной проблемы, но при этом и доста- точно осторожным для того, чтобы не нанести вред системе. Навыки в межличностных отношениях и решении проблем одинаково важны, хотя, по нашим наблюдениям, у многих администраторов они являются взаимоисключающими. И хотя системные адми- нистраторы не обязаны блестяще владеть навыками коммуникации, некоторым из них удается пройти долгий путь навстречу клиентам. Нанимая системных администраторов, вы должны решить, какие личностные каче- ства являются самыми важными для конкретной роли. Например, если вы нанимаете администратора сервера, который будет сосредоточен на прикладной части и будет ред- ко взаимодействовать с клиентами, то коммуникативные способности менее важны, чем технические навыки. Если же этот человек будет частью многочисленной команды, вы не можете полностью проигнорировать его коммуникабельность. Для того чтобы оценить его техническую подготовку, поставьте перед ним ряд соот- ветствующих технических задач. Вы могли бы даже подбросить ему коварный вопрос, чтобы измерить его интеллектуальный уровень. Мы полагаем, что личная беседа имеет большое значение. За первые 15 минут лич- ной беседы вы узнаете больше, чем в более длинном телефонном разговоре. Мы также верим в рекомендательные письма. Во время проверки рекомендательных писем, мы любим задавать открытые вопросы, которые дают респонденту шанс сделать тонкий намек о соискателе. Слушайте внимательно! Людям вообще не нравится гово- рить отрицательные вещи во время проверки рекомендаций, но вы можете уловить тон- кий намек, если будете внимательны. После интервью с кандидатом у вас могут появиться еще кое-какие вопросы. Например, если в ходе беседы возникнет вопрос о том, обращает ли претендент внима- ние на детали, вы могли бы спросить человека, давшего ему рекомендацию, что-нибудь вроде следующего: “Считаете ли вы претендента человеком, ориентированным на дета- ли, или он любит мыслить крупными категориями?” Увольнение персонала Допустив ошибку при подборе сотрудника, лучше уволить его как можно раньше. Промахи с подбором персонала случаются, но держать на работе людей, не желающих тянуть общую лямку, — значит настраивать против себя других сотрудников, потому что именно им придется взваливать на свои плечи обязанности этих лентяев и подчищать за ними их работу. Клиенты тоже быстро заметят, что кое-кто не делает то, чего от него просят, и начнут требовать, чтобы их задания выполнял какой-нибудь конкретный си-
1254 Часть III. Разное стемный администратор. Мало кому из менеджеров понравится давление со стороны клиентов и их подсказки, кому какое задание следует дать. Во многих организациях сложно уволить сотрудника, особенно по истечении испыта- тельного срока. По этой причине к испытательному сроку следует относиться серьезно. Не исключено, что позже все-таки придется собирать факты, подтверждающие не- компетентность сотрудника, делать ему официальные выговоры, устанавливать рабочие нормы и т.д. Тонкости управления персоналом Ддя интеграции нового сотрудника в вашу инфраструктуру необходимо нечто боль- шее, чем простое письмо с приглашением на работу. Вы должны понимать и соблюдать правила вашей организации относительно размещения объявлений о вакансиях, испы- тательных сроках, собеседовании и т.д. Еще один набор правил должен определять процедуру выделения новому сотруднику стола, компьютера, ключей, учетных записей и доступа sudo. Ваши процедуры долж- ны гарантировать, что найм системным администратором сотрудника для управления конкретным набором серверов не означает карт-бланш на набор администраторов для любой системы, существующей в компании. Не менее важно выполнять процедуры и правила, когда системный администратор покидает компанию. Вы должны составить обходной лист, чтобы гарантировать, что ни- чего не забыли. Ваш обходной лист должен включать следующие пункты. • Удаление доменной учетной записи пользователя (LDAP или Active Directory). • Удаление учетной записи пользователя в системах UNIX и Linux. • Удаление пользователя из всех файлов sudoers вашей организации. • Возвращение ключей и карт доступа (регистрируйте все собранные ключи и карты). • Возвращение сотового телефона компании. Некоторые организации могут напечатать точный список прав доступа и аппаратных средств, выданных каждому служащему. Это отличный способ удостовериться, что вы ничего не забыли. В Соединенных Штатах Америки служащим принято высылать уведомление за две недели до увольнения. Некоторые организации не желают ждать две недели и выстав- ляют сотрудника за дверь, немедленно отменяя любой физический доступ к рабочему месту и в сеть. Это разумно! Тщательное тестирование и контроль качества выполняемой работы Менеджеры задают тон для контроля качества. У каждой задачи должны быть ясные критерии ее выполнения. Кроме действий, характерных для каждой задачи, критерии ее выполнения могли бы включать следующие факторы. • Тестирование решения. • Обновление локальной документации. • Рассылка решения на все задействованные компьютеры. • Выполнение заявки на устранение неисправности с подробным указанием пред- принятых мер. • Просьба лицу, пославшему заявку, поставить отметку о том, насколько он удовлет- ворен.
Глава 32. Управление, стратегия и политика 1255 Даже простая задача, такая как создание расписания cron для выполнения ежеднев- ных административных процедур, должна включать фазу тестирования, чтобы гаранти- ровать, что изменение работает как надо. Более сложные задачи должны иметь утверж- денный план испытаний. В идеале отдел информационных технологий должен внедрить культуру, в которой системные администраторы гарантируют, что каждая работа выполняется качественно и полностью. Однако для этого вам, вероятно, придется установить жесткий контроль; это тот случай, когда можно применить принцип “доверяй, но проверяй”. Управление, а не вмешательство Технически компетентный менеджер может советовать сотрудникам, как они долж- ны выполнять свою работу. Но таким образом он может лишить их шанса приобрести собственные навыки и стать полностью ответственным за их работу. Мы думаем о развитии сотрудника в некотором роде как о его воспитании. Если со- трудник может совершить серьезную ошибку, вызвать проблему, которую трудно устра- нить, попросите, чтобы сотрудник показал свой план действий, и удостоверьтесь, что он понимает вероятные последствия своего плана. В противном случае вы, вероятно, должны будете вмешаться. С другой стороны, если кто-то может сделать ошибку, которая послужит хорошей возможностью для обучения без нанесения серьезного ущерба, то стоит устраниться. Уроки, извлеченные из непосредственного опыта, усваиваются лучше. Конечно, оба варианта не идеальны. Вы не хотите, чтобы вас воспринимали как мелочного менеджера, но вы также не хотите выглядеть руководителем, не желающим ничего знать или позволяющим сотрудникам терпеть неудачу, которой можно было из- бежать. Поддержите своих сотрудников, даже если они совершили ошибки, и помогите им. Никогда не позволяйте ошибкам стать постоянным источником затруднений. Связи с сотрудниками организации Системное администрирование — забавное занятие. Если вы делаете свою рабо- ту хорошо, пользователи считают вашу незаметную вычислительную среду само собой разумеющимся, и никто не замечает то, что вы делаете. Однако в сегодняшнем мире ви- русов, спама, раздутых приложений и тотальной зависимости от Интернета, сотрудники отдела информационных технологий — обязательная часть организации. Ваши удовлетворенные клиенты — ваш лучший маркетинговый индикатор. Однако есть другие способы стать заметным в вашей организации и даже в пределах более ши- рокого сообщества. Основываясь на нашем опыте “саморекламы”, мы предлагаем сле- дующие методы, так как считаем их особенно эффективными. • Проводите общие собрания, на которых пользователи могут формулировать свои проблемы и задавать вопросы о вычислительной инфраструктуре. Проанализируйте просьбы пользователей о помощи, чтобы кратко описать самые неприятные темы, которые вы обнаружили. Обеспечьте закуски, чтобы гарантировать хорошую явку. • Оставьте достаточно много времени для вопросов и удостоверьтесь, что вы имеете хорошо осведомленный штат, чтобы ответить на них. Не пытайтесь блефовать, от- вечая на неожиданные вопросы. Если вы не знаете ответа в данный момент, лучше признаться в этом и отложить решение вопроса. • Запланируйте ряд семинаров, предназначенных для конечных пользователей в ва- шей организации. Проводите их один раз в два-три месяца и заранее оглашайте темы, которые будут на них освещаться.
1256 Часть III. Разное • Посещайте конференции по системному администрированию, делайте доклады или пишите статьи об инструментах, которые вы разрабатываете. Такие презен- тации не только способствуют взаимодействию с вашими коллегами, но и демон- стрируют вашим клиентам (и вашему боссу), что вы делаете свою работу хорошо. Системное администрирование, в конечном счете, сводится к общению с людьми и удовлетворению их потребностей. Личные отношения столь же важны, как и в любом другом деле. Разговаривайте со своими клиентами и коллегами и уделите время личным обсуждениям и обмену мнениями. Если вы поддерживаете работу нескольких групп людей, подумайте о том, чтобы по- ручить определенному сотруднику действовать как менеджер по работе с заказчиками в рамках группы. Этот сотрудник должен взять на себя ответственность за общее удовлет- ворение клиентов и регулярно общаться с конечными пользователями. Канал новостей и передача информации об изменениях в вычислительной среде через посредника по- зволят создать дополнительные возможности для контакта. Манипулирование вышестоящим руководством Для того чтобы эффективно выполнять свои обязанности руководителя (особенно лидера), нужно уважать и поддерживать свое собственное руководство. Нужно уме- ло подбирать штат своих сотрудников и распределять, кто будет принимать решение о приеме и увольнении людей. Нужно контролировать процесс распределения заданий и определить, кто отвечает за их выполнение и назначение новых задач сотрудникам. И, наконец, нужно нести ответственность за представление своей команды как внутри соб- ственной организации, так и вне ее. Вышестоящее руководство часто не имеет ни малейшего представления о том, чем занимаются системные администраторы. Предоставляйте им такую информацию, поль- зуясь возможностями своей системы отслеживания запросов, когда хотите убедить на- чальника в необходимости найма дополнительных сотрудников или приобретении но- вого оборудования. Примите меры, чтобы ваше руководство понимало разницу между службой поддержки и оперативной группой. Они должны понимать, что сотрудник, от- вечающий по телефону службы поддержки, — это не тот специалист, который конфигу- рирует маршрутизаторы и серверы. Это позволит избежать многих недоразумений. Фиксировать информацию о выполняемой системными администраторами работе может быть полезно даже при отсутствии конкретной цели. Руководители, особенно ме- неджеры нетехнического звена, часто недооценивают сложность и трудоемкость стоя- щих перед системными администраторами задач. Особенно это касается задач, связан- ных с поиском и устранением неисправностей. Старайтесь подходить к планированию реалистично. Если не уверены, увеличьте время, которое, на ваш взгляд, необходимо для решения масштабных и очень важных задач. Если обновление системы будет выполнено за два дня, вместо трех, пользователи только поблагодарят вас вместо того, чтобы ругать, как они бы сделали, если бы вы ре- шили, что оно может быть выполнено за один день. Когда наступает время вносить изменения в производственные системы, необходимо строго придерживаться утвержденной процедуры. Она должна предусматривать полу- чение одобрения от комиссии экспертов по изменениям. Участие руководства в рабо- те этой комиссии позволит в будущем уменьшить количество жалоб от пользователей. Пользователи, увидевшие в составе этой комиссии исполнительного директора, при переходе на новую систему электронной почты вряд ли станут настаивать на сохранении старой.
Глава 32. Управление, стратегия и политика 1257 Труднее §сего обычно получить поддержку руководства в вопросах ужесточения стратегии безопасности. Чем жестче правила безопасности, тем больше неудобств ис- пытывают пользователи, а поскольку их больше и ноют они громче, их протесты быстро находят отклик у начальства. Увеличение степени безопасности может снижать продук- тивность пользователей, поэтому прежде чем вносить то или иное изменение в систему защиты, следует проводить анализ степени риска, дабы быть уверенными в том, что ру- ководство и пользователи понимают, почему оно предлагается. Также нужно следить за тем, чтобы пользователи были заранее оповещены обо всех планирующихся изменениях в стратегии безопасности, которые могут повлиять на их работу (например, о переходе с паролей на ключи RSA/DSA для удаленной регистра- ции). Все эти изменения должны быть хорошо документированы и сопровождаться под- держкой во время внедрения. Документация должна быть понятной и содержать поша- говые инструкции по работе с новой системой. При переходе на новую систему лучше выделить дополнительное время на обслуживание пользователей, которые могут начать паниковать из-за того, что не успели прочитать свою электронную почту. Приобретение оборудования Во многих организациях системные администраторы не принимают решения о за- купках. Иногда это оправданно, но при покупке компьютерной техники системные ад- министраторы должны иметь возможность высказывать свое мнение и даже выбирать ту или иную систему. Системные администраторы могут сообщить много полезной информации об имею- щихся в локальной среде требованиях к совместимости, о компетентности поставщиков (особенно сторонних посредников) и надежности определенных типов оборудования. Информация о надежности играет особенно важную роль при покупке системы, от ко- торой зависит работа всей организации. Еще одна важная информация, которую может сообщить системный администра- тор, — воздействие новой системы на информационную безопасность и ее соответствие законодательству. Хороший пример — клиническое отделение больницы, которое зака- зывает новую систему обработки изображений, не консультируясь с группой системного администрирования. К сожалению, в результате оказывается, что новое оборудование не способно взаимодействовать с существующей системой аутентификации, работаю- щей в больнице. Фактически новое оборудование не требует регистрации пользователей вообще! Больница потратила тысячи долларов на систему, которая не соответствует за- кону ШРАА, и теперь она вынуждена покупать новую систему или просить разработчи- ка установить индивидуальную систему аутентификации. Ни одно из этих решений не является удачным. Для больницы было бы лучше, если бы системные администраторы были с самого начала привлечены к решению этой проблемы и могли рекомендовать другого поставщика. Системные администраторы должны уведомляться о предстоящих заказах любого нового оборудования для того, чтобы они могли определить, как его можно будет инте- грировать в текущую инфраструктуру и какие проекты и ресурсы будут необходимы для его поддержки. Несмотря на то что системные администраторы могут давать рекомендации, оконча- тельное решение о приобретении оборудования принимает руководство. Если организа- ция купила нечто, что вам не нравится, вы обязаны с этим смириться — игнорировать системы, которые вам не нравятся, нельзя.
1258 Часть III. Разное Участие системного администратора в разработке спецификаций приобретаемых си- стем особенно важно в тех организациях, где все покупается по минимальным ценам. В большинстве случаев при закупке разрешается указывать критерии оценки. Не стоит забывать включать и такие пункты, как “должна быть совместима с существующей сре- дой” или “должна позволять нормально работать с пакетом программ XYZ”. Показатель воздействия и стоимости дополнительного компонента оборудования (или иногда программного обеспечения) не постоянен. Является ли он шестидесятым в этой архитектуре или первым? Достаточно ли у него места на жестком диске для си- стемных файлов? Хватит ли у него памяти для выполнения современных объемных приложений? Имеется ли свободный сетевой порт, к которому его можно подключить? Установлена ли на нем совершенно новая операционная система? Соответствует ли он текущему законодательству? Как он согласуется с долговременными планами предприя- тия? Одобрили ли его приобретение архитекторы всей системы предприятия? Разрешение конфликтов Некоторые из ложащихся на плечи менеджера обязанностей связаны непосредствен- но с умением ладить с людьми (как правило, клиентами или сотрудниками) в напря- женных ситуациях. Мы сначала рассмотрим, каким должно быть поведение менеджера в целом, а затем поговорим о таком особом случае, как работа с “норовистыми” клиента- ми, которых иногда еще также называют ковбоями. В мире системного администрирования конфликты чаще всего возникают между си- стемными администраторами и их клиентами, коллегами или поставщиками. Например, клиент может быть не доволен качеством предоставленных ему услуг, поставщик мог не предоставить обещанный материал вовремя, коллега мог сделать не то, что его проси- ли, а конструкторский отдел мог требовать полного контроля над установленными на их компьютерах конфигурациями операционной системы. Посредничество Большинство людей не любят говорить о конфликтах или даже признавать, что они существуют. Когда эмоции уже бушуют, это обычно означает, что конфликт распознан слишком поздно и что негатив накапливался на протяжении длительного периода вре- мени. За это время стороны могли уже затаить серьезную обиду и не раз прокрутить в своей голове “подлые” намерения друг друга. Встреча лицом к лицу под контролем нейтрального посредника иногда позволяет разрядить обстановку. Попробуйте ограничить спор одним вопросом, а выделенное на его обсуждение время — одним часом. Такие меры снижают вероятность превращения встречи в бесконечную “схватку”. Цель такой встречи — выработка взаимовыгодного решения. Формальную подготовку в этой области можно получить в разных организа- циях, но мы сформулируем основные принципы. • Дайте каждой стороне шанс выразить свое представление о желаемом результате. Запишите его нейтральным способом на доске, что обе стороны могли его видеть. • Ваша цель как посредника состоит в том, чтобы выявить точки соприкосновения, рассматривая оба варианта желаемых результатов. • Вы не сможете достигнуть соглашения за одну встречу. Но если вы сделаете шаги к обнаружению точек соприкосновения, считайте встречу успехом. • Основывайтесь на любых точках соприкосновения, которые вы выявили на после- дующих встречах. После нескольких встреч вы сможете найти достаточно много точек соприкосновения, чтобы обе стороны были удовлетворены результатом.
Глава 32. Управление, стратегия и политика 1259 Норовистые пользователи и конфликтные отделы Процесс внедрения строго контролируемых систем часто приводит к возникновению конфликтов. Технические пользователи (а иногда и целые отделы) могут посчитать, что централизованное системное администрирование не может адекватно удовлетворять их конфигурационные потребности или что они нуждаются в автономном контроле над ис- пользуемыми ими компьютерами. Первым импульсом менеджера может быть просто взять и заставить этих норовистых пользователей принять стандартную конфигурацию для того, чтобы свести к минимуму затраты и время, требующиеся на их поддержку. Однако такой жесткий подход обычно заканчивается недовольством как среди пользователей, так и среди системных админи- страторов. Не забывайте, что желания норовистых пользователей зачастую бывают впол- не законными и что именно системным администраторам приходится поддерживать их или, по крайней мере, воздерживаться от усложнения им жизни. Лучше всего в такой ситуации поступить следующим образом: выяснить причи- ны, по которым норовистые пользователи не хотят принимать управляемые системы. В большинстве случаев их потребности можно удовлетворить и тем самым поставить их на место. В качестве альтернативного варианта можно согласиться на автономию. Разрешите своим норовистым пользователям или отделам делать все, что им хочется, при усло- вии что они сами будут отвечать за поддержание своих систем в рабочем состоянии. Установите брандмауэр, чтобы защитить контролируемые вами системы от возможного взлома или вирусов со стороны сети этих норовистых пользователей. Обязательно заставьте всех представителей автономной сети подписать соответству- ющий стратегический документ, оговаривающий определенные правила безопасности: например, если их системы начнут мешать работе организации, они будут отключены от общей сети до тех пор, пока на них не будут установлены необходимые заплаты и об- новления и они не перестанут негативно влиять на производственный процесс. Во всех организациях есть так называемые “пользователи-передовики”, которые лю- бят устанавливать все самые последние новинки сразу. Такие пользователи не чураются ни бета-версий, ни нестабильных предварительных выпусков программных продуктов; им главное, чтобы у них было самое новое программное обеспечение. К таким пользова- телям следует научиться относиться как к полезным ресурсам, а не как к “бельму на гла- зу”. Они являются просто идеальными кандидатами для тестирования нового программ- ного обеспечения и зачастую с удовольствием составляют отчеты об обнаруженных в нем дефектах, тем самым предоставляя возможность вовремя устранить проблемы. Творческое системное администрирование также необходимо, чтобы иметь дело с увеличивающимся числом мобильных устройств, принесенных на работу. Вы долж- ны найти способы оказывать услуги и для этих (вообще-то, не вызывающих доверия) устройств, чтобы не подвергать опасности целостность ваших систем. В этой ситуации хорошей идеей могла бы быть отдельная сеть. Другой выбор — запускать ноутбуки через сеть VPN, которая производит “оценку положения”. Оценка положения гарантирует, что ноутбуки придерживаются вашей самой важной политики безопасности. Например, вы могли бы потребовать, чтобы у всех машин, со- единяющихся через сеть VPN, были установлены критически важные заплаты. Для но- утбуков, работающих под управлением операционной системы Windows, вы могли бы также потребовать наличия антивирусного программного обеспечения.
1260 Часть III. Разное 32.7. Инструкции и процедуры Исчерпывающие инструкции и процедуры, касающиеся информационных техноло- гий, служат основой для работы современных организаций. Инструкции устанавливают нормы для пользователей и администраторов и способствуют согласованной работе всех вовлеченных в нее сотрудников. Все больше и больше инструкции требуют подтверж- дения в форме подписи или другого доказательства, что пользователь согласился их со- блюдать. Хотя это может показаться чрезмерным формализмом, но такое подтверждение представляет собой действительно отличный способ защитить администраторов. Хорошим основанием для разработки инструкций является стандарт ISO/IEC 27001. Он сочетает общую стратегию в области информационных технологий с другими важ- ными элементами, такими как информационная безопасность и роль отдела кадров, В следующих разделах мы обсудим стандарт ISO/IEC 27001 и выдвинем на первый план некоторые из его самых важных и полезных элементов. Различие между инструкциями и процедурами Инструкции и процедуры — это разные категории, но их часто путают, и иногда они даже используются как синонимы, что вызывает путаницу. Для того чтобы правильно понимать их сущность, рассмотрим следующие аспекты. • Инструкции — это документы, устанавливающие требования или правила. Тре- бования обычно определяются на относительно высоком уровне. Примером ин- струкции можно считать требование, чтобы добавочное копирование выполнялось ежедневно, а резервное копирование с копиями уровня 0 — каждую неделю. • Процедуры — это документы, описывающие процесс выполнения требований или правил. Так, процедура, связанная с описанной выше инструкцией, могла бы быть сформулирована примерно так: “Добавочное копирование выполняется с помощью программы Backup Ехес, инсталлированной на сервере backupsOl ...” Это различие важно, потому что инструкция не должна изменяться очень часто. ВЫ могли бы пересматривать их ежегодно и, возможно, изменять один или два разделав С другой стороны, процедуры уточняются непрерывно, поскольку постоянно изменяет- ся архитектура, системы и конфигурации. Некоторые стратегические решения диктуются программным обеспечением, которым вы управляете, или инструкциями внешних групп, например интернет-провайдерами: Если необходимо защитить конфиденциальные данные пользователей, то некоторые инструкции носят категорический характер. Мы называем эти инструкции “не подлежа- щими обсуждению”. В частности, мы полагаем, что IP-адресами, именами узлов, идентификаторами пользователей, идентификаторами групп и именами пользователей необходимо управ- лять централизованно. Некоторые организации (транснациональные корпорации, на- пример) являются слишком большими, чтобы осуществить эту политику, но если вы можете реализовать ее, то централизованное управление сделает все намного проще. Мы знаем компанию, которая реализует политику централизованного управления для 35 тысяч пользователей и 100 тысяч компьютеров. Таким образом, порог, после которого организация становится слишком крупной для централизованного управления, должен быть довольно высоким.
Глава 32. Управление, стратегия и политика 1261 Другие важные проблемы имеют более широкую сферу влияния, чем ваша локальная группа системных администраторов. • Борьба со взломами системы безопасности. • Контроль над экспортом файловой системы. • Критерии выбора паролей. • Удаление регистрационных записей. • Материал, защищенный авторским правом (например, MP3 и DVD). • Программное пиратство. Эффективные инструкции Существует несколько стратегических инструкций, охватывающих примерно такую же область. Ниже перечислены примеры инструкций, которые, как правило, включают- ся в стратегический набор инструкций, относящихся к информационным технологиям. • Информационная политика безопасности. • Соглашения о возможности соединения с посторонними организациями. • Политика управления активами. • Информационная система классификации. • Политика безопасности людей. • Физическая политика безопасности. • Политика управления доступом. • Стандарты безопасности для разработки и обслуживания новых систем. • Политика управления инцидентами. • Управление непрерывностью бизнеса (аварийное восстановление). • Политика соответствия установленным требованиям закона. Процедуры Процедуры в форме контрольных списков или рецептов могут формализовать суще- ствующую практику. Они полезны и для новичков, и для опытных системных админи- страторов. Еще лучше процедуры, которые содержат выполняемые сценарии. У стандартных процедур есть несколько преимуществ. • Рутинные операции всегда выполняются единообразно. • Контрольные списки уменьшают вероятность ошибок или забытых операций. • По рецепту системный администратор работает быстрее. • Изменения самодокументируются. • Письменные процедуры обеспечивают измеримый стандарт корректности. Вот некоторые общие задачи, для которых вы могли бы захотеть сформулировать процедуры. • Подключение компьютера. • Добавление пользователя. • Конфигурирование локального компьютера.
1262 Часть III. Разнос • Настройка процедур резервного копирования для нового компьютера. • Защита нового компьютера. • Повторный запуск сложных компонентов программного обеспечения. • Перезагрузка веб-серверов, которые не отвечают на запросы или “зависли”. • Очистка очереди на печать и перезагрузка принтера. • Модернизация операционной системы. • Установка заплат. • Установка пакета прикладных программ. • Установка программного обеспечения по сети. • Обновление наиболее важных программ (sendmail, gcc, named, OpenSSL и т.д.). • Резервное копирование и восстановление файлов. • Уничтожение резервных лент. • Аварийный останов системы (всех компьютеров; кроме самых важных; и т.д.). Такие вопросы следует строго регламентировать, чтобы не стать жертвой известной уловки четырехлетних детей: “Мама не разрешила, надо спросить у папы!” 32.8. Восстановление после аварий Работа организации зависит от функционирования информационной среды. Системный администратор отвечает не только за повседневные операции, но и за на- личие плана действий на случай возникновения различных экстренных ситуаций, по крайней мере тех, которые можно предвидеть. Подготовка к таким масштабным про- блемам влияет как на общий план работы, так и на способ выполнения повседневных операций. Оценка рисков Прежде чем завершить разработку плана восстановления после аварий, целесообраз- но оценить степень риска, чтобы понять, какими активами вы располагаете, каким ри- скам подвергаетесь и как можно смягчить последствия аварии. Специальный документ NIST 800-30 детализирует обширный процесс оценки степени риска. Вы можете загру- зить его с адреса http://csrc.nist.gov/publications/nistpubs/800-30/sp800-30.pdf В ходе оценки степени риска необходимо составить список потенциальных угроз, от которых вы хотите защититься. Угрозы не являются одинаковыми, и вам, возможно, по- надобится несколько различных планов, чтобы покрыть полный спектр возможностей. Например, перечислим угрозы общего характера. • Наводнения. • Пожары. • Землетрясения. • Ураганы и торнадо. • Магнитные бури и всплески электропитания. • Перебои в питании, короткие и долгосрочные.
Глава 32. Управление, стратегия и политика 1263 • Чрезвычайно высокая температура или отказ охлаждающего оборудования. • Отказы аппаратных средств (“упавшие” серверы, “сгоревшие” жесткие диски). • Отказы сетевых устройств (маршрутизаторов, выключателей, кабелей). • Злонамеренные пользователи, внешние и внутренние2. • Случайные пользовательские ошибки (удаленные или поврежденные файлы и базы данных, потерянная информация о конфигурации, потерянные пароли и т.д.). Для каждой потенциальной угрозы рассмотрите и запишите все возможные послед- ствия. Как только вы поймете угрозу, расставьте приоритеты служб в пределах своей инфор- мационной среды. Составьте таблицу, в которой перечисляются службы и их приорите- ты. Например, компания, предлагающая “программное обеспечение как службу”, может оценить свой внешний веб-сайт как службу первостепенной важности, в то время как офис с простым, информационным внешним веб-сайтом не мог бы волноваться о судь- бе организации во время бедствия. Борьба со стихийными бедствиями Все больше организаций проектируют свои критические системы так, чтобы автома- тически переключаться на вспомогательные серверы в случае проблем. Это прекрасная идея, если вы не допускаете отключение службы. Однако не становитесь жертвой веры в то, что отражение ваших данных отменяет необходимость в резервном копировании. Даже если ваши информационные центры расположены далеко, вы вполне могли по- терять оба сервера. Не забудьте включить резервное копирование данных в свой план борьбы с бедствиями. £□ Облачные вычисления описаны в разделе 24.1. Облачные вычисления — еще один ресурс для борьбы со стихийными бедствиями, который становится все более популярным. Благодаря таким службам, как ЕС2 компа- нии Amazon, вы можете настроить удаленный сайт и запустить его за несколько минут, без необходимости платить за специализированные аппаратные средства. Вы платите только за то, что используете. Это прекрасная и недорогая альтернатива специализиро- ванному резервному сайту, хотя и требует значительного технического планирования. План восстановления после аварии должен включать следующие разделы (на основе стандарта аварийного восстановления NIST 800-34). • Введение — цель и предмет документа. • Понятие операций — описание системы, цели восстановления, классификация ин- формации, порядок преемственности, обязанности. • Уведомление и активация — процедуры уведомления, процедуры оценки поврежде- ний, активация плана. • Восстановление — последовательность событий и процедур, требуемых для восста- новления потерянных систем. • Возврат к нормальному функционированию — параллельная обработка, воссоздан- ное тестирование системы, возвращение к нормальному функционированию, де- активация плана. 2 По данным 2005 года половина взломов системы безопасности осуществлялась инсайдерами.
1264 Часть III. Разное Мы привыкли использовать сеть для общения и доступа к документам. Однако эти средства могут оказаться недоступными или оказаться под угрозой после инцидента. Сохраняйте автономно все соответствующие контакты и процедуры. Вы должны знать, где можно получить недавние буферные ленты и как использовать их независимо от се- тевых данных. Во всех сценариях бедствий вам понадобится доступ и к автономным, и к интерак- тивным копиям существенной информации. Интерактивные копии по возможности должны быть сохранены на самостоятельном компьютере, на котором есть богатый на- бор инструментов, среды ключевых системных администраторов, управление собствен- ным сервером, полноценный локальный файл /etc/hosts, соединение с принтером и нет никаких зависимостей от обмена файлами и т.д. Не используйте старую рухлядь, это бесполезно; компьютер для хранения информации, необходимой для аварийного вос- становления, должен быть быстродействующим и должен иметь много памяти и дис- кового пространства, которое вы можете использовать для восстановления. Компьютер должен иметь полноценную среду проектирования, чтобы можно было исправить и вторно собрать любое поврежденное программное обеспечение. Хорошо, если у этого компьютера есть интерфейсы для всех типов дисководов, используемых на вашем сайта (IDE, SATA, SCSI, FC-AL и т.д.). Вот список данных для хранения на резервном компьютере в форме печатного бу- клета или оптического диска. • Схема процедуры восстановления: кому звонить, что сказать. • Номера телефонов сервисного центра и клиентов. • Ключевые местные номера телефона: полиция, пожарные, сотрудники, босс. • Запас резервных лент и резервного графика их создания. • Карты сети. • Регистрационные номера программного обеспечения, лицензионные данные и пароли. • Копии инсталляционных пакетов программного обеспечения (могут храниться в формате ISO). • Копия инструкций по эксплуатации ваших систем. • Контактная информация продавца поврежденного диска, в которой вы нуждаетесь. • Административные пароли. • Данные о конфигурациях аппаратного и программного обеспечения: версии опе- рационных систем, заплаты, таблицы разделов, параметры настройки аппаратных средств IRQ, DMA и т.п. • Инструкции по запуску систем, которые должны быть восстановлены в интерак- тивном режиме. Подбор персонала на случай аварии Нужно заблаговременно решить вопрос о том, кто будет справляться с ситуацией в случае, если произойдет авария. Следует составить план действий и написать номера телефонов тех, кому надлежит звонить в такой ситуации. Может оказаться, что на роль главного больше подходит кто-нибудь из системных администраторов, а не начальник отдела информационных технологий (начальники отделов обычно не подходят для этой роли).
Глава 32. Управление, стратегия и политика 1265 Ответственным в случае аварии должен быть кто-то, кто пользуется авторитетом и не боится принимать трудные решения при наличии минимального количества инфор- мации (наподобие решения отключить от сети весь отдел целиком). Способность при- нимать такие решения, уведомлять о них понятным образом и фактически руководить персоналом во время кризиса, пожалуй, важнее теоретических знаний о системном и се- тевом управлении. Мы пользуемся небольшой ламинированной карточкой, на которой мелким шрифтом напечатаны все важные имена и номера телефонов: она очень удобна, потому что легко помещается в бумажник. При составлении плана аварийных мероприятий обычно предполагается, что админи- стративный персонал будет на месте, когда произойдет авария, и сумеет справиться с си- туацией. К сожалению, люди иногда болеют, уходят на курсы повышения квалификации, уезжают в отпуск, а в тяжелые времена вообще могут даже становиться крайне недруже- любными. Поэтому стоит заранее продумать, где можно будет быстро найти дополни- тельную помощь. (Если система не слишком устойчива, а персонал неопытен, то недо- статочное количество администраторов уже само по себе является аварийной ситуацией.) Одним из решений может быть договоренность с какой-нибудь местной консульта- ционной компанией или университетом, где всегда есть талантливые и готовые помочь администраторы. Конечно, если у них когда-нибудь возникнут проблемы, тогда вы тоже должны будете оказать им необходимую помощь. Но самое главное — это не работать на пределе: наймите достаточное количество администраторов и не требуйте, чтобы они работали по 12 часов в сутки. Электропитание и кондиционирование План аварийных мероприятий лучше проверить до того, как он понадобится. Непроверенный план вообще не является планом! Тестировать и обновлять план следует ежегодно. Ш Информацию об источниках бесперебойного питания можно найти в разделе 27.3. Генераторы и источники бесперебойного питания следует проверять раз в месяц или в квартал, в зависимости от того, на какую степень риска готово согласиться руковод- ство. Нужно убедиться в том, что все важные устройства подключены к источнику бес- перебойного питания, их батареи в порядке и механизм включения питания работает. Для того чтобы проверить какой-нибудь отдельный источник бесперебойного питания, нужно просто вынуть вилку из розетки, а чтобы проверить все источники, т.е. все ли важное оборудование к ним подключено, возможно, придется отключить питание во всем здании или в комнате. В любом случае следует обязательно знать обо всех зависи- мостях и слабых местах своей системы электропитания. Источники бесперебойного питания тоже нуждаются в обслуживании. Эта задача может и не входит в обязанности системного администратора, но именно он должен следить за тем, чтобы она выполнялась. Если у вас есть генератор, заключите с местной компанией контракт на поставку топлива. Храните достаточное количество топлива, чтобы обеспечивать свои системы электричеством во время простоя, но помните, что топливо в конце концов портится. Бензин начинает портиться примерно через месяц. Даже если добавить в него стаби- лизатор, бензин не может храниться более года. Дизельное топливо является более хи- мически стабильным, но может способствовать росту водорослей, поэтому в дизельное топливо, которое будет храниться долго, следует добавлять средства, подавляющие рост водорослей.
1266 Часть Ш. Разное Чаще всего электричество отключается ненадолго, но на всякий случай батареи должны обеспечивать два часа работы, чтобы было время правильно выключить техни- ку. Большинство источников бесперебойного питания оборудованы портами USB или интерфейсом Ethernet, которые можно использовать для корректного выключения не являющихся критически важными компьютеров через определенное время после от- ключения питания. Периоды отключения электропитания можно использовать для выполнения лю- бых пятиминутных процедур обновления, которые уже были протестированы, но еще не проводились. Работать все равно невозможно, так что людям будет все равно. В не- которых организациях пользователи спокойнее воспринимают дополнительную пяти- минутную задержку после отключения электричества, чем пятиминутное плановое от- ключение системы, о котором их оповестили за неделю. Если есть старые компьютеры, которыми вроде бы никто уже не пользуется, можно оставить их отключенными до тех пор, пока кто-нибудь не пожалуется на их отсутствие. Иногда отсутствие таких компью- теров остается незамеченным в течение нескольких недель, а иногда о них вообще ни- кто так никогда и не вспоминает. Ш Влияние на окружающую среду рассматривается в главе 28. Системы охлаждения часто оборудованы датчиками температуры со средствами опо- вещения о ее повышении. Задайте такую верхнюю границу температуры, чтобы после сигнала у вас оставалось время выключить технику, прежде чем она перегреется и вый- дет из строя; например, мы пользуемся отметкой в 24 градуса по Цельсию вместо 32, но живем в горах в сорока пяти минутах езды от работы (это летом, а зимой на то, чтобы добраться до места, может уходить и гораздо больше времени). В машинном зале лучше еще держать парочку обычных или работающих от батареи термометров, ведь при от- ключении электропитания все электронные индикаторы станут бесполезными. Если какая-то часть оборудования устанавливается в удаленном месте, попросите от- вечающие за обслуживание этого помещения службы показать резервные средства пи- тания, прежде чем подписывать с ними договор. Удостоверьтесь в том, что генератор находится в рабочем состоянии и проверяется регулярно. Попросите разрешения при- сутствовать при следующей проверке генератора; независимо от того, разрешат вам это или нет, таким путем, скорее всего, удастся получить очень полезную информацию. Сетевая избыточность Интернет-провайдеры часто поглощаются более крупными компаниями в результате слияния. Это сводит на нет их тщательно продуманные планы по поддержанию избы- точных соединений с Интернетом. Поглощаемые интернет-провайдеры часто консоли- дируют электрические цепи, принадлежавшие независимым компаниям. В результате клиенты, у которых раньше были отдельные соединения с Интернетом, после этого мо- гут получать их все по одному-единственному кабелю, но и, соответственно, быть от- ключенными от всех них сразу. Интернет-провайдеры также нередко рекомендуют устанавливать “избыточные це- почки” или “резервные каналы”, преимущества которых являются очень сомнительны- ми. При более тщательном изучении может оказаться, что кабелей действительно два, но они находятся в одной и той же цепи или что по резервному каналу уже передается объемный ATM-трафик. Для уверенности в том, что избыточные каналы оправдывают себя, проводите со своими интернет-провайдерами ежегодную проверку.
Глава 32. Управление, стратегия и политика 1267 Проблемы с безопасностью Об обеспечении безопасности системы подробно рассказывалось в главе 22. Однако здесь тоже стоит коснуться этой темы, потому что вопросы безопасности влияют на многие из выполняемых системным администратором задач. Ни один аспект стратегии управления организации не должен разрабатываться без учета безопасности. В главе 22, по большей части, рассказывалось о способах предотвращения проблем с безопас- ностью. Однако продумывание способов восстановления системы после происшедшего из-за связанных с безопасностью проблем инцидента является не менее важным. Кража данных с веб-сайта относится к числу наиболее серьезных нарушений систе- мы безопасности. Для системного администратора, работающего в компании, которая занимается предоставлением услуг веб-хостинга, такой инцидент может превратиться в настоящую катастрофу, особенно если речь идет о сайтах, использующих данные о кре- дитных карточках пользователей. Поступает поток телефонных звонков от клиентов, от средств массовой информации, от VIP-клиентов компании, которые только что услыша- ли о происшедшей краже в новостях. Кто будет отвечать на эти звонки? Что он должен говорить? Кто будет главным? Кто что будет делать? Тем системным администраторам, которые работают в очень популярных компаниях, обязательно следует продумать такой сценарий, подготовить подходящие ответы и план действий и, возможно, даже провести тренировочную проверку, чтобы отработать детали. Для сайтов, которые имеют дело с данными о кредитных карточках, всегда предусма- триваются правила поведения в случае атаки с целью кражи информации. Поэтому си- стемный администратор обязательно должен привлечь к планированию мероприятий на случай проблем с безопасностью сотрудников юридического отдела своей организации и позаботиться о наличии номеров телефонов и имен людей, которым следует звонить во время кризиса. Когда в новостях объявляют, что такой-то веб-сайт был атакован хакерами, возника- ет ситуация, напоминающая аварию на дороге: все бросаются посмотреть, что же про- изошло, и в результате интернет-трафик сильно возрастает, нередко настолько сильно, что все, что администраторам наконец-то с таким трудом удалось исправить, снова мо- жет оказаться под угрозой. Поэтому, если веб-сайт не рассчитан на 25-процентное (или более высокое) увеличение трафика, следует позаботиться о наличии программ вырав- нивания нагрузки, которые будут просто направлять превышающие норму вызовы на сервер, а тот будет возвращать страницу со следующим сообщением: “Извините, сервер слишком загружен и поэтому в данный момент не может обработать ваш запрос”. 32.9. Соответствие законам и стандартам IT-аудит и управление в настоящее время являются очень популярными. Инструкции и квазистандарты для спецификации, измерений и сертификации соответствия законам породили множество аббревиатур: SOX, ITIL, COBIT и ISO 27002, и это только некото- рые из них. К сожалению, эта мешанина букв оставляет у системных администраторов неприятный осадок, поэтому сейчас ощущается недостаток программного обеспечения, предназначенного для реализации всех средств управления, необходимых для обеспече- ния соответствия с действующим законодательством. Некоторые из основных рекомендательных стандартов, руководящих принципов, промышленных концепций и законодательных требований, которые могут касаться си- стемных администраторов, перечислены ниже. Законодательные требования являются в
1268 Часть III. Разное значительной степени специфичными для Соединенных Штатов Америки. Однако эти стандарты действительно содержат полезную информацию даже для организаций, ко- торые не обязаны их придерживаться. Некоторые из них стоит знать только для того, чтобы овладеть передовым опытом. (Стандарты перечислены в алфавитном порядке.) • CJIS (Информационные системы уголовного судопроизводства) —стандарт, относя- щийся к организациям, которые отслеживают криминальную информацию и ин- тегрируют ее с базами данных ФБР. Его требования могут быть найдены на стра- нице fbi.gov/hq/cjisd/cjis.htm. • СОВГГ — рекомендации для информационного управления, основанного на пере- довом промышленном опыте. Они разработаны совместно Ассоциацией аудита и управления информационными системами (Systems Audit and Control Association — ISACA) и Институтом информационного управления (IT Governance Instutute — ITGI); см. детали на сайте isaca.org. Задача рекомендаций COBIT состоит в том, чтобы “исследовать, развивать, предавать гласности и продвигать авторитет- ный, современный, международный набор общепринятых целей управления ин- формационными технологиями для ежедневного использования менеджерами и аудиторами.” Первая редакция этих рекомендаций была выпущена в 1996 году, сейчас действует версия 4.0, изданная в 2005 году. Последняя версия разрабатывалась под сильный влиянием требований закона Сарбейнза—Оксли (Sarbanes-Oxley). Она включает 34 цели высокого уровня, которые охватывают 215 “целей управления”, классифи- цированных по четырем областям: планирование и организация, приобретение и реализация, поставка и поддержка, мониторинг и оценка. • СОРРА (Children’s Online Privacy Protection Act — Закон о защите конфиденциаль- ной информации о детях в Интернете); регулирует работу организаций, который6 собирают или хранят информацию о детях, не достигших 13 лет. Для сбора опре- деленной информации необходимо разрешение родителей; см. детали на сайте сорра.org. • FERPA (Family Educational Rights and Privacy Act — Закон о правах семьи на обра- зование и неприкосновенность частной жизни); относится ко всем учреждениям, являющимся получателями федеральной помощи, которой управляет министер- ство образования. Этот закон защищает информацию о студентах и предостав- ляет студентам определенные права относительно их данных; см. детали на сайте ed.gov/policy/gen/guid/fpco/ferpa/index.html. • FISMA (Federal Information Security Management Act — Закон об управлении ин- формационной безопасностью в федеральном правительстве); относится ко всем правительственным учреждениям и подрядчикам правительственных учреждений. Это большой и довольно неопределенный набор требований, которые нацелены на согласование со множеством публикаций об информационной безопасности, выпущенных институтом NIST, Национальным институтом по стандартизации и технологии (National Institute of Standards and Technology). Независимо от того, подпадает ли ваша организация под мандат FISMA или нет, документы NIST за- служивают внимания; см. csrc.nist.gov/publications/PubsTC.html. • Концепция Safe Harbor (правило безопасной гавани) Федеральной комиссии по тор- говле США (FTC) представляет собой мост между подходами США и Европейского Союза к законодательству, защищающему частную жизнь, и определяет способ, с
Глава 32. Управление, стратегия и политика 1269 помощью которого американские организации могут взаимодействовать с евро- пейскими компаниями, чтобы продемонстрировать защиту своей информации; см. export.gov/safeharbor/eg_main_018236.asp. • Закон П)эма-Лич-Блайли (Gramm-Leach-Bliley Act — GLBA) регулирует исполь- зование финансовыми учреждениями конфиденциальной информации потре- бителей. Если вы задавались вопросом, почему банки, выпускающие кредитные карточки, брокеры и страховщики забрасывали вас уведомлениями о конфиден- циальности, то это следствие закона Грэма—Лич—Блайли; см. ftc.gov/privacy/ privacyinitiatives/glbact.html. • Закон ШРАА (Health Insurance Portability and Accountability Act — Закон об отчет- ности и безопасности медицинского страхования) относится к организациям, ко- торые передают или хранят защищенную медицинскую информацию (иначе PHI). Это широкий стандарт, который был первоначально предназначен для борьбы с растратами, мошенничеством и злоупотреблениями в области здравоохранения и медицинского страхования, но теперь он используется для того, чтобы измерить качество и улучшить безопасность информации о здоровье; см. hhs.gov/ocr/ privacy/index.html. • ISO 27001 и ISO 27002 — это рекомендательная (и информативная) коллекция передового опыта, связанного с безопасностью организаций, использующих ин- формационные технологии; см. iso. org. • Библиотека ITIL (IT Insfrustructure Library) — коллекция руководств, первоначаль- но разработанных британским правительством, которые обрисовывают в общих чертах структуру управления информационными услугами. Это всего лишь реко- мендации, но они широко используются; см. сайт itil.org и раздел, помещен- ный далее. • CIP (Critical Infrastructure Protection) — семейство стандартов, разработанных кор- порацией North American Electric Reliability Corporation (NERC), которые способ- ствуют защите инфраструктурных систем, таких как электроснабжение, телефон- ные линии и финансовые сети, от стихийных бедствий и терроризма. В полном соответствии с учебной иллюстрацией ницшеанского понятия “жажды власти” оказывается, что большая часть экономики попадает в один из 17 секторов “критических инфраструктур и ключевых ресурсов” (CI/KR) и поэтому очень нуж- дается в стандартах CIP. Организации, попадающие в эти сектора, должны оценить свои системы и защищать их соответствующим образом; см. cip. gmu. edu/cip. • Стандарт PCI DSS (Payment Card Industry data Security Standard — Стандарт защи- ты информации в индустрии платежных карточек) был создан консорциумом пла- тежных брендов, включая American Express, Discover, MasterCard и Visa. Он охва- тывает вопросы управления данными о платежной карточке и относится к любой организации, которая принимает платежи по кредитной карточке. Стандарт имеет два варианта: самооценку для небольших организаций и внешний аудит для орга- низаций, которые обрабатывают много сделок; см. pci securitystandards. org. • Правила Red Flags Rules Федеральной Комиссии по торговле США требуют, чтобы любой, кто расширяет кредит на потребителей (т.е. любая организация, которая отсылает счета), осуществлял формальную программу, предотвращающую и обна- руживающую “хищение персональных данных”. Правила требуют, чтобы эмитен- ты кредитов разработали эвристические правила для того, чтобы идентифициро-
1270 Часть III. Разное вать подозрительные манипуляции со счетами. Для выяснения деталей наберите фразу “red flag” в поисковой строке на сайте f tc. gov. • Раздел IT General Controls (ITGC) в законе Сарбейнза-Оксли (SOX), последний по расположению, но не по важности, относится ко всем акционерным обществам и разработан, чтобы защитить акционеров от бухгалтерских ошибок и мошенниче- ских методов; см. sec. gov/rules/final/33-812 4 . htm. Библиотека ITIL: Information Technology Infrastructure Library Среди этих стандартов библиотека Information Technology Infrastructure Library (ITIL) стала фактическим стандартом для организаций, ищущих полноценное решение для управления информационными услугами. Процессы ITIL разделены на шесть групп. • Служба поддержки - информационные услуги для клиентов, а также прием запро- сов и сообщений о проблемах; также включает условия для отслеживания и эска- лации проблем. • Управление инцидентами — восстановление обслуживания после инцидента, вы- звавшего сбой. • Управление проблемами — идентифицирует причины инцидентов, чтобы предот- вратить будущие сбои. • Управление конфигурацией — инкапсулирует информацию о компонентах инфра- структуры и их взаимозависимостях. • Управление изменениями — процессы управления изменениями в пределах инфра- структуры. • Управление выпусками — процесс, аналогичный процессу управления изменения- ми, но используемый для крупномасштабных изменений в пределах организации. У крупных организаций может быть формальная программа ITIL, дополненная си- стемой отслеживания запросов, которая точно отражает концепции ITIL и ее опреде- ления. Однако даже небольшая организация, использующая общедоступную систему отслеживания запросов, может принять политику, которая поощряет внимательное управление изменениями. Все изменения должны сопровождаться подачей заявки на изменение, одобрения комитета по изменениям и отслеживаться с помощью диагно- стической системы. Все инциденты должны обрабатываться в соответствии с установ- ленным процессом реагирования, который включает анализ состояния после устра- нения последствий инцидента, чтобы определить, была ли проблема решена самым лучшим способом. В общем, следует интерпретировать рекомендации в свете определенных потреб- ностей вашей организации. Главная цель состоит в том, чтобы понять концепции, во- площенные в стандартах, и принять их философию. Некоторые из упомянутых выше стандартов состоят из сотен страниц, поэтому их даже трудно просто прочитать; не стес- няйтесь резюме и сжатых версий. NIST: Национальный Институт стандартов и технологии Институт NIST издает множество стандартов, полезных для администраторов и тех- нологов. Некоторые из популярных стандартов упомянуты ниже, но если вам скучно и вы ищете стандарты, можете зайти на его веб-сайт. Вы не будете разочарованы.
Глава 32. Управление, стратегия и политика 1271 Стандарт NIST 800-53 (Рекомендуемые средства управления системами безопас- ности для федеральных информационных систем и организаций) описывает, как оце- нить безопасность информационных систем. Если ваша организация разработала вну- треннее приложение, которое хранит конфиденциальную информацию, этот стандарт может помочь вам удостовериться, что вы действительно защитили ее. Однако осте- регайтесь: процедура согласования со стандартом NIST 800-53 не для слабонервных. Вы, вероятно, столкнетесь с документом объемом около 100 страниц со множеством мучительных деталей.3 Стандарт NIST 800-34 (Принципы планирования на случай непредвиденных ситуа- ций для информационных систем) является библией аварийного восстановления, разра- ботанной организацией NIST. Он предназначен для правительственных учреждений, но любая организация может извлечь из него выгоду. Следование стандарту планирования NIST 800-34 требует времени, но это вынуждает вас ответить на такие важные вопросы, как: “Какие системы являются самыми важными?”, “Сколько времени мы можем обой- тись без этих систем?” и “Как мы собираемся восстанавливаться, если наш основной информационный центр потерян?” 32.10. Правовые вопросы Правительство США и некоторые штаты издали законы о преступлениях в области вычислительной техники. На федеральном уровне с начала 1990-х годов существовало два закона, а теперь их четыре. • Федеральный Закон о конфиденциальности связи. • Закон о компьютерном мошенничестве и компьютерных злоупотреблениях. • Закон о компьютерных кражах. • Закон об авторских правах “Digital Millenium Copyright Act”. Основными правовыми проблемами в настоящее время являются ответственность системных администраторов, сетевых операторов и провайдеров, предоставляющих услуги веб-хостинга; сети для обмена файлами между пользователями, защита авторских прав и конфиденциальность. В разделе рассматриваются эти и другие юридические во- просы, связанные с системным администрированием. Конфиденциальность Частную жизнь всегда было трудно скрыть, но с развитием Интернета она подвер- гается еще большей опасности, чем когда-либо. Медицинская документация неодно- кратно раскрывалась с помощью плохо защищенных систем, украденных ноутбуков и резервных магнитных лент, которые находились не в положенном месте. Базы данных, номера кредитных карточек всегда подвергались нападениям. Веб-сайты, предлагающие антивирусное программное обеспечение, фактически сами устанавливают программы- шпионы. Поддельная электронная почта поступает почти ежедневно в виде фиктивных писем от вашего банка, в которых утверждается, что у вас возникли проблемы с вашим счетом и требуется, чтобы вы проверили свои учетные данные. Обычно тщательное из- учение электронной почты показывает, что эти данные попали бы к хакеру в Восточной Европе или Азии, а не в ваш банк. Этот тип нападения называют фишингом. 3 Если вы планируете сотрудничество с правительственными учреждениями США, от вас могут потребовать соответствия стандарту NIST 800-53, хотите вы этого или нет...
1272 Часть III. Разное Технические меры никогда не смогут защитить от этих нападений, потому что они нацелены на самый уязвимый компонент — ваших пользователей. Ваша лучшая защи- та — образованные пользователи. Никакая легальная служба электронной почты или веб-сайт никогда не будут сообщать о следующем: • что вы выиграли приз; • чтобы вы “проверили” информацию о счете или пароли; • чтобы вы отправили часть электронной почты; • чтобы вы установили программное обеспечение, которое вы не искали; • о вирусе или другой проблеме безопасности. Пользователи, осведомленные о таких опасностях, с большей вероятностью сделают правильный выбор, когда всплывающее окно будет утверждать, что они выиграли бес- платный MacBook. Реализация стратегии Файлы системного журнала могут легко доказать вам, что человек X сделал плохо че- ловеку Y, но для суда это всего лишь слова. Защитите себя письменными предписания- ми. Файлы системного журнала иногда содержат метки времени, которые полезны, но не обязательно допустимы как доказательства, если ваш компьютер не управляет протоко- лом NTP (Network Time Protocol), чтобы синхронизировать свои часы со стандартными. Вам, возможно, понадобится инструкция по безопасности, чтобы преследо- вать кого-то по суду за неправильный поступок. Она должна содержать утверждение: “Несанкционированное использование вычислительных систем может повлечь не толь- ко нарушение организационной политики, но и нарушение законов штата и федераль- ных законов. Несанкционированное использование — это преступление, которое может повлечь уголовное наказание и гражданско-правовые санкции; оно будет преследовать- ся по суду в полном объеме закона.” Мы советуем показывать заставку, которая сообщает пользователям о ваших прави- лах слежения. Вы могли бы написать что-то вроде следующего: “Действие может отсле- живаться в случае реального или подозреваемого нарушения правил безопасности”. Вы можете гарантировать, что пользователи видят уведомление, по крайней мере, один раз включив его в файлы запуска, которые вы предоставляете новым пользова- телям. Если вы требуете, чтобы использование протокола SSH регистрировалось (а вы должны это требовать), можете сформировать файл /etc/ssh/sshd_config так, чтобы протокол SSH всегда показывал заставку. Убедитесь, что, пользуясь своими учетными записями, пользователи признают вашу письменную инструкцию. Объясните, где пользователи могут получить дополнительные копии стратегических документов и куда отправлять ключевые документы о соответству- ющей веб-странице. Также включайте определенный штраф за несоблюдение правил (удаление учетной записи и т.д.). Более важно, чтобы вы добросовестно уведомили поль- зователей об их обязанностях, а не просто составили юридически точное уведомление. Кроме заставки, целесообразно сделать так, чтобы пользователи подписали страте- гическое соглашение, прежде чем получить доступ к вашим системам. Это приемлемое пользовательское соглашение должно быть разработано в сотрудничестве с вашим юри- дическим отделом. Если у вас нет подписанных соглашений со служащими, соберите их. Сделайте подписание соглашения стандартной частью процесса приема на работу новых сотрудников.
Глава 32. Управление, стратегия и политика 1273 Вы могли бы также периодически проводить семинары по вопросам безопасности. Это удобная возможность рассказать пользователям о важных проблемах, таких как фи- шинг, научить их правильно устанавливать программное обеспечение и пароли, а также кое-чему другому, что относится к вашей компетенции. Контроль — это ответственность Поставщики интернет-услуг обычно следуют правилам пользования сетью (appropriate use policy — AUP), которые диктуют стоящие над ними поставщики и ко- торые являются обязательными для их клиентов. Таким образом, вся ответственность за действия клиентов ложится на самих клиентов, а не на провайдеров. Целью такой стратегии является защита провайдеров от ответственности за рассылку спама и прочие незаконные действия, например хранение пользователями на своих узлах незаконно- го или защищенного авторскими правами материала. В каждом штате и каждой стране имеются свои законы на этот счет. Ваши правила должны явно запрещать пользователям использовать ресурсы ком- пании для незаконной деятельности. Однако на самом деле этого недостаточно — вы также должны дисциплинировать пользователей, обнаружив, что они осуществляют не- законные действия. Организации, которые знают о незаконных действиях, но не при- нимают меры для их пресечения, считаются соучастниками и могут преследоваться по закону. Нет ничего хуже несоблюдаемых или противоречащих друг другу правил, как с практической, так и юридической точки зрения. Из-за риска стать соучастником незаконных действий пользователя, некоторые ор- ганизации ограничивают данные, которые они регистрируют, отрезок времени, в тече- ние которого сохраняются файлы системного журнала, и объем информации о файлах системного журнала, хранящейся на резервных лентах. Некоторые пакеты программ помогают выполнять эти правила, устанавливая уровни регистрации. Это помогает си- стемным администраторам устранять проблемы, не вторгаясь в частную жизнь пользо- вателей. Тем не менее всегда следует знать, какой вид регистрации требуется по местным законам или по любым регулирующим стандартам, которые распространяются на вашу организацию. Лицензии на программное обеспечение Многие компании оплачивают меньшее количество копий программ, чем использу- ют на самом деле. Если об этом становится известно, компания теряет гораздо больше, чем сэкономила на приобретении недостающего числа лицензий. Другие компании по- лучают демоверсию дорогого пакета и взламывают ее (меняют дату на компьютере, опре- деляют лицензионный ключ и так далее), чтобы пакет продолжал работать по истечении демонстрационного срока. Как системный администратор должен реагировать на пред- ложения нарушить лицензионное соглашение и установить нелицензионные копии про- граммы на дополнительные компьютеры? Что он должен делать, если обнаруживается, что на обслуживаемых им компьютерах работает пиратское программное обеспечение? И как быть с условно-бесплатными программами, за которые так никогда и не заплатили? Это очень сложный вопрос. К сожалению, начальство не всегда поддерживает адми- нистратора, предлагающего удалить нелицензионные копии программ либо оплатить их. А ведь часто именно системный администратор подписывает лицензионное соглашение, требующее удалить демонстрационные копии после определенной даты, тогда как реше- ние их не удалять принимает руководитель.
1274 Часть III. Разное Нам известно несколько случаев, когда непосредственный начальник системного ад- министратора предлагал ему “не раскачивать лодку”. Тогда администраторы написали докладную вышестоящему руководству, в которой указали количество лицензированных и используемых копий, а также процитировали лицензионное соглашение. В одном слу- чае подход сработал, и уволен был непосредственный начальник системного админи- стратора. Во втором случае уволиться пришлось системному администратору, потому что даже вышестоящее руководство отказалось действовать по закону. Чтобы вы ни делали в такой ситуации, обязательно делайте это в письменном виде. Требуйте, чтобы ответы предоставлялись в письменном виде, а если не получится, документируйте полученные инструкции в виде коротких служебных записок и отправляйте их ответственному лицу. 32.11. Организации, конференции и другие ресурсы Многие группы поддержки систем UNIX и Linux — и общего характера, и кон- кретных поставщиков — помогают устанавливать контакты с другими людьми, ис- пользующими то же программное обеспечение. В табл. 32.3 приведен короткий список организаций, но большинство национальных и региональных групп в этой таблице не упомянуто. Организация FSF (Free Software Foundation — Фонд бесплатного программного обе- спечения) является спонсором проекта GNU (GNU — аббревиатура от “GNU is Not Unix”; так называется проект по свободному распространению программного обеспече- ния). Под словосочетанием “бесплатное программное обеспечение” в названии этой ор- ганизации подразумевается программное обеспечение, которое не имеет почти никаких ограничений в использовании, а не бесплатное программное обеспечение. Также орга- низация FSF является автором лицензии GPL, которая распространяется на большую часть систем UNIX и Linux. Организация USENIX, представляющая собой союз пользователей Linux, UNIX и других операционных систем с открытым исходным кодом, каждый год проводит одну общую конференцию и несколько специализированных (небольших). На общей конфе- ренции обычно речь идет об открытых системах и новых разработках, которые прово- дятся в рамках Linux и BSD. Таблица 32.3. Организации, ориентированные на системных администраторов систем UNIX ; и Linux Название URL / ОММММК- - ? * - - ’’ •’ FSF fsf.org Free Software Foundation, спонсор GNU USENIX usenix.org Группа пользователей UNIX, обсуждающих технические вопросы SAGE sage.org Гильдия System Administrators Guild, ассоциированная с органи- зацией USENIX; проводит ежегодные конференции USA LOPSA lopsa.org League of Professional System Administrators — лига профессио- нальных системных администраторов, “отколовшаяся” от органи- зации USENIX/SAGE SANS sans.org Проводит конференции по системному администрированию и безопасности; обсуждает менее технические вопросы по сравне- нию с гильдией SAGE, делая упор на обучении The Linux Foundation linuxfoundation.org Некоммерческий консорциум, ориентированный на стимулирова- ние роста системы Unux
Глава 32. Управление, стратегия и политика 1275 Окончание табл. 32.3 Название tWML AUUG auug.org.au SAGE-AU sage-au.org.au SANE sane.nl Australian UNIX Users Group; охватывает технические и управлен- ческие аспекты вычислений Australian SAGE; проводит ежегодные конференции в Австралии Группа System Administration and Network Engineering; проводит ежегодные конференции в Европе Важным событием для системных администраторов является конференция LISA (Large Installation System Administration — системное администрирование в крупных ор- ганизациях), которая проводится поздней осенью. Помимо всех этих конференций, ча- сто проводятся соответствующие торговые выставки. Кроме того, в течение нескольких последних лет организация USENIX специально для сообщества Linux проводит отдельную конференцию по вопросам разработки ядра Linux. Попасть на это двухдневное мероприятие можно только по приглашению. SAGE (USENIX System Administration Guild — гильдия системных администраторов USENIX) является первой международной организацией для системных администрато- ров. Она рекламирует системное администрирование как профессию путем финанси- рования различных конференций и неофициальных программ. Подробнее о ней можно узнать на сайте www. sage. org. Гильдия SAGE совместно со своей головной организацией USENIX проводит конфе- ренции, посвященные управлению системами и сетями, учебные и технические семина- ры, лекции и презентации. Иногда она также проводит однодневные рабочие семинары, посвященные специальным темам. См. информацию на сайте usenix. org. Бюллетень организаций USENIX и SAGE — ;login: — выпускается обеими организа- циями; он содержит административные новости, советы, обзоры и объявления, пред- ставляющие интерес для системных администраторов. Гильдия SAGE поддерживает список ресурсов для системных администраторов. Свежую информацию можно найти на сайте sage.org. В 2005 году раскол организаций USENIX и SAGE поставил будущее гильдии SAGE под сомнение. В результате этого раскола появилась новая отдельная организация под названием LOPS A (League of Professional System Administrators — Лига профессиональ- ных системных администраторов), основанная бывшими сотрудниками организации SAGE. До начала 2010 года организация LOPSA еще не проводила никаких конферен- ций. У SAGE была программа по сертификации системных администраторов, но она от нее отказалась; будем надеяться, что LOPSA вернется к ней. Институт SANS проводит много курсов обучения и семинаров по вопросам безо- пасности и поддерживает программу по сертификации. Экзамен проводится в течение ограниченного времени в форме многовариантного теста, вопросы которого известны заранее. Прежде чем сдать реальный экзамен, испытуемые могут попробовать сдать два тренировочных экзамена. Индивидуальные сертификаты относятся к узкоспециализи- рованным вопросам; соискатели могут также получить общий сертификат по безопас- ности (GSEC). Сертификат действует только 2-3 года, поэтому вы должны следить за новинками и повторно проходить сертификацию (за дополнительную плату). Детали см. на сайте giac.org. Существует множество групп пользователей UNIX, Linux и других открытых систем. Некоторые из них связаны с организацией USENIX, а другие нет. Локальные группы обычно проводят регулярные встречи и рабочие семинары с местными или приезжими
1276 Часть III. Разное лекторами и часто организовывают банкеты до или после мероприятия. Это хороший способ поддерживать контакты с системными администраторами в своем регионе. Главной торговой выставкой в сфере сетевой индустрии является выставка Interop. Проводимые в ее рамках обучающие семинары известны своим высоким качеством. Когда-то выставка Interop проходила только раз в год; этого события с нетерпением ждали как технические специалисты, так и производители. Сейчас она проводится не- сколько раз в год, можно сказать, представляя собой “бродячий цирк сетевых техноло- гий”. Зарплата преподавателей семинаров сократилась вполовину, но качество семина- ров вроде бы от этого не пострадало. 32.12. Рекомендуемая литература • Limoncelli Т.Д. Time management for system administrators. Sebastopol, CA: O’reilly Media, 2005. • Machiavelli Niccolo. The prince. 1513. Available on-line from gutenberg.org/ etext/1232. • Brooks F.P., Jr. The mythical man-month: essays on software engineering. Reading, MA: Addison-Wesley, 1995. • Senft S., Gallegos G. Information technology control and audit (3rd edition). Boca Raton, FL: Auerbach Publications, 2008. • Сайт itil-toolkit. com удобен для начала поисков, если вы хотите овладеть тер- минологией и жаргоном, связанными с процессами и стандартами ITIL. • Сайт itl.nist.gov — домашняя страница организации NIST Information Technology Laboratory. Она содержит много информации о стандартах. Зайдите на страницы с публикациями. • Веб-сайт организации Electronic Frontier Foundation, eff.org, — прекрасное ме- сто для поиска комментариев, касающихся новейших достижений в области за- щиты конфиденциальности, криптографии и законодательства. Эти материалы всегда интересны. • Страница sans. org/resources/policies содержит проект инструкции SANS о безопасности. На этом сайте можно найти хорошие примеры инструкций по ин- формационным технологиям. • Большое количество отличных ресурсов для системных администраторов можно найти на сайте гильдии SAGE: sage. org/field/field.html. 32.1 3. УПРАЖНЕНИЯ 32.1. Назовите повторяющиеся процедуры, выполняемые в вашей организации? Какие из них повторяются редко и каждый раз изменяются? Какие из них связаны с ри- ском? 32.2. Как вы зависите от внешних поставщиков? Нуждаетесь ли вы в плане Б и есть ли он у вас? Объясните, почему. Опишите план Б, если он существует. 32.3. Проведите краткие интервью с несколькими внутренними клиентами, чтобы опре- делить их ожидания относительно доступности вычислительной инфраструктуры.
Глава 32. Управление, стратегия и политика 1277 Согласованы ли эти ожидания? Действительно ли они разумны? Действительно ли они совместимы с установленными целями группы системного администрирования? 32.4. Какая организованная инфраструктура для системного управления уже установле- на в вашей организации? Идентифицируйте части, которые все еще отсутствуют. 32.5. Один из ваших сотрудников собирается уехать завтра в обед и никогда возвра- щаться, но вы еще не знаете кто. (Нет, не пытайтесь угадать.) На какие критиче- ские процедуры это могло бы повлиять и насколько готова ваша организация вос- полнить недостаток сотрудника? Какая документация могла бы помочь избежать разрушения службы? 32.6. Что произошло бы, если бы вы не ходили на работу в течение следующих трех ме- сяцев? Насколько ваши коллеги ненавидели бы вас, когда вы наконец вернулись, и почему? Что вы можете сделать за следующие две недели, чтобы уменьшить ущерб от своего отсутствия? 32.7. ★ Босс приказывает вам сократить бюджетные ассигнования на системное адми- нистрирование на 30% до конца текущего года. Вы можете оценить последствия этого сокращения? Представьте резюме, которое позволит боссу принять обосно- ванное решение относительно того, какие службы сократить или ликвидировать. 32.8. ★ Кто в вашей корпорации поддерживает систему Linux? Каковы их интересы и побуждения? Какие вклады они делают? 32.9. ★ Вы наводите порядок после сбоя диска и замечаете файлы в каталоге lost+found. Проводя дальнейшее расследование, вы обнаруживаете, что некоторые файлы пре- дставляют собой почтовые сообщения, которые послали друг другу два студента, настраивающие черный ход вокруг брандмауэра отдела, чтобы заархивировать фай- лы MP3 на отдаленном файловом сервере. Что вы должны сделать? Есть ли пра- вила или инструкции в вашей организации, которые касаются таких инцидентов? 32.10. ★★ Оцените локальную документацию вашей организации, предназначенную для новых пользователей, системных администраторов, стандартных процедур и чрез- вычайных ситуаций. 32.11. ★★ Опишите будущее различных коммерческих и свободных вариантов UNIX и разновидностей Linux на следующие пять лет. Как будут развиваться текущие мо- дели разработки и распределения в течение долгого времени? Каковы будут долго- срочные последствия принятия системы Linux продавцами аппаратных средств? Проведите различие между рынками серверов и настольных систем.
Краткая история системного администрирования Из записок доктора Питера Салуса (Peter Н. Salus), историка, занимающегося вопро- сами развития технологий В современную эпоху большинство людей имеют хотя бы минимальное представ- ление о задачах, решаемых системными администраторами: они должны неустанно за- ботиться об удовлетворении потребностей пользователей и организаций, а также зани- маться проектированием и реализацией устойчивой к ошибкам вычислительной среды, стараясь при этом поражать своих клиентов эффективными решениями. Несмотря на то что системные администраторы часто считаются низкооплачиваемыми и недооценны- ми, большинство пользователей могут хотя бы назвать имя своего местного “сисадми- на” — причем во многих случаях гораздо быстрее, чем имя начальника их начальника. Но так было не всегда. За последние 40 лет (и в течение 20-летней истории этой кни- ги) роль системного администратора постепенно эволюционировала вместе с операци- онными системами (ОС) UNIX и Linux. Полное постижение предназначения системно- го администратора потребует понимания того, каким путем мы пришли к нынешнему состоянию, а также понимания некоторых исторических факторов, которые сформи- ровали наш ОС-ландшафт. Итак, окинем взглядом несколько чудесных десятилетий. Присоединяйтесь! Рассвет компьютеризации: системные операторы (1952-1960) Первый коммерческий компьютер, IBM 701, был выпущен в 1952 году. До него все компьютеры выпускались в единичных экземплярах. В 1954 году модернизированная версия IBM 701 была анонсирована как IBM 704. Она имела оперативную память на магнитных сердечниках объемом 4 096 слов и включала три индексных регистра. Этот компьютер использовал 36-разрядные слова (в отличие от 18-разрядных слов у IBM 701)
Краткая история системного администрирования 1279 и выполнял арифметические операции с плавающей запятой. Он работал со скоростью 40 000 инструкций в секунду. Но компьютер IBM 704 был несовместим с IBM 701. Несмотря на то что его постав- ки должны были начаться к концу 1955 года, операторы (предшественники современ- ных системных администраторов) восемнадцати существующих компьютеров IBM 701 уже нервничали: как им пережить эту “модернизацию” и на какие еще подводные кам- ни они могут наткнуться? Что касается самой компании IBM, то ее специалисты не имели решения проблемы модернизации и совместимости. В августе 1952 года для пользователей IBM 701 компа- ния провела “курсы повышения квалификации”, но учебников не выпустила. Некоторые слушатели этих “курсов” продолжали неформально встречаться и обсуждать свой опыт использования системы. Компания IBM поощряла встречи операторов, поскольку со- вместное рассмотрение проблем помогало общими усилиями найти их решение. IBM финансировала встречи операторов и предоставила их участникам доступ к библиотеке, включающей 300 компьютерных программ. Эта группа по обмену информацией, име- нуемая SHARE, все еще существует (вот уже 50 с лишним лет)1. От узкого назначения к работе с разделением времени (1961-1969) Первые образцы компьютерного оборудования были достаточно громоздкими и чрез- вычайно дорогими. Это наводило покупателей на мысль о том, что их компьютерные системы предназначены для решения одной-единственной конкретной задачи: только достаточно крупная и достаточно конкретная задача могла оправдать дороговизну и гро- моздкость такого компьютера. Если компьютер был инструментом специального назначения (таким, как, например, пила), то персонал, который обслуживал компьютер, можно назвать операторами такой “пилы”. К первым системным операторам относились скорее как к “тем, кто пилит дре- весину”, чем как к “тем, кто обеспечивает все необходимое для строительства здания”. Переход от системного оператора к системному администратору начался тогда, когда компьютеры превратились в универсальные (многоцелевые) инструменты. Основной причиной изменения точки зрения на компьютер стало то, что его начали использовать в режиме разделения времени. Джон Мак-Карти (John McCarthy) начал подумывать о режиме разделения времени в средине 1950-х годов. Но это было только в Массачусетсском технологическом ин- ституте (MIT) в 1961-1962 годах, когда Джон Мак-Карти, Джек Дэннис (Jack Dennis) и Фернандо Корбато (Fernando Corbato) серьезно говорили о том, чтобы разрешить “каждому пользователю компьютера вести себя так, будто он — единственный его поль- зователь”. В 1964 году MIT, General Electric и Bell Labs объединили свои усилия по созданию проекта по построению претенциозной системы, работающей в режиме разделения времени. Эта система получила название Multics (Multiplexed Information и Computing Service). Пять лет спустя проект Multics превысил бюджет и безнадежно отстал от графи- ка работ. В результате компания Bell Labs вышла из проекта. 1 Несмотря на то что группа SHARE изначально спонсировалась производителями вычисли- тельной техники, в настоящее время она является независимой организацией.
1280 Краткая история системного администрирования Рождение UNIX (1969-1973) Отказ компании Bell Labs от участия в проекте Multics оставил нескольких научных работников в Мюрей Хилл (штат Нью-Джерси) без работы. Трое из них — Кен Томпсон (Ken Thompson), Руд Кенедей (Rudd Canaday) и Дэннис Ричи (Dennis Ritchie) — за- интересовались некоторыми аспектами проекта Multics, но не были в восторге от раз- мера и сложности этой системы. Они не раз собирались вместе обсудить принципы проектирования компьютерных систем. Компания Labs запустила систему Multics на своем компьютере GE-645, и Кен Томпсон продолжил работу над этим проектом “шут- ки ради.” Дуг МакИлрой (Doug McIlroy), руководитель этой группы, сказал: “Система Multics впервые заработала именно здесь. Вдохнуть в нее жизнь удалось трем нашим со- трудникам”. Летом 1969 года Томпсон на месяц стал холостяком, пока его жена, Бонни, взяв их годовалого сына, уехала повидать родственников на западное побережье. Томпсон вспо- минал: “Я выделил по неделе на операционную систему, интерпретатор команд, редак- тор и ассемблер...и все эти компоненты были полностью переписаны в форме, которая придавала им вид операционной системы (с набором известных утилит, ассемблером, редактором, интерпретатором команд), которая, если не поддерживала себя сама, была практически на грани такой поддержки, т.е. больше совершенно не нуждалась в GECOS2”. Стив Борн (Steve Bourne), пришедший работать в Bell Labs в следующем году, так описывал “заброшенный” компьютер PDP-7, которым воспользовались Ричи и Томпсон: “В PDP-7 были только ассемблер и загрузчик. На этом компьютере мог работать лишь один пользователь. Среда еще “отдавала сыростью”, хотя части одно- пользовательской системы UNIX уже были “на подходе”... И вот были написаны ассем- блер и зачаточное ядро операционной системы, которые еще требовали использования кросс-ассемблера для трансляции программы на машине PDP-7 с системой GECOS. Название UNICS (UNiplexed Information and Computing Service) для “новорожден- ной” операционной системы придумал заядлый остряк Питер Нейман (Peter Neumann) в 1970 году”. Первоначально UNIX была однопользовательской системой, отсюда, по- видимому, и намек на “урезанный вариант Multics”. И хотя некоторыми аспектами си- стема UNICS/UNIX все же обязана своей предшественнице Multics, у них, по словам Дэнниса Ричи, были “серьезные различия”. “Мы были немного подавлены большим менталитетом системы, — сказал он. — Кен хотел создать что-то простое. Вероятно, из-за того, что наши возможности были тог- да довольно невелики. Мы могли достать только маленькие машины без каких-либо аппаратных средств Multics. Поэтому UNIX нельзя назвать ответным ударом, направ- ленным против Multics... Операционная система Multics больше не существовала для нас, но нам нравилось ощущение интерактивной работы на компьютере, которое она предлагала пользователю. У Кена были некоторые идеи по созданию новой системы... И хотя Multics повлияла на подходы к реализации UNIX, это влияние не было опреде- ляющим.” “Игрушечная” система Кена и Дэнниса не долго оставалась “простой”. К 1971 году в число команд пользователя входили следующие: as (ассемблер), cal (простая утилита- календарь), cat (конкатенация и вывод), chdir (изменение рабочего каталога), chmod (изменение режима), chown (изменение владельца), стр (сравнение двух файлов), ср 2 GECOS (General Electric Comprehensive Operating System) — операционная система, разрабо- танная компанией General Electric в 1962 г.
Краткая история системного администрирования 1281 (копирование файла), date, de (калькулятор), du (отчет об использовании дискового пространства), ed (редактор) и еще два десятка других команд. Большинство из этих ко- манд все еще находятся в употреблении. К февралю 1973 года можно было говорить о существовании 16 инсталляций UNIX, а также о двух больших нововведениях. Первое связано с “новым” языком програм- мирования С, основанным на языке В, который сам представлял собой “урезанную” версию языка BCPL (Basic Combined Programming Language), созданного Мартином Ричардсоном (Martin Richards). Второе нововведение — понятие канала. Канал, попросту говоря, — это стандартный способ связи выходных данных одной программы с входными данными другой. Среда Dartmouth Time-Sharing System имела файлы связи, которые предвосхитили каналы, но их использование было гораздо бо- лее узким. Идея каналов (как обобщенного средства передачи данных) была предло- жена Дутом Макилроем (Doug McIlroy), а реализована — Кеном Томпсоном благодаря настойчивости МакИлроя. (“Это был один из немногочисленных случаев, когда я, по сути, осуществлял административное управление над UNIX”, — сказал Дуг.) “Легко сказать: 'cat — в grep — в...’ или ‘who — в cat — в grep’ и так далее, — как- то заметил МакИлрой. — Это легко сказать, и было ясно с самого начала, что именно это вы и хотели бы сказать. Но еще существуют все эти параметры... И время от времени я говорил: ‘Как бы нам сделать что-то вроде этого?’ И вот в один прекрасный день я пришел с синтаксисом для командного языка, который развивался вместе конвейерной пересылкой данных, и Кен сказал: ‘Я готов сделать это!’ ” Применив множество вариантов, Томпсон обновил все UNIX-программы за одну ночь. Это было настоящее начало власти UNIX, возникшее не из отдельных программ, а из взаимосвязей между ними. Теперь у UNIX были собственные язык и основополагаю- щие принципы. • пишем программы, которые бы выполняли одну задачу, но выполняли ее хорошо; • пишем программы, которые бы работали вместе; • пишем программы, которые обрабатывали бы текстовые потоки как универсаль- ный интерфейс. Итак, можно было говорить о “рождении” операционной системы общего назначе- ния с разделением времени, но пока лишь в “недрах” фирмы Bell Labs. ОС UNIX обе- щала простое и незаметное разделение компьютерных ресурсов между проектами, груп- пами и организациями. Но прежде чем этот универсальный инструмент стал достоянием всего мира, он должен был вырваться из собственной колыбели и “размножиться”. UNIX становится знаменитой (1974-1990) В октябре 1973 года международная научно-образовательная Ассоциация по вычис- лительной технике (Association for Computing Machinery — ACM) провела симпозиум на тему “Принципы построения операционных систем” (Symposium on Operating Systems Principles — SOSP) в аудитории Центра исследований (T.J. Watson Research Center) компании IBM в Йорктаун Хайтс (Yorktown Heights), штат Нью-Йорк. Кен и Дэннис представили на рассмотрение свой доклад и в один прекрасный осенний день поехали в Долину Гудзона (Hudson Valley), чтобы представить его. (Томпсон сделал настоящую презентацию.) В зале было около 200 человек, и доклад произвел фурор. Шесть месяцев спустя количество инсталляций UNIX утроилось. Когда этот доклад был опубликован в июльском (1974) выпуске журнала “Communications of the АСМ”, ре- акция читателей была просто ошеломляющей. Научно-исследовательские лаборатории
1282 Краткая история системного администрирования и университеты увидели в разделяемых UNIX-системах потенциальное решение пробле- мы их постоянно возрастающих потребностей в компьютерных ресурсах. В соответствии с положениями антитрестовского соглашения 1958 года, подписан- ного корпорацией AT&T (из недр которой выделилась фирма Bell Labs) с федеральным правительством, ее деятельность была весьма ограничена: она не имела право занимать- ся рекламой, продажей и сопровождением компьютерных продуктов. Компания Bell Labs должна была давать разрешение на использование другими своей технологии. Тем не менее система UNIX завоевала популярность в мире, особенно среди телефонных компаний. Отвечая на многочисленные просьбы, Кен Томпсон стал распространять ко- пии исходного кода UNIX, и, по легенде, каждый пакет включал его личную записку, подписанную “love, ken” (с любовью, Кен). Одним из тех, кто получил копию системы от Кена, был профессор Роберт Фабри (Robert Fabry) Калифорнийского университета в Беркли. Так, к январю 1974 года зерно Berkeley UNIX попало в плодородную почву. Другие ученые, работающие в области компьютерных наук, также проявили интерес к UNIX. В 1976 году Джон Лайонс (John Lions), преподаватель факультета компьютер- ных наук в Университете Нового Южного Уэльса в Австралии, опубликовал подробные комментарии относительно ядра версии V6. Эта работа стала первым серьезным паке- том документации по системе UNIX и помогла другим понять и развить работу Кена и Дэнниса. Студенты Калифорнийского университета в Беркли поработали над версией UNIX, полученной из Bell Labs, и изменили ее так, чтобы она отвечала их требованиям. Первый ленточный дистрибутив программы Беркли (1st Berkeley Software Distribution — 1BSD) содержал систему Pascal для Unix и текстовый редактор ех для компьютера PDP-11. Этот дистрибутив подготовил аспирант Билл Джой (Bill Joy). Второй выпуск (2BSD) вы- шел в следующем году, а третий (3BSD) — в качестве первого дистрибутива программы Беркли для мини-компьютера VAX, выпускаемого корпорацией DEC, увидел свет в кон- це 1979 года. В 1980 году профессор Роберт Фабри заключил контракт с управлением перспектив- ных исследовательских программ в области обороны (Defense Advanced Research Project Agency — DARPA) на продолжение разработки системы UNIX. Результатом этого со- глашения стало образование в Беркли исследовательской группы по компьютерным си- стемам (Computer Systems Research Group — CSRG). В конце следующего года вышла четвертая версия системы — 4BSD. Она приобрела довольно широкую популярность, в основном, потому, что это была единственная версия UNIX, которая работала на DEC VAX 11/750, весьма распространенной в то время компьютерной платформе. Еще одно крупное усовершенствование, отличавшее выпуск 4BSD, состояло в использовании со- кетов TCP/IP, обобщенной сетевой абстракции, которая в будущем породила Интернет и сейчас используется многими современными операционными системами. К средине 1980-х годов в большинстве крупных университетов и научно-исследовательских инсти- тутов была установлена хотя бы одна система UNIX. В феврале 1982 года в городе Санта-Клара, что расположен в Кремниевой Долине, была основана компания Sun Microsystems. Так вышло, что Билл Джой присоединился к SUN (сейчас это часть компании Oracle America) практически в момент зарождения, причем вместе с усовершенствованной им версией Unix (4.2BSD). Там он начал рабо- тать над операционной системой SunOS (версия UNIX для рабочих станций и серверов). В 1983 году по решению суда началась ликвидация корпорации AT&T, и одним непред- виденным побочным эффектом этой ликвидации было то, что AT&T отныне могла сво-
Краткая история системного администрирования 1283 бодно продавать систему UNIX как программный продукт. В результате увидела свет версия AT&T UNIX System V — общеизвестная, хотя и несколько неудобная коммерче- ская реализация системы UNIX. Теперь, когда Berkeley, AT&T, Sun и другие дистрибутивы UNIX стали доступны для широкого круга организаций, был заложен фундамент для общей компьютерной инфра- структуры, построенной на технологии UNIX. Систему, которую использовали в обла- сти астрономии для вычисления звездных расстояний, можно было успешно применять в математике для вычисления множеств Мандельброта. И та же система одновременно обеспечивала доставку электронной почты для всего университета. Системные администраторы, ваш выход! Управление компьютерными системами общего назначения требовало другого уров- ня знаний, чем двадцать лет назад. Ушли в прошлое дни, когда системный оператор обслуживал единственную компьютерную систему, предназначенную для выполнения узкоспециализированной задачи. Системный администратор в начале 1980-х годов стал настоящим “хозяином положения”, который знает, как настроить систему UNIX, чтобы она удовлетворяла требованиям самых разных приложений и пользователей. Поскольку система UNIX была весьма популярной в университетах и множество студентов горело желанием овладеть новейшими технологиями, именно университеты лидировали в создании организованных групп системных администраторов. Такие учеб- ные заведения, как Университет Пердью, Университет штата Юта, Университет штата Колорадо, Университет штата Мэриленд и Университет штата Нью-Йорк (SUNY) в г. Буффало, стали “рассадниками” специалистов в области системного администриро- вания. Кроме того, системные администраторы разработали собственные процессы, стан- дарты, инструкции и инструменты (например, sudo). Большинство из этих продуктов родилось из необходимости, поскольку без них системы работали нестабильно, что, естественно, вызывало недовольство пользователей. Эви Немет (Evi Nemeth) приобрела известность как “мать системного администриро- вания” тем, что приглашала на работу в качестве системных администраторов студентов старших курсов Инженерного колледжа (Engineering College) при Университете штата Колорадо. Ее близкие связи с сотрудниками Калифорнийского университета в Беркли, Университета штата Юта и SUNY в г. Буффало позволили создать сообщество экспертов по вопросам системного администрирования, которые делились советами и инструмен- тами. Ее команду часто называли как “munchkins”, т.е. “переработчики информации” или “рабы Эви”. Члены этой команды посещали различные конференции (в том числе и спонсируемые организацией USENIX) и работали там в качестве служебного персона- ла в обмен на возможность получать информацию, излагаемую участниками этих кон- ференций. Уже стало ясно, что системные администраторы должны были стать “мастерами на все руки”. В 1980-х годах обычное утро системного администратора могло начаться с монтажа проводов для починки поврежденного переключателя на задней панели мини- компьютера VAX. Днем он мог заниматься очищением лазерного принтера первого по- коления от рассыпавшегося тонера. Его обеденный перерыв мог бы быть потрачен на помощь какому-нибудь студенту отладить новый драйвер ядра, а вечерние часы могли быть заполнены записью информации на архивные ленты и уговорами пользователей почистить свои персональные каталоги, чтобы освободить пространство в файловой си-
1284 Краткая история системного администрирования стеме. Системный администратор был, без преувеличения, бескомпромиссным ангелом- хранителем, который должен был решить любую проблему. 1980-е годы можно было назвать временем ненадежного оборудования. Центральные процессоры были сделаны не из одной кремниевой микросхемы, а из нескольких сотен чипов, каждый из которых мог в любую минуту отказать. И именно системный адми- нистратор должен был быстро отыскать неисправный элемент и заменить его работаю- щим. К сожалению, в то время еще не работала Federal Express (частная почтовая служба срочной доставки небольших посылок и бандеролей), и поэтому элементы для замены нужно было находить самим, что зачастую было очень непросто. Однажды перестал работать наш любимый компьютер VAX 11/780, в результате чего весь университет остался без электронной почты. Мы знали, что недалеко от нас есть фирма, которая собирала компьютеры VAX, предназначенные “для научных исследова- ний” для отправки в Советский Союз (то было время “холодной войны”). Практически без всякой надежды на успех мы заявились на склад с большой суммой наличных в кар- мане, и после часа переговоров мы все-таки получили необходимую печатную плату. Кое-кто отметил, что в то время в Боулдере (штат Колорадо) было легче достать нарко- тики, чем запчасти к VAX. Документация по системному администрированию й обучение По мере того как отдельные “компьютерщики” стали считать себя системными ад- министраторами — и причем стало ясно, что такая специализация может обеспечить до- стойную жизнь, — потребности в документации и соответствующем обучении ощутимо возрасли. “Идя навстречу пожеланиям трудящихся”, Тим О’Рейлли (Tim O’Reilly) и его команда (именуемая ранее O'Reilly and Associates, а теперь O'Reilly Media) начали публи- ковать документацию по системе UNIX, написанную простым языком и основанную на реальном опыте. Ш Больше ссылок на источники информации о системном администрировании приведено в главе 32. В качестве посредника межличностного взаимодействия ассоциация USENIX про- вела свою первую конференцию, посвященную системному администрированию, в 1987 году. Эта конференция (Large Installation System Administration — LISA) охватила, в основном, западное побережье. Три года спустя был учрежден институт SANS (SysAdmin, Audit, Network, Security) для удовлетворения потребностей специалистов восточного по- бережья. В настоящее время конференции LISA и SANS обслуживают всю территорию США и до сих пор на достаточно высоком уровне. В 1989 году мы опубликовали первое издание этой книги, имевшей тогда название UNIX System Administration Handbook. Она была быстро раскуплена, в основном, из-за от- сутствия альтернативы. В то время наш издатель был настолько далек от системы UNIX, что в их производственном отделе все вхождения строки “etc” были заменены строкой “and so on”, в результате чего появились такие имена файлов, как /and so on/passwd. Мы воспользовались создавшейся ситуацией, чтобы взять под полный контроль все со- держимое книги от корки до корки, и сейчас, надо признать, наш издатель стал более осведомленным в вопросах UNIX. Наше 20-летнее сотрудничество с этим издателем дало пищу для других интересных историй, но мы их опустим, дабы не испортить наши вполне дружеские отношения.
Краткая история системного администрирования 1285 UNIX "при смерти”. Рождение Linux (1991-1995) К концу 1990 года казалось, что UNIX стремительно движется к мировому господ- ству. Бесспорно, именно эту операционную систему выбирали как для ведения бизнеса (например, Taco Bell и McDonald’s), так и для исследовательских и научных расчетов. Группа CSRG (Computer Systems Research Group — исследовательская группа по ком- пьютерным системам) в Беркли, состоящая из Кирка Мак-Кузика (Kirk McKusick), Майка Карелса (Mike Karels), Кейта Бостика (Keith Bostic) и многих других, как раз вы- пустила версию 4.3BSD-Reno, основанную на выпуске 4.3, в которую была добавлена поддержка для процессора CCI Power 6/32 (с кодовым именем “Tahoe”). Коммерческие выпуски UNIX (например, SunOS) также пользовались успехом, кото- рый, отчасти, им обеспечили появление Интернета и первые шаги в направлении элек- тронной торговли. Оборудование персонального компьютера (ПК) стало предметом ши- рокого потребления. Оно уже было относительно надежным, недорогим и обеспечивало довольно высокую производительность. И хотя версии системы UNIX, запускаемые на ПК, действительно существовали, все они были коммерческими, причем с закрытым исходным кодом. Назрела ситуация для появления UNIX для ПК с открытым исходным кодом. В 1991 году, группа разработчиков, трудившихся над выпусками BSD, — Донн Сили (Donn Seeley), Майк Кареле, Билл Джолитц (Bill Jolitz) и Трент Р. Хейн (Trent R. Hein) —- вместе с другими приверженцами BSD основали компанию Berkeley Software Design, Inc. (BSDI). Под руководством Роба Колстада (Rob Kolstad) компания BSDI предостав- ляла исполняемые файлы и исходный код для полностью функциональной коммерче- ской версии BSD UNIX на платформе ПК. Среди прочего, этот проект доказал, что для массового производства компьютеров можно использовать недорогое оборудование ПК. Компания BSDI продемонстрировала взрывоподобный рост прибыли на заре развития Интернета, поскольку именно ее операционную систему выбирали первые провайдеры услуг Интернета (Internet service providers — ISP). Пытаясь снова упрятать джинна, который выскочил из бутылки в 1973 году, кор- порация AT&T в 1992 году начала судебный процесс против компании BSDI и членов правления университета Калифорнии (Regents of the University of California), заявив о копировании кода и воровстве производственных секретов. Юристам компании AT&T потребовалось более двух лет, чтобы идентифицировать проблемный код. В результате судебного разбирательства из кода BSD было удалено три файла (из более чем 18 000). К сожалению, этот двухлетний период неопределенности оказал негативное воздей- ствие на весь мир UNIX, операционную систему BSD и подобные ей He-BSD-версии. Многие компании перешли на использование Microsoft Windows, испугавшись, что они могут оказаться во власти компании AT&T, которая практически “задушила в объяти- ях” свое дитя. К тому времени, когда дым сражений развеялся, оказалось, что компании BSDI и CSRG “смертельно ранены”. Эра BSD подходила к концу. Тем временем Линус Торвальдс (Linus Torvalds), студент колледжа в Хельсинки, наигравшись с Minix — сво- бодной Unix-подобной микроядерной операционной системой, распространяемой по лицензии BSD, — начал писать собственную систему-клон UNIX3. К 1992 году появи- лось множество дистрибутивов Linux (включая SuSE и ^gdrasil Linux). В 1994 году мир узнал о создании систем Red Hat и Linux Pro. 3 ОС Minix была разработана Эндрю Таненбаумом (Andrew S. Tanenbaum), профессором Амс- тердамского свободного университета.
1286 Краткая история системного администрирования Феноменальный успех Linux основан на многих факторах. Мощная поддержка всех, кому понравилась эта система, и обширный список программ из архива GNU сделали Linux неуязвимой системой. Она прекрасно работает в любых производственных средах, и поговаривают, что на основе Linux можно построить более надежную и более произ- водительную систему, чем на основе любой другой операционной системы. Интересно также отметить, что отчасти своим успехом Linux обязана блестящей возможности, пре- доставленной ей действиями компании AT&T против BSDI и университета Калифорнии в Беркли. Тот неуместный судебный процесс вселил страх в сердца приверженцев UNIX прямо на заре электронной торговли и в начале эры Интернета. Но не все ли равно теперь? Главное, что в результате всех этих перипетий осталась огромная потребность в системных администраторах. Багаж знаний и опыт, накоплен- ный системными администраторами при обслуживании систем UNIX, полностью при- менимы к Linux, и большинство “UNIX-лоцманов” заботливо продолжали вести своих пользователей через бурные моря 1990-х. Возмите себе на заметку: хороший системный администратор должен всегда оставаться спокойным во время любого шторма. Мир Windows (1996-1999) В 1993 году компания Microsoft выпустила ОС Windows NT. Эта “серверная” версия Windows, которая имела популярный пользовательский интерфейс, имела значительный эффект, причем как раз тогда, когда корпорация AT&T старалась убедить всех в том, что? она больше никому не позволит обманывать себя в лицензионных вопросах. Как след- ствие, многие организации приняли Windows в качестве предпочтительной платформы, для совместных вычислений. Это был конец 1990-х. Вне всякого сомнения, платформа Microsoft прошла долгий путь развития, и для некоторых организаций это был наилуч- ший выбор. К сожалению, сначала администраторы UNIX, Linux и Windows использовали в сво- ей работе конкурентные подходы, соперничая за “место под солнцем” путем противо- поставления аргументов из рекламы пива: “отличный вкус” против “меньшего объема”4. Многие администраторы систем UNIX и Linux начали срочно изучать Windows, убеж- денные в том, что в противном случае им придется “положить зубы на полку”. А на го- ризонте уже показалась Windows 2000. С приближением “миллениума” будущее UNIX выглядело все более мрачным. Расцвет UNIX и Linux (с 2000-го по настоящее время) С приходом Интернета все стрались понять, что “настоящее”, а что — всего лишь мираж. Когда страсти “от новизны” немного улеглись, стало ясно, что многие органи- зации с успешными техническими стратегиями использовали UNIX или Linux вместе с Windows, а не только что-то одно. Конкурентной войны больше не было. Системные администраторы UNIX и Linux, которые пополнили свой квалификаци- онный багаж системой Windows, стали еще более ценными специалистами. Они могли теперь “наводить мосты” над пропастью между двумя мирами и эффективно использо- вать обе системы на благо своей организации. Оценки экспертов, использующих методи- ку определения наилучшего соотношения цены/качества (total cost of ownership — TCO), показали, что этот показатель для сервера Linux был значительно ниже аналогичного показателя для сервера Windows. Для ясности: в Windows действительно “меньше объема”.
Краткая история системного администрирования 1287 В настоящее время можно говорить о процветании UNIX и Linux. Коммерческие версии UNIX (AIX, Solaris и HP-UX) вполне отвечают требованиям соответствующих рынков. Linux и ПК-ориентированные UNIX-версии продолжают увеличивать свою долю рынка, причем Linux — единственная операционная система, у которой доля рын- ка по серверам растет постоянно (по данным 2010 года). Кроме того, не надо забывать о том, что такая современная операционная система от компании Apple, как Mac OS X, также построена на основе UNIX5. Множество новых достижений в системах UNIX и Linux относится к сфере вирту- альных и облачных вычислений. (Подробнее об этих технологиях см. главу 24.) И снова- таки, в этих средах есть один общий элемент: системные администраторы. Ваш бесценный опыт как системного администратора обязательно найдет применение: и в материальной, и виртуальной среде! Завтрашний день UNIX и Linux Не важно, в каком направлении пойдет развитие UNIX и Linux в ближайшие не- сколько лет, одно можно сказать точно: UNIX и Linux будут по-прежнему востребованы! Системные администраторы заботятся о целостности компьютерной инфраструктуры, решают сложнейшие проблемы эффективности и масштабируемости систем и снабжают квалифицированными рекомендациями в области компьютерных технологий как рядо- вых пользователей, так и руководителей организаций. Мы — системные администраторы! Без нас — никак! Рекомендуемая литература • Mckusick, Marshall Kirk, Keith Bostic, Michael J. Karels and John S. Quarterman. The Design and Implementation of the 4.4BSD Operating System (2nd Edition). Reading, MA: Addison-Wesley, 1996. • Salus, Peter H. A Quarter Century of UNIX. Reading, MA: Addison-Wfesley, 1994. • Salus, Peter H. Casting the Net: From ARPANET to Internet and Beyond. Reading, MA: Addison-Wesley, 1995. • Salus, Peter H. The Daemon, the Gnu, and the Penguin. Marysville, WA: Reed Media Ser- vices, 2008. Эта книга также опубликована на сайте www.groklaw.net. 5 Даже устройства iPhone, производимые компанией Apple, используют урезанный вариант си- стемы UNIX, а операционная система Android (от компании Google) включает абстракции, взятые из ядра Linux.
в защиту Aix Диалог с Дэном Фостером (Dan Foster) Система AIX известна с 1980-х годов, но в этом издании книги она впервые рассмо- трена в качестве примера. Мы и ранее обсуждали внесение системы AIX в некоторые предыдущие издания, но всегда нам мешал тот факт, что она слишком сильно отлича- ется от других версий UNIX. Если говорить точнее, нам было удобнее описывать их без упоминания AIX. Мы хотели встретить AIX с распростертыми объятиями. Тем не менее внимательные читатели могли бы отметить определенное постоянство тона в отношении AIX, который звучит не совсем хвалебно. Подобно бездомному щенку, система AIX, казалось бы, всег- да ведет себя как-то не так и никогда не понимает, почему вдруг все расстроены. От этого всего нам не по себе: кому нравится прогонять щенка? Чтобы вернуть себе душевное равновесие, мы попросили Дэна Фостера, одного из наших рецензентов из мира AIX, описать достоинства системы AIX. Итак, мы выступим с обвинением против AIX, а Дэну предоставим слово для ее защиты. Наши бурные обвинения AIX —• операционная система, созданная для мэйнфреймов IBM в 1970-е годы и му- чительно “застрявшая” в теле системы UNIX. Хотя структура UNIX поддерживает эту систему в работоспособном состоянии, AIX совершенно не заинтересована в соблюде- нии UNIX-соглашений. Она использует множество различных “шиньонов”, “корсетов” и “косметических наборов”, чтобы представить более гармоничный образ системы во вкусе IBM. Это — открытая, состоящая из модулей система, которая стремится быть за- крытой и монолитной. Тех, кто подходит к системе AIX как к UNIX, ожидает ряд затруднений. AIX не пи- тает иллюзий, что администраторы действительно понимают, что они делают или долж- ны сделать для модификации системы. Вместо простоты, модульности и гибкости, AIX предлагает структуру. Были затрачены значительные усилия, чтобы каталогизировать ад- министративные операции и собрать их “под крышей” интерфейсных средств админи- стратора системы (System Management Interface Tool — SMIT). Если необходимой вам опе- рации не окажется в этом каталоге,... ну что ж, не стоит из-за этого сильно переживать. К сожалению, SMIT — не единственный дополнительный уровень косвенности AIX. Операции SMIT преобразуются в команды оболочки, поэтому каждая операция SMIT требует специальной команды, которая бы реализовала ее одним шагом. Отсюда и изо- билие семейств команд (таких, как erf s/chfs/rmfs), которые реализуют заранее пред- писанные рецепты. Эти команды повышают уровень сложности системы и накладные расходы, не создавая больших ценностей, в то время как другие системы UNIX прекрас- но обходятся без них. Поскольку административные операции занимают промежуточное положение в про- граммном обеспечении, система AIX не видит никакой необходимости сохранять ин- формацию в текстовых файлах. Вместо этого она скопила множество разнообразных двоичных форматов и журналов регистрации, в основном, в виде подсистемы ODM (Object Data Manager — управление объектными данными). Системные администра- торы могут использовать обобщенные ODM-команды для просмотра и модификации этих данных, но это уже из области черной магии, что, мягко говоря, удручает. В целом, ODM — это “черный и загадочный континент” с многочисленными “темными” углами, напоминающий системный реестр Windows.
В защиту AIX 1289 Если сорвать “панцирь” AIX, то под ним обнаружатся печальные маленькие гомун- кулы UNIX, лежащие скрученными там и сям. Это “существо” нельзя назвать здоровым: оно испещрено возрастными морщинами, его кожа бледна вследствие отгороженности от внешнего мира и от усовершенствований UNIX последних десятилетий. Вероятно, компания IBM видит для своей системы не мейнстрим UNIX, а совсем другое направ- ление развития. Дэн Фостер: аргументы в защиту Да уж, вы нарисовали не очень приятную картину. Но, я думаю, будет справедливо оха- рактеризовать многие из перечисленных вами недостатков как синдром “не мы придума- ли”, другими словами, как противодействие всему, что не подчиняется стандарту UNIX. Есть определенная доля истины в вашем заявлении о том, что система AIX стремит- ся быть больше, чем просто еще одним клоном UNIX. И это совсем не плохо. Система AIX предназначена не для ковбоев. Ее назначение — упростить администрирование си- стемы, помочь в обеспечении надежности и устойчивости ее работы. По своим целям она серьезно отличается от других систем UNIX, поэтому и производит несколько иное впечатление. AIX позаимствовала у IBM-систем AS/400 ряд полезных инструментов. Например, она использует централизованное средство регистрации ошибок, которое приложения могут легко задействовать через API. Такая система упрощает протоколирование оши- бок, уведомление о событиях администратора и выявление проблем. Протокол Syslog реализует некоторые из этих функций, в основном, для UNIX, но, судя по тому, как описана регистрация ошибок во многих разделах этой книги, единообразия в его ис- пользовании не наблюдается. Несколько лет спустя компания Sun реализовала анало- гичный подход с помощью демона fmd (fault management daemon — защита от ошибок и неисправностей) в системе Solaris 10. Теперь возьмем подсистему управления оборудованием. AIX предоставляет центра- лизованные средства диагностики для практически любого поддерживаемого системой устройства. Они позволяют даже регистрировать действия, связанные с ремонтом обо- рудования (в некоторых случаях возможно отключение неисправных светодиодов и ге- нерирование соответствующих уведомлений), обеспечивая таким образом ведение жур- нала контрольных записей. Эта система’предусматривает и другие действия по оказанию помощи через процедуры обратного вызова, но не оставляет вас “на произвол судьбы”, как большинство версий UNIX. Отвечая на ваши конкретные претензии, могу сказать, что команды, предназначен- ные для выполнения конкретных задач, — это просто особенность, а не дефект системы! Они (команды) зачастую оказываются полезными для системных администраторов. • Как показано в приведенном вами примере, наборы AIX-команд имеют ясные име- на, говорящие сами за себя (чего нельзя сказать о командах UNIX). Семейство ко- манд mk* предназначено для создания объектов, семейство rm* — для их удаления, ch* — для модификации, a 1s* — для отображения текущего состояния. Эти струк- турированные семейства команд генерируют предсказуемые результаты и позволяют сократить время, необходимое на их изучение. Они уменьшают вероятность выпол- нения неправильной команды, если, например, вы засиделись до глубокой ночи и с затуманенными глазами все же продолжаете работать или если вы только начинае- те осваивать систему AIX. Конечно, в таких ситуациях хорошую службу сослужит вам и меню SMIT (интерфейсные средства администратора системы).
1290 В защиту AIX • Команды могут проверять допустимость своих аргументов, а файлы конфигура- ции — нет. Команда-“обертка” способна гарантировать, что предлагаемое вами изменение не разрушит систему. Если вы все же намерены это сделать, команда может “пожаловаться на вас” или, попросту, отказаться внести такое изменение в систему. Это гораздо лучше, чем потом “пожинать горькие плоды”, случайно из- менив содержимое файла конфигурации. • Специализированные команды упрощают написание сценариев. В них не только сочетаются функции и допустимые аргументы, но они также освобождают сцена- рии от необходимости анализировать сложные файлы конфигурации и управлять ими. Это делает сценарии короче, надежнее и проще для обслуживания (и изуче- ния!). Воспринимайте эти команды как высокоуровневую библиотеку функций администрирования, которая встроена в операционную систему и способна пони- мать практически любые языки, на которых пишутся сценарии. • Использование упомянутого интерфейса администратора уменьшает зависимость от конкретных файловых форматов или реализаций. Он позволяет IBM изменять свои серверные приложения и вводить новые технологии, не разрушая существу- ющих сценариев. Например, в настоящее время подсистема ODM сохраняет свои данные в файлах BDB (Berkeley DB — высокопроизводительная встраиваемая база данных, реализованная в виде библиотеки). Однако IBM не могла просто заме- нить ODM протоколом LDAP (Lightweght Directory Access Protocol — облегченный протокол службы каталогов) или некоторыми другими будущими технологиями, сохранив ODM-команды и пользовательский интерфейс в прежнем виде. Просто не будьте ненавистниками SMIT! SMIT — гибкая система, которая реализу- ет разнообразные интерфейсы (XII, веб-страница, клиент командной строки). Эта гиб- кость означает, что вы можете использовать один тот же интерфейс, сидя за офисным компьютером или работая дома глубокой ночью. Интерфейс SMIT упрощает сложные процедуры и помогает начинающим админи- страторам быстрее выйти на должный уровень квалификации. Он используется и под- держивается уже многие годы, в течение которых постоянно совершенствовались раз- личные пользовательские интерфейсы. Его легко использовать независимо от вашего отношения к UNIX вообще или к AIX в частности. И потом, SMIT — это прекрасное средство обучения, даже для опытных администраторов. Вы можете заполнить SMIT- форму требуемыми для вас значениями, после чего SMIT будет работать именно с теми командами, которые вам нужны. Ничего подобного нет ни в какой другой системе, и это замечательно! Что касается вашего определения AIX как не “настоящей” UNIX-версии, то это про- сто неправда. Изначально система AIX была основана на ОС BSD, и следы этого проис- хождения (например, использование mbuf-кластеров в сетевом стеке AIX) сохранились по сей день. Позже внимание разработчиков переключилось на совершенствование ба- зовых составляющих системы System V. Система AIX была сертифицирована на соответ- ствие стандартам SUS (Single Unix Specification), Х/Open и POSIX. Кроме того, компа- ния IBM воспользовалась легендарной переносимостью системы UNIX и перевела AIX в ранг систем, которые могут работать на машинах широкого диапазона: от персональных компьютеров серии PS/2 до мэйнфреймов. Наконец, суперкомпьютер Deep Blue (вы- сокопроизводительный кластер IBM НРС), который одержал победу в матче из шести партий с чемпионом мира по шахматам Гарри Каспаровым в 1996 и 1997 годах, работал под управлением системы AIX!
Предметный указатель в BIND, пакет журнальная регистрация 772, 717 каналы 713 категории сообщений 714 конфигурация 663 параметры конфигурации 646 allow-query 650 allow-transfer 650 also-notify 647 blackhole 650 directory 646 forward 649 forwarders 649 notify 647 recursion 648 сообщения об ошибках 715 статистика 720 BIOS 124 С CGI-сценарии 1004 D DNS 597, 598, 602, 616 база данных 618, 641 директива $GENERATE 619 SINCLUDE 619 SORIGIN 619 $TTL 619, 620, 625 записи о ресурсах 600, 620 запись А 626 CNAME 628, 629 KEY 690 MX 627 NS 625 PTR 626 SOA 604, 623 SRV 630 TXT 632 класс записи 621 обновление 682, 684 делегирование 600 динамические обновления 656 домен регистрация 611 создание поддоменов 612 зона 623 порядковый номер 604, 624 создание 656 цифровая подпись 693 конфигурирование 530 кеширование 601 некорректное делегирование 612, 722 обратное преобразование 626 посредством записей CNAME 629 передача зоны 608 пространство имен 610, 612 прямое преобразование 626 распознаватель 598 сервер имен 599, 608 авторитативный 608 авторитетный 625 главный 608, 656 кеширующий 608 нерекурсивный 609 переадресующий 649, 658 подчиненный 608, 657 рекурсивный 609 усеченный 608 сигнатуры транзакций 689 спецификация DNSSEC 692 TKEY 689 TSIG 689 файл подсказок 610, 656, 658 Е Ethernet 579 МАС-адрес 502 инкапсуляция пакетов 500 параметр MTU 501 соединение сегментов 583 спецификации 578 топология 580 фрейм 500 стандарты 501 широковещательный домен 580 Exim, почтовый агент 855 аутентификация 867 загрузка 857 конфигурация 859 макрос 862 маршрутизатор accept 869 dnslookup 870 manualroute 870 redirect 870 регистрация 874 сканирование вирусов 866 спама 867 список ACL 862 транспортный механизм 872 appendfile 872 smtp 872 утилита exicyclog 858 exigrep 858 exilog 859 exim_checkaccess 858 exim_dbmbuild 858 exim dumpdb 858 exim_fixdb 858 exim lock 859 eximon 859 eximstats 858 exim_tidydb 858 exinext 858 exipick 858 exiqgrep 858 exiqsumm 858 exiwhat 858 фильтрация пользователей 871 с GDI-принтерами 1119 I IOS, операционная система 572
1292 Предметный указатель L Linux безопасность 944, 947 дистрибутивы 49 N NAT 510, 982 IP-маскирование 537 РАТ 540 Netfilter 982 NFS 735 блокировка файлов 739 выбор порта 754 дисковые квоты 743 клиент 751 пользователь nobody 742 root 742 сервер 738 специализированный 756 р РАМ 954 модуль binding 956 include 956 optional 956 required 956 requisite 956 sufficient 956 Postfix, почтовый агент 876 архитектура 876 аутентификация 887 механизм SMTP AUTH 887 виртуальные домены 883 программа cleanup 877 local 878, 882 pickup 877 pipe 878 postdrop 878 qmgr 877 trivial-rewrite 878 virtual 878 таблица поиска 881 управление доступом 885 утилита mailq 878 newalises 878 postalias 878 postcat 878 postconf 878 postfix 878 postmap 878 postsuper 878 утилита sendmail 878 файл main.cf 879 master.cf 879 шифрование 887 R Red Hat сетевое конфигурирование 532 s Sendmail, почтовый агент 821 база доступа 837, 839 безопасность 843 библиотека libmilter 838, 841 группы очередей 849 журнальная регистрация 854 изменение корневого каталога 847 макрос DOMAIN 831 FEATURE 831 MAILER 831 MAIL_HUB 834 MASQUERADEAS 834 OSTYPE 830 RELAY-DOMAIN 839 RELAY_DOMAIN_FILE 839 SMART_HOST 834 направление почты в программу 805, 845 в файл 804, 845 обработка недоставленных сообщений 850 опции безопасности 846 очередь сообщений обработка 850 права доступа 844 производительность 849, 850 псевдонимы 805 хешированная база данных 806 разбивка конвертов 849 режим доставки 849 ретрансляция 837, 838 спам дроссели 837 черные списки 837 специальные пользователи 843 списки рассылки 804, 806 средство blacklist_recipients 839 local_lmtp 845 relay_entire_domain 839 relay_hosts_only 839 smrsh 845 статистика работы 853 утилита smrsh 845 vacation 846 функциональная возможность access_db 832 always_add_domain 832 ldap_routing 833 redirect 831 use_cw_file 831 virtusertable 832 T TCP/IP IP-адрес 503, 505 альтернативный 504 в стандарте IPv6 511 выделение 509 групповой 504 классы 505 маска подсети 506 назначение компьютеру 525 направленный 504 подмена 521 сетевой 508 типы 504 частный 510 широковещательный 504, 508, 527 кадр 500 канальный уровень
Предметный указатель 12S параметр MTU 501 пакет 500 адресация 502 поле TTL 913 порт 504 сегмент 500 сетевая модель 498 U URL 1002 W WinPrinter 1119 А Автозагрузчик 351 Агент MSA 790 Администратор объектных данных 480 Алгоритм Comletely Fair Queuing 1176 Deadline 1176 NOOP 1176 аутентификации CHAP 327 Алшлритм LRU 1169 Анализатор пакетов 591, 921, 922 Архитектура 436 Аутентификатор 867 Б Безопасность системы 46 Библиотека curses 246 libvirt 1040 OpenSSL 898 Бит setgid 148,165,197 setuid 148, 165, 197 выполнения 197 дополнительный 198 записи 197 поиска 197 режима 196 чтения 197 Брандмауэр 978, 981 безопасность 981 фильтрация пакетов на уровне служб 979, 980 с учетом состояния 985 В Веб-сервер TUX 1011 распределение нагрузки 1006 Веб-хостинг 1001,1011 Виртуализация 1029 автономная 1029 естественная 1031 полная 1029 Виртуальная частная сеть 522, 988, 989 Виртуальный интерфейс 1012,1015 конфигурирование 1013 Выпуск 435 Выражение регулярное 77 Г Гипервизор 1029 Группа DMTF 460 томов 267 д Дамп памяти 167 Дейтаграмма 500 Делегирование некорректное 722 Демон agetty 1217 automount 758 таблица назначений 758 cron 64, 330, 773 crond 335 cupsd 1082 errdemon 402 gated 570 getty 1217 конфигурирование 1221 httpd 69, 390,1011 inetd 141, 770 in.ftpd 227 init 120,130,167,1217 уровни выполнения 1219 ISC Cron 334 klogd 401 lockd 739 ipd 1105,1107 опция -1 1100 Ipsched 1089,1090,1091 mgetty 1217 mingetty 1217 mysqld 390 named безопасность 689 журнальная регистрация 655, 712, 717 начальный каталог 646 обработка запроса 602 уровни отладки 716 флаг-d 717 nmbd 1188 nscd 785 rquotad 743 smartd 277 smbd 1188 snmpd 931 sshd 770,973,1182 регистрация без пароля 62 statd 739 stunnel 976 syslogd 394, 405 udevd 195, 468 Upstart 136,1221 uugetty 1217 vixie-cron 334 winbind 1203 xend 1036 xinetd 770 ypbind 783 ypserv 783 Дескриптор файла 72,102 Динамическая миграция 1032,1038 Директива 477 Диск Blu-Ray 348 CD 347
1294 Предметный указатель DVD 347 SSD 348 Дисковая квота 743 Диспетчер дисплеев gdm 1057 kdm 1057 xdm 1057 Дистрибутив Linux CentOS 50 Debian 50 Fedora 50 Gentoo 50 Linux Mint 50 Mandriva 50 OpenSUSE 50 Oracle Enterprise Linux 50 PCLinuxOS 50 Red Flag 50 Red Hat Enterprise 51 Slackware 51 SUSE Linux Enterprise 51 Ubuntu 51 Дистрибутив UNIX AIX 53 HP 53 Solaris 53 Документация man-страницы 57 локальная 46 серия RFC 497 справочные страницы 56 Домен 611 Допустимое время восстановление 346 Допустимый уровень восстановление 346 Драйвер 466 md 289 терминала 1222 Дуплексор 1119 Ж Жесткий диск 256 3 Загрузка AIX 138 HP-UX 137 Red Hat 133 Solaris 139 SUSE 135 Ubuntu 136 мультисистемная 127 начальная 119 Загрузчик начальный 121 универсальный 125 Запись загрузочная главная 124, 279 связующая 639, 640 управления доступом 203 Зеркальное отражение 284 Зона тупиковая 640 И Идентификатор группы 147,165 реальный 147 сохраненный 147 текущий 147 пользователя 147,165 реальный 147 сохраненный 147 текущий 147, 165 файловой системы 147 процесса 164 родительского процесса 164 Имя пользователя 220 регистрационное 220 Инициализация пользователей 44 Инкапсуляция 500 Инсталляция программ 45 Инструмент DNSSEC Idns 707 Sparta 708 Vantages 709 Интернет документация 497 провайдеры 496 число пользователей 495 Интерпретатор bash 47 sh 47, 330 Интерпретатор команд метасимволы 1225 Интерфейс АТА 260 Fibre Channel 260 FireWire 260 РАТА 260, 261 SAS 265 SATA 260, 262 SCSI 260, 262 USB 260 виртуальный 1012 внутренний 1077 обратной связи 505, 514, 559 К Канал именованный 195 Карта 781 Каталог 193 /bin 190,191 /boot 191 /boot/vmlinuz 466 cf/cf 826 cf/feature 827 cf/ostype 827 /dev 146, 190, 191, 466 /devices 468 drivers/net 475 /etc 190,191, 234, 334 /etc/bacula 370 /etc/cron.d 334 /etc/cups 1082 /etc/cups/lpoptions 1080 /etc/default/login 239 /etc/default/passwd 239 /etc/dfs/dfstab 745 /etc/exports 745 /etc/init.d/nfs-common 744 /etc/init.d/nfs-kemel-server 744 /etc/init.d/nfs.server 744 /etc/init.d/nfsserver 744 /etc/iscsi/nodes 324 /etc/logrotate.d 392, 407 /etc/mail/cf 822 /etc/modprobe.d 1069 /etc/rc.bootc 403 /etc/rc.d/init.d/nfs 744 /etc/rc.nfs 744 /etc/security 230, 234
Предметный указатель 1295 /etc/skel 234 /etc/snmp 931 /etc/sysconfig 135 /etc/udev 468 /etc/udev/rules.d 488 /etc/XH 1057 /etc/xen 1036 /export/install 425 /home 191 /kernel 191, 476 /lib 190,191 /lib/modules/ 483 /lib/udev 468 /lib/udev/rules.d 488 /media 191 /mnt 191 network-scripts 134 /opt 191 /platform 476 /proc 178,191 /proc/sys/dev/cdrom 471 /proc/sys/fs 471 /proc/sys/kemel 471 /proc/sys/net/ipv4 471 /root 191 /sbin 190,191 /sbin/init.d/nfs.server 744 /stand 191, 466 /stand/vmunix 466 /sys 487 /tmp 190,191,279 /usr 190,191,278 /usr/bin 191, 461 /usr/include 191 /usr/kemel 476 /usr/lib 191, 461 /usr/lib64 191 /usr/lib/boot/unix 466 /usr/lib/cron 334 /usr/local 191, 457 /usr/local/etc/skel 234 /usr/newconfig/etc/mail /cf 822 /usr/samples/tcpip/sendmail /cf 822 /usr/sbin 191 /usr/share 191 /usr/share/docs 461 /usr/share/man 191 /usr/share/sendmail 822 /usr/share/sendmail-cf 822 /usr/src 191, 472 /usr/src/linux 466 /usr/tmp 191 /var 190,191,279 /var/adm 191,390,393 /var/adm/cron 334 /var/log 191,390, 393 /var/log/syslog 390 /var/spool 191 /var/spool/cron 330 /var/tmp 191 /vmlinuz 466 корневой 186 Каталоге /etc/profile.d 234 Команда accept 1095 add 326 adduser 237 arp 516, 908 backup 356 basha 234 boot 126,128 cancel 1095 cat 178 cfgmgr 327, 468 chdev 481 chfn 226 chgrp 201 chkconfig 136 chmod 196,200 chown 201 chroot 148, 960 chsh 227 cmdspecial 769 cp 193 crfs 300,305 crontab 331,333 csh/tcsh 234 cut 75 date 181 dd 364 devfsadmd 271 df 182,307, 753 disable 1096 dmesg 401 dmidecode 1163 dnskeygen 690 dnssec-keygen 690 dpkg 433 dump 356 echo 81 emacs 234 enable 1096 errclear 404 except 769 except_pat 769 expand 111 extendvg 300 find 72,126, 336,1098 finger 226 format 273, 283 fsck 123,188,305 fuser 182,188 getfacl 206 GNOME 234 gpasswd 231 grep 77 groupadd 231 groupdel 231 groupmod 231 grpck 232 halt 144 hdparm 275 head 77 help 126 hostname 525 hosts_access 964 idisk 283 ifconfig 481, 506, 526, 1013 ifdown 533 ifup 533 inetadm 141 info 59 install 768 installp 446 install-sd 444 ioo 482 iostat 1173 ipchains 982 iptables 540, 982 опция-A 983 - F 983 - i 983 - j 983 - P 983 iscsiadm 325 KDE 234 kernel 126 kill 167, 170 killall 170 klist 1204
1296 Предметный указатель less 59, 77 more 178 procwdx 179 In 193 mount 123,188, 254, 307, 751 prtconf 478 logger 394, 400 флаги монтирования 744, ps 122,173,1168 login 1217 745, 746, 747, 749, 751, psig 179 Ip 1089 752 pvcreate 293, 298 Ipadmin 1091 mtfsf 345 pwait 179 Ipc 1099 named-checkconf 644 pwdx 179 директивы 1101 named-checkzone 644 raso 482 Ipinfo 1082 ndc read 81 Ipmove 1096 инструкция dumpdb 719 reboot 126 Ipoptions 1080 notrace 717 refresh 394 Ipq 1099, 1100 reload 719 reject 1095 Ipr 1079 trace 717 renice 172 опция-# 1100 ndd 481 reset 1225 опция -h 1100 netstat 559, 915 restore 356, 359 Iprm 1099,1101 опция -n 918, 919 rm 192,193 Ipshut 1091 -r 919 rmdev 481 Ipstat 1079,1094 -s 979 rmmod 484 Is 193 newgrp 231 rndc 659 Isattr 481 Iscfg 1165 Isconn 481 newusers 243 nfso 482 nfsstat 755 mdc-confgen 659 root 126 route 514, 529 Isdev 481 Isof 182,1174 Isparent 481 nice 172 nmap 961 опция-0 962 no 482 nroff 58 nsupdate 685 odmadd 481 директива add 536 rpm 432 rpmbuild 432 Ivchange 297 sar 922 Ivcreate 299 Ivdisplay 296 Ivextend 299 schedo 482 scp 973 sd 444 Ivlnboot 300 machinfo 1165 mail.local 845 mail/mailx 234 odmchange 481 odmcreate 481 odmdelete 481 odmdrop 481 setfacl 206 setserial 1215 sg_format 273 sh 234 make_depots 427 odmget 481 odmshow 481 share 745 man 57 mdadm 289 passwd 57 pcred 179 pfiles 179 shareall 422 showmount 751 mediainit 273 messages 382 shutdown 120,143 smbcontrol 1199 mii-tool 528 pgrep 170 smbstatus 1199 mkdev 481 ping 909 smrsh 845 mkfs 300,305 pkg 443 sort 75 mk_kemel 480 mklv 300 pkill 170 pldd 179 special 769 ssh 973 ssh-keygen 973 startx 1057 status 382 mknod 468 mksf 468 mkswap 310 pooladm 1043 poolcfg 1044 printf 81 mkuser 240 proccred 179 strace 179 mkvg 293,300 modify 326 procfiles 179 procldd 179 stty 1223 • опция-a 1224 modinfo 479, 485 procsig 179 clocal 1213 modprobe 485 procwait 179 erase 1223
Предметный указатель 1297 опция sane 1225 tabs 1223 su 755 svcadm 141 svc.configd 141 swacl 444 swagentd 444 swap 310 swapon 310 swask 444 swconfig 444 swcopy 444 swinstall 65, 444 swjob 444 swlist 444 swmodify 444 swpackage 444 swreg 444 swremove 444 swverify 444 sysctl 470 sysdef 479 taH 77 tar 357,363 tcpdump 923 tee 77 telinit 120,131 опция-q 1221 telnet 573,1003 top 181 topas 1168 traceroute 911, 912 truss 179 tset 1224 tune2fs 303 tusc 179 udevadm 487 ufsdump 356 ufsrestore 356 umount 188,308, 753 uniq 76 uptime 181 useradd 237 usermod 229 vipw 233 virsh 1040 visudo 158 vi/vim 234 vmo 482 wbinfo 1204 wc 76 whereis 63 which 63 xdpyinfo 1072 xhost 1060 ypmake 782 yppush 782 zfs 312 zpool 312 zypper addrepo 442 zypper dist-upgrade 442 zypper info 442 zypper install 442 zypper list-updates 442 zypper modifyrepo 442 zypper refresh 442 zypper remove 442 zypper repos 442 zypper search 442 zypper shell 442 zypper update 442 Командная оболочка bash 74 Коммутатор 584 Коммутационный тестер 1226 Компонент 435 Концентратор 583 Копирование резервное 45 Криптографическая защита 970 Л Ленточные библиотеки 351 Ленточный массив 351 Локализация 454 М Магнитная лента 349 AIT 350 DAT 349 DDS 349 DLT/S-DLT 349 LTO 351 SAIT 350 Мандатное управление доступом 969 Манифест 141 Маршрутизатор 585, 868 Cisco 572 Маршрутизация 513, 558, 559, 567 автономная система 564 динамическая 514 метрика стоимости 563 от источника 520 перенаправление пакетов 520 протоколы 561, 564 внешние 564 внутренние 564 дистанционно-векторные 562 состояния канала 563 топологические 563 стандартный маршрут 560 статическая 514, 529 таблица 575 проверка 918, 919 Массив RAID 267,283 Менеджер udev 488 логических томов 267,293 Метасимволы 54,1225 Механизм fork 121 Многопоточность 164 Модель CIM 460 NIS 781 принудительной рассылки 767 рассылки по запросу 767 Модем кабельный 589 Модуль FastCGI 1005 аутентификации 752 Мониторинг системы 45 н Накопитель 267 USB 310 Неэкранированная витая пара 580
1298 Предметный указателе 0 Перезагрузка 142 Переменная среды Облачные вычисления 1150 PAGER 57 Обратная рассылка спама SHELL 1225 810 TERM 1224 Организация Перехват сигнала 168 CAIDA 511 Печать CERT 993 журналошибок 1105 DMTF 927 система LPD IANA 631 команды 1089,1093,1099 ICANN 496, 509 файл учета 1105 IETF 496 фильтр IGF 496 входной 1106 ISC 517 выходной 1106 ISO 581 Платформа ISOC 496 KVM 1039 SANS 994 Хеп 1035 TIA 580, 592 Подкачка 310 Осветительная арматура Подключение 1132 аппаратных средств 44 Открытая система Подписание Bro 964 двойное 707 OSSEC 966 Пользователь Snort 965 nobody 161, 742 Очередь root 147,390, 954 печати 1077 в NFS 742 почтовая sys 161 /var/spool/clientmqueue 824 Порт /var/spool/mqueue 824 последовательный 1210 аппаратная несущая 1213 п контроль передачи данных 1213 Пакет нуль-модемный кабель apt-mirror 440 1211 depot 65 параметры 1215 findutils 63 программная несущая 1213 IPFilter 985 разъем DB-9 1211 MKS Toolkit 1186 DB-25 1209 PGP 972 RJ-45 1212 RRDtool 933 стандарт RS-232 1209 Samba 1188 типИСЕ 1209 sentrytools 407 DTE 1209 smartmontool 277 файлы устройств 1214 Stunnel 976 Поток wget 66 выполнения 164 Wireshark 924 Правило 488 Паравиртуализация 1029 Предварительная Пароль 951 публикация 707 DES 153 Препроцессор устаревание 953 т4 825 Передача зоны 683 Приоритет процесса 166 Программа adduser 330 amavisd-agent 819 amavisd-nanny 818 amavisd-new 816 Apache виртуальные интерфейсы 1015 запуск 1011 инсталляция 1009 конфигурирование 1010 Bacula 367 Berkeley DB 806 Cacti 933 chage 953 dd 340, 1037 GRUB 125 KeePass 160 LISTSERVLite 807 login 148 Maildrop 791 MailScanner 815 MRTG 933 Nessus 962 OpenSSH 973 oprofile 1176 procmail 889 procmail 791 savelog 407 sendmail 134, 813 smbclient 1194 smitty 247 SpamAssassin 811, 889 Squid инсталляция 1020 virt-install 1040 VMware 1184 Wine 1184 xterm 1186 yum 434 Проект 389 Directory Server 778 OpenLDAP 776 Прокси-сервер 1016,1018 Протокол ARP 498, 503, 515 BGP 563, 568 ВООТР 426, 518 CIDR 506, 508
1редметный указатель 1299 DHCP 426,516, 517, 518, 524 агент ретрансляции 518 пакет ISC 518 EIGRP 562, 566 ESMTP 791 FTP 979 HTTP 1003 версия 1.1 1012 ICMP 498 директивы переадресации 575, 520,561 широковещательные пакеты 527 ICP 1019 IGMP 504 IGRP 566 IMAP 792 IP 498 фрагментация пакетов 502 IPSEC 522, 989 IPv6 адресация 577 поддержка в BIND 632 iSCSI 326 IS-IS 567 Kerberos 249,1202 LDAP 247, 773, 833 NetFlow 937 OSPF 566 POP 792 PPP 523 PXE 414 RDP 1184 RIP 562, 565 SASL 843, 848 SMTP 791, 795 SNMP 926, 928 агент NET-SNMP 931, 932 база MIB 928 MIB-II 929 RMON 930 групповое имя 930 дистанционный мониторинг 930 идентификаторы объектов 928 операции 930 прерывание 930 SSL 843, 1016 TCP 498 использование в NFS 753 TLS 848,1016 Director 376 UDP 498 FilSet 374 использование в NFS 753 Job 375 VNC 1184 Messages 378 WEP 588 Pool 373 Xll 1182 Shedule 373 аутентификации Storage 373,376 Kerberos 752 Роль 150 сетевой 1077 Руткит 957 Профиль 141 Процесс 163 с khubd 722 kjoumald 722 Сектор 279 ksoftirqd 722 Серверная виртуализация kswapd 722 1147 sched 727 Серия svc.startd 142 ВСР 498 зомби 777 FYI 498 Псевдопользователь 160, 224 STD 498 Псевдотерминал 1216 Сеть Псевдоустройство 467 DSL 589 Путь беспроводная абсолютный 186 стандарт Bluetooth 588 относительный 186 локальная виртуальная 585 р отладка 590 поиск неисправностей 908 Раздел 267 проектирование 593 Распознаватель прокладка кабелей 597 открытый 688 управление 594, 907 Регистрация в системе 7277 хранения данных 321 Редактор Сигнал 147,167 ed 77 BUS 168 emacs 47, 71 CONT 168 gedit 46 HUP 168,394 nano 47 INT 168 vi 47, 71 KILL 168 vim 47 QUIT 168 Режим SEGV 168 восстановления 120 STOP 168 однопользовательский 120 TERM 168 AIX 129 TSTP 168 GRUB 128 USR1 168 HP-UX 729 USR2 168 SPARC 128 WINCH 168 профилактический 120 Система Ресурс AIX 429 Autochanger 377 BSD UNIX 49 Catalog 373 FreeBSD 49 Client 374 Ignite-UX 426 Device 376 Linux 48, 431
1300 Предметный указатель NetBSD 49 OpenBSD 49 TCP/IP 495 Ubuntu 433 X Window 1055 аутентификации Kerberos 971 SSH 972 диагностическая Mantis 1239 OTRS 1239 загрузочная PXE 413 PXELINUX 414 конфигурирования LCFG 459 Template Tree 2 459 криптографическая ADSP 814 DKIM 814 DomainsKeys 814 печати BSD 1098 CUPS 1078 System V 1093 управления версиями Git 450 Subversion 448 управления пакетами Software Distributor 444 yum 441 Zypper 441 Система регистрации Rsyslog 401 SDSC Secure Syslog 400 Syslog 393 Syslog-ng 400 Системный вызов fcntl 739 flock 739 fork 166 ioctl 467 lockf 739 socket 195 sync 304 time 181 wait 167 write 181 Служба Active Directory 248, 1200 Automated Installer 421 cryptosvc 141 JumpStart 421 Nagios 934 Red Hat Network 434 SSH 141 utmp 141 поддержки 1270 Сокет локальный 195 Спам 808 Список NFSv4ACL 210 POSIX ACL 206 белый 811 серый 810 управления доступом 152, 203 черный 812 Справочная система Texinfo 58 Справочная страница 43, 56 Среда GNOME 1073 KDE 1073 MAC 151 OpenBootPROM 128 Среднее время до отказа 345 Средство Syslog auth 395 authpriv 395 cron 395 daemon 395 ftp 395 kern 395 localO-7 395 Ipr 395 mail 395 mark 395 news 395 syslog 395 user 395 uucp 395 Ссылка жесткая 193 мягкая 193 символическая 195 Стандарт Common Criteria 993 FHS 461 ISO 27002 992 PCIDSS 992 POSIX 151 RS-232C 1209 SMART 277 шифрования DES 153 Стандартный канал STDERR 72 STDIN 72 STDOUT 72 Стек 956 Стойка 1138 Страница 163 Страничный обмен 1169 Суперблок 304 Суперпользователь 147, 954 в NFS 742 Схема четности 284 Сценарий crfs 300 /etc/init. d/serial 1215 /etc/init.d/setserial 1215 /etc/rc.d/rc.sysinit 1216 MLN 1035 rc.tcpip 139 XSession 1058 запуска 123 T Таблица разделов GUID 282 Тепловая нагрузка 1133 Терминал VT100 1221 драйвер 1222 конфигурирование 1216, 1223, 1224 специальные символы 1222 устранение проблем 1225 Терморегуляция 1131 Тестирование 456 Технология DKIM 893 РАМ 152 SPF 794 Том логический 267 физический 293 Точка доверия 653 монтирования 187
Предметный указатель Туннель IPSEC 989 защищенный 988 У Управление выпусками 1270 доступом 150 AIX 151 HP-UX 151 SELinux 151 Solaris 150 на основе ролей 150 принудительное 151 изменениями 1270 инцидентами 1270 конфигурацией 1270 проблемами 1270 учетными данными 249 Управляющий терминал 166 Уровень важности alert 396 crit 396 debug 396 emeig 396 err 396 info 396 notice 396 warning 396 Уровень выполнения 1219 Утилита Amanda 383 apt-get 437, 440 /bin/mail 789 cfdisk 282 cfengine 458 debconf 418 dkim-filter 894 dkim-genkey 894 dkim-stats 894 dkim-testkey 894 dkim-testssp 894 domainname 783 dump 340 fdisk 253 gparted 253, 282 gzip 58 kcweb 480 Kickstart 415 kprinter 1087 Idapsearch 779 logcheck 407, 408 logrotate 392, 405, 407 Isof 189 make 472 makedbm 783 Mondo Rescue 384 nfcapd 937 nfdump 937 NfSen 937 nim 430 nimclient 430 nim_clients_setup 430 nim_master_recover 430 nim_master_setup 430 nim_update_all 430 nmon 1175 parted 253,282 pkgutil 64 pr 1111 prstat 177 pwconv 229 rdist 767 rsync 384, 770 sar 1174 sfdisk 253 share 318 sharemgr 318 star 384 sudo 156 swatch 407 swinstall 66 system-config-kickstart 415 tcpdump 923, 924 telnet 797, 909 test 85 top 177 topas 177 tusc 179 unshare 318 useradd 231 wget 64 xdd 1174 xrandr 1068 YaST 136 YaST2 417 ypbind 783 ypcat 783 ypchfn 783 ypchsh 783 _______________________130; ypinit 783 ypmakea 783 ypmatch 783 yppasswd 783 yppasswdd 783 yppoll 783 yppush 783 ypserv 783 ypset 783 ypupdated 783 ypwhich 783 ypxfr 783 ypxfrd 783 пользовательская 1077 Учетная запись nobody 161 root 147 sys 161 Ф Файл acct 138 aliases 803 auditing 138 bacula-dir.conf 370 bacula-fd.conf 370 bacula-sd.conf 370 .bash_profile 234 .bashrc 234 bconsole.conf 370 cde 138 clean* 138 cron.allow 334 cron.deny 334 crontab 330 .cshrc 234 /dev/error 403 /dev/log 394 drivers/net/Kconfig 475 drivers/net/Makefile 475 .emacs 234 errlog 403 /etc/apt/sources.list 438 /etc/crontab 334 /etc/cups/cupsd.conf 1080 /etc/cups/mime.convs 1081 /etc/cups/mime.types 1081 /etc/datemsk 229 /etc/default/security 240
1302 Предметный указатег /etc/default/useradd 238,240 /etc/dumpdates 357 /etc/filesystems 188,300,309 /егс/fstab 188, 307, 753 /etc/gettydefs 1219 /etc/gettytab 1218 /etc/group 147,225,230, 765, 784 /etc/gshadow 231 /etc/hosts 525, 765 /etc/hosts.allow 964 /etc/hosts.deny 964 /etc/inittab 1219 etc/iscsi/iscsid.conf 325 /etc/login.defs 238 /etc/logrotate.conf 407 /etc/mail/access 832 /etc/mail/aliases 235, 765 /etc/mail/local-host-names 833 /etc/mail/service.switch 822 /etc/mail/submit.cf 825 /etc/mtab 452 /etc/named.conf 686 инструкция acl 652 controls 659 include 645 key 653 logging 655, 712 options 646 server 654 trusted-keys 653 zone 656, 658 пример 663 список соответствия адресов 645 список управления доступом 652, 687 /etc/netsvc.conf 784 /etc/nsswitch.conf 220, 784, 822 .etc/pam.d/xdm 1058 /etc/passwd 147, 219, 765, 954 защита 952, 954 /etc/printcap 1103,1107 переменная af 1105 if 1106 If 1105 Ip 1105 mx 1106 of 1106 переменная rm 1106 ip 1106 rw 1105 расширения 1107 список переменных 1104 /etc/resolv.conf 605 /etc/security/crypt.conf 239 /etc/security/login.cfg 227, 230 /etc/security/passwd 220,227 /etc/security/policy.conf 239 /etc/security/user 230 /etc/services 504 /etc/shadow 123,220, 228, 765, 953 защита 952 /etc/shells 227 765 /etc/sudoers 158, 765 /etc/swapspaces 311 /etc/sysctl.conf 470, 471 /etc/syslog.conf 390,394 /etc/system 477 /etc/ttydefs 1222 /etc/ttytype 1218,1221 /etc/udev/udev.conf 488 /etc/vfstab 188 /etc/xen/xend-config.sxp 1036 .exrc/.vimrc 234 foobard.conf 452 fstab 123 .gconf 234 .gconfpath 234 gdm/kdm 1058 grub.conf 125 hpetherconf 138 init.d 129 inittab 131 .kde/ 234 ks.cfg 415 lastlog 391 .login 234 login.cfg 240 Ip 138 .mailrc 234 mailservs 138 menuJst 125 mkuser.default 240 nameservs 138 nddconf 138 netconf 138 netdaemons 138 nettl 138 network 134 nfsconf 138 passwd 803 PPD 1115 /proc/cmd 178 /proc/cmdline 178 /proc/cwd 178 /proc/environ 178 /proc/exe 178 /proc/fd 178 /proc/maps 178 /proc/root 178 /proc/stat 178 /proc/statm 178 .profile 234 profile 141 repository.db 141 sendmail 134 smb.conf 1189 Snmp* 137 snmpd.conf 931 SnmpMaster 137 sshd 138 sshd_config 141 /stand/system 480 syslog.conf 405 system 128 user 240 utmp 392 /var/adm/lastlog 229 /var/adm/ras/errlog 403 /var/cron/log 331 /var/run/utmp 954 vfstab 123 vt 138 wtmp 390 wtmpx 390 -/.Xauthority 1060 xfs 138 xoig.conf 1063 секция Device 1065 InputDevice 1066 Monitor 1065 Screen 1066 ServerLayout 1068 -/.xsession-errors 1058 блокировка 739 конфигурации 370
Предметный указатель 1303 обычный 193 переключения 822 права доступа GhtSUID 959 самозагрузки 375 устройства 194,1214 блочный 467 символьный 467 Файловая система 186 9660 185 autofs 757 Btrfs 185 ext2 302 ext3 185,302 ext4 185,302 FAT 185 JFS 185 NTFS 185 /ргос 1163 ReiserFS 185 VxFS 185 ZFS 185,365 монтирование автоматическое 757 сетевая 735 демонтирование 753 монтирование 751, 753 экспорт 738 Фактор уступчивости 172 Флеш-диск 258 Формат Maildir 792 mbox 792 Функция closelog 394 getpwent 766 getpwnam 766 getpwuid 766 openlog 394 syslog 394 Э Экологическая пирамида 1144 Электронная почта 798 агент доставки 789, 791 доступа 789, 792 пользовательский 788, 789 представления 790 транспортный 789, 791 почтовые псевдонимы 802 сообщение заголовки 793 маршрутизация 627 структура 793 хранилище 792 стандарт MIME 789 Электронное оборудование 1132 Электропитание 1135 Я Ядро 121, 464 безопасность 540 конфигурирование на почтовом сервере 851 Язык expect 47 PCL 1112 PDF 1113 Perl 47, 96 PJL 1114 PostScript 1112 Python 108 Python 47 Ruby 47 XPS 1113 X Хеш 99 Ц Центр распределения ключей 1202
Системное администрирование UNIX/LINUX "Как автор, редактор и издатель, я никогда не придавал большого значения конкуренции — за исключением нескольких случаев. Это один из таких случаев. UNIX System Administration Handbook — это одна из немногих книг, на которые мы равняемся". — Тим О'Рейли (Tim O'Reilly), основатель компании O'Reilly Media (из предисловия) Данное издание, появившееся в год, когда исполняется 20 лет со дня появления мирового бестселлера по системному администрированию UNIX, стало еще лучше благодаря описанию распространенных вариантов системы Linux: Ubuntu, openSUSE и RHEL. Системное администрирование в книге рассматривается с практической точки зрения. Она представляет собой бесценный справочник как для начинающих администраторов, так и для опытных профессионалов. В ней подробно описываются эффективные методы работы и рассматриваются все аспекты системного администрирования, включая управление памятью, проектирование и управление сетями, электронную почту, веб-хостинг, создание сценариев, управление конфигурациями программного обеспечения, анализ производительности, взаимодействие с системой Windows, виртуализацию, DNS, безопасность, управление провайдерами IT-услуг и многое другое. В данной книге отражены текущие версии следующих операционных систем. • Ubuntu®Linux openSUSE® Linux Red Hat® Enterprise Linux soiaris Oracle America® Solaris™ (бывший Sun Solaris) HP HP-UX® IBM AIX® "Эта книга увлекательна и полезна как справочник. Если вы используете системы UNIX и Linux, она должна стать вашей настольной книгой. В ней кратко и без лишних разглагольствований написано об истории этих систем. Она содержит точную информацию, которая излагается в яркой и запоминающейся форме". — Джейсон А. Наннелли (Jason A. Nunnelley) "Это всесторонний справочник о том, как обслуживать и поддерживать работоспособность систем UNIX и Linux. Авторы излагают факты, сопровождая их практическими советами и реальными примерами. Их точка зрения на различия между системами представляет ценность для всех, кто работает в неоднородных вычислительных средах". — Пат Парсегян (Pat Parseghian) ВИЛЬЯМС Издательский дом "Вильямс' www.williamspublishing.com • •PRENTICE HALL ф Pearson Education 9 785845917409
Здесь будут храниться ваши отложенные товары.
Вы сможете собирать коллекции книг,
а мы предупредим, когда отсутствующие товары снова появятся в наличии!
Ваша корзина невероятно пуста.
Не знаете, что почитать?
Лабиринт.Сейчас
Здесь наша редакция собирает для вас
лучшие книги и важные события.
Главные книги
А тут читатели выбирают все самое любимое.
Сумма без скидки
0
р.
Вы экономите
0
р.
Итого
подарков:
со скидкой
0
р.
Оформить
Ожидается
К сожалению, точные сроки поступления неизвестны. Отложите книгу, мы известим о начале продаж.
Unix and Linux/ System Administration Handbook
Издательство: Вильямс, 2020 г.
ID товара: 749458
ISBN: 978-5-907144-10-1
Страниц: 1168 (Офсет)
Оформление
Масса: 1660 г
Размеры: 240x180x55 мм
Аннотация к книге «Unix и Linux. Руководство системного администратора»
«Как автор, редактор и издатель, я никогда не придавал большого значения конкуренции — за исключением нескольких случаев. Это один из таких случаев. Unix System Administration Handbook — это одна из немногих книг, на которые мы равняемся».
— Тим О’Рейли, основатель компании O’Reily Media.
«Это издание предназначено для тех, чьи системы работают в облаке или в виртуализированных центрах обработки данных; тех, чья административная работа в основном принимает форму исходного кода автоматизации и конфигурации; тех, кто тесно сотрудничает с разработчиками, сетевыми инженерами, сотрудниками по вопросам соблюдения требований и всеми другими рабочими пчелами, которые обитают в современном улье.»
— Пол Викси (Paul Vixie), изобретатель и основатель компаний ISC и Farsight Security, лауреат премии Зал Славы Интернета (Internet Hall of Fame).
Это современное и полное руководство по инсталляции, настройке и обслуживанию любой системы UNIX или Linux, включая системы, предоставляющие…
Читать полностью
Рецензии на книгу «Unix и Linux. Руководство системного администратора»
- Покупатели 1
Вы можете стать одним из первых, кто напишет
рецензию на эту книгу,
и получить бонус
— до 15 рублей на баланс в Лабиринте!
Или оставьте заявку, чтобы кто-то другой написал ее скорее.
Понравилось?
Да
|
Рейтинг:
+7
Скажу сразу, книга сама по себе очень достойная. Как по объёму, так и по затрагиваемым темам. Но, как обычно, есть несколько НО которые сильно портят впечатление. Добрые люди нашли экземпляр и дали полистать. Довольно быстро пришло ощущение, что где-то что-то не так пишут. Взял оригинал на английском, сверил — не ошибся, действительно не так.
1) Неточности перевода. Не то чтобы они с ног на голову переворачивали смысл, но действительно сильно искажают информацию по отношению к оригиналу. В…
Читать полностью
(рецензий 2 / оценок +13)
Понравилось?
Да
|
Рейтинг:
+10
Великолепная книга, но на удивление необоснованно завышенная цена на нее в Лабиринте
Понравилось?
Да
|
Рейтинг:
+5
Перед нами легендарная «красная книга» (только почему-то теперь она стала какой-то голубой.. видимо, влияние Линукс).
Но с учетом того, что в августе 2017 выходит уже 5-е издание (доступен предзаказ на английском), имеет смысл 10 раз подумать, прежде, чем покупать по такой цене. Сисадмины ведь не олигархи, а книга носит скорее справочный характер (хоть и является своего рода библией юниксовода, наряду с Unix Power Tools и еще парой книжек).
Короче, если есть бабки — берите, не…
Читать полностью
Внимание!
Если вы обнаружили ошибку в описании
Если вы обнаружили ошибку в описании
книги «Unix и Linux. Руководство системного администратора» (авторы Эви Немет, Гарт Снайдер, Хейн Трент Р.)
, пишите об этом в сообщении об ошибке. Спасибо!
- Доставка и оплата
- Сертификаты
- Рейтинги
- Новинки
- Скидки
- 8 800 600-95-25
- Контакты
- Поддержка
- 24 пункта самовывоза
- Главное 2023
- Все книги
-
Билингвы
- Назад в «Книги»
-
Все книги в жанре «Билингвы»
-
Все книги жанра
-
Билингвы для детей
-
Билингвы. Английский язык
-
Билингвы. Другие языки
-
Билингвы. Испанский язык
-
Билингвы. Итальянский язык
-
Билингвы. Немецкий язык
-
Билингвы. Французский язык
-
Книги для детей
- Назад в «Книги»
-
Все книги в жанре «Книги для детей»
-
Все книги жанра
-
Детская художественная литература
-
Детский досуг
-
Первые книги малыша. Развитие ребенка
-
Познавательная литература для детей
-
Комиксы, Манга, Артбуки
- Назад в «Книги»
-
Все книги в жанре «Комиксы, Манга, Артбуки»
-
Все книги жанра
-
Артбуки. Игровые миры. Вселенные
-
Комиксы
-
Комиксы для детей
-
Манга
-
Манга для детей
-
Новеллизации
-
Образовательные комиксы
-
Ранобэ
-
Фан-сувениры
- Молодежная литература
-
Нехудожественная литература
- Назад в «Книги»
-
Все книги в жанре «Нехудожественная литература»
-
Все книги жанра
-
Бизнес. Экономика
-
Государство и право. Юриспруденция
-
Домашние ремесла. Рукоделие
-
Домоводство
-
Естественные науки
-
Информационные технологии
-
История. Исторические науки
-
Книги для родителей
-
Коллекционирование
-
Красота. Этикет
-
Кулинария
-
Культура. Искусство
-
Медицина и здоровье
-
Охота. Рыбалка. Собирательство
-
Психология
-
Публицистика
-
Развлечения. Праздники
-
Растениеводство
-
Ремонт. Строительство. Интерьер
-
Секс. Камасутра
-
Технические науки
-
Туризм. Путеводители. Транспорт
-
Универсальные энциклопедии
-
Уход за животными
-
Филологические науки
-
Философские науки. Социология
-
Фитнес. Спорт. Самооборона
-
Эзотерика. Парапсихология
- Периодические издания
-
Религия
- Назад в «Книги»
-
Все книги в жанре «Религия»
-
Все книги жанра
-
Ислам
-
Религии мира
-
Религиоведение
-
Христианство
-
Учебная, методическая литература и словари
- Назад в «Книги»
-
Все книги в жанре «Учебная, методическая литература и словари»
-
Все книги жанра
-
Вспомогательные материалы для студентов
-
Демонстрационные материалы
-
Дополнительное образование для детей
-
Дошкольное обучение
-
Иностранные языки: грамматика и учебники
-
Книги для школы
-
Педагогика
-
Подготовка в вуз
-
Пособия для детей с ограниченными возможностями
-
Словари и разговорники
-
Художественная литература
- Назад в «Книги»
-
Все книги в жанре «Художественная литература»
-
Все книги жанра
-
Афоризмы
-
Басни
-
Детективы
-
Драматургия
-
Историческая проза
-
Классическая проза
-
Отечественный боевик
-
Поэзия
-
Приключения
-
Сентиментальная проза
-
Современная проза
-
Фантастика
-
Фэнтези
-
Эпос и фольклор
-
Скидки
·
Обзоры
·
Рецензии
·
Подборки читателей
·
Новинки
·
Рейтинг
·
Авторы
·
Изд-ва
·
Серии
- Все книги на иностранном языке
-
Книги на английском языке
- Назад в «Иностранные»
-
Все книги в жанре «Книги на английском языке»
-
Все книги жанра
-
Книги на английском языке для детей
-
Курсы изучения языка
-
Нехудожественная литература на английском языке
-
Художественная литература на английском языке
-
Книги на других языках
- Назад в «Иностранные»
-
Все книги в жанре «Книги на других языках»
-
Все книги жанра
-
Литература на других языках
-
Литература на других языках для детей
-
Книги на испанском языке
- Назад в «Иностранные»
-
Все книги в жанре «Книги на испанском языке»
-
Все книги жанра
-
Адаптированная литература на испанском языке
-
Курсы изучения языка
-
Литература на испанском языке
-
Литература на испанском языке для детей
-
Книги на итальянском языке
- Назад в «Иностранные»
-
Все книги в жанре «Книги на итальянском языке»
-
Все книги жанра
-
Адаптированная литература на итальянском языке
-
Курсы изучения языка
-
Литература на итальянском языке
-
Литература на итальянском языке для детей
-
Книги на немецком языке
- Назад в «Иностранные»
-
Все книги в жанре «Книги на немецком языке»
-
Все книги жанра
-
Курсы изучения языка
-
Литература на немецком языке
-
Литература на немецком языке для детей
-
Книги на французском языке
- Назад в «Иностранные»
-
Все книги в жанре «Книги на французском языке»
-
Все книги жанра
-
Адаптированная литература на французском языке
-
Курсы изучения языка
-
Литература на французском языке
-
Литература на французском языке для детей
- Все игрушки
-
Детское творчество
- Назад в «Игрушки»
-
Все товары в разделе «Детское творчество»
-
Все товары раздела
-
Алмазные мозаики
-
Витражная роспись
-
Гравюры
-
Другие виды творчества
-
Конструирование из бумаги и другого материала
-
Лепка
-
Наборы для рукоделия
-
Наклейки детские
-
Панч-дыроколы фигурные
-
Работаем с воском, гелем, мылом
-
Работаем с гипсом
-
Работаем с деревом
-
Скрапбук
-
Сопутствующие товары для детского творчества
-
Творческие наборы для раскрашивания
-
Фрески
-
Игры и Игрушки
- Назад в «Игрушки»
-
Все товары в разделе «Игры и Игрушки»
-
Все товары раздела
-
Все для праздника
-
Головоломки
-
Детские сувениры
-
Детские часы
-
Другие виды игрушек
-
Игрушка-антистресс
-
Игрушки для самых маленьких
-
Игры для активного отдыха
-
Игры с мишенью
-
Книжки-игрушки
-
Конструкторы
-
Куклы и аксессуары для кукол
-
Кукольный театр
-
Магнитные буквы, цифры, игры
-
Машинки и Транспорт
-
Музыкальные инструменты
-
Мягкие игрушки
-
Наборы для тематических игр
-
Настольные игры
-
Научные игры для детей
-
Пазлы
-
Роботы и трансформеры
-
Ростомеры
-
Сборные модели
-
Слаймы
-
Фигурки
-
Электронные игры
-
Скидки
·
Отзывы
·
Новинки
·
Рейтинг
·
Производители
·
Серии
- Все канцтовары
-
Аксессуары для книг
- Назад в «Канцтовары»
-
Все товары в разделе «Аксессуары для книг»
-
Все товары раздела
-
Закладки для книг
-
Обложки для книг
- Глобусы
-
Обложки для документов
- Назад в «Канцтовары»
-
Все товары в разделе «Обложки для документов»
-
Все товары раздела
-
Другие обложки
-
Конверты для путешествий
-
Обложки для автодокументов
-
Обложки для военных билетов
-
Обложки для зачетных книжек
-
Обложки для паспортов
-
Обложки для пенсионных удостоверений
-
Обложки для проездных билетов
-
Обложки для студенческих билетов
-
Чехлы для карт, обложки для пропусков
-
Офисная канцелярия
- Назад в «Канцтовары»
-
Все товары в разделе «Офисная канцелярия»
-
Все товары раздела
-
Бумажная продукция для офиса
-
Мелко-офисная канцелярия
-
Офисные принадлежности
-
Папки, скоросшиватели, разделители
- Назад в «Канцтовары»
-
Все товары в разделе «Папки, скоросшиватели, разделители»
-
Все товары раздела
-
Папки из картона
-
Папки из пластика
-
Папки из текстиля
-
Папки-портфели (с пластиковыми отделениями)
-
Письменные принадлежности
- Назад в «Канцтовары»
-
Все товары в разделе «Письменные принадлежности»
-
Все товары раздела
-
Карандаши черногрифельные
-
Ручки
-
Принадлежности для черчения
- Назад в «Канцтовары»
-
Все товары в разделе «Принадлежности для черчения»
-
Все товары раздела
-
Другие виды чертежных принадлежностей
-
Линейки
-
Наборы для черчения, готовальни
-
Транспортиры
-
Треугольники
-
Тубусы
-
Циркули
-
Шаблоны, трафареты, лекала
-
Рисование
- Назад в «Канцтовары»
-
Все товары в разделе «Рисование»
-
Все товары раздела
-
Аксессуары для рисования
-
Инструменты и материалы для каллиграфии
-
Карандаши цветные
-
Кисти
-
Краски
-
Линеры для творчества
-
Мелки
-
Наборы для рисования
-
Палитры, стаканы-непроливайки
-
Папки для чертежей и рисунков
-
Пастель
-
Тушь, перья
-
Уголь художественный
-
Фломастеры
-
Холсты. Мольберты
- Сумки
-
Товары для школы
- Назад в «Канцтовары»
-
Все товары в разделе «Товары для школы»
-
Все товары раздела
-
Веера, счетный материал, счетные палочки
-
Другие виды школьной канцелярии
-
Канцелярские наборы
-
Косметички, кошельки
-
Ластики
-
Мешки для обуви
-
Ножницы школьные
-
Обложки для тетрадей и книг
-
Папки для школьных тетрадей. Папки для труда
-
Пеналы
-
Пластилин
-
Подставки для книг
-
Рюкзаки, портфели
-
Точилки
-
Фартуки. Клеенки для уроков труда
-
Школьная бумажно-беловая продукция
-
Школьные наборы, подставки, органайзеры
-
Для школы
·Скидки
·
Отзывы
·
Новинки
·
Производители
·
Серии
- Все CD/DVD
-
Аудио
- Назад в «CD/DVD»
-
Все товары в разделе «Аудио»
-
Все товары раздела
-
Аудиокниги
-
Музыка
-
Религия
-
Видео
- Назад в «CD/DVD»
-
Все товары в разделе «Видео»
-
Все товары раздела
-
Документальные фильмы
-
Концерты. Постановки. Мюзиклы. Видеоклипы
-
Мультфильмы
-
Познавательные фильмы
-
Художественные фильмы
-
Эротика
-
Юмор
-
Софт
- Назад в «CD/DVD»
-
Все товары в разделе «Софт»
-
Все товары раздела
-
Игры
-
Иностранные языки
-
Мультимедиа для школьников и студентов
-
Программное обеспечение и обучение работе на ПК
-
Руководства, справочники и энциклопедии
-
Скидки
·
Отзывы
·
Новинки
·
Рейтинг
·
Производители
·
Серии
- Каталог журналов
- Новое в мире толстых литературных журналов
- Все сувениры
-
Календари
- Назад в «Сувениры»
-
Все товары в разделе «Календари»
-
Все товары раздела
-
Адвент-календари. Семейные календари-планеры
-
Календари на магните
-
Квартальные календари
-
Настенные календари
-
Настольные календари
-
Сувенирная продукция
- Назад в «Сувениры»
-
Все товары в разделе «Сувенирная продукция»
-
Все товары раздела
-
Альбомы, рамки для фотографий
-
Воздушные шары
-
Детские сувениры
-
Значки и медали
-
Игрушки для животных
-
Конверты для денег
-
Магниты
-
Новогодние сувениры
-
Открытки
-
Пакеты подарочные
-
Подарочная упаковка
-
Подарочные сертификаты
-
Постеры
-
Праздничные аксессуары
-
Таблички и статусы для рабочего стола
-
Шкатулки
-
Другое
-
Скидки
·
Отзывы
·
Новинки
·
Рейтинг
·
Производители
·
Серии
- Весь клуб
-
Журнал
- Назад в «Клуб»
-
Лабиринт. Сейчас
-
Детский навигатор
-
Новости Лабиринта
-
Книжные обзоры
-
Рецензии читателей
-
Подборки читателей
-
Литературные премии
-
Скидки и подарки
- Назад в «Клуб»
-
Акции
-
Бонус за рецензию
-
Только у нас
- Назад в «Клуб»
-
Главные книги
-
Подарочные сертификаты
-
Эксклюзивы
-
Предзаказы
-
Развлечения
- Назад в «Клуб»
-
Литтесты
-
Конкурсы
-
Дома с детьми
-
Лабиринт — всем
- Назад в «Клуб»
-
Партнерство
-
Приложения Лабиринта
- Назад в «Клуб»
-
Apple App Store
-
Google Play
-
Huawei AppGallery
Журнал
-
Лабиринт. Сейчас
-
Детский навигатор
-
Новости Лабиринта
-
Книжные обзоры
-
Рецензии читателей
-
Подборки читателей
-
Литературные премии
- Школа
- Игрушки
- Канцтовары
- CD/DVD
- Сувениры
- Журналы
Мы используем файлы cookie и другие средства сохранения предпочтений и анализа действий посетителей сайта.
Подробнее в пользовательском соглашении. Нажмите «Принять», если даете согласие на это.
Авторизируясь в Лабиринте, я подтверждаю, что я старше 18 лет, принимаю условия пользовательского соглашения и даю добровольное согласие на обработку своих персональных данных и получение E-mail / SMS и Viber рассылок с информацией об акциях и новых поступлениях Интернет-магазина. См. основные правила.
Введите Ваш логин в ЖЖ, и цена товаров пересчитается согласно величине Вашей скидки
Примем заказ, ответим на все вопросы
Укажите регион, чтобы мы точнее рассчитали условия доставки
Например:
Москва,
Санкт-Петербург,
Новосибирск,
Екатеринбург,
Нижний Новгород,
Краснодар,
Челябинск,
Кемерово,
Тюмень,
Красноярск,
Казань,
Пермь,
Ростов-на-Дону,
Самара,
Омск