Binary package guide/ru

На ряду с обычной поддержкой ebuild, Portage поддерживает сборку и установку бинарных пакетов. Это руководство объясняет, как создать их, установить и как настроить сервер бинарных пакетов.

Введение
Есть много причин, почему некоторым системным администраторам нравится использовать бинарные пакеты для установки программ в Gentoo.


 * 1) Это позволяет администраторам экономить время при поддерживании похожих систем обновлёнными. Компиляция всего из исходников может потребовать много времени. Обслуживание нескольких похожих систем (некоторые из них, возможно, имеют старое оборудование) может стать намного проще, если только одна система будет компилировать всё из исходников, а остальные будут использовать бинарные пакеты.
 * 2) Осуществлять безопасные обновления. Для критически важных в производстве систем важно как можно дольше оставаться пригодными для использования. Это может быть осуществлено с помощью установочного сервера, который сначала будет применять все обновления к себе. Когда установочный сервер окажется в хорошем состоянии, обновления смогут быть применены к критическим системам. Другой подход – осуществлять обновления в chroot-среде на той же системе и использовать созданные там бинарные пакеты в реальной системе.
 * 3) В качестве резервной копии. Часто бинарные пакеты являются единственным способом восстановления повреждённой системы (т.е. повреждённого компилятора). Наличие предварительно скомпилированных бинарных пакетов либо на отдельном сервере, либо на локальной системе может стать большим подспорьем в случае повреждения базовой системы.
 * 4) Это содействует обновлению очень старых систем. Задача обновления очень старых систем может быть существенно облегчена с помощью бинарных пакетов. Обычно установка бинарных пакетов на старых системах бывает полезна но причине того, что они не требуют установки/обновления зависимостей времени сборки. Также бинарные пакеты позволяют избежать ошибок во время построения, поскольку они скомпилированы заранее.

В этом руководстве основное внимание будет уделено следующим темам:


 * создание бинарных пакетов;
 * предоставление бинарных пакетов клиенту;
 * внедрение бинарных пакетов;
 * обслуживание бинарных пакетов.

Ближе к концу будет рассмотрено несколько более сложных тем о работе с бинарными пакетами.

Создание бинарных пакетов
Существует три основных способа создания бинарных пакетов:


 * 1) после обычной установки использовать приложение ;
 * 2) явно, во время каждого запуска, использовать параметр  ;
 * 3) автоматически, с помощью установки значения   в переменной Portage FEATURES.

Все три метода создадут бинарные пакеты в каталоге, который указан в переменной PKGDIR (по умолчанию это ).

Использование quickpkg
The application takes one or more dependency atoms (or package sets) and creates binary packages for all installed packages that match that atom.

Например, для создания бинарных пакетов для всех установленных версий GCC:

Используйте, для того чтобы создать бинарные пакеты для всех установленных пакетов в системе:

There is a caveat with this method: it relies on the installed files, which can be a problem in case of configuration files. Administrators often change configuration files after installing software. Because this could leak out important (perhaps even confidential) data into the packages, by default does not include configuration files that are protected through the CONFIG_PROTECT method. To force inclusion of configuration files, use the  or   options.

Использование --buildpkg как параметра emerge
При установке программ с помощью можно попросить Portage создавать бинарные пакеты, если использовать параметр   :

Так же можно попросить Portage только создать бинарный пакет без установки пакета в систему. Для этого необходимо использовать параметр  :

The latter approach however requires all build time dependencies to be previously installed.

Реализация работы buildpkg с помощью возможности Portage
Наиболее распространенный способ создания бинарного пакета, каждый раз когда пакет устанавливается Portage, — это использовать возможность (feature), которою можно включить в файле  так:

Каждый раз, когда Portage будет устанавливать программное обеспечение и эта возможность включена, он будет создавать также бинарный пакет.

Исключение для некоторых пакетов
Можно попросить Portage не создавать бинарные пакеты для некоторых выбранных пакетов или категорий. Это можно сделать передав команде emerge параметр :

Это можно использовать для пакетов, для которые создание бинарных пакетов приносит мало пользы. Например пакеты исходного кода ядра или бинарные пакеты (те, которые заканчиваются на -bin как ).

Настройка хоста бинарных пакетов
Portage поддерживает несколько протоколов для загрузки бинарных пакетов: FTP, FTPS, HTTP, HTTPS и SSH. Такое количество оставляет большое пространство для различных реализаций хоста бинарных пакетов.

Тем не менее, не существует «готового» метода, предоставляемого Portage для распространения бинарных пакетов. В зависимости от желаемой настройки необходимо установить дополнительное программное обеспечение.

Хост бинарных пакетов на основе веб
Основной подход для распространения бинарных пакетов это создать хост бинарных пакетов на основе веб.

Воспользуйтесь веб-сервером, таким как lighttpd и настройте его, чтобы он предоставлял доступ на чтение к каталогу указанному в переменной PKGDIR в файле.

Затем, на клиентских системах настройте переменную PORTAGE_BINHOST :

Хост бинарных пакетов на основе SSH
To provide a more authenticated approach for binary packages, one can consider using SSH.

When using SSH, it is possible to use the root Linux user's SSH key (without passphrase as the installations need to happen in the background) to connect to a remote binary package host.

To accomplish this, make sure that the root user's SSH key is allowed on the server. This will need to happen for each machine that will connect to the SSH capable binary host:

Тогда переменная PORTAGE_BINHOST может выглядеть так:

Экспорт из NFS
В случае использования хоста бинарных пакетов во внутренней сети, может быть проще экспортировать пакеты с помощью NFS, а затем смонтировать их на клиенте.

Файл может выглядеть так:

Затем на клиентах можно смонтировать каталог. Пример записи в файле :

Использование бинарных пакетов
Для того, чтобы бинарные пакеты можно было использовать на других системах, они должны соответствовать некоторым требованиям:


 * Архитектура на клиенте и сервере, а также переменная CHOST должны совпадать.
 * Переменные оптимизации в CFLAGS</var CXXFLAGS, используемые для создания бинарных пакетов, должны поддерживаться всеми клиентами.
 * USE-флаги возможностей процессора (такие как MMX, SSE и так далее) следует выбирать осторожно; все клиенты должны поддерживать их.

Также Portage проверят, создан ли бинарный пакет с использованием тех же USE-флагов, которые требуются клиенту. Если пакет собран с другой комбинацией USE-флагов, в зависимости от параметров, переданных, Portage либо проигнорирует бинарный пакет (и станет собирать из исходного кода), либо завершиться. Более подробней смотрите в разделе установка бинарных пакетов.

На клиентах требуется сделать некоторые настройки, чтобы использовались бинарные пакеты.

Установка бинарных пакетов
Можно добавить несколько параметров к команде, чтобы сообщить Portage о том как нужно работать с бинарными пакетами:

Чтобы автоматически установку бинарных пакетов, соответствующую параметр можно добавить в переменную EMERGE_DEFAULT_OPTS :

В Portage есть возможность, которая автоматически реализует эквивалент   без необходимости писать в переменную EMERGE_DEFAULT_OPTS значение  :

Получение пакетов с хоста бинарных пакетов
В случае использования хоста бинарных пакетов, на клиентах необходимо настроить переменную PORTAGE_BINHOST. Иначе клиент не будет знать где хранятся бинарные пакеты, в результате чего, Portage не сможет установить их.

В переменной PORTAGE_BINHOST хранится разделенный пробелами список URI. Это позволяет администраторам использовать множество серверов бинарных пакетов одновременно. URI всегда должны указывать на каталог в котором находится файл.

Переустановка модифицированных бинарных пакетов
Passing the  option to  will reinstall every binary that has been rebuilt since the package was installed. This is useful in case rebuilding tools like are run on the binary package server.

A related option is. It causes emerge not to consider binary packages for a re-install if those binary packages have been built before the given time stamp. This is useful to avoid re-installing all packages, if the binary package server had to be rebuild from scratch but  is used otherwise.

Дополнительные настройки клиента
Next to the  feature, Portage also listens to the   feature. This one controls if log files for successful binary package installations should be kept. It is only relevant if the PORT_LOGDIR variable has been set and is enabled by default.

Similar to excluding binary packages for a certain set of packages or categories, clients can be configured to exclude binary package installations for a certain set of packages or categories.

Чтобы выполнить это, воспользуйтесь параметром :

Чтобы включить такие дополнительные настройки для каждой команды emerge, добавьте необходимые пакеты в переменную EMERGE_DEFAULT_OPTS в файле :

Обслуживание бинарных пакетов
Exporting and distributing the binary packages will lead to useless storage consumption if the binary package list is not actively maintained.

Удаление устаревших бинарных пакетов
В пакете предоставляется программа под названием. Она позволяет обслуживать связанные с Portage временные файлы, такие как файлы загруженного исходного кода, а также файлы бинарных пакетов.

Следующая команда удалит все бинарные пакеты у которых нет ebuild в установленных репозиториях ebuild-файлов:

Для дополнительной, пожалуйста, прочтите статью Eclean.

Есть другая утилита, которой можно воспользоваться. Это утилита из пакета. Однако эта утилита чуть менее настраиваемая.

Чтобы отчистить неиспользуемые бинарные пакеты (в смысле неиспользуемые сервером, на котором хранятся бинарные пакеты):

Maintaining the Packages file
Inside the packages directory exists a manifest file called. This file acts as a cache for the metadata of all binary packages in the packages directory. The file is updated whenever Portage adds a binary package to the directory. Similarly, updates it when it removes binary packages.

If for some reason binary packages are simply deleted or copied into the packages directory, or the file gets corrupted or deleted, then it must be recreated. This is done using command:

Создание снимка каталога пакетов
When deploying binary packages for a large number of client systems it might become worthwhile to create snapshots of the packages directory. The client systems then do not use the packages directory directly but use binary packages from the snapshot.

Снимок можно создать с помощью утилиты или. Ей требуются четыре аргумента:


 * 1) A source directory (the path to the packages directory).
 * 2) A target directory (that must not exist).
 * 3) A URI.
 * 4) A binary package server directory.

The files from the package directory are copied to the target directory. A file is then created inside the binary package server directory (fourth argument) with the provided URI.

Client systems need to use an URI that points to the binary package server directory. From there they will be redirected to the URI that was given to. This URI has to refer to the target directory.

Как устроен формат файлов бинарных пакетов
Бинарные пакеты созданные Portage имеют расширение. Такие файлы содержат две части:


 * 1) Архив  содержит файлы, которые можно установить в систему.
 * 2) Архив  содержит метаданные пакета, файл ebuild и файл переменного окружения.

Для описания формата смотрите.

В пакете некоторые утилиты способны разделить или создать файлы  и.

Следующая команда разделит на файлы  и :

Файл можно проверить с помощью утилиты.

Чтобы показать содержимое:

Следующая команда извлечет файл, который содержит включенные USE-флаги для этого пакета:

Схема PKGDIR
На данный момент используется формат версии 2 со следующей схемой:

The file is the major improvement (and also the trigger for Portage to know that the binary package directory uses version 2) over the first binary package directory layout (version 1). In version 1, all binary packages were also hosted inside a single directory (called ) and the category directories only had symbolic links to the binary packages inside the directory.

Распаковка с помощью quickunpkg
Zoobab написал простую утилиту для оболочки командной строки quickunpkg, чтобы быстро распаковывать файлы.