[devel] Метарепозиторий Сизифа

[Evgeny Sinelnikov]

On 11/7/07, Alexey Tourbin <at на altlinux.ru> wrote:
>
> On Tue, Nov 06, 2007 at 05:46:44PM +0300, Dmitry V. Levin wrote:
> > Проблема в том, что действующую систему сборки хочется трогать как можно
> > меньше, поскольку ещё есть надежда перейти на новую систему сборки
> > в обозримом будущем.
>
> Надеяться не вредно.  В свое время на консультации перед первым
> экзаменом по высшей математике я задал преподавателю два вопроса:
> 1) какие оценки Вы обычно ставите; и 2) стоит ли надеяться на хорошую
> оценку.  Ответы были соответственно 1) оценки бывают разные; и
> 2) надеяться можно всегда.  (Оценка на экзамене была удовлетворительной --
> я не понимал, что такое последовательность Коши.  Через две недели я
> пошел на пересдачу и мне поставили хорошую оценку.  Полтора года спустя
> итоговая оценка была отличной.)
>
> Можно не только надеяться, но и пытаться понять суть вещей.
>
> Я предлагаю попытаться понять и обсуждать более фундаментальные вещи
> (если есть что обсуждать), не опускаясь до техники реализации.  Но это
> идёт рука об руку.  Когда уже становится достаточно понятно, что нечно
> подлежит реализации, то это становится достаточно просто реализовать.
>
> Некоторое время назад я писал про желаемую процедуру прохождения
> пакетов.  Теперь надо посмотреть на это с другой стороны -- на какой
> структуре данных эта процедура будет работать.
>
> Нужно дать "более алгебраическое" описание желаемой действительности,
> а именно, какие элементарные множества у нас имеются, и какие
> элементарные операции к элементам этих множеств применимы.
> Алгебраическая строгость, конечно, быстро пропадёт, но она по крайней
> мере помогает понять "что к чему" на ранних этапах.
>
> Я уже писал, что прохождение новых пакетов в сизиф подобно "коммитам"
> в некоем "репозитарии" пакетов (метарепозитарии).  Наивная сериализация
> склоняет к линейной истории коммитов, но практика говорит о том, что
> любой "неудачный коммит" всего лишь открывает транзакцию, которая,
> при условии устранения всех "неудачных моментов" может быть потом
> "слита" (merge) в mainline (HEAD) репозитария.
>
> То есть, выражаясь более эзотерически, существует некий "холизм",
> когда "борьба" или "духовная брань" на земле отображется в это самое
> дело на небе, а "поле битвы -- сердца людей" (Достоевский).  Это значит,
> что история "настоящего пакета" должна находить отражение в истории
> "метарепозитария" в целом. Прошу прощения за отклонение в изотерику.
> Идея в целом достаточно важна, но мои вербальные возможности столь же
> скудны.
>
> Нет никакой нужды дальше поддерживать мнимое существование
> "метарепозитария Сизифа".  Можно это понятие эксплицировать, и сказать,
> что метарепозитария Сизифа -- это обычный git-репозитарий, в котором
> хранится существенная информация о пакетах в Сизифе.  Это информация
> является достаточной, а в основном и необходимой, для дальнейшего
> продвижения "хеда" репозитария.
>
> Короче, идея в следущем.  Есть git-репозитарий сизифа.  В нём существуют
> подкаталоги по имени каждого src.rpm пакета.  Прохождение любого
> пакета автоматически "влияет" на всё остальные (зависимые) пакеты по
> крайней мере в смысле возможности пересборки.
>
> Рассмотрим пример.  Пришёл пакет perl-XML-LibXML, и он "собрался"
> (собираемость пакета является уточняемым понятием).  Дальше предстоит
> некое довольно долгое тестирование репозитария на предмет того, что
> новый пакет ничего не ломает.  Это значит, что каждый входящий пакет
> открывает входящую транзакцию, по номеру серийного задания.  Пусть номер
> задания будет 333, и пакет perl-XML-LibXML собрался.  Создается бранч 333.
>
>         * branch 333: perl-XML-LibXML built ok
>          `* HEAD -- current sisyphus
>
> Имеется попытка перевода репозитария в новое целостное состояние --
> с новым пакетом perl-XML-LibXML.  Происходят всевозможные тестирования,
> в частности, пересборка пакета perl-XML-LibXSLT.
>
>         * perl-XML-LibXSLT rebuilt ok (perl-XML-LibXSLT/ updated)
>         * branch 333: perl-XML-LibXML built ok
>          `* HEAD -- current sisyphus
>
> Когда всё тестирование прошло без обломов, тогда merge нового бранча
> (или же "commit") происходит автоматически.
>
>          /* HEAD -- merge new perl-XML-LibXSLT into current sisyphus
>         * | perl-XML-LibXSLT rebuilt ok (perl-XML-LibXSLT/ updated)
>         * | branch 333: perl-XML-LibXML built ok
>          `* HEAD -- current sisyphus
>
> На самом деле здесь будет "fast forward", то есть в простейшем случае,
> если иметь в виду сериализацию заданий, не нарушается линейность истории.
>
> В более неудачном случае merge не может быть простым "fast forward",
> и здесь потребуется sophisticated стратегия мёржа.  Стратегии мёржа
> метарепозитария я не буду обсуждать раньше времени, чтобы не усложнять
> того что по сути просто.
>
> Короче, есть такое дело -- МОЗГОВОЙ ШТУРМ.
> Я предлагаю сделать метарепозитарий сизифа, в котором содержится
> необходимя и достаточная информация для поддержки "новой системы сборки
> пакетов".  На каждый src.rpm пакет имеется соответствующий подкаталог
> метарепозитария.
>
> Вопрос по части мозгового штурма у меня к вам простой -- ЧТО ДОЛЖНО
> ЛЕЖАТЬ В ПОДКАТАЛОГАХ ЭТОГО РЕПОЗИТАРИЯ?  (У меня есть тетрадка в
> которой исчеркано несколько страниц на эту тему... но я прошу высказать
> то что сходу приходит вам в голову.)


Если отталкиваться от текущей схемы работы с gear, то уже возникает целое
множествое вариантов. Все они, в общем, сводятся к тому, что в подкаталоге
src.rpm пакета находятся набор файлов сборки, spec файл и правила
формирования содержимого этого src.rpm пакета из набора файлов сборки. Стоит
ли вводить строгий регламент на подробности внутренного содержимого этих
каталогов свыше этой схемы для меня остаётся под вопросом, поскольку я не
вижу для этого особых причин. Если расматривать каждый подкаталог как чёрный
ящик, из которого формируется src.rpm пакет, то текущей схемы вполне
достаточно. Иначе возникают противоречивые варианты. Если хранить не
распакованные исходники и патчи, то теряется большая часть преимуществ
распределённой системы контроля версий, получатется, что, кроме spec файлов,
нет смысла хранить в репозитарии остальную часть пакета, поскольку изменения
и последующий мёрджинг tar файлов выглядит достаточно мрачно, не говоря уже
о патчах на патчи... С другой стороны вариант, если хранить распакованные
исходники в виде нескольких бранчей с разными патчами, из которых
формируется итоговый мастер бранч, тоже влечёт ряд неисправимых проблем. В
первую очередь - этo отход от политики "чистых" исходников, что у меня уже
повлекло за собой ряд проблем, самая большая из которых состоит в том, что
git не умеет (хотя я может быть ошибаюсь, исправьте, если я не прав) хранить
пустые подкаталоги, что влечёт за собой, на вроде бы собираемом пакете,
невозможность его пересборки из gear в исходном варианте.
В процессе ответа у меня, в свою очередь, возник ряд вопросов. Что имеется в
виду под метарепозитарием - один большой репозитарий или набор репозитариев
для каждого из пакетов? Если имелось в виду первое, то есть идея
действительно формировать его по общей схеме, когда из репозитария пакета
формируется src.rpm, который потом импортируется в необходимом виде в
метарепозитарий. Но тут возникает другой вопрос. А что тогда считать более
первичным?
В свете вышесказанного, пока могу предложить только вариант, при котором
содержимое каждого каталога регламентировано только в том плане, что из него
по общим правилам формируется src.rpm пакет, как единственная точка опоры, к
которой приводимы подкаталоги в метарепозитарии.


-- 
Sin (Sinelnikov Evgeny)
----------- следующая часть -----------
Вложение в формате HTML было удалено...
URL: <http://lists.altlinux.org/pipermail/devel/attachments/20071107/763ca4ec/attachment-0002.html>