Сборка пакета съедает всю RAM

0

3

Всем доброго дня! В вопросе сборки пакетов из исходников пока новичок. Два дня пытаюсь собрать на арче LibreWolf из AUR. проблема в том, что через час сборки вся оперативка (16Гб) «съедается» под ноль и терминал вылетает с сообщением, что ядро линукс завершило процесс из-за нехватки памяти. Попытки найти информацию в сети пока безрезультатны.

Ссылка

←	Как смотреть ютуб в 2025-м?

find: Как вывести список найденых файлов с пробелом вместо новой сторки в качестве разделителя?

→

Это нормально, браузеры требуют очень много оперативы для сборки, особенно с lto. Чем больше потоков, тем больше будет есть компилятор, тебе нужно уменьшить их количество.

Merionet ★
(27.03.25 11:42:03 MSK)

Выключи сборку с lto (и pgo). Rust+lto - это похуже чем майнинг крипты. Как? Не знаю, у меня - gentoo.

anonymous
(27.03.25 11:46:27 MSK)

Ответ на: комментарий от Merionet 27.03.25 11:42:03 MSK

Ну я примерно в этом направлении двигался. В процессе сборки htop показывал все четыре потока у проца на 100%. Попробовал добавить в сам PKGBUILD в секцию build export MOZ_PARALLEL_BUILD=2. Но при сборке после этого наблюдал все-равно все четыре потока загруженных. Очевидно, чего-то не понимаю

ext2
(27.03.25 11:47:37 MSK) автор топика

Ответ на: комментарий от Merionet 27.03.25 11:42:03 MSK

Чем больше потоков, тем больше будет есть компилятор, тебе нужно уменьшить их количество.

При линковке с lto не поможет, линковщик - один (процесс), и он весь статический блоб от rust пытается запихать в память.

anonymous
(27.03.25 11:50:56 MSK)

Ответ на: комментарий от ext2 27.03.25 11:47:37 MSK

Глянь в пкгбилде # options for ci / weaker build systems Если фейлит на этапе линковки, обычно это в конце сборки происходит, выключи лто. Интересно, какие-такие патчи тебе понадобились, что ты рискнул собрать целый браузер?

Merionet ★
(27.03.25 11:54:02 MSK)

Ссылка

Ответ на: комментарий от anonymous 27.03.25 11:50:56 MSK

Так у линковщика тоже свои потоки есть. Thin не очень много жрёт, обычно его юзают.

Merionet ★
(27.03.25 11:57:28 MSK)

А чем не устраивает https://aur.archlinux.org/packages/librewolf-bin?

dataman ★★★★★
(27.03.25 12:01:32 MSK)

Ссылка

Вариант «прекратить страдать фигней и заняться делом» рассматривается?

https://aur.archlinux.org/packages/librewolf-bin

MoldAndLimeHoney ★★
(27.03.25 12:02:56 MSK)

Ответ на: комментарий от MoldAndLimeHoney 27.03.25 12:02:56 MSK

Рассматривается. Это был практический интерес. Но видимо пока моих компетенций не хватает

ext2
(27.03.25 12:05:13 MSK) автор топика

Ссылка

Ответ на: комментарий от Merionet 27.03.25 11:57:28 MSK

Thin не очень много жрёт, обычно его юзают.

firefox/librewolf по умолчаню собирается c -flto=thin, и при линковке выжирает 16+ гигов (проверял, когда собирал 130+/-2 версит). Это один процесс, вне зависимости от количества потоков.

anonymous
(27.03.25 12:07:53 MSK)

Ответ на: комментарий от anonymous 27.03.25 12:07:53 MSK

А ты пробовал настраивать jobs для lto? https://clang.llvm.org/docs/ThinLTO.html#controlling-backend-parallelism

Merionet ★
(27.03.25 12:11:09 MSK)
Последнее исправление: Merionet 27.03.25 12:12:15 MSK (всего исправлений: 2)

Ссылка

Ответ на: комментарий от anonymous 27.03.25 11:46:27 MSK

А смысл тогда собирать, готовый бинарь из реп будет быстрее.

anonymous
(27.03.25 12:59:41 MSK)

Ответ на: комментарий от anonymous 27.03.25 12:59:41 MSK

Браузер у меня не для скорости (скорости чего?).

anonymous
(27.03.25 13:07:43 MSK)

Своп добавь-то, арчевод

hargard ★★★
(27.03.25 13:24:11 MSK)

Ответ на: комментарий от hargard 27.03.25 13:24:11 MSK

И неделю будет свапить наверное.

anonymous
(27.03.25 14:48:02 MSK)

Ответ на: комментарий от anonymous 27.03.25 14:48:02 MSK

https://firefox-source-docs.mozilla.org/setup/linux_build.html

Memory: 4GB RAM minimum, 8GB+ recommended.

Вроде 16GB должно хватать с запасом. Может быть инструкции устаревшие, конечно.

vbr ★★★★★
(27.03.25 15:00:04 MSK)

Это норма, подруби zram, если по дурости свап не настроил.

LongLiveUbuntu ★★★★★
(27.03.25 18:12:57 MSK)

Ссылка

ты час собирал пакет?И что же эта за прога такая?Ж)

nicholas_ru ★
(27.03.25 18:58:38 MSK)

Ответ на: комментарий от nicholas_ru 27.03.25 18:58:38 MSK

Написано же, LibreWolf

CrX ★★★★★
(27.03.25 19:40:15 MSK)

Ответ на: комментарий от vbr 27.03.25 15:00:04 MSK

Думаю, это ориентировано если не на -j1, то на какое-то число, которое они посчитали «стандартным» для юзеров, типа -j4, скорее всего. А ТС, видимо, с -j16 запускал, вот и не хватило.

CrX ★★★★★
(27.03.25 19:41:27 MSK)

Ссылка

Добавь свап. Можно еще 16 гигов.

usermod ★
(27.03.25 21:54:11 MSK)

Ссылка

Два дня пытаюсь собрать на арче LibreWolf из AUR

Как выше уже отметили, AUR это не только сорцы, но и бинарные пакеты. В данном случае librewolf-bin.
Тем более, ты «пока новичок».

Так же, есть несколько неофициальных реп (например, Chaotic-aur), которые собирают пакеты из исходников и выкладывают уже бинарники.

krasnh ★★★★★
(27.03.25 23:30:13 MSK)
Последнее исправление: krasnh 27.03.25 23:36:29 MSK (всего исправлений: 3)

Ссылка

Очень странно, по идее оно должно было пойти свопаться, если в память не влезло.

ya-betmen ★★★★★
(27.03.25 23:39:23 MSK)

Ссылка

Ответ на: комментарий от CrX 27.03.25 19:40:15 MSK

Я о такой не слышал потому что. Тебе правильно говорят. Подкючи swap.Сначала создай, а потом подключи командой swapon.

nicholas_ru ★
(28.03.25 11:10:01 MSK)

Ответ на: комментарий от nicholas_ru 28.03.25 11:10:01 MSK

Я о такой не слышал потому что

O_o

Ну в общем-то это форк Firefox, с небольшими изменениями с целью сделать его несколько более «свободным» по умолчанию. Вроде самый известный форк лисицы…

Собирается так же, как и собственно Firefox.

Вообще мало какой софт требует таких ресурсов и времени для сборки. Помимо браузеров это, наверное, только LibreOffice из того, что не какое-то совсем нишевое. Ну может ещё DE какие, про них не знаю.

Тебе правильно говорят. Подкючи swap.Сначала создай, а потом подключи командой swapon.

А это уже не мне ;)

А так, свап — это, конечно, вариант, но для начала всё же хотелось бы подробностей о том, как собирается. По идее, сборка где-то 10–12 ГБ в пике хавает, так что должно хватать. Но возможно, всё дело в каком-нибудь -j16. Если уменьшить количество jobs, потребление памяти тоже должно значительно уменьшиться.

CrX ★★★★★
(28.03.25 11:34:48 MSK)
Последнее исправление: CrX 28.03.25 11:40:46 MSK (всего исправлений: 3)

Ответ на: комментарий от vbr 27.03.25 15:00:04 MSK

16 должно хватать, но 4 прям точно уже мало. Или инструкции устаревшие, или это с -j1 (ну может с -j4) и без pgo/lto.

CrX ★★★★★
(28.03.25 11:38:00 MSK)
Последнее исправление: CrX 28.03.25 11:38:09 MSK (всего исправлений: 1)

Ссылка

Ответ на: комментарий от CrX 28.03.25 11:34:48 MSK

swap использовали, пока не появился zram, встроенный в ядро. Размер Swap большим смылса особого нет. 2-4 Гига. А можно даже меньше.

nicholas_ru ★
(28.03.25 11:48:36 MSK)
Последнее исправление: nicholas_ru 28.03.25 11:50:39 MSK (всего исправлений: 2)

Ответ на: комментарий от nicholas_ru 28.03.25 11:48:36 MSK

Можно и без zram, с zswap. У меня 4 гига, просто потому что могу. На деле обычно около 1 используется.

CrX ★★★★★
(28.03.25 12:08:48 MSK)

Ссылка

Ответ на: комментарий от CrX 28.03.25 11:34:48 MSK

Вроде самый известный форк лисицы…

А не PaleMoon? :)

dataman ★★★★★
(28.03.25 21:11:09 MSK)

Ссылка

Вот поэтому я и ушёл на 32 гига. А чтобы оперативка не занималась, поищи makepkg.conf в /etc/ и посмотри, чтобы в сборочных флагах не стоял путь сборки в /tmp/ или /tmp/makepkg

Tyse_EX ★
(29.03.25 16:24:40 MSK)

Ответ на: комментарий от Tyse_EX 29.03.25 16:24:40 MSK

Вот поэтому я и ушёл на 32 гига

А я подумываю о 64ГБ уже…

З.Ы.: что-то пошло не так в этом мире…

AlexVR ★★★★★
(29.03.25 17:29:18 MSK)

Ссылка

Можно попробовать поменять линкер на gold и т.п. и ещё там есть доп. флаги чтобы отключить маппинг в RAM. Будет медленнее собирать, но меньше жрать RAM. Хотя, может и линкер крешнуиься, гугли в общем.

anonymous
(31.03.25 19:58:02 MSK)