Как в консоли параллельно выполнять обработку нескольких файлов?

Сходу на ум приходит make --jobs

parallel

GNU Parallel. Но он на перле, можно накостылять на баше (правда у меня не получилось нормально, но наверно можно).

Если религия не позволяет ставить parallel, то параллельный режим есть у xargs. Но первый проще использовать. И он может раскидывать работу по разным машинам.

xargs, parallel, ну или напиши скрипт с циклом, итерация которого происходит после уменьшения кол-ва нужных процессов.

Через амперсанд и wait

xargs -P

Один & в конце строки отправляет процесс в фон и печатает pid этого процесса

Значит делаешь восемь или сколько тебе надо переменных в которых этот pid хранишь и в цикле проверяшь с помощью ps существование процессов с именем pngcrush и хранимым в этой переменой pid.
Как не нащёл процесса то запускаешь процедуру которая запустит новый процесс pngcrush и запомнит его в этой переменной.

Делается всё это на bash

Лорчую. Хотел примерно то же написать.

А вы друг друга стоите.

Значит делаешь восемь или сколько тебе надо переменных в которых этот pid хранишь и в цикле проверяшь с помощью ps существование процессов

Не надо переменных и вызывать ps. Достаточно смотреть встроенной командой job. Иначе у вас на ps и уйдёт целое ядро :)

зато потенцевал будет раскрываться

jobs наверное?

Как я понял она сугубо интерактивная и в скрипт её встроить нельзя, потому что не позволяет форматировать свой вывод, а вот ps можно настроить так, что при запуске она будет выводить только одно нужное значение ps -p$current_pid -o comm

Расскажи, каким образом таки распараллелил задачу?

Как я понял она сугубо интерактивная и в скрипт её встроить нельзя,

Не только можно, но я уже два раза давал этот скрипт: как переделать это в многопоточное ? (комментарий)

Пожалуйста, напиши, что ты пошутил, а не серьёзно предлагал ручками фоновые задачи отслеживать.

Обычно заводят счётчик и пуляют задачи пока они есть и пока количество порождённых процессов меньше желаемого. А эти регистранты какие-то странные.

Да хз. Я чет написал, а уже потом вспомнил про job, но память подвела, и я не помнил, оно это или нет. Поэтому вариант торвн77 мне показался вполне логичным.

Так а чем parallel и xargs -P настолько плохи, что понадобилось костылить то же самое на bash?

Скорее всего тем, что когда я последний раз писал что-то такое на баш, я именно костылил =) Но было это давно. Так что я не прав, это не оправдание.

find | xargs -n -P

Параллельная обработка может обломаться об последовательное чтение с диска, особенно на hdd.

(pngcrush file1) & (pngcrush file2) & (pngcrush file3) & ... или я чего-то не понял?

Тем, что он про них не знал. Я вообще удивляюсь, как он генту осилил.