С lib.ru что ли?

Так lib.ru умеет отдавать уже в нужном тебе формате.

sed -i 's/^ *//g' книга.txt
Совет: потренируйтесь на начала «на кошках», а то вдруг я опечатался.

ммм.. как я понимаю, эта команда удаляет только пробелы вначале? А как же переводы строк?

куча книг уже скачана с разных источников. качать заново - не вариант)

>куча книг уже скачана с разных источников. качать заново - не вариант)

В наш просвящённый век проще выкачивать по мере надобности в современном формате, чем качать когда-то что-то скопом и потом, годы спустя, мучиться с конверсией.

...

А по сабжу: что-то в духе:

cat book.txt | sed -r 's/^\s+/\n/g' > book-filtered.txt

А ещё лучше - поискать читалку, которая подобное деление сама понимает.

Прогоняем все текстовые файлы этим скриптом. Можно, кстати, его немного изменить, чтобы добавлялся заголовок и /end{document}

#!/bin/sh
# Заменяет обычные кавычки на "лапки"
# Кроме того производит некоторую дополнительную подготовку обычного текстовика для ЛаТеХа
tmp=/tmp/forlatex.$$
for file in $*
do
    if [ "$1" != "./" -a "$1" != "../" ]; then
    cat $1 | sed "s/\(\"\)\([^\ ?\.,:\!;]\)/<<\2/g" | sed "s/\"/>>/g"|\
	sed "s/\.\.\./\\\ldots\ /g" | sed "s/-\ /\"---\ /g" | sed "s/&/\\\&/g" |\
	sed "s/\\$/\\\\$/g" | sed "s/\^/\\\^/g" | sed "s/_/\\\_/g" > $tmp
    mv $tmp $1
    fi
shift
done

Тогда более костыльное решение (не знаю sed достаточно для удаления лишних переводов строк):

for file in *txt
do
tmp="$(mktemp temptext.XXXXXX)"
perl -ne 'chomp; s/^ *//g; print; print " "' < "$file" > "$tmp"
mv "$tmp" "$file"
done

ненене) читаю на dingoo a-320, потому нужен txt)

Сегодня у меня tcl-ное настроение :-)

#!/usr/bin/tclsh

foreach ifile $argv {
    set inp [open $ifile r]
    set cont [split [read $inp] \n]
    close $inp

    set outp [open $ifile w]
    foreach ln $cont {
        if {[string match {      *} $ln]} {
            puts $outp {}
            regsub {      } $ln {} ln
        }
        puts -nonewline $outp $ln
    }
    puts $outp {}
    close $outp
}

перезаписывает все файлы переданные в командной строке
app.tcl file1.txt file2.txt file3.txt ...

> Тогда более костыльное решение (не знаю sed достаточно для удаления лишних переводов строк)

хм! почти то, что нужно. но здесь удаляются все переводы строк, а необходимо только те, что в середине абзаца.

> Сегодня у меня tcl-ное настроение

То же самое) удаляет абсолютно все переносы строк)

Что радует, так это активность сообщества! Заранее выношу всем благодарности.

"echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message

Прошу прощения, что комментирую здесь и не по теме. К сожалению в исходной теме уже нельзя комментировать. А с ходу Вас нашёл в этой теме.

Интересует развитие и финал Вашей проблемы по теме: «echo 0 > /proc/sys/kernel/hung_task_timeout_secs» disables this message

Дело в том, что у меня возникла подобная проблема, но на встраиваемом железе, которое так просто заменить и проверить нельзя.

У меня оно проработало 85 суток, а затем хряпнулось, после этого с такими-же регулярными ошибками основные задачи останавливаются. Точнее одна из задач зацикливает, причём не самая приоритетная, а остальные, более приоритетные, просто становятся.

Для возврата по гарантии нужно как-то проблему доказать.

Тогда:
perl -ne 'chomp; s/^ *//g; print; print " "; print «\n» if $_ eq «„' < “$file» > «$tmp»

>Интересует развитие и финал Вашей проблемы по теме

Ситуация сразу стала ясной после того, как я взял в точности такое же железо для другого проекта, где оно сразу же заработало без единого нарекания на тех же настройках. Потом было много переписки с производителем, один отвоз сервера на тестирование (всё было ок), но, поскольку при наличии второго работающего сервера той же конфигурации говорило о проблемах железа однозначно, то сервер мне поменяли целиком. Правда, на другую модель (такие же, что бы - отсутствовали). С тех пор всё работает без сбоев.

УРА!

Громадное спасибо, господа!

Совместив несколько решений, всё заработало.

Ниже предлагаю окончательный, но _жутко_ кривой скрипт:

#!/bin/bash

txt=$1

#сохраняет оригинал как orig_имя_файла

cp $txt orig_$txt

#создаёт tmp-файл

tmp=«$(mktemp temptext.XXXXXX)»

#удаляет пробелы в начале абзаца и добавляет символ перевода строки

cat $txt | sed -r 's/^\s+/\n/g' > $tmp

cp $tmp $txt

#удаляет лишние символы новой строки

perl -ne 'chomp; s/^ *//g; print; print " "; print «\n» if $_ eq «„' < “$txt» > «$tmp»

#удаляет повторяющиеся пробелы

cat «$tmp» | tr --squeeze-repeats ' ' > $txt

#удаляет повторяющиеся символы "-"

cat «$txt» | tr --squeeze-repeats '-' > $tmp

#заменяет источник

mv «$tmp» «$txt»

Осталось понять, как этот кошмар работает)

Ещё раз всем огромное спасибо.

Версия с sed'ом

cat file | sed ':a N;s/\n/ /;b a;' | sed ';s/       /\n/g; s/  / /g' | sed -r 's/^ *//'