Curl + grep

0

1

Ребята, всем привет! Вопрос таков: Хочу curl’ом отрыть сайт, собрать всё что заключено в тег ">НУЖНАЯ_ИНФА, и записать всё это построчно в файл. Помогите пожалуйста. Прошу прощения если тема не в тот раздел.

Ссылка

←	IPC, сигналы

FastAPI и запуск подпроцесса в python

→

curl -s 'http://url.com/page' |grep -Po '(?<=<tag>).*(?=</tag>)'

anonymous
(19.02.21 20:14:50 MSK)

Ответ на: комментарий от anonymous 19.02.21 20:14:50 MSK

Ну или

grep -Po '(?<=<tag>).*?(?=</tag>)'

если там не один тег.

anonymous
(19.02.21 20:23:57 MSK)

Ответ на: комментарий от anonymous 19.02.21 20:14:50 MSK

С тегами '(?<=«>).*(?=</a>)' получаю ту часть страницы что нужна. Между тегами: site1.ru, site2.ru и так далее. Вот бы чисто ссылки собрать.

Lamerdead
(19.02.21 20:33:31 MSK) автор топика

Ответ на: комментарий от Lamerdead 19.02.21 20:33:31 MSK

Тогда

curl ... | grep ... | sed -e 's/ /\n/g;' | grep 'href' | sed -e 's/href=//g;s/"//g'

Architector
(19.02.21 20:37:39 MSK)

Ссылка

Ответ на: комментарий от anonymous 19.02.21 20:23:57 MSK

Спасибо дорогой друг! Сработало

Lamerdead
(19.02.21 20:38:34 MSK) автор топика

Ссылка

Ответ на: комментарий от Lamerdead 19.02.21 20:33:31 MSK

https://stackoverflow.com/a/1732454

anonymous
(19.02.21 20:39:09 MSK)

Ответ на: комментарий от anonymous 19.02.21 20:39:09 MSK

Ну это по человечески так.

Но если очень хочется, то можно и так

Architector
(19.02.21 20:41:50 MSK)

Ссылка

Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.

←	IPC, сигналы

Development

FastAPI и запуск подпроцесса в python

→

Похожие темы