LINUX.ORG.RU

Какую базу данных стоит использовать для Scrapy проекта?

 , , , ,


0

1

Так как я прочитал в документации Scrapy использует Mongodb. А потом онные сами пишут что mongodb плохое решение дабы он будет крашится, и проблемы будут символами. Какую базу предпочтительнее использовать для Scrapy проекта? Как насчет Redis?



Последнее исправление: Hufoc (всего исправлений: 1)

Ответ на: комментарий от Hufoc

Ну не используй. Я так понял там про проблемы для очень больших проектов, в них с любой базой будут сложности.

pawnhearts ★★★★★
()
Ответ на: комментарий от pawnhearts

Ну вообщем с монгой не будут проблемы да?

Hufoc
() автор топика

судя по вопросам, проблемы будут с любой взятой технологией
так что лучше возьми то, с чем больше всего опыта

oxo
()

Какую базу предпочтительнее использовать для Scrapy проекта?

Mongo.

Как насчет Redis?

А причём тут редиска? Она подходит для кеширования, но не для постоянного хранения данных.

В 2013 году, сами создатели Scrapy признались что mongo плохое решение.

Это было 5 лет назад!

Rodegast ★★★★★
()
Ответ на: комментарий от ei-grad

Но вообще статья норм, прислушайся, если тебе актуально то что там написано - подумай чем заменить.

ei-grad ★★★★★
()

Почему бы не заценить Clickhouse от яндекс?

anonymous
()

Юзай постгрес. Последний постгрес с jsonb может все тоже, что монго плюс стандартный sql можно например SQLAlchemy потом прикрутить. ИМХО монго хорошо для кластера.

iliaviht
()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.