LINUX.ORG.RU
Форум — Talks  

Засада от XML

 , ,


0

4

Поставил в однострочнике, разгребающем HTML, простую последовательность: sn = root.xpath(...); sn = sn[0] if sn else None; print(sn[0].text if sn else '') Работает. Но если поиск xpath что-то находит, получаю предупреждение:

FutureWarning: Truth-testing of elements was a source of confusion and will always return True in future versions. Use specific ‘len(elem)’ or ‘elem is not None’ test instead.

Полчаса гугления дали ответ. Для Python 3.13 и lxml 6.1.1 выражение 1 if sn else 0 вернёт 0, если sn существует, НО НЕ ИМЕЕТ ДЕТЕЙ. Спасибо, что вставили предупреждение.

★★★★★
Ответ на: комментарий от dynamic_cast

Вот не надо упрекать более простые языки, что погромисты не делают как в старой джаве по кастомному типу на каждую структуру данных.

Shadow ★★★★★
()
Ответ на: комментарий от dynamic_cast

Где там утиная типизация? Это скорее приведение типов.

question4 ★★★★★
() автор топика
Ответ на: комментарий от dynamic_cast

уриная типизация

по факту же нарушение алгербы нагружением ложнозначимостью не очевидный мимокрокодилам случай(даже если оно было так_ннада)

qulinxao3 ★☆
()

Это следствие lxml или в целом синтаксиса питона касается?

Вообще xml не люблю, отказываюсь от него где только могу. Чего и вам советую.

skyman ★★★★★
()
Ответ на: комментарий от skyman

Это следствие lxml или в целом синтаксиса питона касается?

Имхо, попытка совместить соглашения Питона, унаследованные из Си, со сложившимися практиками libxml2.

Вообще xml не люблю, отказываюсь от него где только могу. Чего и вам советую.

Другого нормального формата для электронных книг с оглавлением и сносками нет. Или HTML, или FB2, или Ebook — все парсятся библиотеками для XML.

question4 ★★★★★
() автор топика
Ответ на: комментарий от question4

сверх ияишница речёт что до +-5 версии lxml включительно было бездетность как неочевидность значения бульносности типо ща 6 версия копейками и дакой барсучьей на гольфполе норы теперяча нет

ваще это буквально был специализированный охпи

qulinxao3 ★☆
()

вроде универсальней и меметичней - но может токсично в адресс популяции питоно–пограммистов:

sn=next(iter(sn),None) #  не копенганен в сортах лишней ли iter
qulinxao3 ★☆
()
Ответ на: комментарий от qulinxao3

ща 6 версия копейками и дакой барсучьей на гольфполе норы теперяча нет

На 6.1.1 всё ещё есть.

охпи

Что?

question4 ★★★★★
() автор топика
Ответ на: комментарий от question4

api была так же крива как и измышления xml (забавно что sgml был более технологичен )

qulinxao3 ★☆
()
Ответ на: комментарий от qulinxao3

sn=next(iter(sn),None)

>>> next(iter(sn), None) is sn[0]
True
>>> next(iter([]), None) is None
True

Работает, спасибо.

Не уверен, что буду пользоваться приёмом, который для меня настолько неочевиден, но всё равно спасибо.

question4 ★★★★★
() автор топика
Ответ на: комментарий от qulinxao3

Не идиоматично. Я бы такое хотел видеть только внутри функции first_or_none.

Вообще, есть more_itertools, у него есть метод first, который ровно это и делает. Если проект довольно большой или не критично наличие лишней библиотеки, то лучше ей пользоваться. Там много чего интересного.

bbc69
()
Последнее исправление: bbc69 (всего исправлений: 1)

Для Python 3.13 и lxml 6.1.1 выражение 1 if sn else 0 вернёт 0, если sn существует, НО НЕ ИМЕЕТ ДЕТЕЙ. Спасибо, что вставили предупреждение.

Так-то странно. Интересно, какая у них мотивация.

bbc69
()
Ответ на: комментарий от bbc69

more_itertools годнота! как и sortedlist из sortedcontainers

в том и не_надо_отрываться_от_коллег когда оказывается что большинство пишуших в индустрии на питоне даже python.org/doc не открывали ни разу ;) !

и в частности https://docs.python.org/3/tutorial/classes.html#iterators

qulinxao3 ★☆
()
Последнее исправление: qulinxao3 (всего исправлений: 1)
Ответ на: комментарий от pasquale

will always return True in future versions

Это переводится: будет возвращать всегда True. Т.е. они как раз ломают логичный подход с пустым списком. Вот и стало мне странно, а чего это они.

bbc69
()
Ответ на: комментарий от bbc69

ломают логичный подход с пустым списком

Решили, что вершина дерева важнее, чем наличие у него необязательного следующего слоя.

question4 ★★★★★
() автор топика
Последнее исправление: question4 (всего исправлений: 1)
Ответ на: комментарий от question4

Просто они ломают обратную совместимость, а у этого должна быть веская причина. Посмотрел тут, что возвращает xPath:

The return value types of XPath evaluations vary, depending on the XPath expression used:

    True or False, when the XPath expression has a boolean result
    a float, when the XPath expression has a numeric result (integer or float)
    a 'smart' string (as described below), when the XPath expression has a string result.
    a list of items, when the XPath expression has a list as result. The items may include Elements (also comments and processing instructions), strings and tuples. Text nodes and attributes in the result are returned as 'smart' string values. Namespace declarations are returned as tuples of strings: (prefix, URI).

М-да, с таким зоопарком значений это имеет бОльший смысл. Только всё равно при таком подходе возвращает он list of items, так что не понимаю этих извращений. Уж тогда надо всё складывать в контейнер Result, где будет его тип и с ним работать единообразно.

Вообще, после перехода на третий Питон они были замечены в неоднозначных решениях.

bbc69
()

Ну и занимательное программирование.

Есть тебя волнует именно текст первого элемента, можно так составить запрос:

root.xpath('string(//subroot[1])')

Сразу вернёт то, что тебе надо.

bbc69
()
Ответ на: комментарий от qaqa
first_child_or_none=lambda sn:[lambda _:None,lambda seq:seq[0]][sn!=None and len(sn)](sn)
.
.
.
https://stackoverflow.com/questions/363944/python-idiom-to-return-first-item-or-none
qulinxao3 ★☆
()
Последнее исправление: qulinxao3 (всего исправлений: 3)
Ответ на: комментарий от qaqa

return sn[0] if sn is not None and len(sn) else None

Ну да, так и сделал, как только понял смысл предупреждения. Только наоборот: sn = None if sn is [] else sn[0]; return '' if sn is None else sn[0].text + sn.tail.replace(...);

question4 ★★★★★
() автор топика
Ответ на: комментарий от bbc69

Просто они ломают обратную совместимость, а у этого должна быть веская причина.

с таким зоопарком значений это имеет бОльший смысл. Только всё равно при таком подходе возвращает он list of items, так что не понимаю этих извращений.

xpath() возвращает список объектов, каждый из которых может содержать прикреплённый список. bool() ориентируется исключительно на прикреплённый список, игнорируя основной объект. Как такая логика следует из процитированного текста — я не понял, и ответ нашёл не в этой документации.

question4 ★★★★★
() автор топика
Ответ на: комментарий от bbc69

root.xpath('string(//subroot[1])')

Меня интересует суммарный текст в конструкции: <a href="/series"><span>Название серии</span></a> - номер)

Я хочу извлечь из этого Название серии-номер — без скобок и лишних пробелов вокруг дефиса. Поиск по XPath позволяет упростить эту задачу?

question4 ★★★★★
() автор топика
Ответ на: комментарий от question4

А то, что он возвращает не только список, но и строки, числа и булевы значения. Само по себе это смотрится, мягко говоря, своеобразно.

bool() ориентируется исключительно на прикреплённый список, игнорируя основной объект.

Так, давай сверим понимание: такое поведение сейчас и в будущем его поменяют. Т.е. будет возвращаться не список, а другой контейнер. Лично я сам не понимаю, зачем это делать.

bbc69
()
Ответ на: комментарий от bbc69

Так, давай сверим понимание: такое поведение сейчас и в будущем его поменяют.

Да.

Т.е. будет возвращаться не список, а другой контейнер.

Как я понял, нет. Поменяют только поведение bool().

question4 ★★★★★
() автор топика
Ответ на: комментарий от question4

А ты не понял меня.

  1. Сейчас возвращается стандартный питонячий объект. Они НЕ будут его менять, т.к. я не верю, что они настолько наркоманы. А если сделают такое - удачи в отладке. Для этого надо выбрать другой контейнер.
  2. Вот с этой фразой:

xpath() возвращает список объектов, каждый из которых может содержать прикреплённый список.

Не согласен. Он возвращает list of items, а не list of list of items. Сдаётся мне, ты не видишь разницу между списком и нодой.

  1. Сдаётся мне, ты про это:
>>> bool([])
False
>>> bool([[]])
True

Да вот только:

>>> len([])
0
>>> len([[]])
1

Так что я не алё, что они там имели в виду.

  1. Несколько разных реализаций я могу себе представить. Но что толку их обсуждать. Когда выйдет, тогда и посмотрим.
bbc69
()
Ответ на: комментарий от question4
  1. Только если они лежат подряд в одном контейнере, в котором нет лишних данных. root.xpath('string(//root)')

  2. Чую html тут. Обычно для него используют BeautifulSoup. Не знаю, есть смысл тебе переходить. Так, к слову. Можешь ознакомиться при желании.

bbc69
()
Ответ на: комментарий от bbc69

Он возвращает list of items, а не list of list of items.

Именно это я имел в виду.

Сдаётся мне, ты не видишь разницу между списком и нодой.

Вижу. Но видимо, непонятно сказал. xpath() возвращает список нод, каждая нода может иметь дочерние, которые видятся как список.

question4 ★★★★★
() автор топика
Ответ на: комментарий от question4

Что в нём страшного?

  1. Разберитесь что такое is и почему is это не ==.
  2. Неразумно сравнивать произвольный sequence со списком. Тут даже если заменить is на ==, то в общем случае будет неправильно. Для проверки на пустоту надо использовать len.
qaqa ★★
()
Последнее исправление: qaqa (всего исправлений: 1)
Ответ на: комментарий от qaqa
  1. Обычно для проверки на пустоту не используют len, а достаточно объект в условие подставить. Что там придумали создатели библиотеки, как-нибуь разберём.
  2. Тут согласен, что-то не заметил при беглом взгляде. Так писать нельзя.
bbc69
()
Ответ на: комментарий от question4

Погоди, ты хочешь сказать, что они поведение ноды поменяют? Типо раньше было bool(node) == False. а станет True? Из твоего кода это не следует. Ладно, пустое это. Когда выйдет, тогда поглядим.

bbc69
()
Ответ на: комментарий от bbc69

Погоди, ты хочешь сказать, что они поведение ноды поменяют? Типо раньше было bool(node) == False. а станет True?

Именно такой вывод я делаю из этого предупреждения.

question4 ★★★★★
() автор топика
Ответ на: комментарий от question4

В такой формулировке логично. Просто он возвращает list, что меня смутило.

bbc69
()
Ответ на: комментарий от qaqa

Разберитесь что такое is и почему is это не ==.

Был уверен, что [] is []. Проверил. Был неправ. Странно, что это работало.

question4 ★★★★★
() автор топика
Ответ на: комментарий от question4

в детстве после обычного императивного pl был чутка фрапирован когда в лиспе кроме eq есть eql и наоборот именно как явное различение имени и именнуемого

qulinxao3 ★☆
()
Вы не можете добавлять комментарии в эту тему: только для зарегистрированных, score>=50.