Детектор троллей на эрланге

Для вытягивания тем мы воспользуемся веб-сервисом...

/thread

Ну так зачем спалил? Написал бы свой и банил бы потихоньку из окопа

у меня детектор встроен прямиком в мозг ~_~

Очень интересно. Надо будет такую фишку для своего форума сделать :D

Только там в оценке подвох есть.

Определяться так будут не только тролли, но и люди, мнение которых не совпадает с мнением большинства.

>и банил бы потихоньку из окопа

У него забанялка отсохла и отвалилась

Основная идея неверна. thesz может оказаться обычным топикстартером, задавшим технический вопрос и на каждый ответ задающим уточняющий вопрос или говорящим "спасибо".

Да, реально интересная мысль. Пойду писать :)

(когда-то делал аналогичную затею, но учитывающую репутационные голоса и только для топовых юзеров, а то для полной карты Графвизу не хватало даже трёх гигов памяти, а Tulip я так и не освоил - http://balancer.ru/support/2007/05/t38696--graf-reputatsii-starogo-foruma.315... )

>Основная идея неверна. thesz может оказаться обычным топикстартером, задавшим технический вопрос и на каждый ответ задающим уточняющий вопрос или говорящим "спасибо".

Да, и такой вариант тоже возможен :)

>Основная идея неверна. thesz может оказаться обычным топикстартером

во во, так что закапывайте

эх, было бы все так просто..

и да, надо обязательно на джава? раз уж у лора веб-сервиса/апи нетути..

под лоровские толксы по моему вполне подходит

Надо обязательно такой же написать.
Первый бан будет у ЖБ, после чего можно будет творение закопать, ибо мишшн комплитед.

"Извините, Ваше сообщение похоже на троллинг. Отведайте-ка профилактического бана."

Неплохо. Правда тонкий тролль может наряду с минимальной полезной информацией писать кучу провокаций, явных либо по контексту. Можно будет благодарить его за помощь, но он все равно будет троллем :)

>"Извините, Ваше сообщение похоже на троллинг. Отведайте-ка профилактического бана."

А вот такое я у себя постараюсь вскоре ввести :) Тесты показывают, что байесовские фильтры хорошо не только на спам натаскиваются, но и, например, на «корректные/некорректные» (с точки зрения модераторов) сообщения.

Так что новичков (или юзеров с низким рейтингом) можно через такие фильтры пропускать. А уже потом модераторы заблокированные сообщения смогут посмотреть и, или разрешить (автоматом обучая фильтр), или подтвердить правильность запрета :)

> Основная идея неверна. thesz может оказаться обычным топикстартером, задавшим технический вопрос и на каждый ответ задающим уточняющий вопрос или говорящим "спасибо".

+1. У них алгоритм высосан из пальца и очень редко будет работать правильно.

Помоему нужно делать временные срезы и следить за скоростью роста количества связей у каждого экземпляра. Ведь обычно когда в техническом топике человек всех благодарит, то он это делает сразу, то есть динамика характеризуется резким единичным скачком, диаграмма тролля буит выглядить скорее как серия из повторяющихся всплесков, ну и просто общение буит иметь менее эмоциональную картину

прикрутите к нему спелчек, и пусть проверяет подтвержденные новости. При обнаружении некоторого кол-ва ошибок -- бан апрувщику.

о!! спасибо! давно искал что-то подобное на Erlang.

задолбешься фильтр обучать. люди они же не статичны, поймут что к чему и будут постоянно менять тактику, формат построения предложений, словарь, etc. таким образом можно разве что крикунов с восклицательными знаками, слэнгом и эмоцухой вылавливать.

Ну спеллчек же не ты писать буишь, взять готовый и просто периодически его обновлять, а то и ваще на менеджер пакетов пересадить. Далее, поймите, что задача в общем виде неразрешимая, ибо имеет дело с изменяющимися условиями, в данном случае единственный симметричный ответ - это самообучающийся алгоритм

просто фильтр на матерные слова и на активность, этого достаточно. не для автобана, а для предупреждения модератору.

Ну понятное дело, что бот автоматом банить не должен, но как бы надо же снижать число ложных срабатываний первое и второе чтобы он не упускал никого

0% ложных срабатываний не будет никогда без достаточно продвинутого и обученного AI.

Ну хотя бы сделать это число меньш 50%

имхо, при существующем алгоритме где-то так и будет.. может даже и поменьше )

Ну простенькую самобучалку прикрутить то не так уж сложно.

Всё, время появилось, пойду слеплю для своего форума, оценю на практике :)

У них критерий определения троля лажевый. Для ЛОР-а не подойдет.

Готово: http://hg.balancer.ru/hgwebdir/bors-airbase/file/9c0c3f920a19/classes/balance...

Результат первой попавшейся темы: http://balancer.ru/forum/topics/67801/reports/users-graph.png

Фигня полная :) Татарин там, например - человек с самой высокой на форуме репутацией и весьма уважаемый. А, например, D.Vinitski - наш главный из ныне живущих троллей :)

...

Сейчас в политическом гляну...

http://balancer.ru/forum/topics/67709/reports/users-graph.png

Нет, всё равно не похоже :) Бяка - человек явно из оппозиции на форуме, но троллинг - абсолютно не его стиль :)

>задолбешься фильтр обучать. люди они же не статичны, поймут что к чему и будут постоянно менять тактику, формат построения предложений, словарь, etc

(Спамеры тоже постоянно в этом направлении работают. И даже за деньги. Но Байесовы фильтры работают очень хорошо ;) )

На самом деле - ничего не имею против. Изменение тактики и формата снижает уровень троллинга :)

SVG, однако, лучше: http://balancer.ru/forum/topics/67709/reports/users-graph.svg

>(Спамеры тоже постоянно в этом направлении работают. И даже за деньги. Но Байесовы фильтры работают очень хорошо ;) )

Там дело не столько в тексте письма, сколько в способе его доставки. Левые сервера, непонятные почтовые клиенты, ошибки в заголовках, несовпадение ip и доменных имен.. А уже потом собственно идет разбор текста. К тому же, они все ( 99.99% ) содержат ссылку, может быть аттачмент и т.д., и в любом случае, классифицируются наааамного легче троллинга ( который и человек может не увидеть ).

>Изменение тактики и формата снижает уровень троллинга :)

Угу, наверное со временем просто надоедает партизанить)

Для лора такой уже написан(причём на перле), и весьма давно.

>Там дело не столько в тексте письма, сколько в способе его доставки.

Я про спамфильтры, что в Опере или Thunderbird'е :) То, что через graylist/spamassassin/amavis прорвалось, то уже по способу доставки идеально. Тем не менее, на клиенте прекрасно детектится. У меня сегодня на основной и во всех спамлистах засвеченый адрес в сутки пробивается 5-10 писем со спамом. И ошибки бывают всё равно единичные.

>Угу, наверное со временем просто надоедает партизанить)

Мы ещё в L2Fortress, когда делали фильтр на мат, специально не блокировали все возможности. Народ учился обходить фильтры и тем хоть как-то мозгом работал :)

Не поленился распарсить страничку ЛОРа :)

Пример: http://balancer.ru/lor/topics/3829453/reports/users-graph.svg

(работает с любыми ID тем)

Упс, пардон, он не все сообщения видит... Пойдё отлаживать :)

Ты спер мой баян ._.

Всё, исправлено :)

Всё же, сделал графы направленными. Считает намного дольше, зато результат нагляднее :)

Нет, направленные не всегда лучше. Так что:

Неориентированные:
http://balancer.ru/lor/topics/3829453/reports/users-graph.svg

Ориентированные:
http://balancer.ru/lor/topics/3829453/reports/users-ograph.svg

На РФВС сразу видно Луговского;)

http://balancer.ru/lor/topics/307710/reports/users-graph.svg

А анонимус - моск трэда. Сразу видно.