Баянометр 2.0 / реактор :: баянометр :: баянометр 2.0

реакторбаянометрбаянометр 2.0

Баянометр 2.0

Рад представить новый баянометр: bayanometr.xyz

Как я и обещал некоторое время назад, сделал новую версию баянометра, со своими новыми плюшками
Сделал возможность поиска сразу по нескольким картинкам, без нужды перегружать страницу и вводить что либо заново
Так же важное изменение - по кадровый поиск по гифкам, хоть и со своими ограничениями. Учитываются только первые 30 кадров, чего в большинстве случаев достаточно, и дает возможность по реверсу найти оригинал.
Все это добро работает и для секретных разделов, но с своими ограничениями. Теги gay-zone, гуро, жесть, изврат идут нахуй
Поиск игнорирует различные повреждения/изменения картинки, что дает возможность имея подобное дерьмо:

найти оригинал: http://joyreactor.cc/post/2829385

На текущий момент проанализировано 99% всех картинок, и 70% гифок, и анализ будет окончен в ближайшее время

,реактор,баянометр,баянометр 2.0

31.12.2016, 23:07

+21,7

Я верил, я ждал, я надеялся! Слава тебе, о великий, защиту от баянов дарующий, и да прибудет с тобой сила пруфа! Аминь!

31.12.2016, 23:07

+12,0

Хорошее начало года.

31.12.2016, 23:08

+12,3

Гип гип ура!

31.12.2016, 23:08

+1,7

Так-же прошу писать о найденных багах/недоработках/идеях и т.п.
И если рукастые ребята - нарисуйте пожалуйста favicon, а то я совсем криворукий в это плане

31.12.2016, 23:11

+3,8

Поинтересуюсь техническими деталями - как реализован поиск (всё-таки нешуточное число изображений)?
Небось первым делом сравниваешь сильно пожатые изображения или юзаешь что-нибудь для выделения вектора признаков?

31.12.2016, 23:13

+0,2

Основано на: http://www.hackerfactor.com/blog/?/archives/432-Looks-Like-It.html
Со своими доработками, ибо в описанном методе есть шанс получить разный хеш для картинок с минимальными отличиями.
Если тебя интересует сам метод поиска, то http://dev.mysql.com/doc/refman/5.7/en/bit-functions.html

31.12.2016, 23:15

+4,8

Спасибо, пойду повышать образованность.

31.12.2016, 23:17

+0,4

И совет. Если будешь делать - не используй PHP GD. Там очень высокий шанс ошибки, и формирования разных хешей для одинаковых изображений

31.12.2016, 23:19

+2,9

Не, я воздержусь. Тем более я как-то больше по питону.

31.12.2016, 23:27

+0,2

Чего-то, кстати, туплю.
Если не влом - за счёт чего шанс получить разный хеш-то? Мы же :
- жмём изображение - тут вроде же проблем не должно быть
- обесцвечиваем - опять же
- считаем среднее значение - оно может и отличаться после правок, да. Но вроде же компенсируется последним шагом
- устанавливаем соответсвующий пикселю уменьшенного изображения бит в pixelColor >= meanColor, что вроде должно компенсировать различия в прошлом шаге

31.12.2016, 23:51

0,0

На этапе обесцвечивания у меня возникали проблемы.
К примеру пост: http://joyreactor.cc/post/2655590
Но при этом для маленького размера получается картинка: http://bayanometr.xyz/result_1.jpg
А для большого : http://bayanometr.xyz/result_2.jpg
Почему так - понятия не имею, но в итоге пришлось менять методы обработки картинки и заново прогонять все картинки

31.12.2016, 23:57

+0,0

Можешь пояснить про бит функции - ты делаешь обычный xor (и соответственно получаешь только хэши с нулевым расстоянием) или mysql позволяет сделать что-то вроде where bit_count(x ^ value)

31.12.2016, 23:47

+0,1

HAVING BIT_COUNT(`hash` ^ $hash)

31.12.2016, 23:51

+1,3

31.12.2016, 23:16

+12,2

Добра тебе!

31.12.2016, 23:20

-0,1

Спасибо

31.12.2016, 23:21

+0,0

Он будет закреплен в "О проекте" или лучше закрепить вот этот пост в избранном ?

викошафт

31.12.2016, 23:24

+1,5

Это уже зависит от админов. Надеюсь добавят

31.12.2016, 23:25

+1,0

Лучший подарок на Новый год, теперь моя нервозность и тревога, что я где-то набоянил, наконец уснет.

Плохой Демагог

31.12.2016, 23:30

+1,3

Поиск игнорирует различные повреждения/изменения картинки, что дает возможность имея подобное дерьмо найти оригинал...
Перешел на оригинал, попытался оригиналом найти этот пост, чет не нашло =(

однажды в 2007м

31.12.2016, 23:31

0,0

Возможно конкретно эта картинка еще не проанализирована. Даш ссылку?

31.12.2016, 23:33

0,0

Ссылку на что? Я перешел на http://joyreactor.cc/post/2829385 , сохранил у себя в папке, зашел на боянометр и вставил сохраненную картинку, выдало результат только того что я сохранил, этот пост оно не выдало

однажды в 2007м

31.12.2016, 23:35

0,0

Все, понял. Просто пост этот еще не попал в базу. Там внизу указана дата последнего обновления. 01:01:43, а пост был сделан в 01:05, вот и не нашло. Пока что делаю последние настройки автоматизации

31.12.2016, 23:40

+0,6

Сделал принудительное обновление. Проверь еще раз :)

31.12.2016, 23:43

+0,0

Нашло, Спс. Буду баловаться, сам не люблю постить но вот указать людям на боян это приятно.

однажды в 2007м

31.12.2016, 23:52

+0,5

Возможно я поспешил т.к. пост только создали, просто решил проверить функционал в обратную сторону, по не по измененной пикче найти измененную ,и взять твой пример.

однажды в 2007м

31.12.2016, 23:38

0,0

Насколько быстро добавляются новые посты в БД?

31.12.2016, 23:33

0,0

Раз в 5 минут

31.12.2016, 23:34

+2,0

Тогда возможно я попал в 1% необработанного. Хотя странно, что на картинку - выдало пост с видео.

31.12.2016, 23:36

0,0

Давай ссылку, буду смотреть.

31.12.2016, 23:38

+1,8

На вот этот пост - http://anime.reactor.cc/post/2933284
находит это - http://joyreactor.cc/post/521736

31.12.2016, 23:43

+0,2

Может я чего не понимаю?

Выбрать файлы
Файл не выбран
Вставте и131_ картинки,реактор,баянометр,баянометр 2.0

31.12.2016, 23:46

+1,9

я загружаю оригинал картинки. Видео остается, но находит и пост.

Выбрать файлы_ Файл не выбран
Вставте картинки

Сброс,реактор,баянометр,баянометр 2.0

31.12.2016, 23:47

0,0

Всё теперь выдаёт и ссылку на мой пост. Видно сохранило в БД)

31.12.2016, 23:46

0,0

Сорян. Автоматизацию еще полностью не настроил. Вот, сейчас в процессе.

31.12.2016, 23:47

+0,0

На старом баянометре такое тоже очень часто было.

31.12.2016, 23:55

0,0

Ты это, наверное, и сам знаешь, но ты - красавчик!

31.12.2016, 23:34

+0,1

А можно космическую темную тему, как Spacereactor? ну, в будущем хотя бы =)

31.12.2016, 23:42

0,0

Без проблем. Лишь бы ктото нарисовал какойто макет

31.12.2016, 23:44

0,0

попробую взять у автора фон и перепилю под баянометр. Тебе или в ЛС скину, или сюда.

01.01.2017, 00:01

+0,1

,реактор,баянометр,баянометр 2.0

31.12.2016, 23:48

+19,9

Офигенно! С Новым годом и спасибо тебе! С:

31.12.2016, 23:50

+1,2

>Теги gay-zone, гуро, жесть, изврат идут нахуй
>изврат
Ну все, это оскорбление. Время запилить собственный поиск по реактору. Только для gay-zone, гуро, жесть, и изврата. Завтра же начну. Или в понедельник.

31.12.2016, 23:53

+5,0

Мне хотелось исключить теоретическое попадание контента который будет неприятно видеть, а иногда даже блевать хочется.
Хочешь - сделай свой, с расчлененкой, хуями и еблей миксера.

01.01.2017, 00:04

+2,0

Вот нет чтобы сделать это настраиваемым, надо захардкодить. А если появится тег "#изврат_3.0", или "жесть" переквалифицируется под, внезапно, металлообработку, так сразу сорцы править? И это я еще не говорил о дискриминации секс-меньшинств.
А вообще, это все так, шуточки. За одно только то, что у тебя руки дошли и ты не бросил после пары часов - огромное тебе от меня уважение, вот.

01.01.2017, 00:19

-0,1

Данные собираются по всем постам без исключения, и фильтруются уже при выдаче. Нужно будет что либо изменить - это займет минимум времени

01.01.2017, 07:10

+0,2

Могу понять почему исключили изврат с их копро и жесть\гуро с кровью - это, конечно может шокировать. Но gz чем неугодил? Те же хуи что в shemale и futa, только без сисек - этим можно кого-то шокировать на реакторе?

01.01.2017, 06:24

+0,2

Для многих гей-порно хуже копро.
Проще исключить из выдачи, чем перебирать недовольных. + самый непопулярный раздел секретных, так что количество недовольных по этому фильтру будет минимально

01.01.2017, 06:52

+1,4

Может, лучше добавить возможность включать и выключать из поиска gz, изврат и т.д?

01.01.2017, 07:47

+0,7

Может быть, но явно не в ближайшее время. Я притомился

01.01.2017, 07:51

+0,6

"Завтра же начну. Или в понедельник."
Сделай еще по тегу "прокрастинация"

01.01.2017, 15:28

0,0

Лень, лол.

01.01.2017, 19:03

-0,3

Вот бы так правительство работало! Еще все бухают, а уже реформы и улучшения!

Стронций

31.12.2016, 23:54

+3,6

КОНЕЦ БАЯНАМ НА ГЛАВНОЙ

01.01.2017, 00:01

-3,4

Ура

Ганфайтер

01.01.2017, 00:05

-0,1

Теперь не придётся прилагать столько усилий на поиск пробудившегося Древнего зла. Спасибо за подарок.

01.01.2017, 00:12

+9,0

Что было:
- баянометр работает; баяны на главной, ибо "баянометр молчал"
- баянометр не работает; баяны на глааной
Что будет:
- баянометр 2.0 работает; баяны на главной, ибо "баянометр молчал" 2.0

01.01.2017, 00:16

+3,0

1875136,реактор,баянометр,баянометр 2.0

01.01.2017, 00:21

0,0

Seek and Destroy

01.01.2017, 00:53

-21,3

Давным-давно, я видел как ты предлагал сделать свой вариант баянометра, но уже думал что ты забил, а тут раз - и это в ленте! Охуенный подарок на новый год чувак, я (и ещё дохера человек) глубочайше благодарю тебя - спасибо!

01.01.2017, 01:14

+1,4

К сожалению много чего приходилось переделывать и перекачивать. Весь реактор в общей сложности перекачал раза 3-4, вот и ушло куча времени. Был бы рад сделать побыстрее, но, не получилось

01.01.2017, 01:22

+0,4

А скажи нам, реактор большой?

01.01.2017, 01:58

+1,9

Большой

01.01.2017, 02:19

+0,1

А точнее?

01.01.2017, 02:21

+1,3

Информация по постам + URL картинок + хеши + зависимости = 2.2GB
При этом анализ гифок еще не закончен, так что в итоге думаю будет ~2.5GB

01.01.2017, 02:30

+0,2

Я представлял себе больше это число

01.01.2017, 02:40

+1,5

Cколько весит реактор? :D

01.01.2017, 02:20

0,0

Тоже занимался парсингом не так давно, в образовательных целях естественно)

Получилось как то так. Т.е. около 250 гиг . База конечно значительно меньше, смысла хранить при рабочем алгоритме все изображения нет. Обработано было 221046 страниц бездны. Без секретных. Изображения хранил конечно только для того чтобы если что не перекачивать все заново, а перехешировать существующее т.к. алгоритм еще не был протестирован. Гифки не хранил, это еще + столько же пространства если не больше вышло бы.

Вообще проект был больше ориентирован на поиск по цвету, там еще несколько доп полей в базе для этих целей, так что размеры базы для поисковика по хешу еще меньше 4 гиг бы вышли. И да с оптимизацией так и не смог нормально совладать. Если поиск совпадений хешей нормально отрабатывает по скорости то поиск по цветовой палитре при 2 млн. изображений уже подвисает, нужно перерабатывать индексацию \ обращения к базе, ну это уже не важно.

control lusers Ц Ш 13 §"= EH
job_sessions ® Ш H
parsed_authors Щ dff 12 H
parsedjmages Щ iff Ц >c fjg
parsedlocations Щ (§ Ц >c Д
parsedmaterials ОШ й? Ш ®
parsed_pages Щ tff ID ®
search_cache Щ off Ц *= Щ
search_sessions Щ dff 12 H
site_actions Щ (?§ Щ >c fjg
site_visitors Ш О® 12 H

Радиоволна

01.01.2017, 03:12

+0,1

Рекомендую посмотреть в сторону TimesTen. Для большой и быстрой БД самое то. 100мл.строк ворочает шустро. Как только в баянометре, в базе количество картинок перевалит за 4мл. - буду переделывать под нее

01.01.2017, 03:33

+0,6

спасибо за инфу. Буду пробовать

Радиоволна

01.01.2017, 03:38

0,0

,реактор,баянометр,баянометр 2.0

01.01.2017, 02:43

-0,7

2017 только что стал лучше предыдущего. Вот бы всё продолжилось в том же духе

01.01.2017, 02:20

+0,1

просто комментарий, чтобы не забыть, что я был здесь когда проснусь.

01.01.2017, 03:19

-1,5

Можно ссылку на боянонометр?

Дмитрий Спицын

01.01.2017, 07:07

-0,3

Всё не надо, я сразу не заметил что она в названии.

Дмитрий Спицын

01.01.2017, 07:08

-0,3

Офигенное начало года. Спасибо.

01.01.2017, 08:28

0,0

Не работает

,реактор,баянометр,баянометр 2.0

01.01.2017, 08:52

-1,5

А какой механизм посика? Насколько хорошо он будет отмечать ПОХОЖИЕ картинки?

01.01.2017, 09:27

0,0

Добра тебе, держи плюсик

01.01.2017, 09:57

0,0

Я тупой. Куда нажимать, чтобы он начал поиск?

01.01.2017, 10:00

+0,3

Кажись понял, нужно ентер жать. ExtraDJ, а мог бы ты сделать автоматический пуск поиска при добавлении файла?

01.01.2017, 10:07

0,0

У меня сразу по добавлении файла/URL начинает поиск.

01.01.2017, 12:48

0,0

Поиск должен начинаться автоматически

01.01.2017, 13:27

0,0

Наконец-то, теперь можно кидать ссылки на "было" кармодрочерам.

01.01.2017, 10:29

0,0

Добавил редирект на .xyz, хай будет.

01.01.2017, 12:08

0,0

Спасибо

01.01.2017, 13:38

0,0

Не прожевал: http://joyreactor.cc/post/2450423 и http://joyreactor.cc/post/1672848
При выборе любой из гифок не даёт ссылку на пост с другой

01.01.2017, 13:19

0,0

Как и указал в посте, не все гифки еще проанализированы. Конкретно этих двоих еще нет в базе

01.01.2017, 13:33

+0,2

Cкачать Ода к радости бесплатно на pleer.com

,реактор,баянометр,баянометр 2.0

01.01.2017, 13:52

+0,1

Спасибо, товарищ! Нужна ли вам медаль нашего фандома?

,реактор,баянометр,баянометр 2.0

01.01.2017, 14:55

0,0

Медальку нужно заслужить. Не отказался бы от медальки "За развитие" или типа того, а за посты которые я не постил - нет. Но спасибо

01.01.2017, 15:36

+0,6

я тут занимаюсь прогой для сохранения себе картинокь с реактора и уже юзал алгоритм для сравнения, но не юзал базу, оставлю комент, чтобы потом глянуть инфу, спасибо тебе чел, с НГ! =)

02.01.2017, 09:32

0,0

Запили еще получение ссылки через GET и плагин для хрома в меню по правой кнопке и вообще заебца будет!

@ © 1 O' ¡il' □
Открыть картинку в новой вкладке Сохранить картинку как...
Копировать картинку Копировать URL картинки Найти картинку (Google)
Заблокировать элемент Копировать URL Найти картинку (Яндекс)
IQDB image search
Search for this image on Karma Decay Search Image on TinEye
The Great

Донор Мозга

05.01.2017, 23:57

0,0

Звучит прикольно. Можно сделать. 5$ только найду после НГ на ак разработчика

06.01.2017, 09:16

+0,3

А еще неплохо бы в dev написать, чтобы в подвал сайта ссылку на баянометр добавили, и в идеале прикрутили его для проверки при создании новых постов )

Донор Мозга

18.01.2017, 14:39

0,0

А можно оригинал изображения реактор-тян?

Seek and Destroy

07.01.2017, 12:22

0,0

Открой инфо, там указаны авторы

07.01.2017, 12:52

0,0

В секретных разделах не хочет искать баяны.

13.05.2017, 03:04

0,0

Чет он у меня на некоторые картинки тупит и не хочет в упор выдавать результат, чем дело-то

26.03.2019, 17:14

0,0

Похожие посты ↓↓↓

2995213, 2986611, 2985723, 2732803, 2984798, 2656978, 2643593, 2635502, 3216667, 2514799, 3273487, 1983159, 3351292, 3266079, 4684940