Хорошее пример реализации, можно ли Ваше устр-во адаптировать для совместной работы с развивающимся проектом Народного мониторинга? Хабрассылка, сам проект.
1. Про поиск. Сам тоже работал с многомиллионными таблицами, правда в Oracle. Для решения проблемы блокировки всегда выполнял поиск по частям, например по индексу города или иного поля удобного для вас. Разумеется при таком кол-ве данных запрос в лоб по всей таблице просадит всю базу.
Да и на Хабре немало статей как оптимизировать подобные запросы.
2. Про спамеров. Разумеется есть и конторы, массовое добавление анкет даже капча частично предотвратит, однако пообщавшись в личке начистоту с одним из них выяснилось, что все куда проще. Мальчики студенты шабашут так. Создают несколько анкет, загружают липовые фото сами и поддерживают их, а за это дяденька им денежку платит.
3. Про премодерацию. Сайт, что я вам привел в пример фигурирует на мамбе уже с полгода. ОК, сейчас их 150(посчитали значит, ато понимаете ли база просаживается), а вы в это число включали все регионы? а уже удаленные ранее анкеты? Наверняка 150 — это активные в данный момент только)
Да, знакомо, что сайты подставные постоянно добавляются, но как насчет предварительного фильтра содержимого полей при правке данных анкеты пользователем? Грубо говоря поступил сигнал(жалоба) на конкретный сайт — Вы его добавили в черный список PCRE выражений, который тутже вступил в силу для предварительной проверки новых пользователей(и редактирования имеющихся).
При редактировании каждого поля в анкете AJAX проверочка прогоняет блеклист, для сотен записей это недолго)
4. Обратная связь с Мамбой. Народный агент — верните уже его и на место повиднее. Убрали же ведь. Не лукавьте будто он есть и работает) И пож-та не нужно просто игнорить жалобы да еще и так будто они и не поступали — на стороне пользователя записей о них нет вообще и вы это знаете. Не хорошо как то… создал понимаешь тикет, а он просто пропал и сослаться не на что в итоге.
Резюмирую:
Порой для больших решения проблем существую достаточно простые решения, которые не столь красивые и новаторские, зато в разы меньше вредят производительности ресурса и его репутации, на котором уже и в категории «для серьезных отношений» спама стало больше чем реальных лиц. Печалька(
PS Пожелание не по теме: введите какуюнить систему поощрения пользователей с максимальным числом верно заполненных полей в анкете и наличия фото. Условные баллы, которые к примеру поднимают в рез-татах поиска не только VIP. Достали уже никчемные анкеты на переднем плане.
Хорошо, всеж приведем хотя бы пример из нескольких(в реальности разнообразия спама менее десятка видов насчитал). Скажите насколько изощренным он является, когда в сотнях(скорее тысячах) анкет в поле «О себе» ввести строго определенный текст:
О себе
Если совсем скучно, то заходи на NEEDSEX.IN
Столько много девочек ждут горячих парней, и я в том числе )
Наверное это нереально сложно поиском по базе выявить и удалить все совпадения?
Только не забудьте проверить все категории поиска целей, а не только «секс».
Кстати говоря, за последние сутки ни одна жалоба не была обработано, точнее ниодного уведомления об этом не пришло как ранее было.
«Жалоба на этого пользователя от вас уже поступала, и еще не была обработана модератором» — и так уже более 2х суток.
Вы очень хорошо пишете, статистика это хорошо, особенно когда ее проверить нельзя из других источников)) Объясните пож-та в чем сложность выявить разом и удалить все анкеты содержащие фразу одну и туже фразу 1 в 1 в сотнях ато и тысячах профилей? Или Вы хотите чтобы сюда я их тоже перекопировал?
За последние полгода только я отправил вам более 30 жалоб и где результат — анкет стало таких еще больше. Лимит в сутки выдерживается далеко не всегда, чаще всего автоответ приходит в 00-00 — 01-00 по мск и на этом все. На следующий же день еще с десяток новых анкет вместо удаленных 1-2х.
Хотите чтобы было больше веры в вашу статистику — сделайте ее публичной, чтобы была
«Народный агент» кстати после первого десятка жалоб куда-то пропал из профиля))
Про Реформал, понимаю, модерация нужна, сам являюсь вебмастером неск.ресурсов, но если когда нибудь его(реформал) почитаете, то увидите, что там все вполне в рамках дозволенного написано)
PS Фильтрация данных и интеллектуальные фильтры тоже кстати интересная тема для Хабра. Уверен многие сталкивались с проблемой спама и нам очень важно знать как с этим справляется ресурс которому уже с десяток лет помнится)
Скажите пож-та почему в последнее время на Вашем сервисе стало огромнейшее число липовых анкет с откровенной рекламой мошеннических платных сайтов знак-в? Кол-во данных анкет растет ежедневно по всем городам геометрической прогрессией во всех категориях поиска.
Более того, жалобы на подобные анкеты либо обрабатываются со значительной задержкой либо просто игнорируются («жалоба уже поступала, но не обработана модератором»).
А теперь собственно ближе к ИТ-тематике данного ресурса(Хабра):
Скажите неужели программисты Мамба не в состоянии отфильтровать абсолютно идентичную рекламу в поле «О себе» в огромном кол-ве анкет? Там даже базовых знаний хватило бы.
Я как-то смотрел Ваш проходной тест на квалификацию вебразработчика с год назад, судя по всему вы строго подходите к данному вопросу — так в чем же дело?
Мое обращение в Реформал было просто удалено/не одобрено…
Наводит на мысли, что сама мамба поощряет подобное злоупотребление ее же сервисами.
PS Решите сначала элементарную проблему с предварительным фильтром информации «о себе» «кого ищу» и т.п., а лучше всего премодерацию их содержимого как уже делают многие аналогичные сервисы, коли фильтры «мышей не ловят», а потом уже будем слушать о высоких технологиях.
PPS При необходимости все, что знаю по данному вопросу отвечу в личку(сами фишсайты какие попадались), если это уже не известно конечно же…
1. Относительно названия моей модели, в статье была ссылка на магазин, повторюсь еще раз: budilnikov.net/product/sleeptracker-pro-elite-mens/
Фото 1 к 1 соответствует 1му слева на картинке в шапке топика.
2. Кнопка «иду спать» — если подробнее нужно при помощи боковой клавиши выбора режима переключиться и запустить отсчет(с запасом на полчаса помнится).
Ради интереса купил вот такой девайс в Китае ибо копеечный($16.15):
Есть и модель с акк-ром поболее, но уже дороже.
Далеко от идеала конечно, но для зарядки внутреннего акка хватает даже 1й лампы дневного света.
На практике полезнее заранее от сети зарядить и брать с собой в поезд например.
На мой взгляд именно при наличии вибро-режима пробуждения он очень даже полезен ибо будит вас и только вас без каких-либо световых или звуковых сигналов. Да и фазы сна определяет по движению вашей руки, а не кровати)
комп постоянно включен мало у кого ибо он как минимум источник шума, несмотря на замену всех кулеров на дорогие тихие.
пробовал так пожить с месяц — некомфортно.
Вы не поняли. Хакнуть сон тут никто и не пытается.
Я же написал в статье, что будильник лишь помогает выработать свой оптимальный график — все.
Чудес нет.
Абсолютно не заинтересован в ресурсе, просто я лично пользовался ими и меня там не кинули, почему то другие ссылки на сайты в статье так не воспринимаются… странно…
Если за Ваш коммент будет много плюсов — уберу ссылку, но если это кому то полезно.
А вообще могли и в личке спросить, а не оффтопить.
1. Про поиск. Сам тоже работал с многомиллионными таблицами, правда в Oracle. Для решения проблемы блокировки всегда выполнял поиск по частям, например по индексу города или иного поля удобного для вас. Разумеется при таком кол-ве данных запрос в лоб по всей таблице просадит всю базу.
Да и на Хабре немало статей как оптимизировать подобные запросы.
2. Про спамеров. Разумеется есть и конторы, массовое добавление анкет даже капча частично предотвратит, однако пообщавшись в личке начистоту с одним из них выяснилось, что все куда проще. Мальчики студенты шабашут так. Создают несколько анкет, загружают липовые фото сами и поддерживают их, а за это дяденька им денежку платит.
3. Про премодерацию. Сайт, что я вам привел в пример фигурирует на мамбе уже с полгода. ОК, сейчас их 150(посчитали значит, ато понимаете ли база просаживается), а вы в это число включали все регионы? а уже удаленные ранее анкеты? Наверняка 150 — это активные в данный момент только)
Да, знакомо, что сайты подставные постоянно добавляются, но как насчет предварительного фильтра содержимого полей при правке данных анкеты пользователем? Грубо говоря поступил сигнал(жалоба) на конкретный сайт — Вы его добавили в черный список PCRE выражений, который тутже вступил в силу для предварительной проверки новых пользователей(и редактирования имеющихся).
При редактировании каждого поля в анкете AJAX проверочка прогоняет блеклист, для сотен записей это недолго)
4. Обратная связь с Мамбой. Народный агент — верните уже его и на место повиднее. Убрали же ведь. Не лукавьте будто он есть и работает) И пож-та не нужно просто игнорить жалобы да еще и так будто они и не поступали — на стороне пользователя записей о них нет вообще и вы это знаете. Не хорошо как то… создал понимаешь тикет, а он просто пропал и сослаться не на что в итоге.
Резюмирую:
Порой для больших решения проблем существую достаточно простые решения, которые не столь красивые и новаторские, зато в разы меньше вредят производительности ресурса и его репутации, на котором уже и в категории «для серьезных отношений» спама стало больше чем реальных лиц. Печалька(
PS Пожелание не по теме: введите какуюнить систему поощрения пользователей с максимальным числом верно заполненных полей в анкете и наличия фото. Условные баллы, которые к примеру поднимают в рез-татах поиска не только VIP. Достали уже никчемные анкеты на переднем плане.
О себеЕсли совсем скучно, то заходи на NEEDSEX.IN
Столько много девочек ждут горячих парней, и я в том числе )
Наверное это нереально сложно поиском по базе выявить и удалить все совпадения?
Только не забудьте проверить все категории поиска целей, а не только «секс».
Кстати говоря, за последние сутки ни одна жалоба не была обработано, точнее ниодного уведомления об этом не пришло как ранее было.
«Жалоба на этого пользователя от вас уже поступала, и еще не была обработана модератором» — и так уже более 2х суток.
За последние полгода только я отправил вам более 30 жалоб и где результат — анкет стало таких еще больше. Лимит в сутки выдерживается далеко не всегда, чаще всего автоответ приходит в 00-00 — 01-00 по мск и на этом все. На следующий же день еще с десяток новых анкет вместо удаленных 1-2х.
Хотите чтобы было больше веры в вашу статистику — сделайте ее публичной, чтобы была
«Народный агент» кстати после первого десятка жалоб куда-то пропал из профиля))
Про Реформал, понимаю, модерация нужна, сам являюсь вебмастером неск.ресурсов, но если когда нибудь его(реформал) почитаете, то увидите, что там все вполне в рамках дозволенного написано)
PS Фильтрация данных и интеллектуальные фильтры тоже кстати интересная тема для Хабра. Уверен многие сталкивались с проблемой спама и нам очень важно знать как с этим справляется ресурс которому уже с десяток лет помнится)
Скажите пож-та почему в последнее время на Вашем сервисе стало огромнейшее число липовых анкет с откровенной рекламой мошеннических платных сайтов знак-в? Кол-во данных анкет растет ежедневно по всем городам геометрической прогрессией во всех категориях поиска.
Более того, жалобы на подобные анкеты либо обрабатываются со значительной задержкой либо просто игнорируются («жалоба уже поступала, но не обработана модератором»).
А теперь собственно ближе к ИТ-тематике данного ресурса(Хабра):
Скажите неужели программисты Мамба не в состоянии отфильтровать абсолютно идентичную рекламу в поле «О себе» в огромном кол-ве анкет? Там даже базовых знаний хватило бы.
Я как-то смотрел Ваш проходной тест на квалификацию вебразработчика с год назад, судя по всему вы строго подходите к данному вопросу — так в чем же дело?
Мое обращение в Реформал было просто удалено/не одобрено…
Наводит на мысли, что сама мамба поощряет подобное злоупотребление ее же сервисами.
PS Решите сначала элементарную проблему с предварительным фильтром информации «о себе» «кого ищу» и т.п., а лучше всего премодерацию их содержимого как уже делают многие аналогичные сервисы, коли фильтры «мышей не ловят», а потом уже будем слушать о высоких технологиях.
PPS При необходимости все, что знаю по данному вопросу отвечу в личку(сами фишсайты какие попадались), если это уже не известно конечно же…
budilnikov.net/product/sleeptracker-pro-elite-mens/
Фото 1 к 1 соответствует 1му слева на картинке в шапке топика.
2. Кнопка «иду спать» — если подробнее нужно при помощи боковой клавиши выбора режима переключиться и запустить отсчет(с запасом на полчаса помнится).
В остальном согласен)
Есть и модель с акк-ром поболее, но уже дороже.
Далеко от идеала конечно, но для зарядки внутреннего акка хватает даже 1й лампы дневного света.
На практике полезнее заранее от сети зарядить и брать с собой в поезд например.
пробовал так пожить с месяц — некомфортно.
Я же написал в статье, что будильник лишь помогает выработать свой оптимальный график — все.
Чудес нет.
Если за Ваш коммент будет много плюсов — уберу ссылку, но если это кому то полезно.
А вообще могли и в личке спросить, а не оффтопить.