Конкурент нас сканирует! Как он это делает, зачем, и как бороться?

Это не они придумали, еще Эльдорадо на своих ценниках указывали цены ближайщих конкурентов.

Они только в он-лайн это перенесли. Я когда развивал инет-магазин, в ручную добавлял цены в мире, эльдорадо и техносиле.

Считаю такой ход вполне "культурным" особенно для потребителя - главноя цель которого - купить качественный товар по наименьшей цене.

Вы правильно приняли решение - придумывать новые "фишник" и стараться быть на шаг впереди.

Конкуренция - двигатель прогресса. )

Всем здравствуйте.
Вообще для меня странно, что Вы сейчас такую тему обсуждаете....
На западе такой вопрос решается в течении суток! А то и быстрее... Уже лет 5 назад как вся схема отработана и все делается на раз....
Там такой ерундой занимаются только молодые, не опытные начинающие... которые еще "пороху не нюхали"... в общем комикадзе....

О блокировке каких-то IP вообще забудьте и не тратьте на это свое время
Сейчас уже любой школьник на раз обходит все подобные блокировки (хотя бы через соксы и т.д.)
О блокировках начнете думать, если не дай бог вас ддосить начнут (если дорастете до этого)...
И блокировать нужно не IP.....

К сожалению у меня пока почти нет опыта работы именно на совковом рынке (на западном 8 лет). Был у меня когда-то 1 сайт на совок... помню гадил один латыш какой-то (тексты воровал). Разобрались за 3 дня.

В общем на западе схема такая: (под совок сами одаптируете)
1. Наименование товара и цены = Ваш контент. Если Ваш контент оказался на чужом сайте = ВОРОВСТВО КОНТЕНТА! (надеюсь знак копирайта на вашем сайте присутствует)
2. Собираете все доказательства воровства контента (скриншоты с сайта хулигана, логи со своего сервака о парсинге/сканировании и т.д.)
3. Трайсроутите хулигана. Определяете его хостера, магистрального провайдера и регистратора его домена.
4. Отправляете сами 2 абузы. Одну хулиганы (предупреждение в течении 24 часов все убрать), вторую его хостеру, такую же...
5. Естественно на первые 2 абузы хулиган скорее всего забьет болт вместе со своим хостером....
И вот тут начинаются уже действенные меры!
6. Берете нормальных юристов, которые Вам составляют ГРАМОТНЫЕ АБУЗЫ со всеми выдержками из законов и т.д.
7. Отправляете грамотную абузу регистратору домена хулигана.
8. Отправляете грамотную абузу магистральному провайдеру у которого сидит хостер хулигана.
9. На западе еще есть всякие надзорные организации... туда тоже не помешает....

На западе в течении суток после этого хулиган не то что все снимает со своего сайта, а еще присылает Вам кучу извинений.... или его через сутки вообще перестает существовать в сети разумеется....
Я например таким "красавцам" добавляю абузу еще в его партнерки... и он остается без:
1. домена
2. провайдера/хостера
3. все выплаты за последний период ему не выплачиваются.

Если после этого хулиган еще будет чем-то не доволен, то берете свои логи с сервака по парсингу/сканированию, берете юристов и идете к своим знакомым в отдел "К". (если там пока нет знакомых, то после написания заявления и познакомитесь... у них там тоже план надо выполнять... а если еще их чуть материально заинтересовать то тут уж....)
Если хулиган не дурак, то он конечно вас парсит/сканит через удаленные демоны (на удаленных хостах), а потом удаленно снимает от туда информацию... в этом случае придется совместно с отделом "К" с начала навестить его провайдера и снять логи с серваков его провайдера.
Но я думаю, что хулиган на много проще и парсит/сканит Вас прямо от себя....
В общем чужие сеточки парсить/сканить нельзя!

Статья 272. Неправомерный доступ к компьютерной информации
1. Неправомерный доступ к охраняемой законом компьютерной информации, то есть информации на машинном носителе, в электронно-вычислительной машине (ЭВМ), системе ЭВМ или их сети, если это деяние повлекло уничтожение, блокирование, модификацию либо копирование информации, нарушение работы ЭВМ, системы ЭВМ или их сети, -

наказывается штрафом в размере до двухсот тысяч рублей или в размере заработной платы или иного дохода осужденного за период до восемнадцати месяцев, либо исправительными работами на срок от шести месяцев до одного года, либо лишением свободы на срок до двух лет.
(в ред. Федерального закона от 08.12.2003 N 162-ФЗ)(см. текст в предыдущей редакции в полной онлайн-версии ИБ ВерсияПроф)
2. То же деяние, совершенное группой лиц по предварительному сговору или организованной группой либо лицом с использованием своего служебного положения, а равно имеющим доступ к ЭВМ, системе ЭВМ или их сети, -
наказывается штрафом в размере от ста тысяч до трехсот тысяч рублей или в размере заработной платы или иного дохода осужденного за период от одного года до двух лет, либо исправительными работами на срок от одного года до двух лет, либо арестом на срок от трех до шести месяцев, либо лишением свободы на срок до пяти лет.
(в ред. Федерального закона от 08.12.2003 N 162-ФЗ)(см. текст в предыдущей редакции в полной онлайн-версии ИБ ВерсияПроф)


Посадить конечно не посадят, но кровушки попьют ууууууууууууууу
Они вообще забудут о парсинге/сканировании...

А разве цены на сайте магазина не публичная информация? О каком уголовном преследовании может идти речь?

Многие вон даже полные прайсы в удобном виде выкладывают.

hqiuha8a: для этого случая - не подходит. Тут никакого воровства. Ни картинок, ни текстов, ничего.
В россии любые подобные вопросы, что ты описал, решаются очень быстро. И да, зарубежом особенно быстро.

Clifford: На мой взгляд ничего такого в этом нет, вижу только плюсы:

1. Вам показали нестандартный маркетинговый ход и вы зашевелились;

2. Достаточно неплохая реклама для вас. Уверен, что многие пробежались по сайтам конкурентов дабы сравнить условия доставки, посмотреть что есть еще и тд.

Один из вариантов фикса: Поищите в логах адрес этого сайта, может все намного банальней.

Жаловаться и выяснять - глупо.

to hqiuha8a: Ну это вы сильно загнули... если пользоваться вашей методой то Гугля бы уже давно не существовало . Однако живы и процветают. Даже у вас там на Западе.

Контент они никакой не используют, а информацию сканят только открытую...

Кстати названия их сайта в логах естественно нет, впрочем так же как и их айпишника.

Ладно, если разобраться то можно приспособится и получать от этого дивиденты. Я буду выставлять свои ценники + 5 рублей к ихним, соответственно буду светиться в их блоке, и следовательно, если кому-то что-то из их потенциальных покупателей не понравится, то они придут по ссылке ко мне на сайт, а 5 рублей это ерундовая разница в цене. Учитывая их нефиговую посещаемость в 2500 уников в день есть надежда что десяток другой придет ко мне с них. Единственный геморой это отслеживать их цены вручную по каждой позиции, они у них как то очень часто меняются... найму девачку на это дело ))

Или действительно делайте цену чуть больше чем у них (тоже их сайт распарсивайте на стоимость, только смотрите (проверяйте при распарсе (установите у себя минимум возможной цены на конкретный товар)) - они из-за вредности влепят цену один рубль, и сами у вас понапокупают, и если вы дорожите именем (или не боитесь наездов от всяких защит прав покупателей-потребителей) - придеться продавать по этой цене).
Также есть простой и эффективный способ "уговаривания" конкурента. Все расходы выльются максимум в 50-100 ye. Но из-за того, что могут пострадать и хорошие фирмы, упоминать его что-то не хочеться.
...
Они могли как брать ваш прайс (найти его), как распарсивать Яндекс, или непосредственно сам ваш сайт.
Это все легко проверить методом исключения. Перенесли прайс в другое место, цены поменяйте, у них поменялись? Да? Тогда лезьте к себе в html и где у вас цена (кусок кода чуть побольше) поменяйте оформление (назначьте другой клас (название), добавьте лишний div, даже пару пробелов и перенос на другую строку) и т.п. У них поменялось? Если да - тогда они 100% берут с Яндекса или другого источника, но не у вас точно.
...
Либо просто поговорите. Вообще законодательно запрещено опускать конкурента и указывать его цену. Проконсультируйтесь в ФАС (http://www.fas.gov.ru).

так-с, вот это уже интереснее... точно законодательно запрещено указывать чужие цены? в каком законодательном акте можно почитать на эту тему? А насчет опускать это еще надо как то доказать что они опускают, боюсь наша судебная система такие тонкости не будет воспринимать...

за советы спасибо!

При чем тут google?
Не знаю, что Вы имели ввиду, но довожу до Вашего сведения то, что google НЕ ЩАДНО БАНИТ все попытки его парсинга/сканирования. А если будите очень сильно "усердствовать" в этом направлении, то может и завести расследование....
В моих словах может легко убедиться абсолютно любой.... попробуйте попарсить google..

Если даже отбросить в сторону какой-то сбор информации, то парсер жрет довольно приличное кол-во траффа (за которое конечно расплачивается тот, кого парсят) + парсер мешает нормальному и точному сбору статистики....

Парсить можно только того, кто сам дал на это добро! Во всех остальных случаях - это не законно и за это можно присесть в тюрьму....

Гугл и все остальные поисковые системы что делают? сканят своими роботами все сайты подряд, и выкладывают в своей выдаче фрагменты текстов и картинок с этих сайтов. При этом на запрет индексации в роботс.тхт обращает внимание помоему только яндекс, гуглю точно пофиг. И что то их никто не пытается засудить за это. т.к. сканят они только открытые ресурсы. А уж защищатся от скана своей выдачи они конечно пытаются, но помоему слабо эффективно, т.к. много где вижу сервисы определения мест сайта в поисковой выдаче.
Насчет трафика тоже не согласен, почему много? не больше чем +1 посетитель который нажал кнопку скачать прайс. тот же гугл опять же создает своим роботом нагрузку на порядок большую, т.к. запрашивается пачки страниц.
Ну а насчет статистики это вообще не аргумент - я у себя на компе фаирволл настрою, что бы не отдавал юзер агент, разрешение экрана, рефер и прочие, и что меня за это уже можно посадить можно?

Автор: Clifford
Спорить с Вами и что-то Вам доказывать нет желания, т.к.
1. Вы не имеете представление в чем отличие между поисковым ботом и парсером (или имеете, но прикидываетесь что не знаете...)
2. Вы с начала создали топик в духе: "что же мне делать?", и когда Вам объяснили/разжевали как реально можно взять за задницу Вы заняли противоположную сторону и сами собрались кого-то там парсить....

Да я просто пытаюсь оценить реальность предложенных вами методов в России. И мой российский опыт подсказывает, что тут эти вещи не работают.

ПС. А принципиальную разницу между поисковым ботом и парсером я действительно не вижу, т.к. в этой области не супер специалист...

Точно. Даже если присутствует намёк, на основании которого можно так или иначе понять какая фирма имелась в виду.
Тем более у вас без намеков, а цена и сайт в открытом виде.


Погуглите на сайте ФАС названия законов по теме:
О конкуренции и монополистической деятельности и т.п.
Или позвоните в сам ФАС (его какое-нить территориальное отделение) и так голосом спросите, имеют или не имеют и в каком законе, главе, статье написано. Либо по мылу.

Раз не специалист, скажу кратко... Принципиальная разница примерно такая же, как между полезной утилитой/программой и вредоносным вирусом. Вроде бы обе - прграммы, но одна - полезная, а другая - опасная и наносит вред.
Так что если у них еще найдут и сам парсер, то приплюсуют еще:
Статья 273. Создание, использование и распространение вредоносных программ для ЭВМ
1. Создание программ для ЭВМ или внесение изменений в существующие программы, заведомо приводящих к несанкционированному уничтожению, блокированию, модификации либо копированию информации, нарушению работы ЭВМ, системы ЭВМ или их сети, а равно использование либо распространение таких программ или машинных носителей с такими программами -
наказываются лишением свободы на срок до трех лет со штрафом в размере до двухсот тысяч рублей или в размере заработной платы или иного дохода осужденного за период до восемнадцати месяцев.
(в ред. Федерального закона от 08.12.2003 N 162-ФЗ)
(см. текст в предыдущей редакции в полной онлайн-версии ИБ ВерсияПроф)
2. Те же деяния, повлекшие по неосторожности тяжкие последствия, -
наказываются лишением свободы на срок от трех до семи лет.

А мой опыт подсказывает, что нужно просто свой зад от стула оторвать и заняться этим.... конечно в совке все будет на много дольше....
Но по телевизору же как-то показывали "каких то несчастных школьников", которые бесплатно к интернет подключались....

несовсем понятно как эта 273 статья вяжется под это дело, так как они ведь ничего не изменяют, не блокируют, не копируют, а только считывают, тоесть фактически делают тоже самое что и все остальные посетители сайта... думаю я лучше буду копать в сторону законов ФАС, что нельзя размещать цены конкурентов на своем ресурсе и что это считается недобросовестной конкуренцией... хотя пробовал гуглем искать этот аспект и закон смотрел - что бы было явно написано, что так нельзя делать - не нашел. буду копать дальше.

to hqiuha8a: Зачем эти буржуйсткие страшилки?!? Заладили посадят не посадят. Может давайте ещё будем у Билли его лицензионную "форточку" покупать и тем самым спонсировать дальнейшую агрессию США?

to all:
Лично я не поддерживаю кляузничество и всевозможное стукачество, даже в таком виде. И не вижу принципиальной разници между поисковой системой и сайтом "злоумышленника", т.к. и те и другие делают это для последующего отображения информации другим. Различие лишь в том, что последний делает это сугубо узконаправленно.

На большинстве сайтов можно найти какой-то намёк на плагиат хоть даже отдалённый. И представьте что начнётся ели все куда-то побегут со своими кляузами!

Надо признать что люди сделали отличный маркентинговый ход, а завись - не лучший помошник в принятии решений.