Сорян, парни, это кликбейтный заголовок. Хотя и не совсем. Но, давайте подкинем еще ключей, защита от парсинга без смс и регистраций москва питер купить заказать онлайн бесплатно с доставкой школьницы на вписке, пора тормозить. Еще яндекс выпишет пиздюль за такой пассаж.
Короче, о какой-то сверх-защите писать не буду. Скажу лишь то, что конкретно мне мешает парсить чужие интернет-магазины, или почему я не беру их в качестве доноров, с чем мне пришлось столкнуться при парсинге некоторых интернет-магазинов.
Помните такую историю, когда ученые пытались придумать ручку, которая писала бы в космосе? А всё оказалось намного проще, нужно просто использовать карандаш. Поэтому о каких-то сверх технологиях говорить не буду, всё гораздо проще.
- Ватермарки. На дворе 2023, а значит ватермарки (водяные знаки) на изображениях это не просто ценный мех, но и 10к руб. за 1 картинку, если ваш пукан поджарят. Поэтому я с осторожностью отношусь к чужим картинкам на своем сайте, тем более, если у вас сайт конкретно коммерческий, а не какой-нибудь образовательный и блаблабла. То вам скорее всего поводят по губам за такое хулиганство. Безопасности в этом плане не касаемся (типа домены за бугром и абузоусточивых хостеров).
- Картинки с идентификацией донора. То есть в карточке товара среди фоток товара еще сидит картинка, на которой либо их собственный сертификат на продукцию, либо тупо логотип. И, если эта фотка не всегда последняя, то есть выявить закономерность, по которой ее можно было бы вычленить, то в спарсенных даже 1к товарах вычищать эту фотку это гемор. Я лучше откажусь от этого донора. Ну, или либо парсить только первую фотку. Просто я люблю много фоток для seo, чтобы нагрузить альты.
Как-то так, все гениальное просто, никаких капчей, а тупо залить одну фотку во все товары и уже опа, проблемка.
Ничто не спасет от парсинга ни один сайт в интернете по большому счету. Но зато вы можете добавить геморрой в обработке спарсенного материала. Не нытьем, так катаньем.
Берите на вооружение, удачи!