Проверка уникальности текста
Проблема определения авторства текстов волнует владельцев сайтов уже длительное время, однако до сих пор существует лишь очень малое количество прецедентов, когда авторы блогов и каталогов статей доводили дело до суда. Основная причина безнаказанности копипастеров – в том, что большинство авторов не имеют никаких доказательств того, что текст был написан (или куплен у копирайтера) именно ими. Текст печатается в Word, публикуется на сайте и тут же становится доступен огромному числу посетителей сайта, среди которых могут быть не только добросовестные пользователи, но и те, кто пришел на него в поисках уникального контента.
В современных условиях попасть ТОП выдачи поисковых систем с не уникальными текстами практически невозможно - это знают как веб-мастера и владельцы сайтов, так и SEO-оптимизаторы, занимающиеся продвижением сайта. Сразу же встает вопрос: как проверить контент на уникальность в Интернете? Как узнать, кто заимствовал авторские тексты и на каких сайтах их разместили?
Определение неуникального контента: метод шинглов
Как поисковики определяют копированный контент, а точнее, степень его уникальности? Метод шинглов позволяет формализовать этот процесс, делая его к тому же и достаточно быстрым. Для этого текст разбивается на шинглы - связанные фрагменты фиксированной длины (4 или 5 слов), и для каждого из них считается контрольная сумма - проще и быстрее работать с бинарными числами, чем с фрагментами строк. Далее эти числа заносятся в базу данных и им присваиваются индексы - текст полностью формализуется и становится удобным для анализа на степень похожести.
Уникальность контента определяется не качественно, а количественно!
Любая современная СУБД (система управления базами данных) умеет очень быстро и с минимальными затратами находить и сравнивать индексированные записи в таблицах, тем более, если это числа. Написать статью по популярной тематике, у которой ни один шингл не совпал бы с уже имеющимися - задача принципиально невозможная. Но если при этом обнаруживается, что у двух страниц Интернета шинглы совпадают на 90%, то, вне всякого сомнения, обнаружен копированный контент на сайте. Как в таких случаях происходит ранжирование, и как учесть метод шинглов при обработке текста - это отдельные вопросы, которые будут освещаться в дочерних статьях по поиску и обнаружению плагиата, сейчас же нам важно составить первичное представление о механизме опреденения уникального или копированного контента поисковыми системами.
Значимость уникального контента
В настоящее время под уникальным контентом обычно понимаются тексты, составленные (написанные) таким образом, что в интернете невозможно найти аналогичные последовательности из 5-6 слов. Такие статьи могут не содержать в себе новой мысли, а представлять собой обычное изложение (рерайт) уже известных фактов и событий, однако они вполне подходят для наполнения и продвижения сайтов, поэтому являются наиболее востребованной услугой в области написания статей.
Написание подобной статьи обойдется заказчику в 2-3 доллара, что кажется совсем небольшой суммой, но если учесть то, что требуемое количество подобных статей может достигать нескольких сотен, становится понятно, почему копипастеры (от англ. Copypast – копировать, вставить) экономят на контенте, массово копируя его с других сайтов.
Задачей же честного владельца сайта становится борьба с плагиаторами-копипастерами и устранение из выдачи всех ресурсов, незаконно использующих собственноручно написанный контент.
К счастью, современные поисковые системы весьма негативно реагируют на сайты, полностью состоящие из чужого контента. Поэтому если вы нашли свой текст на очередном сплоге, который едва-едва вошел в индекс, можете спокойно дождаться того, как этот ГС выпадет из индекса.
Другое дело, что вашу статью, размещенную на молодом блоге, может украсть и старый трастовый сайт, имеющий несколько тысяч страниц в выдаче и активно посещаемый быстророботом. В этом случае сайт плагиатора может легко обойти в выдаче новый web-ресурс, а если копипастеры разместят на своих проектах большую часть материалов блога, последний может легко отправиться под фильтр.
Как проверить текст на уникальность (плагиат)
К счастью веб-мастера, в настоящее время существует множество онлайн-сервисов и десктопных программ, предназначенных для проверки уникальности контента. Каждый сервис позволит вам бесплатно проверить уникальность текста до 10-15 тысяч символов длиной, а также укажет сайты, где уже имеется размещенный контент.
Самый простой способ проверить тексты на плагиат (наличие копий в Интернете) - это воспользоваться самой поисковой системой. При проверке текста на плагиат в поисковике не всегда можно прийти к правильному выводу об уникальности в том случае, если при плагиате использовалась не полная копия, а части текста. В результате такой проверки контента на уникальность достоверно находятся те сайты, которые скопировали текст полностью.
Как проверить контент на плагиат в поисковике? Для этого достаточно зайти в любую популярную поисковую систему, Google, Яндекс, Yahoo или Rambler (оптимальный вариант - Yandex и Гугл), ввести в строку поиска фрагмент текста без разделительных символов (точек, восклицательный и вопросительных знаков, кавычек), и обрамить этот фрагмент текста двойными кавычками. Поисковая фраза в кавычках значит, что поисковику требуется найти точное соответствие. К этому и сводится проверка уникальности текста через поисковую систему.
Десктопные и онлайн-сервисы проверки текста на уникальность
Чтобы проверить текст на уникальность содержания, существуют специальные онлайн-сервисы проверки уникальности контента, определяющие плагиат. А как проверить контент на уникальность и плагиат, если по какой-то причине нет возможности использовать онлайн-сервисы нахождения плагиата и не-уникального контента? В этом случае могут помочь десктопные программы для проверки текста на уникальность и плагиат, обзор которых опубликован на сайте в этом разделе. Эти программы в любом случае требуют соединения с Интернетом, но в некоторых случаях проверять текст на уникальность в них удобнее, чем в онлайновых сервисах.
Проверка текстов на Антиплагиат
Все онлайн-сервисы для проверки уникальности текста можно разделить на две группу. К первой относятся знаменитый ресурс Антиплагиат (antiplagiat.ru), предназначенный исключительно для студентов и их руководителей. Сервис включает платную и бесплатную версии. Последняя позволяет работать с текстами длиной не более 3000 символов, загружаемых в специальную форму при помощи буфера обмена. После регистрации вы сможете загружать содержащие текст файлы в формате HTML, TXT, DOC, RTF, DJVU и PDF.
Антиплагиат не осуществляет поиск по интернету, а использует собственные базы, что делает его неподходящим для проверки уникальности текста в интернете. Однако если вы преподаватель и хотите убедиться в том, что студенты самостоятельно выполнили все работы, Антиплагиат просто создан для вас.
Популярный сервис проверки уникальности Copyscape
Copyscape (www.copyscape.com) – один из наиболее известных сервисов проверки текстов на плагиат, помимо функции проверки статей на уникальность, предоставляющий опцию полной защиты сайта от копипастеров. Бесплатная версия позволяет осуществить не более 10 проверок в день, при этом, сайт не позволяет вставить в форму текст через буфер обмена, а дает возможность только указать URLстраницы.
Платная версия сервиса будет автоматически без вашего участия проверять тексты сайта на плагиат. Помимо 100 проверок в день, вы сможете отпугнуть плагиатчиков установленной в коде страницы кнопкой Copyscape, которая продемонстрирует, что вы отслеживаете деятельность копипастеров.
Перед приобретением платного тарифа Copyscape учтите, что сервис не занимается защитой контента, а лишь позволяет оперативно узнавать, какая из страниц вашего сайта потеряла уникальность и на каких именно сайтах располагаются ваши статьи. Бороться с копипастерами вам придется самостоятельно.
Проверка уникальности текста от биржи статей Text.ru
Text.ru– это один из наиболее удобных сервисов проверки уникальности текста, позволяющий бесплатно проверить неограниченное количество статей объемом до 15 тысяч символов. К недостаткам сервиса относится то, что в случае его высокой загруженности вы попадаете в своеобразную очередь, выстраиваемую на основе рейтинга пользователей. Поэтому иногда при работе вы можете столкнуться с тем, что длительность проверки текстов увеличится.
Однако в отличие от десктопных программ, Text.ru не загружает оперативную память и не мешает работе ПК, поэтому вы можете загрудить на сервис нужное количество текстов и дожидаться окончания проверки, занимаясь своими делами. Для каждого проверенного текста формируется отдельный URL, что позволяет дать ссылку на результаты анализа статьи другим пользователям.
Чтобы повысить рейтинг в сервисе Text.ru, покупайте на бирже больше статей или сотрудничайте с заказчиками текстов.
Miratools– проверка уникальности текстов от создателей знаменитой биржи статей
Miratools (miratools.ru) входит в состав сервисов знаменитого холдинга Mirafox, который известен в Рунете биржей статей Miralinks и биржей ссылок GGL. Проверяемый текст вставляется в форму через буфер обмена, после чего на вкладке «Ваши проверки» через некоторое время появятся результаты.
Бесплатная версия сервиса позволяет проверить ограниченное число текстов, однако после регистрации вы сможете оплатить пакетную проверку любого числа статей по очень низкой цене.
Istio - проверка уникальности и плотности ключевых слов
Istio.com– удобный сервис проверки текста на уникальность и плотность вхождения ключевых слов. Прекрасно подходит для SEO-копирайтеров, которые порой готовы так «набить» текст ключевыми словами, что это вызовет не только неприятие пользователей, но и фильтр ПС.
Проверка на плагиат с помощью программ
Advego Plagiatus – одна из наиболее известных программ для проверки уникальности от сервиса наполнения сайтов Advego. Последние версии способны не только проверять текст на плагиат, но и выявлять источники рерайта, что позволяет заказчикам выявлять недобросовестных авторов, предлагающих рерайт по цене копирайта.
В настройках можно указать длину шингла и используемые поисковые системы. К примеру, вы можете заметно ускорить проверку текста, если отключите анализ уникальности во всех поисковых системах, кроме Google и Яндекс.
Etxt антиплагиат по своим функциям практически не отличается от Адвего Плагиатус, однако является более удобной за счет возможности использования сервиса разгадывания капчи antigate, пакетной проверки статей и автоматического сохранения результатов проверки в HTML-файлы.
Praide Unique Content Analyser II – малоизвестная программа, по своей функциональности заметно превосходящая аналоги. Программа проверки уникального контента Praide Unique Content Analyser II отличается от аналогичных тем, имеет хорошую функциональную аналитическую часть при изрядно запутанном интерфейсе. Уровень анализа контента на уникальность очень высокий: помимо качественного определения плагиата, программой Praide Analyser 2 осуществляется и поиск, на каких сайтах проверяемый текст не уникален. Программа Прайд Контент Анализатор имеет следующие возможности при проверке уникальности текстов и выявлении плагиата:
- ввод данных (по URL, из файла, из буфера обмена),
- разбор контента на пассажи или шинглы,
- самостоятельное добавление новых поисковых систем в программу,
- использование прокси, их ротация и выполнение каждого запроса с нового адреса,
- защита IP-адреса от определения ваших действий как автоматизированных,
- проверка и печать результатов анализа.
Методы борьбы с копипастерами
К сожалению, отсутствие у вас доказательств того, что взятый плагиатчиком с вашего сайта текст был написан именно вами, сводит на нет возможность судебного урегулирования подобных споров. В результате все обращения к хостерам и регистраторам доменных имен остаются безрезультатными. Тем не менее, ряд владельцев хостинга весьма негативно относятся к размещаемым на их серверах ГС, поэтому ваше обращение может привести к удалению сайта.
Обращение в поисковые системы может привести к различным результатам. Если вражеский сайт распространяет вирусы или использует черные методы продвижения, вы ускорите его попадание под фильтр. Если же сайт плагиатора представляет собой трастовый web-ресурс, воздействовать на него при помощи поисковых систем будет практически невозможно.
