Критерии качественного рерайта

void аватар
4
void, 08.06.2009 11:51

Как с математической точностью узнать, попадает ли рерайт в дубли или нет?

1
Дима аватар
405
Дима, 08.06.2009 13:16

Я знаю о двух стратегиях определения дублей.

1. Шинглы.

Я понимаю это так. Есть текст:

Цитата:
Через 10 минут Иван Арнольдович и Шариков, одетый в кепку с утиным носом и в драповое пальто с поднятым воротником, уехали в цирк. В квартире стихло. Филипп Филиппович оказался в своем кабинете. Он зажег лампу под тяжелым зеленым колпаком, отчего в громадном кабинете стало очень мирно, и начал мерять комнату.

Нарезаем текст на последовательности, например, по 7 слов, со сдвигом в одно слово. То есть

Цитата:
минут Иван Арнольдович Шариков одетый кепку утиным
Иван Арнольдович Шариков одетый кепку утиным носом
Арнольдович Шариков одетый кепку утиным носом драповое
Шариков одетый кепку утиным носом драповое пальто
...

Дальше для каждой последовательности генерируем, например, md5 хеш.

Прогоняем таким образом два текста -- получаем два массива хешей. Считаем процент сходства и узнаем, насколько два текста различаюстя.

2. По самым частым словам.

Считаем количество употребления каждого слова в тексте, строим рейтинг по популярности. Сравниваем, например, топ-10 слов разных текстов -- получаем некоторые сведения для оценки сходства.

1
void аватар
4
void, 08.06.2009 16:24

Спасибо. А нет готовых сервисов/скриптов?

0
Robotti аватар
83
Robotti, 08.06.2009 16:33

Знаю такую программу Shingles Expert. Позволяет сравнивать два текста с помощью шинглов. Вроде бесплатная.

1
Snob аватар
320
Snob, 29.10.2009 13:12

"void" писал(а):
Спасибо. А нет готовых сервисов/скриптов?

Юзайте DCFinder

1
Elena аватар
4
Elena, 04.11.2009 10:20

Инфо одного профи.
Цирирую:
"Advego Plagiatus – программа поиска в интернете частичных или полных копий текстового документа с интуитивным интерфейсом. Адвего Плагиатус показывает степень уникальности текста, источники текста, процент совпадения текста. Также программа проверяет уникальность указанного URL.

Программу проверил, работает адекватно, Антиплагиат даже рядом не стоял, DCFinder тоже, бесплатна в отличие от платных сервисов

0
Soft-Lab аватар
127
Soft-Lab, 05.11.2009 13:16

Интересно было бы услышать критерии сравнения с DCF

0
Soft-Lab аватар
127
Soft-Lab, 05.11.2009 13:42

"Robotti" писал(а):
Знаю такую программу Shingles Expert. Позволяет сравнивать два текста с помощью шинглов. Вроде бесплатная.

Бесплатная и бесполезная.

1
Дима аватар
405
Дима, 05.11.2009 13:53

Я думаю, что хорошая программа проверки уникальности должна поддерживать проверку сразу нескольких текстов (всех со всеми), а не только двух. Потому что рерайты могу получиться похожими.

Не помню, чтобы видел такую функциональность.

1
Soft-Lab аватар
127
Soft-Lab, 05.11.2009 14:12

"Дима" писал(а):
Не помню, чтобы видел такую функциональность.

Где-то видел программу которая считала по пятисловному шинглу. сравнивала один текст с множеством. А вот насчет программы которая сравнивает множество со множеством... действительно не встречалась. Мое мнение, подобные анализаторы уникальности от лукавого, и рассчитаны на засерание поискового индекса всякой мутью. Если нужны стати, то пишите их сами, или заказывайте.
Мы заказываем, одну статью очень хорошему райтеру а потом отдаем 10-20 и т.д. крестьянам от райтинга на рерайт. получается уникально.

2

Теги к теме Критерии качественного рерайта