[X] Помощник

[m0tti Topic Starter]

А как происходит проверка, от точки до точки по предожениям или как то подругому?

[v1ex]

Думаю по количество вхождений слов в статью... По крайней мере, я бы так делал...

[m0tti Topic Starter]

Мне просто все эти синонимазеры ненравяться только из-за бредового изменения предлогов, а так в принципе есть качественные.

[Гость_0_*]

Если разные алгоритмы определения уникальности, самый популярный это конечноже метод шингла. Его главный принцип можно описать примерно такими словами:

Для каждого десятисловия текста рассчитывается контрольная сумма (шингл). Десятисловия идут внахлест, с перекрытием, так, чтобы ни одно не пропало. А затем из всего множества контрольных сумм (очевидно, что их столько же, сколько слов в документе минус 9) отбираются только те, которые делятся на, скажем, 25. Поскольку значения контрольных сумм распределены равномерно, критерий выборки никак не привязан к особенностям текста. Ясно, что повтор даже одного десятисловия – весомый признак дублирования, если же их много, скажем, больше половины, то с определенной (несложно оценить вероятность) уверенностью можно утверждать: копия найдена! Ведь один совпавший шингл в выборке соответствует примерно 25 совпавшим десятисловиям в полном тексте!

А вообще алгоритмы определения уникальности текста у пс развиваются, как и сами пс. Поэтому ИМХО точно мало кто знает достоверно как определяется уникальность. Могу лишь с 99,9% уверенностью сказать, что если вы отключите Интернет и откроете блокнот, в котором напишите текст "с головы", то он будет уникальным

[m0tti Topic Starter]

Если разные алгоритмы определения уникальности, самый популярный это конечноже метод шингла. Его главный принцип можно описать примерно такими словами:

А вообще алгоритмы определения уникальности текста у пс развиваются, как и сами пс. Поэтому ИМХО точно мало кто знает достоверно как определяется уникальность. Могу лишь с 99,9% уверенностью сказать, что если вы отключите Интернет и откроете блокнот, в котором напишите текст "с головы", то он будет уникальным

То есть замене подлежит каждое 10-е слово? и тогда уник?

[m0tti Topic Starter]

На соседнем форуме проскочила инфа то что предлоги не беруться в оценку уникальности это так?

[Гость_0_*]

На счёт педлогов не уверен, и думаю они тоже учитываются.

То есть замене подлежит каждое 10-е слово? и тогда уник?

Абсолютно неверно. Просто внимательнее прочтите моё сообщение

[m0tti Topic Starter]

На счёт педлогов не уверен, и думаю они тоже учитываются.

Абсолютно неверно. Просто внимательнее прочтите моё сообщение

А в картинках нет объяснения, а то трудно понять как формируеться шингл

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.