Выявление плагиата — Википедия
![](http://upload.wikimedia.org/wikipedia/commons/thumb/3/32/Plagiarism_detection_Methods_Detection_Performance_ru.png/440px-Plagiarism_detection_Methods_Detection_Performance_ru.png)
Ана́лиз плагиа́та (определение плагиата, выявление плагиата) — это компьютерные методы поиска и обнаружения плагиата [1].
Плагиат (англ. plagiarism) — это использование, перефразирование и подведение итогов работы в любой форме без подтверждения ссылками на источники и представление её как своей собственной работы [2].
Плагиат — это заимствование чужой работы, будь то преднамеренно или непреднамеренно, как своей, ради собственной выгоды[3].
В настоящее время существует достаточно большое количество сервисов и программ, позволяющих каким-либо образом выявить плагиат . Также существует ряд компьютерных методов обнаружения плагиата .
Проблема плагиата
[править | править код]Плагиат с появлением Интернета превратился в серьёзную проблему. Попав в Интернет, знание становится достоянием всех, соблюдать авторское право становится всё труднее и даже невозможно[4]. Постепенно становится сложнее определить первоначального автора.
Стремительное развитие сети Интернет, наряду с увеличивающейся компьютерной грамотностью, способствует проникновению плагиата в различные сферы человеческой деятельности: плагиат является острой проблемой в образовании, промышленности и научном сообществе [5].
Плагиат является преступлением. Это вводит в заблуждение читателей, приносит ущерб автору, и предоставляет незаслуженные блага плагиатору [6].
Широкий доступ к отечественной и зарубежной литературе, многократное увеличение числа профессиональных изданий, публикаций в Интернете — всё это практически сводит на нет какие бы то ни было редакторские стремления «проверить» или «установить» подлинность и оригинальность аргументов и фактов, используемых в рукописях, предлагаемых к публикации [7].
Методы обнаружения плагиата
[править | править код]![](http://upload.wikimedia.org/wikipedia/commons/thumb/2/25/%D0%9C%D0%B5%D1%82%D0%BE%D0%B4%D1%8B_%D0%B2%D1%8B%D1%8F%D0%B2%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F_%D0%BF%D0%BB%D0%B0%D0%B3%D0%B8%D0%B0%D1%82%D0%B0.svg/260px-%D0%9C%D0%B5%D1%82%D0%BE%D0%B4%D1%8B_%D0%B2%D1%8B%D1%8F%D0%B2%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F_%D0%BF%D0%BB%D0%B0%D0%B3%D0%B8%D0%B0%D1%82%D0%B0.svg.png)
На иллюстрации представлена классификация методов компьютерного обнаружения плагиата с технической точки зрения.
- Методы характеризуются по типу оценки сходства.
Глобальная оценка использует большие части текста или документа для нахождения сходства в целом, в то время как локальные методы на входе проверяют ограниченный сегмент текста.
- В настоящее время наиболее распространённым подходом является Дактилоскопия:
Из ряда документов выбирается набор из нескольких подстрок, которые и являются «отпечатками». Рассматриваемый документ будет сравниваться с «отпечатками» для всех документов коллекции. Найденные соответствия с другими документами указывают на общие сегменты текста[8].
- Проверка документа дословным перекрытием текста представляет собой классическое сравнение строк.
Проверка подозрительных документов в этой ситуации требует расчёта и хранения эффективно сопоставимые представления всех документов в справочной коллекции, которые сравниваются попарно. Как правило, используют модели, такие как суффиксное дерево или суффиксный массив, которые были адаптированы для выполнения этой задачи в контексте компьютерного обнаружения плагиата. Однако сопоставление подстроки является нежизнеспособным решением для проверки больших коллекций документов (алгоритм отрабатывает в среднем 2h сравнений, где h — длина строки, в которой ведётся поиск)[9].
Анализ "множества слов"[англ.] является упрощением представления, используемого в обработке естественного языка и поиска информации. В этой модели текст представлен как неупорядоченный набор слов. Документы представлены в виде одного или нескольких векторов, которые используются для попарного вычисления сходства[10][11][12].
- Цитирование — компьютерный метод выявления плагиата, предназначенный для использования в научных документах, позволяющий использовать цитаты и справочный материал. Определяет общие цитаты двух научных работ.
Шаблон цитат представляет собой подпоследовательности, содержащие не только общие цитаты для двух документов, но и подобный порядок и близость цитат в тексте, являющихся основными критериями для определения шаблона цитат[13][14][15][16].
- Стилометрия или изучение языковых стилей — это статистический метод для выявления авторства анонимных документов и для компьютерной проверки на плагиат.
Строятся стилометрические модели для различных фрагментов текста, отрывков, которые стилистически отличаются от других. И путём сравнения моделей можно обнаружить плагиат[17].
Например, анализ на основе последовательностей частей речи. Рассматривается способ разбиения текста на фрагменты однородности. В качестве параметров разбиения берутся различные последовательности частей речи. Далее проводится анализ фрагментов. И в результате для текста находятся последовательности, которые выделяли из текстов фрагменты, то есть алгоритм выделяет из текста фрагменты неоднородности, имеющие разные частоты встречаемости выбранной последовательности частей речи, что показывает на возможный плагиат в данном месте[18].
Обзор существующих систем
[править | править код]В настоящее время существует достаточно большое количество сервисов и программ, позволяющих каким-либо образом выявить заимствования.[19] В числе таковых можно назвать: систему «Антиплагиат», Advego Plagiatus, Unicheck, miratools.ru, istio.com, Praide Unique Content Analyser II, Plagiatinform, Copyscape.
- Система «Антиплагиат»
Система разработана компанией «Форексис»[20]. Система осуществляет онлайн поиск по большому количеству документов, хранящихся в собственной базе системы, по базам данных партнеров, в том числе: Российская государственная библиотека, Научная электронная библиотека ELibrary.ru, компания Lexpro, а также по базе данных пользователя. «Антиплагиат» осуществляет поиск по сети Интернет собственными средствами и поэтому обладает меньшей оперативностью чем системы, использующие Яндекс. XML. В бесплатной версии системы доступна только сокращенная форма отчета.
- Программа Advego Plagiatus
Программа осуществляет онлайн проверку с использованием поисковых систем[21]. В отличие от аналогичных систем, Advego Plagiatus не использует Яндекс.XML (бесплатный сервис, предоставляющий возможность производить автоматические поисковые запросы к «Яндексу» и публиковать его выдачу у себя на ресурсе).
Программа выдаёт процент совпадения текста и выводит найденные источники. Программа не преобразует буквы, то есть нет преобразования регистра, нет обработки и изменения латинских букв в русских словах на аналогичные буквы русского алфавита для текстов на русском языке.
Также отсутствует поддержка поиска по собственной базе; из-за особенностей работы возникают ситуации, когда результаты проверки отличаются от раза к разу.
- Сервис Unplag
Сервис проверки на плагиат Unplag[22] может осуществлять проверку на плагиат как в режиме реального времени онлайн, так и сравнивать документ с сохраненной базой документов в библиотеке пользователя. Поддерживает работу с различными типами документов. Есть персональная и корпоративная программы. Также работает с системой управления курсами Moodle, Canvas, Blackboard, Sakai[источник не указан 2948 дней].
- Сервис www.miratools.ru
Сервис позволяет осуществлять онлайн проверку текста на плагиат[23]. Система использует результаты выдачи поисковых систем. Существует возможность замены английских букв на русские. Также имеется возможность изменения длины и шага шингла, используемых для проверки. По результатам проверки выдаётся процент совпадений и найденные источники. Система не работает с собственной базой, существует ограничение на длину текста в 3000 символов и ограничение на число проверок в течение суток.
- Сервис www.istio.com
Сервис осуществляет проверку текста на наличие заимствованного контента с использованием поисковых систем Яндекс.XML и Yahoo.com.[24]. По результатам проверки выдаётся сообщение о том, является ли текст уникальным или нет, и выдаётся список подобных страниц сайтов. Сервис предоставляет дополнительные средства для анализа текстов, например, проверку орфографии, анализ наиболее частотных слов и т. д. У системы отсутствует преобразование букв и поиск по собственной базе.
- Программа Praide Unique Content Analyser II
Программа проверяет тексты с использованием поисковых систем[25]. Имеется возможность выбора используемых поисковых систем, содержит средства добавления новых поисковых систем. Проверка осуществляется шинглами, длину которых можно изменять. Можно задавать количества слов перекрытия шинглов. Выводится подробный отчёт по проверке в каждой поисковой системе. В программе отсутствует замены букв, обработка стоп-слов и нет поддержки работы с собственной базой.
- Система Plagiatinform
Система проверяет документы на наличие заимствований как в локальной базе, так и в сети Интернет[26]. Система умеет находить плагиат в виде документов, скомпонованных из «перемешанных» кусков текста нескольких источников. Проверка может осуществляться с использованием быстрого или углублённого поиска. Результаты проверки выдаются в виде наглядного отчёта. Отсутствует преобразование букв. Отсутствует возможность свободного использования или тестирования системы.
- Сервис Copyscape
Система Copyscape позволяет осуществлять поиск копий веб-страниц в Интернете[27]. Система возвращает список веб-страниц, у которых есть похожий по содержанию текст. Сервис осуществляет проверку на наличие заимствованного контента с использованием поисковых систем Google и Yahoo!
Проверяется только контент веб страницы, то есть, для выяснения уникальности текста необходимо опубликовать текст на сайте и ввести в системе адрес страницы. Без регистрации существует ограничение на количество проверок в месяц и на количество отображаемых результатов — 10 сайтов. Для зарегистрированных пользователей нет ограничений на количество проверок и выводимых результатов, но каждый запрос стоит 5 центов.
Соревнования по определению плагиата
[править | править код]Выявление плагиата (особенно перефразированного) является активно изучаемой инженерной и научной проблемой. Соревнования по автоматическому выявлению плагиата регулярно проводятся под эгидой инициативы PAN[28]. Первое соревнование по выявлению плагиата в русскоязычных документах прошло в 2017 году в рамках конференции по компьютерной лингвистике «Диалог»[29].
См. также
[править | править код]Примечания
[править | править код]- ↑ Stein, Koppel, 2011.
- ↑ ACT BSSS, 2011.
- ↑ Johnston, 2008.
- ↑ Аушра, 2006.
- ↑ Дягилев, Цхай, Бутаков, 2011, pp. 23.
- ↑ Bouville, 2008, pp. 331.
- ↑ Ушакин, 2001.
- ↑ Brin, Davis, Garcia-Molina, 2001, pp. 36-41.
- ↑ Monostori, Zaslavsky, Schmidt, 2000, pp. 226–227.
- ↑ Leong, Lau, Rynson, 1997, pp. 70-77.
- ↑ Dreher, 2007, pp. 601-614.
- ↑ Muhr, Zechner, 2009, pp. 47-55.
- ↑ Gipp, Beel, 2009, pp. 571–575.
- ↑ Gipp, Beel, 2010, pp. 273–274.
- ↑ Gipp, Meuschke, Beel, 2011, pp. 255–258.
- ↑ Gipp, Meuschke, 2011, pp. 249–258.
- ↑ Meyer zu Eissen, Stein, 2006, pp. 565–569.
- ↑ Седов, Рогов, 2013.
- ↑ Шарапов, Шарапова, 2011.
- ↑ antiplagiat.ru — Антиплагиат Архивная копия от 13 октября 2012 на Wayback Machine
- ↑ advego.ru — проверка уникальности текста . Дата обращения: 9 декабря 2012. Архивировано 11 декабря 2012 года.
- ↑ Plagiarism Checker Unplag Provides You with Real-Time Reporting (англ.). unplag.com. Дата обращения: 21 июля 2016. Архивировано 14 июля 2016 года.
- ↑ miratools.ru — Сервис проверки уникальности контента Архивная копия от 9 декабря 2012 на Wayback Machine
- ↑ istio.com — Сервис анализа текстов и сайтов . Дата обращения: 9 декабря 2012. Архивировано 9 декабря 2012 года.
- ↑ Praide unique content analyzer — Проверка уникальности текста в Интернете . Дата обращения: 9 декабря 2012. Архивировано из оригинала 20 ноября 2012 года.
- ↑ plagiatinform.ru — Система для определения плагиата в документах Архивная копия от 29 июля 2012 на Wayback Machine
- ↑ copyscape.com — Copyscape Plagiarism Checker . Дата обращения: 9 декабря 2012. Архивировано 8 декабря 2012 года.
- ↑ PAN is a series of scientific events and shared tasks on digital text forensics . Дата обращения: 5 сентября 2017. Архивировано из оригинала 15 сентября 2017 года.
- ↑ Соревнование по поиску заимствований в русскоязычных текстах . Дата обращения: 5 сентября 2017. Архивировано 5 сентября 2017 года.
Литература
[править | править код]- на русском языке
- Аушра А. Научная электронная библиотека как средство борьбы с плагиатом // Международный форум Educational Technology & Society 9(3). — 2006. Архивировано 20 сентября 2016 года.
- Дягилев В. В., Цхай А. А., Бутаков С. В. Архитектура сервиса определения плагиата, исключающая возможность нарушения авторских прав // Вестник НГУ. Серия:Информационные технологии.. — 2011. (недоступная ссылка)
- Ушакин С. Плагиат? Об этике в науке // Общественные науки и современность. — 2001.
- Седов А. В., Рогов А. А. Анализ неоднородностей в тексте на основе последовательностей частей речи. // Современные проблемы науки и образования.. — 2013. — Вып. 1.
- Шахрай С. М., Аристер Н. И., Тедеев А. А. О плагиате в произведениях науки (диссертациях на соискание учёной степени): научно-методическое пособие. — М.: МИИ, 2014. — 176 с. — 1000 экз. — ISBN 978-5-00077-056-6. Архивная копия от 25 октября 2015 на Wayback Machine
- Шарапов Р. В., Шарапова Е. В. Система проверки текстов на заимствования из других источников // Всероссийская научная конференция Электронные библиотеки: Перспективные методы и технологии, электронные коллекции.. — 2011.
- на других языках
- Brin S., Davis J., Garcia-Molina H. Copy Detection Mechanisms for Digital Documents (англ.) // Vine.. — 2001.
- Bouville M. Plagiarism: Words and ideas (англ.) // Science and Engineering Ethics. — 2008.
- Dreher H. Automatic Conceptual Analysis for Plagiarism Detection (англ.) // Information and Beyond: The Journal of Issues in Informing Science and Information Technology. — 2007.
- Johnston B. The concept of plagiarism (англ.). — 2008. (недоступная ссылка)
- Gipp B., Beel J. Citation Proximity Analysis (CPA) – A new approach for identifying related work based on Co-Citation Analysis (англ.) // International Society for Scientometrics and Informetrics. — 2009. Архивировано 13 сентября 2012 года.
- Gipp B., Beel J. Citation Based Plagiarism Detection - A New Approach to Identify Plagiarized Work Language Independently. (англ.) // ACM. — 2010. Архивировано 25 апреля 2012 года.
- Gipp B., Meuschke N., Beel J. Comparative Evaluation of Text- and Citation-based Plagiarism Detection Approaches using GuttenPlag. (англ.) // ACM. — 2011. Архивировано 25 апреля 2012 года.
- Gipp B., Meuschke N. Citation Pattern Matching Algorithms for Citation-based Plagiarism Detection: Greedy Citation Tiling, Citation Chunking and Longest Common Citation Sequence. (англ.) // ACM. — 2011. Архивировано 25 апреля 2012 года.
- Leong A., Lau H., Rynson W. H. Check: A Document Plagiarisment Detection System (англ.) // ACM. — 1997.
- Meyer zu Eissen S., Stein B. Intrinsic Plagiarism Detection. (англ.) // Springer. — 2006. Архивировано 2 апреля 2012 года.
- Monostori K., Zaslavsky A., Schmidt H. Document Overlap Detection System for Distributed Digital Libraries (англ.) // ACM. — 2000. Архивировано 15 апреля 2012 года.
- Muhr M., Zechner M. External and Intrinsic Plagiarism Detection. Using Vector Space Models (англ.). — 2009. Архивировано 2 апреля 2012 года.
- Stein B., Koppel M. Plagiarism Analysis, Authorship Identification, and Near-Duplicate Detection PAN’07 (англ.) // ACM SIGIR Forum.. — 2011. Архивировано 2 апреля 2012 года.
- ACT BSSS. What is plagiarism? How can you avoid it. (англ.) // ACT Board of Senior Secondary Studies.. — 2011. Архивировано 18 апреля 2013 года.
- How Plagiarism Tool Works (англ.) // Unplag Wiki. — 2015.