Сервисы для обнаружения контента, сгенерированного ИИ

Если есть ИИ-сервисы, которые генерируют контент, то должны быть и те, которые его обнаруживают. Сегодня мы вместе с вами проведем эксперимент и определим топовые сервисы для обнаружения контента, сгенерированного искусственным интеллектом.

Этот материал будет полезен всем, кто работает с текстами любой тематики:

• копирайтерам,
• контент-менеджерам,
• SEO-специалистам,
• маркетологам,
• владельцам сайтов,
• преподавателям,
• студентам,
• юристам.

Зачем выявлять тексты, написанные ChatGPT и другими ИИ-инструментами?

Дело в том, что сгенерированный искусственным интеллектом контент часто бывает низкого качества. Даже Google весной 2024 года дал понять, что будет бороться со спамом и низкокачественным контентом, сгенерированным AI, и снижать позиции таких страниц в выдаче. И это логичная реакция, ведь регулярно в таких материалах можно встретить откровенно вредные советы, которые вредят здоровью людей или их материальному состоянию.

Кроме того, некоторые ответы того же ChatGPT, Copilot, Bard или Gemini иногда лишены фактчекинга, поэтому в тексты может проскользнуть дезинформация и фейковые новости. Также проверять контент на наличие ИИ полезно при написании научных статей, чтобы избежать академического мошенничества.

Как проходил эксперимент?

Чтобы проверить сервисы обнаружения искусственного интеллекта, мы взяли часть нашей статьи о VPN и прокси-серверах. После этого попросили написать небольшой текст на эту же тему у чата GPT, Gemini и Copilot.

К сожалению, не все сервисы понимают украинский язык. Для тех, кто поддерживает исключительно английский, мы также подготовили 4 текста. Один из них – начало известной детской сказки, а три других – произвольные тексты сгенерированные вышеупомянутыми сервисами.

С результатами всех наших проверок вы можете ознакомиться в этом материале. Также мы расскажем, на каких условиях работают эти сервисы, ведь не все они бесплатные.

Smodin

Сервис работает с почти 50 языками, среди которых и украинский. Платные тарифы – от 12$ / месяц при оплате на год вперед. Кроме проверки наличия ИИ Smodin умеет выявлять плагиат и работает как переводчик.

Бесплатно можно проверить 5 текстов за неделю. Smodin не нашел следов ИИ в нашем человеческом тексте о VPN и прокси-серверах.

Содержимое от ChatGPT сервис также обнаружил безошибочно.

Так же Smodin на 100% уверен, что текст, написанный с помощью Copilot, – это творение искусственного интеллекта.

Gemini также не смог обмануть Smodin. Сервис прекрасно справился со своей работой и обнаружил, что текст на 100% сгенерирован AI.

Результаты Smodin по выявлению текста, сгенерированного ИИ, в целом очень хорошие. Добавим, что после регистрации вы сможете бесплатно проверять 5 текстов ежедневно, а не еженедельно.

Winston AI

Прежде всего отметим, что этот ресурс платный – от 12$ в месяц. В тариф также включены проверки текстов на плагиат и картинок на генерацию ИИ. Из хороших новостей – вам предоставляется пробный период, который длится 7 дней. Правда, за это время суммарно можно проверить не более 2000 слов.

Winston AI не понимает украинский язык, поэтому тестировали мы его на английском. И стоит отметить, что выдал он довольно интересные результаты. Особенно это касается сказки. Весь текст Winston AI выделил зеленым цветом, что означает отсутствие использования искусственного интеллекта. Но в своей оценке указал, что текст написан человеком только с вероятностью 11%.

Текст, сгенерированный чатом GPT, был распознан довольно легко.

А вот с Copilot этот сервис не справился. Текст, сгенерированный этим ресурсом, был распознан как созданный человеком.

Наличие ИИ в тексте от Gemini Winston AI определил безошибочно.

Hive

Главное преимущество этого сервиса – он бесплатный. Но украинского также не понимает. Точнее, во всех украинских ИИ-текстах выдает результат, что они на 100% созданы человеком. А вот относительно англоязычных ситуация немного другая. Сказку Hive распознал как текст, в котором почти нет примесей ИИ.

ChatGPT опознан безошибочно.

Что касается Copilot, то здесь Hive немного сомневался, но все же определил, что текст сгенерирован ИИ с большой вероятностью.

Gemini постигла та же участь – 85,5% определено как написанный ИИ текст.

В целом впечатления от использования Hive довольно положительные. Как видите, ресурс неплохо справился со всеми задачами. Заметим лишь, что для проверки нужно брать тексты хотя бы от 750 символов, но лучше от 1500. С другой стороны – максимальная длина текста не должна превышать 8192 символа.

GPTZero

Премиум-версии этого сервиса стартуют от 10$. Но есть бесплатная базовая, позволяющая проверять до 10000 слов в месяц.

К сожалению, сервис также не понимает украинский язык, ведь на различные тексты на соловьином выдает один и тот же результат – 9% вероятности, что контент создан с использованием ИИ.

Что касается английского, то вот что он нам показал на отрывок из сказки.

Как видим, GPTZero все же отдал предпочтение тому, что текст написан человеком. А вот с определением ChatGPT никаких проблем не возникло.

Copilot и здесь смог ввести в заблуждение сервис для определения ИИ. Лишь 40% полностью сгенерированного текста определено как ИИ-контент.

В противостоянии с Gemini победителем оказался GPTZero – в результатах 100%, что текст сгенерирован. Как и есть на самом деле.

Serpstat

Это многофункциональная SEO-платформа. Здесь и поисковая аналитика, и анализ ссылок, и аудит сайта, и мониторинг позиций в поисковой выдаче и т.д. Самый дешевый план «Individual» стоит 600$ в год. Но есть и пробный бесплатный период на 7 дней.

Что касается выявления искусственного интеллекта, то наш текст, написанный для блога HostPro, почему-то вызвал у сервиса определенные сомнения. Но в целом он уверен на 70%, что материал создан человеком.

Текст от ChatGPT Serpstat ошибочно считает созданным человеком.

А вот работа Gemini была признана как сгенерированная искусственным интеллектом.

Copilot также смог ввести Serpstat в заблуждение. Его текст сервис определил на 61% человеческим.

В целом впечатления от работы с этим сервисом именно для определения сгенерированного ИИ контента скорее негативные. Мы проверили с его помощью также наши англоязычные тексты. Из созданных искусственным интеллектом он смог определить только один из трех. А вот тот, что написан человеком, обозначил на 100% сгенерированным ИИ. Создается впечатление, что результаты практически рандомные.

Scribbr

Бесплатный сервис для определения сгенерированного искусственным интеллектом текста. Авторы утверждают, что он за считаные секунды обнаруживает чат GPT3.5, GPT4 и Gemini. Понимает украинский язык, но не проверяет тексты длиннее 500 слов.

Что касается наших задач, то текст, написанный человеком, Scribbr определил как такой, что с вероятностью 25% создал искусственный интеллект.

А вот по поводу ChatGPT создатели AI-детектора не соврали. Присутствие этого виртуального помощника определено безошибочно.

Так же легко разоблачили текст, созданный с помощью Gemini.

Предыдущие сервисы не всегда справлялись с текстом, созданным с помощью Copilot. Но Scribbr выдержал и этот удар.

Лучшие AI-детекторы

Мы сделали удобную табличку, которая показывает результаты нашего эксперимента. В ней можно увидеть, какие из AI-детекторов справились с задачей лучше.

Название сервиса	Текст, написанный человеком	ChatGPT	Gemini	Copilot	Понимает ли украинский язык
Winston AI	+–	+	+	–	–
Hive	+	+	+	+–	–
GPTZero	+–	+	+	–	–
Smodin	+	+	+	+	+
Serpstat	+	–	+	+	+
Scribbr	+	+	+	+	+

В завершение

Можно смело утверждать, что недостатки есть как у сервисов, генерирующих текст с помощью искусственного интеллекта, так и у AI-детекторов, пытающихся его обнаружить. Интересно будет наблюдать за этим соревнованием в будущем.

Что касается нашего эксперимента, то лучшие результаты продемонстрировали Smodin и Scribbr. Оба эти сервисы понимают украинский язык, хорошо справились с поиском текстов, сгенерированных ИИ, а последний еще и полностью бесплатный.