Как отличить тексты, созданные ИИ? Поиск решения

ИИ, создающий тексты в рамках образовательного процесса стал главным "пугалом" современных вузов.

Он наглядно подсветил проблему: тексты предоставляемые учащимися в качестве подтверждения достижения образовательных результатов не говорят об их способности к "деятельности" и в рамках компетентностного подхода являются недостаточным подтверждением "гарантированных знаний".

Вузы в Юго-восточной азии постепнно переходят на праксис и формативное оценивание, деятельностные практики с индустриальными партнерами. А россиские вузы в большинстве своем ищут средства "выведения на чистую. Воду" ИИ текстов...

Ну что же. Давайте рассмотрим их.

1️⃣. Антиплагиат
Наиболее распространенный подход выявления заимствований. Сервисы антиплагиата используются в частности для определения "оригинальности" содержания научных статей. Но вот проблема - чем больше текстов проверяет сервис (независимо от того кем они созданы) тем больше плагиата он будет находить. Просто изза того как выстроена архитектура. Попробуйте интереса ради написать абсолютно из головы несколько текстов на разные темы и закинуть их в антиплагиат - там найдется 10-15% "заимствований". И чем дольше мы используем сервис тем эта цифра будет больше.

2️⃣. ZeroGPT
Этот сервис определяет именно сгенерированные ИИ тексты и справляется с этой задачей достаточно неплохо.

Но стоит дать ему текст, написанный человеком и что мы видим - также высокий процент сгенерированности ИИ... Хотя казалось бы...

Причины такие же как у предыдущего решения - просто на круг не так уж и много уникальных сочетаний слов...

3️⃣. Водяные знаки
Водяные знаки - это намеренно зашиваемые в текст на момент генерации маркеры, по которым можно было бы определить ии генерацию. Например по принципу стеганографии.

Правда чтобы это работало, необходимо чтобы все производители генеративного ИИ договорились.

Гугл решил показать пример. Он использует водяной знак DeepMind, созданный на основе технологии SynthID-Text, изменяет слова, которые выбирает модель. Подробнее можно прочитать в журнале Nature. Но до полноценного приенения этого решения еще далековато - ждем договоренности всех остальных.

4️⃣. ИИ для выявления пробелов в понимании
Ну и наконец самое очевидное. Не пытаться выяснить что-то в тексте, который сдал студент, а задать вопросы по текст самому студенту.

Мы используем для этого ИИ-тьютор, создающий вопросы на понимание к тексту и выявляющий недостаточное понимание студента в продемонстрированных им ответах. Это фактическая замена устного экзамена выполненная тем же ии, но с совершенно иного ракурса.

Такой подход для многих вузов кажется либо слишком сложным
либо слишком инновационным. Боязнь всего нового ведет их по пути "запрещения". Но как мы ясно видим, это путь в никуда.

🔠🔠 Если вам интересен пункт 4 из данного списка - пишите в комменты, буду рад передать ваш контакт тем, кто все это настроит и организует :)

💢 ИИ и данные в образовании на канале Дизайн Образования

ИИ для исследований - краткий обзор инструментов

Много было сказано про галлюцинации и ненадежность "знаний GPT". Но "серьезные товарищи" между тем идут путем ансамблирования, объединяя LLM с другими инструментами и создавая сервисы, радующие надежностью выдач.

Именно такие сервисы мы и используем для исследовательской деятельности, поиска и и попытки понять новое. Итак, если вы хотите, быстро въехать в новую тему, копнуть глубже и самостоятельно обучаться с помощью ИИ, или написать очередной диссер с И помощником, то вот что я могу предложить:

🔠🔠🔠🔠🔠🔠☔

1️⃣ Perplexity.ai - исследовательский поисковик с ИИ
Один из первых и наиболее стабильных инструментов, бесплатно доступный в России. Все выдачи GPT проверяются методом поиска в интернете. Perplexity. это по сути усовершенствованный поисковик. Работает также и с файлами.

Вводите любой интересующий вас исследовательский вопрос - получаете детальный ответ со ссылками на источники и кучу доп вопросов, на которые система также готова ответить в развитие темы.

2️⃣ Wisdomplan - создание курсов самообучения

Сервис WisdomplanAI собирает под ваш запрос что-то наподобие курса из интернет источников для самообучения. При этом вы выбираете формат - видео или текст или даже проектное обучение, также вы выбираете глубину погружения и сложность материала. Под эти запросы создается план обучения и вы самостоятельно переходите по ссылкам, выполняя "задачи" внутри курса. В целом работает неплохо хотя и не без погрешностей. Я запросил достаточно нишевую тему и по ней собрался вполне годный контент. Но уже на третьей теме запросило денег...

3️⃣ Litmaps - подбор научных статей под ваш запрос.

Litmaps ищет материалы по ключевому слову, автору, названию и строит графовую визуализацию (карту) взаимного цитирования. Прямо в сервисе читаем Abstract и переходим на первоисточник.


🔠🔠🔠👍

1️⃣ VideoHighlight - саммари и транскрипт видео и текстов.
Аналог того что делает 300.ya.ru но гораздо более подробный и умелый. С GPT 4/0 под капотом - переводит и суммаризирует или делает транскрипт любых видео и статей. Экономит кучу времени (вместо просмотра)

2️⃣ Elicit - поисковик внутри научных публикаций
Еще один поисковик для научных публикаций. Он делает удобную для чтения и серфинга подборку из открытых источников. Дает дополнительный функционал взаимодействия.


3️⃣ STORM - авто исследователь
Созданный в Стэнфорде сервис авто-исследований. Под ваш запрос генерирует полноценные исследования на доступных онлайн источниках. STORM способен сгенерировать статью или даже полноценное исследование со ссылками на источники, прямо как в Википедии.

Также Storm может цитировать источники и создавать научную статью. Статья получается очень подробной, а главное невероятно быстро. Порадовал также функционал "внутреннего обсуждения" - вам становится доступной беседа разных LLM друг с другом по выбранной вами теме и на основе приведенных статей - а-ля размышления группы ученых.

Работает настолько хорошо, что встает вопрос - а зачем тогда будут нужны исследователи?? И как скоро не останется статей написанных человеком.

❓ А какие сервисы для исследования с ИИ используете вы? может быть я еще о некоторых не знаю? делитесь в комментах :)

💢 ИИ и данные в образовании на канале Дизайн Образования