Чесний чек-лист для вчителя і редактора
Перед вами текст, і щось у ньому муляє. Надто гладкий, надто охайний, без характеру. Ви кидаєте його в детектор, а той видає 78%. І що тепер?
Коротко: не поспішайте. Число може почати розмову, але закінчити її не може.
Що оцінка доводить, а що ні
Детектор міряє стиль. Він дивиться, чи рівні речення, як часто трапляються штампи, скільки в тексті сполучників. Хто друкував текст і як він з'явився, детектор не знає.
Висока оцінка каже лише одне: у тексті є ознаки, які часто трапляються в машинних текстах. Авторства це не доводить. І в наших чесних цифрах сигнал скромний: на великому корпусі поточний аналіз знаходить лише невелику частку ШІ-текстів, якщо тримати частку хибних спрацювань на рівні 1%, а сучасні моделі проходять перевірку легше, ніж ранні чат-боти.
Тому ніколи не вирішуйте за однією оцінкою. Ні щоб поставити студентові незадовільно, ні щоб відмовити автору, ні щоб писати звинувачення.
Кого детектор підводить несправедливо
Є чесні автори, які для будь-якого детектора виглядають "машинно":
- ті, хто пише не рідною мовою і тримається простих, правильних конструкцій;
- редактори й журналісти, чий відшліфований текст навмисно вирівняно;
- автори формальних жанрів: звітів, ділових листів, наукового стилю;
- усі, хто пропустив чернетку через граматичну перевірку чи перекладач.
Якщо підозрюваний із цих груп, сумнівайтеся в оцінці вдвічі більше. Ми писали про це в статті Коли детектор плутає людину і ШІ.
Що важить більше, а що менше
Докази не рівні. Найсильніші ті, що показують сам процес: чернетки з датами, історія правок, нотатки й план. Далі жива розмова про текст, бо людина, яка писала, зазвичай пам'ятає, навіщо взяла саме цю думку. Потім порівняння з попередніми роботами того самого автора. І лише наприкінці оцінка детектора: вона описує тільки стиль готового тексту.
Сам чек-лист
Йдіть кроками, у цьому порядку.
- Перечитайте текст самі. Чи є конкретика: імена, дати, живий приклад, помилка, яку зробить лише людина? Чи самі загальні слова?
- Порівняйте з попередніми роботами. Той самий словник, ті самі типові помилки, той самий ритм? Різкий стрибок у гладкості - привід запитати, а не звинуватити.
- Попросіть показати процес. Чернетки, історія версій, нотатки, джерела, які автор читав. Це найсильніший доказ, адже він показує, як текст виник.
- Поговоріть з автором. Десять хвилин запитань про зміст важать більше за будь-який відсоток.
- Якщо все ще кортить, запустіть перевірку. Читайте результат як підказку, куди дивитися.
- Вирішуйте за кількома ознаками водночас і записуйте, якими вони були.
Список знахідок як привід для розмови
AuthorText повертає не лише число. Він показує знахідки з номерами рядків: де штамп, де абзаци майже однакової довжини, де скупчилися сполучники.
Для розмови це зручно: можна спитати про конкретне місце, а не про весь текст. "У рядку 14 написано: "варто зазначити, що це відіграє ключову роль". Що ви тут мали на увазі?" Хто писав цей абзац, той зазвичай пояснить, перефразує або визнає, що запозичив зворот. Хто не писав, той часто губиться.
Та й пояснення не вирок ні в той, ні в інший бік. Штампи люблять багато хто, а текст нейромережі нерідко правлять руками.
Як говорити з автором
- Почніть із цікавості: "Хочу зрозуміти, як з'явився цей текст".
- Називайте те, що побачили, а не висновок: "Ритм дуже рівний, і є кілька типових зворотів".
- Одразу попросіть історію чернеток.
- Запропонуйте коротке завдання на ту саму тему, усно чи письмово, прямо на місці.
- Припустіть, що могли помилитися. Якщо в автора є чернетки і він добре відповідає на запитання, питання закрите.
Розгубився автор - це ще не доказ: багато хто губиться, коли його підозрюють. Дайте час, повторіть запитання спокійніше й не підганяйте. Мета розмови - зрозуміти, а не впіймати.
Не кажіть "детектор показав, що ви списали". Він цього не показував, і автор слушно перестане довіряти всій процедурі.
Що робити
Запишіть свої висновки й причини: так рішення буде чесним і для автора, і для вас. До того ж це захистить вас, якщо суперечка дійде до третіх осіб.
Оцінка - привід придивитися, а не причина карати. Спершу просіть чернетки, потім говоріть, а вирішуйте лише тоді, коли кілька незалежних ознак вказують в один бік. Якщо для розмови потрібен погляд на рівні рядків, перевірте текст в AuthorText і відкрийте список знахідок. А для регулярної роботи погляньте на сторінку тарифів.