Предсказание следующего слова – и почему этого хватает
Внутри любой языковой модели – ChatGPT, DeepSeek, GigaChat, какой угодно – нет базы знаний со строчками фактов. Есть гигантская статистическая машина, обученная на триллионах слов делать одну-единственную вещь: предсказывать, какой кусочек текста вероятнее всего идёт следующим. Всё остальное – диалог, перевод, код, стихи про вашего кота – побочный эффект того, что предсказывать следующее слово хорошо можно, только если ты в каком-то смысле «понял» язык и мир, описанный текстами.
Это не философия, а практичный факт: модель не «достаёт ответ из базы», а сочиняет его на лету, слово за словом. Держите эту картинку в голове – она объясняет почти всё странное поведение ИИ, с которым вы столкнётесь.
Токены: почему тарифы считают не в словах
Модель режет текст на токены – кусочки от одной буквы до целого слова. «Привет» может быть одним токеном, а «электрокардиограмма» – пятью. Все лимиты и цены ИИ-сервисов считаются в токенах, и тут есть неочевидное следствие: русский текст «дороже» английского – тот же смысл занимает в полтора-два раза больше токенов, потому что модели исторически обучались в основном на английском и режут его экономнее.
Контекст: гигантская память с дырой посередине
Контекстное окно – это всё, что модель «видит» в данный момент: ваш запрос, история переписки, вставленные документы. За последние пару лет окна выросли от «пары страниц» до сотен страниц и даже целых книг – туда можно целиком положить договор, отчёт или базу знаний компании.
Но есть особенность, о которой редко пишут в рекламе: внимание модели по этому окну распределено неравномерно. Начало и конец она видит отлично, а вот середину длинного текста – заметно хуже. У исследователей это называется «lost in the middle», потерялось в середине. Практический вывод простой: самое важное – вопрос, инструкцию, ключевое требование – кладите в начало или в конец запроса, не хороните в середине.
Вставьте в любой ИИ-чат длинный текст (страниц пять) и спрячьте в середине фразу «кодовое слово – апельсин». Спросите в конце: «какое кодовое слово в тексте?» Хорошие модели справятся – но чем длиннее текст и глубже закопана фраза, тем чаще будут промахи. Вы только что своими руками проверили «lost in the middle».
Модель не учится на ваших разговорах
Частый страх новичка: «я пишу ему про свой бизнес – он это запомнит и расскажет конкурентам». Устроено не так. Сама модель заморожена: её обучение закончилось до того, как вы открыли чат, и ваши сообщения её веса не меняют. Новый чат – чистый лист, модель не помнит вас.
А вот что действительно есть – это надстройки поверх модели. «Память» в настройках сервиса (сервис сам записывает факты о вас и подкладывает их в контекст каждого нового чата) и галочка «использовать мои данные для обучения будущих версий» – её в серьёзной работе стоит найти и выключить. Разница важная: первое – удобство, второе – та самая передача данных, которой боятся.
Галлюцинации: реже, но никуда не делись
Модель сочиняет ответ, а не цитирует базу – поэтому иногда сочиняет то, чего нет: несуществующую статью закона, выдуманную книгу, неверную цифру. Современные модели делают это гораздо реже, чем пару лет назад, и чаще честно говорят «не знаю» – но полностью проблема не решена и в обозримом будущем не решится: она встроена в сам принцип работы.
Рабочих стратегии три. Первая – дать модели источник: вставить документ, цифры, текст прямо в запрос и попросить отвечать только по нему. Вторая – включить режим поиска, если он есть у сервиса: модель сначала найдёт живые страницы в интернете, потом ответит с ссылками на них. Третья – для всего, за что вы отвечаете деньгами или репутацией: перепроверить руками. ИИ – это очень быстрый и эрудированный стажёр, а не нотариус.
Быстрые и «думающие» модели: главный сдвиг последних лет
У большинства сервисов теперь два режима (или две модели): обычный – отвечает сразу, и рассуждающий – модель сначала «думает» (генерирует внутреннюю цепочку рассуждений, иногда десятки секунд), потом отвечает. На сложных задачах – математика, право, многоходовое планирование, разбор противоречивых данных – рассуждающий режим ощутимо точнее.
Проверьте себя
Отвечайте сколько угодно раз – это тренировка, не Финальный тест на сертификат.
1. Откуда языковая модель берёт ответ на ваш вопрос?
2. Почему русский текст «расходует» больше токенов, чем английский?
3. Куда в длинном запросе лучше класть самое важное?
4. Запоминает ли сама модель ваши разговоры?
5. Для какой задачи стоит включать «думающий» (рассуждающий) режим?