AI Native
Аналитические записки

Отчёт проверок и карта пробелов — итерация 2

Главное. Каждую запись итерации проверили по прочитанному источнику: сниппет поиска за чтение не считался. Затем независимый проверяющий выборочно проверил 106 из 232 итоговых записей (46%), а также 11 записей, которые после проверки…

Заголовок источника

Отчёт проверок и карта пробелов

О статусе материала

review

Главное. Каждую запись итерации проверили по прочитанному источнику: сниппет поиска за чтение не считался. Затем независимый проверяющий выборочно проверил 106 из 232 итоговых записей (46%), а также 11 записей, которые после проверки сняли, и отдельно — 52 утверждения, на которых стоят выводы обзоров. Цель плана была 15–20%. Проверяющий шесть раз находил повторяющиеся ошибки, и каждый раз партии с ошибкой дорабатывались целиком, а исправления проверялись повторно. В проверенной части реестра существенных ошибок не осталось; о непроверенной части можно судить только по частоте ошибок в выборке. Мелкие замечания, которые сознательно не исправлялись, перечислены ниже. Главные пробелы знания — B2B в Европе, именованные откаты в производстве и ВЭД, платёжные агенты, исследования вне США и Европы, связка PDCA/Lean и ML, а также часть X-профилей.

Как проверяли

  1. Базовая проверка — все записи. Для каждой записи установлено, что источник открылся или сохранён, указаны автор и дата (или «неизвестно»), а текст поддерживает описание. У каждого утверждения есть статус: заявление источника, проверено вторым независимым материалом, противоречие, гипотеза, неизвестно. Недоступные страницы попали в индекс доступа, а не в число прочитанных.
  2. Независимая выборка — 106 записей, 12 партий. Проверяющий — отдельный исполнитель, не участвовавший в написании проверяемых записей. Выборка покрыла все потоки, Россию, Китай, США, Европу и другие регионы, а также все типы источников. Исходы тоже разные: успехи, смешанные, неудачи, откаты.
  3. Выводы. Статистику главного обзора пересчитали скриптом по реестру. Числовые, финансовые и причинные утверждения главного обзора и разделов независимо проверены отдельной партией (V11, см. ниже).

Людей-проверяющих не было. «Независимость» здесь означает, что проверяющий сам открывал оригиналы и не видел хода работы автора.

Что нашли и исправили

Партия Проверено Без замечаний / мелкие / существенные / отклонено Главная находка
V1 — пилот 10 0 / 3 / 7 / 0 Пилот и R&D поданы как эксплуатация; технологии и полномочия домыслены
V2 — закрытие пилота 24 5 / 12 / 7 / 0 «Практики», где ИИ есть только в дорожной карте или у вендора; текст за платным доступом
V3 — Россия, Китай, подходы 11 0 / 6 / 4 / 1 万/亿 пересчитаны с ошибкой в 10 раз; прогноз подан как результат
V3b — второй проход B2B/B2C/ВЭД 9 0 / 5 / 4 / 0 Эффект приписан не тому продукту; склеены разные процессы
V3c — производство, сквозные процессы 6 0 / 5 / 1 / 0 Автоматизация без ИИ; «сквозной процесс» по рекламной формулировке
V4 — все числа Китая 18 записей, 133 числа 6 / 9 / 3 / 0 Ещё две ошибки × 10 в описательных полях
V5 — закрытие и Китай 14 0 / 10 / 4 / 0 Число отнесено не к той системе; перепечатка принята за оригинал
V6 — подходы и наука 11 2 / 7 / 2 / 0 Цикл PDCA — компоновка автора записи; не указана заинтересованность авторов работ
V7 — инфраструктура и наука 9 0 / 7 / 2 / 0 Цитата-маркер отсутствует в источнике; скрыт конфликт интересов
V8 — источники X, Telegram, YouTube 11 0 / 5 / 6 / 0 Аудитория X «неизвестна», хотя счётчики есть в сохранённых файлах; тизеры приняты за материалы
V9 — последние пакеты 9 0 / 6 / 3 / 0 Детали из поисковых сниппетов
V10 — закрытие X и добора 9 1 / 7 / 1 / 0 Подтверждено: X-профиль читается без логина; закрыто 33 прежних замечания
V11 — выводы главного обзора и разделов 52 утверждения 28 / 17 / 7 / 0 Все денежные цифры совпали с реестром и оригиналами; неверны были сводные счётчики (каналы обновления, концептуальные подходы, исходы B2C) и три причинные связки (Stitch Fix, Zillow, Dow) — исправлены

После каждой находки правила для авторов уточнялись (четыре калибровки), а все затронутые партии дорабатывались целиком. Выборку при этом не расширяли на весь корпус.

  • Снято 11 записей. Это Ticketmaster, налоговая служба Кении (KRA), Pentair/Sievo, Юйигуань, IndiGo, National Gallery × Coupa (в двух разных заданиях), Ростелеком × TWIN и ICBC — ИИ в процессе организации не установлен или нет самого процесса. Ещё два случая — дубли прежнего корпуса: Tata Steel и Северсталь «Да Винчи».
  • Доступ к платному контенту. Статья HBR о Pactum/Walmart была платной, и автор записи сначала взял её полный текст из разметки страницы. Это обход ограничения доступа, поэтому использована только видимая часть.
  • Моя ошибка как координатора. Я записал, что профиль X без логина не читается, и из-за этого аудитория части профилей осталась неизвестной. Проверяющий показал, что данные есть в сохранённых страницах. Ошибку исправили во всех четырёх заданиях по X.

Редактура

Один редакторский проход скиллом ru-text (ru-check) и один контроль ru-score на документ; повторных прогонов ради балла не делали. Для «Операционной модели» скилл ru-check дважды не завершился — выполнена обычная редакторская проверка по тем же критериям.

Документ ru-score (контроль)
Главный обзор 9,0
Наука и ML 8,8
B2B-продажи 8,8
Экспорт-импорт 8,6
Отчёт проверок 8,5
Производство 8,4
Навигатор источников 8,1
Операционная модель и эффективность 8,1 (второй, асинхронный прогон — 6,7)
Каталог практик; Индекс оригиналов 7,7 (по всему файлу вместе с генерируемыми таблицами)
B2C 6,5 (до последней волны грамматических правок и исправления счётчиков; повторно не оценивался)

После контроля координатор внёс фактические исправления по независимой проверке выводов (V11); повторно язык не оценивался. Баллы ru-score между прогонами колеблются, поэтому решение о достаточности языка — за владельцем.

Открытые мелкие замечания (приняты как ограничения)

  • Китай, B2B: возможность платформы («может») частично подана как практика компании (I2-PR-0018).
  • ФТС: в описании роли агента не хватает оговорки «по данным брокера»; цитата ФТС пришла через пересказ (I2-PR-0039).
  • Sompo, Porto Seguro: «в год» и детали канала не подтверждены (I2-PR-0047, I2-PR-0050).
  • Standard Chartered: в одном утверждении не указана Великобритания (I2-PR-0061).
  • Kolbjørnsrud (CMR): онлайн-публикация 2023 года не отмечена (подход операционной модели).
  • Научные работы по агентам в ERP/CRM: в ключевых выводах не отражены уравновешивающие результаты — Claude близок к уровню человека в ERPBench, данные Dialpad синтетические.
  • @ttunguz: для приоритета один содержательный материал; наблюдение счётчиков помечено как «проверено».
  • Telegram и YouTube: у канала Губкина выбраны не самые содержательные посты; у AI Journey официальность канала не установлена, видео прочитаны по описанию.
  • Klöckner, Zillow: в роли системы остался оборот «сопоставление с товарной базой»; дата «2 ноября» против «начала ноября» (I2-PR-0074, I2-PR-0076).

Объёмы против ориентиров плана

Ориентир плана v0.9 Итог Комментарий
60–100 новых уникальных источников 55 новых сущностей-источников + 88 новых доменов издателей в практиках, подходах и работах; 35 прежних источников существенно обновлены Сущности (каналы, авторы, центры) и издатели считаются раздельно
X 30–40 профилей всего 26 (16 обновлены, 10 новых) Недобор после двух адресных проходов: кандидаты ведут только LinkedIn или неактивны, доступ к X без логина нестабилен
Российский Telegram 25–35 30 (17 обновлены, 13 новых) Выполнено; один канал переехал (rdushkin → drv_official)
Научные работы 40–60, из них arXiv 25–35 40 (37 новых, 3 обновлены); arXiv 36 arXiv чуть выше ориентира; 11 работ прочитаны только по аннотации — выводы ограничены
Практики вне медицины 60–90; 10–15 на каждое из четырёх направлений 76 (71 новая, 5 обновлённых): B2B 12, B2C 19, производство 20, ВЭД 14; сквозные 3, агентная инфраструктура 5, операционная модель 3 B2C и производство выше ориентира; одна практика считается один раз
12–18 подходов к операционной модели 26 (22 новых, 4 обновлённых) Выше ориентира за счёт отдельного китайского потока по просьбе владельца
Заданий до 40; поиски до 600; открытия до 1200 40 заданий (39 плановых + 1 адресное); 374 поиска; 848 открытий (по самоотчётам) Резерв не израсходован; расход провайдера в токенах — неизвестен

Карта пробелов

Пробел Что видно Причина
B2B в Европе 2 практики (Klöckner, Maersk) После двух адресных поисков — только анонимные вендорские кейсы
Именованные откаты в производстве и ВЭД Ни одного Компании не публикуют; есть лишь агрегированная статистика без названий
Российские госзакупки и тендеры с ИИ Ни одной практики Найдены только инструменты без названных заказчиков
Платёжные агенты ВЭД, поиск зарубежных поставщиков Ни одной практики Нет доступных первичных материалов
Латинская Америка 1 практика (Porto Seguro) Мало доступных материалов на английском; отдельный поиск не планировался
PDCA/Lean в связке с ML — наука Нет работ Кандидаты за платным доступом Springer
Исследования агентов в организациях вне США и Европы Нет Два адресных запроса к arXiv без результата
Китай: 阿里研究院, 36kr, CAICT Не заведены или прочитаны по перепечаткам Сетевое ограничение: TLS к этим доменам обрывается
X: аудитория и активность Часть данных — по снимку одной даты Нестабильный доступ без логина
Причинный эффект ИИ Не установлен ни в одной практике Вне предмета итерации; нужен протокол E4

Исполнители и параллельность

  • Модели. Координатор — Claude Opus 5.5 (claude-opus-5-5, 1M контекст). Исследователи, авторы разделов и редакторы — Claude Sonnet 5 (claude-sonnet-5). Независимая проверка — Claude Opus 5.5 (13 партий, V1–V11); проверяющий не проверял собственных пакетов. Haiku и Codex не использовались. Расхождений с запрошенной схемой (координатор Opus, исследователи Sonnet, проверка Opus) нет.
  • Параллельность. Старт — 4 Sonnet (пилот), затем, по просьбе владельца, 6 Sonnet + 1 Opus. Во время доработок кратко работали 7 Sonnet, пока Opus был свободен; общий предел в 7 работников не превышался. Координатор учитывается отдельно.
  • Сбой. Один исполнитель прервался ложным срабатыванием фильтра безопасности API; задание перезапустили по сохранённым оригиналам.
  • Лимиты. Квоты провайдера не исчерпаны.

Рабочие материалы

Журнал решений, очередь, ledger расхода, все партии проверки и точка продолжения — в папке 02 Рабочие материалы/iteration2-v09/ (decisions.md, queue.json, ledger.jsonl, findings/, CHECKPOINT.md). Реестр — 01 Реестры/iteration2-v0.1/ с манифестом и хешами.