Отчёт проверок и карта пробелов — итерация 2
Главное. Каждую запись итерации проверили по прочитанному источнику: сниппет поиска за чтение не считался. Затем независимый проверяющий выборочно проверил 106 из 232 итоговых записей (46%), а также 11 записей, которые после проверки…
Заголовок источника
Отчёт проверок и карта пробелов
О статусе материала
review
Главное. Каждую запись итерации проверили по прочитанному источнику: сниппет поиска за чтение не считался. Затем независимый проверяющий выборочно проверил 106 из 232 итоговых записей (46%), а также 11 записей, которые после проверки сняли, и отдельно — 52 утверждения, на которых стоят выводы обзоров. Цель плана была 15–20%. Проверяющий шесть раз находил повторяющиеся ошибки, и каждый раз партии с ошибкой дорабатывались целиком, а исправления проверялись повторно. В проверенной части реестра существенных ошибок не осталось; о непроверенной части можно судить только по частоте ошибок в выборке. Мелкие замечания, которые сознательно не исправлялись, перечислены ниже. Главные пробелы знания — B2B в Европе, именованные откаты в производстве и ВЭД, платёжные агенты, исследования вне США и Европы, связка PDCA/Lean и ML, а также часть X-профилей.
Как проверяли
- Базовая проверка — все записи. Для каждой записи установлено, что источник открылся или сохранён, указаны автор и дата (или «неизвестно»), а текст поддерживает описание. У каждого утверждения есть статус: заявление источника, проверено вторым независимым материалом, противоречие, гипотеза, неизвестно. Недоступные страницы попали в индекс доступа, а не в число прочитанных.
- Независимая выборка — 106 записей, 12 партий. Проверяющий — отдельный исполнитель, не участвовавший в написании проверяемых записей. Выборка покрыла все потоки, Россию, Китай, США, Европу и другие регионы, а также все типы источников. Исходы тоже разные: успехи, смешанные, неудачи, откаты.
- Выводы. Статистику главного обзора пересчитали скриптом по реестру. Числовые, финансовые и причинные утверждения главного обзора и разделов независимо проверены отдельной партией (V11, см. ниже).
Людей-проверяющих не было. «Независимость» здесь означает, что проверяющий сам открывал оригиналы и не видел хода работы автора.
Что нашли и исправили
| Партия | Проверено | Без замечаний / мелкие / существенные / отклонено | Главная находка |
|---|---|---|---|
| V1 — пилот | 10 | 0 / 3 / 7 / 0 | Пилот и R&D поданы как эксплуатация; технологии и полномочия домыслены |
| V2 — закрытие пилота | 24 | 5 / 12 / 7 / 0 | «Практики», где ИИ есть только в дорожной карте или у вендора; текст за платным доступом |
| V3 — Россия, Китай, подходы | 11 | 0 / 6 / 4 / 1 | 万/亿 пересчитаны с ошибкой в 10 раз; прогноз подан как результат |
| V3b — второй проход B2B/B2C/ВЭД | 9 | 0 / 5 / 4 / 0 | Эффект приписан не тому продукту; склеены разные процессы |
| V3c — производство, сквозные процессы | 6 | 0 / 5 / 1 / 0 | Автоматизация без ИИ; «сквозной процесс» по рекламной формулировке |
| V4 — все числа Китая | 18 записей, 133 числа | 6 / 9 / 3 / 0 | Ещё две ошибки × 10 в описательных полях |
| V5 — закрытие и Китай | 14 | 0 / 10 / 4 / 0 | Число отнесено не к той системе; перепечатка принята за оригинал |
| V6 — подходы и наука | 11 | 2 / 7 / 2 / 0 | Цикл PDCA — компоновка автора записи; не указана заинтересованность авторов работ |
| V7 — инфраструктура и наука | 9 | 0 / 7 / 2 / 0 | Цитата-маркер отсутствует в источнике; скрыт конфликт интересов |
| V8 — источники X, Telegram, YouTube | 11 | 0 / 5 / 6 / 0 | Аудитория X «неизвестна», хотя счётчики есть в сохранённых файлах; тизеры приняты за материалы |
| V9 — последние пакеты | 9 | 0 / 6 / 3 / 0 | Детали из поисковых сниппетов |
| V10 — закрытие X и добора | 9 | 1 / 7 / 1 / 0 | Подтверждено: X-профиль читается без логина; закрыто 33 прежних замечания |
| V11 — выводы главного обзора и разделов | 52 утверждения | 28 / 17 / 7 / 0 | Все денежные цифры совпали с реестром и оригиналами; неверны были сводные счётчики (каналы обновления, концептуальные подходы, исходы B2C) и три причинные связки (Stitch Fix, Zillow, Dow) — исправлены |
После каждой находки правила для авторов уточнялись (четыре калибровки), а все затронутые партии дорабатывались целиком. Выборку при этом не расширяли на весь корпус.
- Снято 11 записей. Это Ticketmaster, налоговая служба Кении (KRA), Pentair/Sievo, Юйигуань, IndiGo, National Gallery × Coupa (в двух разных заданиях), Ростелеком × TWIN и ICBC — ИИ в процессе организации не установлен или нет самого процесса. Ещё два случая — дубли прежнего корпуса: Tata Steel и Северсталь «Да Винчи».
- Доступ к платному контенту. Статья HBR о Pactum/Walmart была платной, и автор записи сначала взял её полный текст из разметки страницы. Это обход ограничения доступа, поэтому использована только видимая часть.
- Моя ошибка как координатора. Я записал, что профиль X без логина не читается, и из-за этого аудитория части профилей осталась неизвестной. Проверяющий показал, что данные есть в сохранённых страницах. Ошибку исправили во всех четырёх заданиях по X.
Редактура
Один редакторский проход скиллом ru-text (ru-check) и один контроль ru-score на документ; повторных прогонов ради балла не делали. Для «Операционной модели» скилл ru-check дважды не завершился — выполнена обычная редакторская проверка по тем же критериям.
| Документ | ru-score (контроль) |
|---|---|
| Главный обзор | 9,0 |
| Наука и ML | 8,8 |
| B2B-продажи | 8,8 |
| Экспорт-импорт | 8,6 |
| Отчёт проверок | 8,5 |
| Производство | 8,4 |
| Навигатор источников | 8,1 |
| Операционная модель и эффективность | 8,1 (второй, асинхронный прогон — 6,7) |
| Каталог практик; Индекс оригиналов | 7,7 (по всему файлу вместе с генерируемыми таблицами) |
| B2C | 6,5 (до последней волны грамматических правок и исправления счётчиков; повторно не оценивался) |
После контроля координатор внёс фактические исправления по независимой проверке выводов (V11); повторно язык не оценивался. Баллы ru-score между прогонами колеблются, поэтому решение о достаточности языка — за владельцем.
Открытые мелкие замечания (приняты как ограничения)
- Китай, B2B: возможность платформы («может») частично подана как практика компании (I2-PR-0018).
- ФТС: в описании роли агента не хватает оговорки «по данным брокера»; цитата ФТС пришла через пересказ (I2-PR-0039).
- Sompo, Porto Seguro: «в год» и детали канала не подтверждены (I2-PR-0047, I2-PR-0050).
- Standard Chartered: в одном утверждении не указана Великобритания (I2-PR-0061).
- Kolbjørnsrud (CMR): онлайн-публикация 2023 года не отмечена (подход операционной модели).
- Научные работы по агентам в ERP/CRM: в ключевых выводах не отражены уравновешивающие результаты — Claude близок к уровню человека в ERPBench, данные Dialpad синтетические.
- @ttunguz: для приоритета один содержательный материал; наблюдение счётчиков помечено как «проверено».
- Telegram и YouTube: у канала Губкина выбраны не самые содержательные посты; у AI Journey официальность канала не установлена, видео прочитаны по описанию.
- Klöckner, Zillow: в роли системы остался оборот «сопоставление с товарной базой»; дата «2 ноября» против «начала ноября» (I2-PR-0074, I2-PR-0076).
Объёмы против ориентиров плана
| Ориентир плана v0.9 | Итог | Комментарий |
|---|---|---|
| 60–100 новых уникальных источников | 55 новых сущностей-источников + 88 новых доменов издателей в практиках, подходах и работах; 35 прежних источников существенно обновлены | Сущности (каналы, авторы, центры) и издатели считаются раздельно |
| X 30–40 профилей всего | 26 (16 обновлены, 10 новых) | Недобор после двух адресных проходов: кандидаты ведут только LinkedIn или неактивны, доступ к X без логина нестабилен |
| Российский Telegram 25–35 | 30 (17 обновлены, 13 новых) | Выполнено; один канал переехал (rdushkin → drv_official) |
| Научные работы 40–60, из них arXiv 25–35 | 40 (37 новых, 3 обновлены); arXiv 36 | arXiv чуть выше ориентира; 11 работ прочитаны только по аннотации — выводы ограничены |
| Практики вне медицины 60–90; 10–15 на каждое из четырёх направлений | 76 (71 новая, 5 обновлённых): B2B 12, B2C 19, производство 20, ВЭД 14; сквозные 3, агентная инфраструктура 5, операционная модель 3 | B2C и производство выше ориентира; одна практика считается один раз |
| 12–18 подходов к операционной модели | 26 (22 новых, 4 обновлённых) | Выше ориентира за счёт отдельного китайского потока по просьбе владельца |
| Заданий до 40; поиски до 600; открытия до 1200 | 40 заданий (39 плановых + 1 адресное); 374 поиска; 848 открытий (по самоотчётам) | Резерв не израсходован; расход провайдера в токенах — неизвестен |
Карта пробелов
| Пробел | Что видно | Причина |
|---|---|---|
| B2B в Европе | 2 практики (Klöckner, Maersk) | После двух адресных поисков — только анонимные вендорские кейсы |
| Именованные откаты в производстве и ВЭД | Ни одного | Компании не публикуют; есть лишь агрегированная статистика без названий |
| Российские госзакупки и тендеры с ИИ | Ни одной практики | Найдены только инструменты без названных заказчиков |
| Платёжные агенты ВЭД, поиск зарубежных поставщиков | Ни одной практики | Нет доступных первичных материалов |
| Латинская Америка | 1 практика (Porto Seguro) | Мало доступных материалов на английском; отдельный поиск не планировался |
| PDCA/Lean в связке с ML — наука | Нет работ | Кандидаты за платным доступом Springer |
| Исследования агентов в организациях вне США и Европы | Нет | Два адресных запроса к arXiv без результата |
| Китай: 阿里研究院, 36kr, CAICT | Не заведены или прочитаны по перепечаткам | Сетевое ограничение: TLS к этим доменам обрывается |
| X: аудитория и активность | Часть данных — по снимку одной даты | Нестабильный доступ без логина |
| Причинный эффект ИИ | Не установлен ни в одной практике | Вне предмета итерации; нужен протокол E4 |
Исполнители и параллельность
- Модели. Координатор — Claude Opus 5.5 (claude-opus-5-5, 1M контекст). Исследователи, авторы разделов и редакторы — Claude Sonnet 5 (claude-sonnet-5). Независимая проверка — Claude Opus 5.5 (13 партий, V1–V11); проверяющий не проверял собственных пакетов. Haiku и Codex не использовались. Расхождений с запрошенной схемой (координатор Opus, исследователи Sonnet, проверка Opus) нет.
- Параллельность. Старт — 4 Sonnet (пилот), затем, по просьбе владельца, 6 Sonnet + 1 Opus. Во время доработок кратко работали 7 Sonnet, пока Opus был свободен; общий предел в 7 работников не превышался. Координатор учитывается отдельно.
- Сбой. Один исполнитель прервался ложным срабатыванием фильтра безопасности API; задание перезапустили по сохранённым оригиналам.
- Лимиты. Квоты провайдера не исчерпаны.
Рабочие материалы
Журнал решений, очередь, ledger расхода, все партии проверки и точка продолжения — в папке 02 Рабочие материалы/iteration2-v09/ (decisions.md, queue.json, ledger.jsonl, findings/, CHECKPOINT.md). Реестр — 01 Реестры/iteration2-v0.1/ с манифестом и хешами.