Песочница: MUCH

Intent ID: 18

1) Загрузить файл и получить сырой OCR JSON

Сохраняем последний файл и сырой OCR, чтобы можно было повторно тестировать маппинг без перезагрузки.

2) Правила трансформации

Правила трансформации OCR-данных в целевую схему (включая валидацию).

Промпт LLM-подсказки

Ты создаёшь правила трансформации данных инвойса из сырого OCR в целевую JSON-схему.

Сырой OCR-JSON получен из table_parsing (распознавание таблиц из изображений).
Особенности формата:
- metadata может быть пустым (table_parsing не извлекает шапку инвойса).
- table.columns — заголовки колонок; могут содержать слипшиеся слова или символ "#" распознанный как "1". Могут быть пустыми — тогда определи смысл колонок по данным.
- table.rows — массив строк; каждая строка = массив значений в порядке columns.
- totals_raw — итоговые значения с последней страницы (может быть пустым).
- sections и notes обычно пустые.

<сырой_ocr_json>
{raw_json}
</сырой_ocr_json>

<целевая_json_схема>
{target_schema}
</целевая_json_схема>

=== ШАГ 1: АНАЛИЗ ДАННЫХ (выполни перед генерацией правил) ===

Прежде чем писать правила, ответь себе на вопросы:

1. КОЛОНКИ: если table.columns пуст, определи смысл каждой колонки по данным. Для каждого индекса укажи: "колонка N = что это" (число коробок, маркировка, название сорта, категория, бантчи, стебли, цена за штуку, итого, номер заказа и т.д.).

2. ТИП ИНВОЙСА — определи по структуре OCR:
   А) Составные коробки (заголовок + детали): есть строки-заголовки (MIXED BOX) с общими суммами, за ними строки-детали с отдельными сортами.
   Б) Плоские: каждая строка = одна позиция = одна коробка. Нет MIXED BOX.
   В) Секции по фермам: строки группируются по фермам/HAWB.

3. ФИЗИЧЕСКИЕ КОРОБКИ: найди колонку с количеством физических коробок. Это число обычно 1 для каждой строки-заголовка. Не путай с числом бантчей/сортов внутри коробки — это разные колонки!

4. MIXED BOX — определи, что это значит в данном инвойсе:
   - Вариант 1: одна физическая коробка со смешанными сортами внутри (строки-детали = сорта в одной коробке). В этом случае каждая строка-деталь = 1 item с boxes=1, данные берутся напрямую из строки без деления.
   - Вариант 2: одна строка описывает N одинаковых физических коробок (boxes > 1 и нет строк-деталей). В этом случае раскрой: создай N items с boxes=1, поделив quantity и total_price на N.
   Подсказка: если после деления quantity получаются дробные стебли (3.125, 1.786) — ты неправильно определил что делить. Стебли всегда целые или кратные размеру бантча.

=== ШАГ 2: БИЗНЕС-ПРАВИЛА ===

РАСКРЫТИЕ МУЛЬТИБОКСА (применяй только для варианта 2 из шага 1):
Если одна строка = N одинаковых физических коробок без строк-деталей — раскрой в N отдельных items[] с boxes=1.
Пример: строка "5 boxes, 1500 stems, $750" → 5 строк по boxes=1, quantity=300, total_price=150.
Если MIXED BOX = одна коробка с разными сортами (вариант 1) — НЕ раскрывать. Каждая строка-деталь уже описывает один сорт с готовыми quantity и total_price.

НОМЕР КОРОБКИ (box_number):
1. Если в таблице есть колонка Order/LABEL с уникальным номером — используй его.
2. Если уникального номера нет — генерируй: первые 3 буквы названия плантации + порядковый номер коробки (QUA1, QUA2, GUI1, BOT1 и т.д.).

МАРКИРОВКА КОРОБКИ (box_marking):
Тип + размер коробки из колонки BOX/BoxT (напр. "HB 2 (120*35*35)", "HB XL 1", "QB"). Для строк-деталей бери box_marking из строки-заголовка их коробки.

ПОЛЕ plantation:
- Если есть колонка FARM — бери оттуда (без кодов типа PC602017194).
- Если нет колонки FARM — plantation = название поставщика из metadata или шапки инвойса.
- Mark Code / MARK — это НЕ плантация (часто это код клиента).

ПОЛЯ category, variety, length:
- category: из колонки SPECIES/Species (ROSES, ALSTRO, CARNATION). Если нет отдельной колонки — определи по описанию.
- variety: из колонки VARIETY/Description. Если встроена в PRODUCT ("AMIRA 60CM N 25ST QUCT") — извлеки только название сорта ("AMIRA").
- length: из колонки LEN/Length/Lenght. Если встроена в название ("60CM") — извлеки число. Если несколько значений ("40CMN 25ST QUOT") — бери первое число перед CM.

=== ШАГ 3: САМОПРОВЕРКА ===

Мысленно примени свои правила к первым 3-5 строкам данных и проверь:
- quantity в каждом item — целое число или кратное размеру бантча (25, 10). Дробные стебли (3.125, 1.786, 14.06) — признак ошибки в правилах.
- unit_price — разумная цена за стебель ($0.20–$5.00 для цветов).
- sum(items[].quantity) ≈ totals.total_stems (если есть в данных).
- sum(items[].total_price) ≈ totals.total_amount (если есть в данных).
Если проверка не сходится — пересмотри правила перед ответом.

=== ФОРМАТ ОТВЕТА ===

Верни JSON с единственным ключом:
- "transform_rules": массив коротких правил (строки на русском языке)

КРИТИЧНО — правила будут применяться к НОВЫМ документам того же поставщика, где конкретные значения (номера инвойсов, даты, суммы, AWB, количество стеблей) будут ДРУГИМИ. Поэтому:

ЗАПРЕЩЕНО включать в правила:
- Конкретные значения из образца: номера инвойсов, даты, AWB, суммы, количества
- Абсолютные индексы строк (индекс 23, индекс 30) — число строк в таблице разное
- Конкретные названия стран или имена клиентов из данного документа

ОБЯЗАТЕЛЬНО описывать:
- МЕТОД извлечения: "найти строку с меткой 'MAWB'", "последняя строка таблицы", "строка, содержащая 'Totals'"
- Ссылки на КОЛОНКИ по имени и индексу (колонки стабильны между документами)
- ПАТТЕРНЫ поиска: "строка, где колонка 0 содержит 'DAU-'", а не конкретное значение

Пример ПЛОХОГО правила: "summary.total_stems: значение 700 из строки индекс 30."
Пример ХОРОШЕГО правила: "summary.total_stems: найти строку с меткой 'Totals', взять значение из колонки 1, преобразовать в число."

Требования к правилам:
1. Ссылайся на названия колонок из table.columns (по индексу и по имени).
2. Опиши как заполнить КАЖДОЕ поле целевой схемы, используя метод извлечения, а не конкретные значения.
3. Укажи определённый тип инвойса (А/Б/В) и логику распознавания строк.
4. Укажи МЕТОД извлечения для invoice_number, date, supplier, country, awb: по какой метке/паттерну найти строку и из какой колонки взять значение.
5. Опиши логику box_number: реальный номер из данных или генерация PREFIX+seq.
6. Если применяется раскрытие мультибокса — опиши логику. Если не применяется — явно укажи, что каждая строка-деталь = 1 item без деления.
7. Числовые поля — числа, не строки. Убери "$", "EUR", запятые.
8. Правила валидации: sum(items[].total_price) ≈ summary.total_amount, sum(items[].quantity) ≈ summary.total_stems.
9. Верни только валидный JSON.

Используется кнопкой «Подсказать rules».

Transform rules (JSON массив строк)

[
  "Тип инвойса: Гибридный (Д) — строки с PRODUCT = 'MIXED BOX' открывают группы с деталями ниже, строки с конкретным сортом (не 'MIXED BOX'), непустым # и непустым LABEL являются individual box и маппятся напрямую.",
  "Колонки (определены по данным, индексы 0-11): 0 — # (количество физических коробок), 1 — BOX (маркировка коробки), 2 — PRODUCT (название продукта/сорта), 3 — SPECIES (категория), 4 — FARM (плантация), 5 — QTY BUNCH (количество бантчей), 6 — RATE PER BUNCH($) (цена за бантч), 7 — QTY STEMS (количество стеблей), 8 — RATE PER STEM($) (цена за стебель), 9 — SUB-TOTAL USD ($) (сумма), 10 — LABEL (номер заказа/метка), 11 — BOX NAME (название коробки).",
  "invoice_number: найти строку, где колонка 0 содержит 'Invoice Numbers', взять значение из колонки 1.",
  "invoice_date: найти строку, где колонка 0 содержит 'Invoice Date', взять значение из колонки 1, преобразовать в формат YYYY-MM-DD.",
  "supplier: найти строку, где колонка 0 содержит 'TO BILL CUSTOMER', взять значение из колонки 0 (первая часть до запятой, если есть).",
  "country: найти строку, где колонка 0 содержит 'TO BILL CUSTOMER', извлечь название страны из значения колонки 0 (последняя часть после запятой).",
  "awb: найти строку, где колонка 1 содержит 'HAWB', взять значение из колонки 2.",
  "items: обрабатывать строки таблицы, начиная с заголовка колонок (строка, где колонка 0 содержит '#') и до строки, где колонка 2 содержит 'TOTALS'.",
  "Для строк с PRODUCT = 'MIXED BOX' (заголовок коробки): создать группу, где box_number берётся из колонки 10 (LABEL) строки-заголовка, box_marking из колонки 1, boxes из колонки 0, plantation из колонки 4. Последующие строки с пустыми колонками 0 и 1 — детали этой коробки.",
  "Для строк-деталей в группе MIXED BOX: каждый item — одна строка, boxes=1 (значение из колонки 0 строки-заголовки), box_number наследуется от строки-заголовки, box_marking наследуется, plantation наследуется, category из колонки 3, variety из колонки 2 (извлечь название сорта до первого числа, если встроено), length извлечь из колонки 2 (первое число перед 'CM'), quantity из колонки 7, unit_price из колонки 8 (убрать '$', преобразовать в число), total_price из колонки 9 (убрать '$', преобразовать в число).",
  "Для строк с конкретным сортом (не 'MIXED BOX'), непустыми колонками 0 и 10: каждый item — одна строка, boxes из колонки 0, box_number из колонки 10, box_marking из колонки 1, plantation из колонки 4, category из колонки 3, variety из колонки 2 (извлечь название сорта до первого числа), length извлечь из колонки 2 (первое число перед 'CM'), quantity из колонки 7, unit_price из колонки 8 (убрать '$', преобразовать в число), total_price из колонки 9 (убрать '$', преобразовать в число).",
  "Раскрытие мультибокса: если boxes > 1 и строка не является заголовком MIXED BOX, раскрыть в N отдельных items с boxes=1, quantity_each = quantity / N, total_price_each = total_price / N, генерировать уникальные box_number как исходный_номер + '-' + порядковый_номер (1..N).",
  "Если box_number отсутствует (пустая колонка 10): сгенерировать как первые 3 буквы plantation + порядковый номер коробки в инвойсе (начиная с 1).",
  "summary.total_boxes: найти строку, где колонка 2 содержит 'TOTALS', взять значение из колонки 0, преобразовать в число.",
  "summary.total_stems: найти строку, где колонка 2 содержит 'TOTALS', взять значение из колонки 7, преобразовать в число.",
  "summary.total_amount: найти строку, где колонка 2 содержит 'TOTALS', взять значение из колонки 9, убрать '$', преобразовать в число.",
  "Валидация: sum(items[].total_price) должно приблизительно равняться summary.total_amount, sum(items[].quantity) — summary.total_stems, sum(items[].boxes) — summary.total_boxes.",
  "Числовые поля (boxes, quantity, unit_price, total_price, summary.*) преобразовывать в числа, убирая символы валют и нечисловые символы.",
  "Поля строк (invoice_number, invoice_date, supplier, country, awb, box_number, box_marking, plantation, category, variety, length) оставлять как строки, обрезая пробелы."
]

Сырой OCR JSON (Pass 1)

{
  "awb": "PC603005651",
  "items": [
    {
      "boxes": 1,
      "length": "70CM",
      "variety": "ALSTRO WHITE",
      "category": "ALSTROEMERIA",
      "quantity": 180,
      "box_number": "Cot1",
      "plantation": "Cotacachi Exportcalas",
      "unit_price": 0.24,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 43.2
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO WHITE",
      "category": "ALSTROEMERIA",
      "quantity": 160,
      "box_number": "Cot2",
      "plantation": "Cotacachi Exportcalas",
      "unit_price": 0.28,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 44.8
    }
  ],
  "country": "KZ",
  "summary": {
    "total_boxes": 2,
    "total_stems": 340,
    "total_amount": 88.0
  },
  "supplier": "TDA KAZAKHSTAN KAZAKHSTAN",
  "invoice_date": "2026-03-06",
  "invoice_number": "90403145",
  "processing_report": {
    "notes": "Тип инвойса: Плоский (индивидуальные коробки). Обнаружено 2 физических коробок. Box numbers сгенерированы согласно правилу (первые 3 буквы плантации + порядковый номер). Раскрытие мультибокса не применялось.",
    "status": "warning",
    "sum_boxes": 2,
    "sum_stems": 340,
    "sum_amount": 88.0,
    "items_count": 2,
    "discrepancies": [
      "Box number generated for item 'ALSTRO WHITE 70CM'. Original box_number (column 10) was empty.",
      "Box number generated for item 'ALSTRO WHITE 80CM'. Original box_number (column 10) was empty."
    ],
    "expected_boxes": 2,
    "expected_stems": 340,
    "expected_amount": 88.0
  }
}

Результат (Pass 2)

Report: warning

items=14, boxes=5.0/15.0, stems=2340.0/2540.0, amount=730.4/748.4

discrepancies: Summary total_boxes (15.0) does not match sum of unique item boxes (5.0).; Summary total_stems (2540.0) does not match sum of item quantities (2340.0).; Summary total_amount (748.4) does not match sum of item total prices (730.4).

notes: Гибридный тип инвойса. Обнаружено 5 физических коробок (уникальные номера боксов). Применено раскрытие мультибокса для 2 позиций. Расхождения в итоговых суммах.

{
  "awb": "PC602020702",
  "items": [
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO BICOLOR",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 64.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO HOT PINK",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 64.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO LAVENDER",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 64.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO ORANGE",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 64.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO PINK",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 64.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO PURPLE",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 64.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO RED",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 64.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO WHITE",
      "category": "ALSTROEMERIA",
      "quantity": 100.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 32.0
    },
    {
      "boxes": 1,
      "length": "80CM",
      "variety": "ALSTRO YELLOW",
      "category": "ALSTROEMERIA",
      "quantity": 100.0,
      "box_number": "ALT-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.32,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 32.0
    },
    {
      "boxes": 1.0,
      "length": "60CM",
      "variety": "ALSTRO RED",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-2-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.24,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 48.0
    },
    {
      "boxes": 1.0,
      "length": "60CM",
      "variety": "ALSTRO RED",
      "category": "ALSTROEMERIA",
      "quantity": 200.0,
      "box_number": "ALT-2-2",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.24,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 48.0
    },
    {
      "boxes": 1.0,
      "length": "70CM",
      "variety": "ALSTRO RED",
      "category": "ALSTROEMERIA",
      "quantity": 180.0,
      "box_number": "ALT-3-1",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.26,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 46.8
    },
    {
      "boxes": 1.0,
      "length": "70CM",
      "variety": "ALSTRO RED",
      "category": "ALSTROEMERIA",
      "quantity": 180.0,
      "box_number": "ALT-3-2",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.26,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 46.8
    },
    {
      "boxes": 1.0,
      "length": "70CM",
      "variety": "ALSTRO RED",
      "category": "ALSTROEMERIA",
      "quantity": 180.0,
      "box_number": "ALT-3-3",
      "plantation": "Alto Exportcalas",
      "unit_price": 0.26,
      "box_marking": "QB 3 (41.73*7.3*6.3)",
      "total_price": 46.8
    }
  ],
  "country": "KZ",
  "summary": {
    "total_boxes": 15.0,
    "total_stems": 2540.0,
    "total_amount": 748.4
  },
  "supplier": "TDA KAZAKHSTAN KAZAKHSTAN",
  "invoice_date": "2026-02-18",
  "invoice_number": "90399824",
  "processing_report": {
    "notes": "Гибридный тип инвойса. Обнаружено 5 физических коробок (уникальные номера боксов). Применено раскрытие мультибокса для 2 позиций. Расхождения в итоговых суммах.",
    "status": "warning",
    "sum_boxes": 5.0,
    "sum_stems": 2340.0,
    "sum_amount": 730.4,
    "items_count": 14,
    "discrepancies": [
      "Summary total_boxes (15.0) does not match sum of unique item boxes (5.0).",
      "Summary total_stems (2540.0) does not match sum of item quantities (2340.0).",
      "Summary total_amount (748.4) does not match sum of item total prices (730.4)."
    ],
    "expected_boxes": 15.0,
    "expected_stems": 2540.0,
    "expected_amount": 748.4
  }
}

История (последние 20)

ID	Файл	Дата
37	90399824.pdf	2026-02-24 05:35:31.564632+00:00	Excel
28	90399824.pdf	2026-02-23 17:15:37.868961+00:00	Excel