Песочница: BELLAROSA

Intent ID: 15

1) Загрузить файл и получить сырой OCR JSON

Сохраняем последний файл и сырой OCR, чтобы можно было повторно тестировать маппинг без перезагрузки.

2) Правила трансформации

Правила трансформации OCR-данных в целевую схему (включая валидацию).

Промпт LLM-подсказки

Ты создаёшь правила трансформации данных инвойса из сырого OCR в целевую JSON-схему.

Сырой OCR-JSON получен из table_parsing (распознавание таблиц из изображений).
Особенности формата:
- header_text может содержать текст шапки документа (номер, дату, поставщика, AWB и т.д.).
- metadata может быть пустым.
- table.columns — заголовки колонок; могут содержать слипшиеся слова или символ \
"#" распознанный как "1". Могут быть пустыми — тогда определи смысл колонок по данным.
- table.rows — массив строк; каждая строка = массив значений в порядке columns.
- totals_raw — итоговые значения с последней страницы (может быть пустым).
- sections и notes обычно пустые.

<сырой_ocr_json>
{raw_json}
</сырой_ocr_json>

<целевая_json_схема>
{target_schema}
</целевая_json_схема>

=== ШАГ 1: АНАЛИЗ ДАННЫХ (выполни перед генерацией правил) ===

Прежде чем писать правила, ответь себе на вопросы:

1. КОЛОНКИ: если table.columns пуст, определи смысл каждой колонки по данным. \
Для каждого индекса укажи: "колонка N = что это" (число коробок, маркировка, \
название сорта, категория, бантчи, стебли, цена за штуку, итого, номер заказа и т.д.).

2. ТИП ИНВОЙСА — определи по структуре OCR:
   А) Составные коробки (заголовок + детали): есть строки-заголовки (MIXED BOX) \
с общими суммами, за ними строки-детали с отдельными сортами.
   Б) Плоские: каждая строка = одна позиция = одна коробка. Нет MIXED BOX.
   Г) Групповые коробки без агрегата: строка с заполненными Boxes/Order/BoxT = начало \
новой коробки. Эта же строка = первый товар. Последующие строки с пустыми \
Boxes/Order/BoxT = товары в той же коробке. box_number наследуется от строки-заголовка.
   В) Секции по фермам: строки группируются по фермам/HAWB.
   Д) Гибридный (составные + individual в одном инвойсе): строки с PRODUCT = \
"MIXED BOX" открывают группы с деталями ниже, а строки с конкретным сортом \
(не "MIXED BOX"), непустым # и непустым LABEL являются individual box и \
должны маппиться в item напрямую.

3. ФИЗИЧЕСКИЕ КОРОБКИ: найди колонку с количеством физических коробок. \
Колонка # (часто col 0) содержит КОЛИЧЕСТВО физических коробок в строке. \
Значение может быть 1, 2, 6, 14 и т.д. Значение # в строке TOTALS = общее \
число коробок в инвойсе. ВАЖНО: items[].boxes = значение из этой колонки \
(НЕ хардкод 1). Не путай # с числом бантчей/сортов внутри коробки.

4. MIXED BOX — определи, что это значит в данном инвойсе:
   - Вариант 1: одна физическая коробка со смешанными сортами внутри \
(строки-детали = сорта в одной коробке). В этом случае каждая строка-деталь = \
1 item с boxes=1, данные берутся напрямую из строки без деления.
   - Вариант 2: одна строка описывает N одинаковых физических коробок \
(boxes > 1 и нет строк-деталей). В этом случае раскрой: создай N items \
с boxes=1, поделив quantity и total_price на N.
   Подсказка: если после деления quantity получаются дробные стебли (3.125, 1.786) — \
ты неправильно определил что делить. Стебли всегда целые или кратные размеру бантча.
   - Вариант 3: строка с # > 1 и конкретным сортом (не "MIXED BOX") без \
строк-деталей — это N одинаковых коробок с одним сортом. Раскрой в N items \
с boxes=1: quantity_each = quantity / N, total_price_each = total_price / N. \
Генерируй уникальный box_number для каждого раскрытого item.

=== ШАГ 2: БИЗНЕС-ПРАВИЛА ===

РАСКРЫТИЕ МУЛЬТИБОКСА (применяй только для варианта 2 из шага 1):
Если одна строка = N одинаковых физических коробок без строк-деталей — раскрой \
в N отдельных items[] с boxes=1.
Пример: строка "5 boxes, 1500 stems, $750" → 5 строк по boxes=1, quantity=300, \
total_price=150.
При раскрытии мультибокса каждый раскрытый item должен получить УНИКАЛЬНЫЙ box_number. \
Если исходный номер "ORD123" и boxes=3, генерируй "ORD123-1", "ORD123-2", "ORD123-3".
Если MIXED BOX = одна коробка с разными сортами (вариант 1) — НЕ раскрывать. \
Каждая строка-деталь уже описывает один сорт с готовыми quantity и total_price.

НОМЕР КОРОБКИ (box_number):
1. Если в таблице есть колонка Order/LABEL с уникальным номером — используй его.
2. Если уникального номера нет — генерируй: первые 3 буквы названия плантации \
и порядковый номер коробки (QUA1, QUA2, GUI1, BOT1 и т.д.).

ПОДСЧЁТ summary.total_boxes:
Приоритеты:
1. Строка TOTALS: значение в col 0 (#) = сумма физических коробок.
2. Если есть секция "Total Full / F / H / Q / E" — total_boxes = сумма F+H+Q+E \
(Full, Half, Quarter, Eighth).
3. Если BOX N° содержит только group ID (001, 003, 005 — не для каждой физической \
коробки), а total_boxes берётся из секции типов, то BOX N° = group identifier.

МАРКИРОВКА КОРОБКИ (box_marking):
Тип + размер коробки из колонки BOX/BoxT (напр. "HB 2 (120*35*35)", "HB XL 1", "QB"). \
Для строк-деталей бери box_marking из строки-заголовка их коробки.

ПОЛЕ plantation:
- Если есть колонка FARM — бери оттуда (без кодов типа PC602017194).
- Если нет колонки FARM — plantation = название поставщика из metadata или шапки инвойса.
- Mark Code / MARK — это НЕ плантация (часто это код клиента).

ПОЛЯ category, variety, length:
- category: из колонки SPECIES/Species (ROSES, ALSTRO, CARNATION). \
Если нет отдельной колонки — определи по описанию.
- variety: из колонки VARIETY/Description. Если встроена в PRODUCT \
("AMIRA 60CM N 25ST QUCT") — извлеки только название сорта ("AMIRA").
- length: из колонки LEN/Length/Lenght. Если встроена в название ("60CM") — \
извлеки число. Если несколько значений ("40CMN 25ST QUOT") — бери первое число перед CM.

=== ШАГ 3: САМОПРОВЕРКА ===

Мысленно примени свои правила к первым 3-5 строкам данных и проверь:
- quantity в каждом item — целое число или кратное размеру бантча (25, 10). \
Дробные стебли (3.125, 1.786, 14.06) — признак ошибки в правилах.
- unit_price — разумная цена за стебель ($0.20–$5.00 для цветов).
- sum(items[].quantity) ≈ totals.total_stems (если есть в данных).
- sum(items[].total_price) ≈ totals.total_amount (если есть в данных).
- sum(items[].boxes) должно совпадать со значением # в строке TOTALS (если есть в данных).
- count(unique items[].box_number) должен быть разумным (если boxes где-то > 1, \
count(unique box_number) обычно меньше items_count только после корректного раскрытия).
- Каждый item должен иметь непустой box_number.
Если проверка не сходится — пересмотри правила перед ответом.

=== ФОРМАТ ОТВЕТА ===

Верни JSON с единственным ключом:
- "transform_rules": массив коротких правил (строки на русском языке)

КРИТИЧНО — правила будут применяться к НОВЫМ документам того же поставщика, \
где конкретные значения (номера инвойсов, даты, суммы, AWB, количество стеблей) \
будут ДРУГИМИ. Поэтому:

ЗАПРЕЩЕНО включать в правила:
- Конкретные значения из образца: номера инвойсов, даты, AWB, суммы, количества
- Абсолютные индексы строк (индекс 23, индекс 30) — число строк в таблице разное
- Конкретные названия стран или имена клиентов из данного документа

ОБЯЗАТЕЛЬНО сгенерируй правила для processing_report:
- sum_stems = sum(items[].quantity)
- sum_amount = sum(items[].total_price)
- sum_boxes = количество УНИКАЛЬНЫХ непустых items[].box_number
- expected_stems = summary.total_stems
- expected_amount = summary.total_amount
- expected_boxes = summary.total_boxes
- items_count = len(items)
- status: "ok" если всё сошлось, "warning" если расхождения, "error" если ключевые данные не извлечены
- discrepancies: список расхождений (отсутствие box_number, несовпадение сумм и т.д.)
- notes: тип инвойса, кол-во коробок, проблемы при извлечении, раскрытие мультибокса, \
текст "Notice:" если есть
Адаптируй формулы к реальной структуре данных. Если коробки распознаются \
в нестандартных ячейках — опиши откуда именно брать значения и как считать.

ОБЯЗАТЕЛЬНО описывать:
- МЕТОД извлечения: "найти строку с меткой 'MAWB'", "последняя строка таблицы", \
"строка, содержащая 'Totals'"
- Ссылки на КОЛОНКИ по имени и индексу (колонки стабильны между документами)
- ПАТТЕРНЫ поиска: "строка, где колонка 0 содержит 'DAU-'", а не конкретное значение

Пример ПЛОХОГО правила: "summary.total_stems: значение 700 из строки индекс 30."
Пример ХОРОШЕГО правила: "summary.total_stems: найти строку с меткой 'Totals', \
взять значение из колонки 1, преобразовать в число."

Требования к правилам:
1. Ссылайся на названия колонок из table.columns (по индексу и по имени).
2. Опиши как заполнить КАЖДОЕ поле целевой схемы, используя метод извлечения, \
а не конкретные значения.
3. Укажи определённый тип инвойса (А/Б/В) и логику распознавания строк.
4. Укажи МЕТОД извлечения для invoice_number, date, supplier, country, awb: \
по какой метке/паттерну найти значение. Если в сыром OCR есть поле header_text — \
используй его как приоритетный источник для полей шапки (номер, дата, поставщик, страна, AWB).
5. Опиши логику box_number: реальный номер из данных или генерация PREFIX+seq.
6. Если применяется раскрытие мультибокса — опиши логику. \
Если не применяется — явно укажи, что каждая строка-деталь = 1 item без деления.
7. Числовые поля — числа, не строки. Убери "$", "EUR", запятые.
8. Правила валидации: sum(items[].total_price) ≈ summary.total_amount, \
sum(items[].quantity) ≈ summary.total_stems, \
count(unique items[].box_number) = summary.total_boxes.
9. Верни только валидный JSON.

Используется кнопкой «Подсказать rules».

Transform rules (JSON массив строк)

[
  "Тип инвойса: Гибридный (составные + individual). Строки с PRODUCT = 'MIXED BOX' открывают группы с деталями ниже, а строки с конкретным сортом (не 'MIXED BOX'), непустым # и непустым LABEL являются individual box и должны маппиться в item напрямую.",
  "Колонки таблицы (определены по данным, так как table.columns пуст): колонка 0 = # (количество физических коробок), колонка 1 = BOX (маркировка коробки), колонка 2 = PRODUCT (название продукта), колонка 3 = SPECIES (категория), колонка 4 = QTY BUNCH (количество бантчей), колонка 5 = RATE PER BUNCH($) (ставка за бантч), колонка 6 = QTY STEMS (количество стеблей), колонка 7 = RATE PER STEM($) (ставка за стебель), колонка 8 = SUB-TOTAL USD ($) (общая сумма), колонка 9 = LABEL (номер заказа/метка), колонка 10 = BOX NAME (название коробки).",
  "invoice_number: извлечь из строки, где колонка 0 содержит 'Invoice Numbers', взять значение из колонки 1. Если не найдено, искать в header_text по паттерну 'INVOICE' или 'Invoice'.",
  "invoice_date: извлечь из строки, где колонка 0 содержит 'Invoice Date', взять значение из колонки 1 и преобразовать в формат YYYY-MM-DD.",
  "supplier: извлечь из header_text, взять строку после 'CUSTOMER' или первую строку с названием компании. Если не найдено, использовать значение из строки, где колонка 0 содержит 'TO BILL CUSTOMER'.",
  "country: извлечь из строки, где колонка 0 содержит 'Country Destination', взять значение из колонки 1. Если не найдено, определить по адресу поставщика в header_text.",
  "awb: извлечь из строки, где колонка 0 содержит 'MAWB', взять значение из колонки 1 и объединить с HAWB из колонки 3, если присутствует.",
  "items: обрабатывать строки таблицы, начиная с строки, где колонка 0 содержит '#', и до строки, где колонка 2 содержит 'TOTALS'. Для каждой строки: если колонка 2 = 'MIXED BOX', это заголовок группы; следующие строки с пустой колонкой 0 являются деталями этой группы. Если колонка 2 != 'MIXED BOX' и колонка 0 не пуста, это individual box.",
  "box_number: если колонка 9 (LABEL) не пуста, использовать её значение. Если пуста, генерировать на основе supplier (первые 3 буквы) и порядкового номера коробки в инвойсе.",
  "box_marking: взять из колонки 1 (BOX). Для строк-деталей использовать значение из строки-заголовка их группы.",
  "boxes: взять из колонки 0 (#), преобразовать в число. Если значение пустое или равно 0, использовать 1.",
  "plantation: использовать supplier, так как отдельной колонки FARM нет.",
  "category: взять из колонки 3 (SPECIES). Если пусто, определить по описанию в колонке 2 (PRODUCT).",
  "variety: извлечь из колонки 2 (PRODUCT), взяв первое слово до пробела или цифры.",
  "length: извлечь из колонки 2 (PRODUCT), найти паттерн 'XXCM' и взять число перед 'CM'.",
  "quantity: взять из колонки 6 (QTY STEMS), преобразовать в число, убрав нечисловые символы.",
  "unit_price: взять из колонки 7 (RATE PER STEM($)), преобразовать в число, убрав '$' и другие нечисловые символы.",
  "total_price: взять из колонки 8 (SUB-TOTAL USD ($)), преобразовать в число, убрав '$' и другие нечисловые символы.",
  "summary.total_boxes: найти строку, где колонка 2 содержит 'TOTALS', взять значение из колонки 0 (#) и преобразовать в число.",
  "summary.total_stems: найти строку, где колонка 2 содержит 'TOTALS', взять значение из колонки 6 (QTY STEMS) и преобразовать в число.",
  "summary.total_amount: найти строку, где колонка 2 содержит 'TOTALS', взять значение из колонки 8 (SUB-TOTAL USD ($)) и преобразовать в число, убрав '$'.",
  "processing_report.sum_stems: вычислить как сумму items[].quantity.",
  "processing_report.sum_amount: вычислить как сумму items[].total_price.",
  "processing_report.sum_boxes: вычислить как количество уникальных непустых items[].box_number.",
  "processing_report.expected_stems: взять из summary.total_stems.",
  "processing_report.expected_amount: взять из summary.total_amount.",
  "processing_report.expected_boxes: взять из summary.total_boxes.",
  "processing_report.items_count: вычислить как len(items).",
  "processing_report.status: установить 'ok', если sum_stems = expected_stems, sum_amount = expected_amount, и sum_boxes = expected_boxes; иначе 'warning'.",
  "processing_report.discrepancies: добавить строки для каждого несовпадения между sum_* и expected_*, а также для items с пустым box_number.",
  "processing_report.notes: включить тип инвойса, количество коробок, и любые проблемы при извлечении данных."
]

Сырой OCR JSON (Pass 1)

{
  "awb": "145-99817690",
  "items": [
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "CANDLELIGHT",
      "category": "ROSES",
      "quantity": 50.0,
      "box_number": "BEL-001",
      "plantation": "BellaRosa",
      "unit_price": 0.3,
      "box_marking": "HB2(120*35*35)",
      "total_price": 15.0
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "KAHALA",
      "category": "ROSES",
      "quantity": 25.0,
      "box_number": "BEL-001",
      "plantation": "BellaRosa",
      "unit_price": 0.35,
      "box_marking": "HB2(120*35*35)",
      "total_price": 8.75
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "OPALA",
      "category": "ROSES",
      "quantity": 150.0,
      "box_number": "BEL-001",
      "plantation": "BellaRosa",
      "unit_price": 0.3,
      "box_marking": "HB2(120*35*35)",
      "total_price": 45.0
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "QUEEN'S CROWN",
      "category": "ROSES",
      "quantity": 25.0,
      "box_number": "BEL-001",
      "plantation": "BellaRosa",
      "unit_price": 0.3,
      "box_marking": "HB2(120*35*35)",
      "total_price": 7.5
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "SWEET CAKE",
      "category": "ROSES",
      "quantity": 25.0,
      "box_number": "BEL-001",
      "plantation": "BellaRosa",
      "unit_price": 0.35,
      "box_marking": "HB2(120*35*35)",
      "total_price": 8.75
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "MAGNOLIA ROSE",
      "category": "ROSES",
      "quantity": 125.0,
      "box_number": "BEL-002",
      "plantation": "BellaRosa",
      "unit_price": 0.35,
      "box_marking": "HB2(120*35*35)",
      "total_price": 43.75
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "OPALA",
      "category": "ROSES",
      "quantity": 225.0,
      "box_number": "BEL-002",
      "plantation": "BellaRosa",
      "unit_price": 0.3,
      "box_marking": "HB2(120*35*35)",
      "total_price": 67.5
    }
  ],
  "country": "Kyrgyz Republic (Kyrgyzstan)",
  "summary": {
    "total_boxes": 2.0,
    "total_stems": 625.0,
    "total_amount": 196.25
  },
  "supplier": "BellaRosa",
  "invoice_date": "2026-04-02",
  "invoice_number": "5178059",
  "processing_report": {
    "notes": "Тип инвойса: Гибридный (составные + individual). Обнаружено 2 физические коробки. Раскрытие мультибокса применено. Все ключевые данные успешно извлечены.",
    "status": "ok",
    "sum_boxes": 2,
    "sum_stems": 625.0,
    "sum_amount": 196.25,
    "items_count": 7,
    "discrepancies": [],
    "expected_boxes": 2.0,
    "expected_stems": 625.0,
    "expected_amount": 196.25
  }
}

Результат (Pass 2)

Report: ok

items=8, boxes=3/3.0, stems=1350.0/1350.0, amount=328.5/328.5

notes: Invoice type: Hybrid (grouped + individual). Detected 3 physical boxes. No issues detected. Multiboxes successfully expanded.

{
  "awb": "145-9981 7605 PC603000453",
  "items": [
    {
      "boxes": 1,
      "length": "40CM",
      "variety": "BRIGHTON",
      "category": "ROSES",
      "quantity": 100.0,
      "box_number": "2925349",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.22,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 22.0
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "BRIGHTON",
      "category": "ROSES",
      "quantity": 400.0,
      "box_number": "2925349",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.22,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 88.0
    },
    {
      "boxes": 1,
      "length": "40CM",
      "variety": "BRIGHTON",
      "category": "ROSES",
      "quantity": 125.0,
      "box_number": "2925351",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.22,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 27.5
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "BRIGHTON",
      "category": "ROSES",
      "quantity": 375.0,
      "box_number": "2925351",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.22,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 82.5
    },
    {
      "boxes": 1,
      "length": "40CM",
      "variety": "BRIGHTON",
      "category": "ROSES",
      "quantity": 50.0,
      "box_number": "2923500",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.22,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 11.0
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "FORTUNE",
      "category": "ROSES",
      "quantity": 100.0,
      "box_number": "2923500",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.3,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 30.0
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "LOLA",
      "category": "ROSES",
      "quantity": 150.0,
      "box_number": "2923500",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.35,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 52.5
    },
    {
      "boxes": 1,
      "length": "50CM",
      "variety": "NINA",
      "category": "ROSES",
      "quantity": 50.0,
      "box_number": "2923500",
      "plantation": "BELLARO S.A.S.",
      "unit_price": 0.3,
      "box_marking": "HB 2 (120*35*35)",
      "total_price": 15.0
    }
  ],
  "country": "Kyrgyz Republic (Kyrgyzstan)",
  "summary": {
    "total_boxes": 3.0,
    "total_stems": 1350.0,
    "total_amount": 328.5
  },
  "supplier": "BELLARO S.A.S.",
  "invoice_date": "2026-02-27",
  "invoice_number": "5174921",
  "processing_report": {
    "notes": "Invoice type: Hybrid (grouped + individual). Detected 3 physical boxes. No issues detected. Multiboxes successfully expanded.",
    "status": "ok",
    "sum_boxes": 3,
    "sum_stems": 1350.0,
    "sum_amount": 328.5,
    "items_count": 8,
    "discrepancies": [],
    "expected_boxes": 3.0,
    "expected_stems": 1350.0,
    "expected_amount": 328.5
  }
}

История (последние 20)

ID	Файл	Дата
70	5174921.pdf	2026-03-02 09:24:44.222614+00:00	Excel
68	5174921.pdf	2026-03-02 07:59:32.827994+00:00	Excel
67	5174921.pdf	2026-03-02 07:56:32.692509+00:00	Excel
38	5173995.pdf	2026-02-24 05:36:26.755550+00:00	Excel
17	5173995.pdf	2026-02-23 16:45:59.742777+00:00	Excel