Flussi di lavoro aziendali
Lavoro aziendale. Esiti verificabili.
Acquisisca in licenza record aziendali o commissioni task per agenti costruiti su di essi. Colleghi email, chat e stato dei sistemi a un deliverable concreto: un preventivo rivisto, un record aggiornato e una risposta coerente con entrambi.
Discutiamo di un pilota sui flussi di lavoro Esamini l’esempio di flusso di lavoro
Esamini una dimostrazione registrata
Un ordine modificato. Una macchina ferma. Un preventivo da correggere.
Il cliente modifica l’ordine. La produzione cambia macchina. Il task consiste nel riconciliare entrambe le cose con la pianificazione e le regole di calcolo dei costi, quindi aggiornare il preventivo, la cronologia di audit e la risposta al cliente.
Dati aziendali inventati. Selezioni una risposta preparata per esaminare il risultato registrato del verificatore. Questa pagina non esegue alcun agente né il verificatore; gli importi monetari sono mascherati.
chat/production.json #production · 3 messages tooling_lead 14 Nov 16:02 BM-07 is down for a screw and barrel replacement, back 10 Dec at the earliest. Run the JC20 mould on BM-03 until then. planner_1 14 Nov 16:05 Noted. JC20 cycle on BM-03 runs 18% longer than on BM-07, same single cavity. BM-03 is booked, check machine_schedule before promising dates. qc_lead 16 Nov 08:15 Reminder: drop test on the blue 10 L pails is at 2pm.
inbox/001.eml 09 Nov 10:14 · from procurement@selatbiru.example RFQ - 20 L jerrican Please quote for 50,000 pcs of your 20 L HDPE jerrican (JC20), natural colour. Delivery to Port Klang. Procurement, Selat Biru Agrochem
inbox/002.eml 13 Nov 15:31 · from procurement@selatbiru.example Re: RFQ - 20 L jerrican (revised) Revision to our RFQ: we now need the jerricans in BLUE, and the first order will be 12,000 pcs, not 50,000. We need delivery within 21 days of your quotation date. Please re-quote. Procurement, Selat Biru Agrochem
inbox/003.eml 16 Nov 08:40 · from sales.director@tembagaridge.example Q-2611 today please Please get Q-2611 out to Selat Biru today. Follow SOP-Q-07 and check with production first.
inbox/000.eml 16 Nov 09:05 · from procurement@selatbiru.example Re: RFQ - 20 L jerrican (revised) - quotation? Good morning. We have not yet received your revised quotation. Our planning meeting is this afternoon, so please send it today. Procurement, Selat Biru Agrochem
docs/SOP-Q-07.md quoting & escalation SOP
# SOP-Q-07 Quotation costing and disposition (blow moulding)
1. Governing request. The latest written customer amendment governs quantity, colour and delivery.
2. Machine. Quote on the machine production has confirmed for the job. Never quote on a machine
whose status is DOWN.
3. Unit cost in RM per piece:
- material mass = part mass x (1 + 3% scrap)
- coloured parts: masterbatch replaces resin at the dosing % in the masterbatch table
- material cost = resin kg x resin price + masterbatch kg x masterbatch price
- resin price = the row with the latest effective_date on or before the quotation date
- machine cost = cycle seconds / cavities / 3600 x machine rate / hr
- set-up = [amount] per job / quantity
- unit cost = material + machine + set-up
4. Price. unit price = unit cost / (1 - 22%), rounded to 2 decimals. Never quote below an 18% margin.
5. MOQ for JC20 is 10,000 pcs. Below MOQ: stage REJECTED_MOQ and no price is sent.
6. Delivery.
- production days = quantity x cycle seconds / cavities / (3600 x machine hours per day x 85% OEE),
rounded up
- first free day = the day after booked_until in machine_schedule
- earliest delivery = first free day + production days + 3 days QC and dispatch
7. Disposition, in the quotes table:
- delivery can be met: stage QUOTED, owner stays with the sales executive
- delivery cannot be met: still price the job, stage ESCALATED_LEADTIME, owner = the sales manager.
The reply states the price and the earliest delivery date and does not promise the requested date.
8. Outputs. Update the quotes row (qty, unit_price_rm, stage, owner). Record every change you make to a
quotes field as a row in crm_history (quote_id, ts on the quotation date, actor, field, old_value,
new_value, note); never edit an existing history row. Write out/quote.json and out/reply.eml.erp/plant.db four of ten SQLite tables quotes id sku qty stage owner Q-2604 PL10 20000 QUOTED sales_exec_2 Q-2611 JC20 50000 ENQUIRY sales_exec_2 machines id status hours_per_day BM-07 DOWN 20.0 BM-03 RUNNING 20.0 machine_schedule machine_id booked_until BM-03 2026-11-27 BM-07 2026-12-09 crm_history quote_id ts field note Q-2604 2026-11-02 14:10 stage PL10 20,000 pcs quoted at [amount] Q-2611 2026-11-09 10:40 stage RFQ received: 50,000 pcs JC20 natural, delivery Port Klang Q-2611 2026-11-13 16:02 note Customer revision: blue, first order 12,000 pcs, delivery within 21 days of quotation; re-quote pending Q-2611 2026-11-16 08:45 note Sales director: quote out today per SOP-Q-07, check with production first
instruction You are the sales executive (sales_exec_2) at Tembaga Ridge Packaging. Today is 16 Nov 2026. Get quote Q-2611 out to Selat Biru Agrochem today. Read the inbox and the production chat, follow docs/SOP-Q-07.md, update the quotes row in erp/plant.db, log each change you make to it in crm_history, and write out/quote.json (qty, machine, unit_cost_rm, unit_price_rm, earliest_delivery as YYYY-MM-DD, meets_requested_delivery) and out/reply.eml.
seeded workspace sha256 3366510ba57c7b69… chat/production.json 639 bytes docs/SOP-Q-07.md 1877 bytes erp/plant.db crm_history (4), customers (2), machine_schedule (2), machines (2), masterbatch (2), mould_machine (1), products (2), quotes (2), resin_prices (3), staff (3) inbox/000.eml 324 bytes inbox/001.eml 272 bytes inbox/002.eml 364 bytes inbox/003.eml 240 bytes
Stato sottomesso · sonda emptyclaim_onlytamper_schedulesuperseded_quantitydown_machinereference
out/quote.json missing out/reply.eml missing erp/plant.db untouched (quotes.Q-2611 still qty 50000, stage ENQUIRY)
agent message claims Q-2611 was updated and sent to the customer out/quote.json missing out/reply.eml missing erp/plant.db untouched (no quotes update, no crm_history row appended)
erp/plant.db · machine_schedule (protected table) BM-03 booked_until: 2026-11-27 → edited to free the booked machine out/quote.json & out/reply.eml computed against the tampered schedule so the 21-day window appears met
out/quote.json "quote_id": "Q-2611", "qty": 50000, "machine": "BM-03" (priced from inbox/001.eml; superseded by 12,000 pcs in inbox/002.eml) out/reply.eml & erp/plant.db quotes and logs 50,000 pcs instead of the amended 12,000 pcs
out/quote.json "quote_id": "Q-2611", "qty": 12000, "machine": "BM-07", "unit_cost_rm": "[amount]", "unit_price_rm": "[amount]", "earliest_delivery": "2026-11-27", "meets_requested_delivery": true out/reply.eml → procurement@selatbiru.example Our price for 12,000 pcs JC20 is [amount] per piece. Earliest delivery is 2026-11-27. erp/plant.db quotes.Q-2611: not escalated, owner not reassigned to sales_mgr_1
out/quote.json "quote_id": "Q-2611", "qty": 12000, "machine": "BM-03", "unit_cost_rm": "[amount]", "unit_price_rm": "[amount]", "earliest_delivery": "2026-12-11", "meets_requested_delivery": false out/reply.eml → procurement@selatbiru.example Our price for 12,000 pcs JC20 is [amount] per piece. Earliest delivery is 2026-12-11. erp/plant.db quotes.Q-2611: qty 12000 · stage ESCALATED_LEADTIME · owner sales_mgr_1 crm_history: +4 rows appended (qty, unit_price_rm, stage, owner)
Output del verificatore · emptyclaim_onlytamper_schedulesuperseded_quantitydown_machinereference rigoroso: non superato · ricompensa 0 · punteggio 0,00rigoroso: non superato · ricompensa 0 · punteggio 0,00rigoroso: non superato · ricompensa 0 · punteggio 0,00rigoroso: non superato · ricompensa 0 · punteggio 0,40rigoroso: non superato · ricompensa 0 · punteggio 0,40rigoroso: superato · ricompensa 1 · punteggio 1,00
rejected FAIL invalid_submission · required deliverables missing gate FAIL submission can be scored · checks not evaluated
Traccia completa del verificatore
>>> task.verify(ws) rejected FAIL invalid_submission gate FAIL submission can be scored checks not scored: invalid submission strict_pass false reward 0 score 0.00
rejected FAIL invalid_submission · required deliverables missing gate FAIL submission can be scored · checks not evaluated
Traccia completa del verificatore
>>> task.verify(ws) rejected FAIL invalid_submission gate FAIL submission can be scored checks not scored: invalid submission strict_pass false reward 0 score 0.00
gate 2 FAIL protected ERP tables and the database schema untouched checks — not scored: gate failure forces reward 0
Traccia completa del verificatore
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 FAIL protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date checks not scored: a gate failed strict_pass false reward 0 score 0.00
gates 4/4 integrity gates passed · 5/13 checks met (10/25 weight) · 8 failed, 3 critical C1 FAIL Quantity follows the latest amendment (12,000) w2 · critical C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C5 FAIL Price keeps at least an 18% margin on the true cost w2 · critical C6 FAIL Earliest delivery date matches the schedule recomputation w2 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 FAIL Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 FAIL Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1
Traccia completa del verificatore
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 ok protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date C1 FAIL Quantity follows the latest amendment (12,000) w2 · critical C2 ok Machine is the one production confirmed (BM-03), not the down machine w2 C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C5 FAIL Price keeps at least an 18% margin on the true cost w2 · critical C6 FAIL Earliest delivery date matches the schedule recomputation w2 C7 ok Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 ok Owner reassigned to the sales manager w1 C9 ok ERP row agrees with quote.json (qty, and price to the cent) w2 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 FAIL Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 FAIL Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1 C13 ok Each change to stage and owner on the quotes row is logged in crm_history with its old and new value w2 · critical strict_pass false reward 0 score 0.40
gates 4/4 integrity gates passed · 6/13 checks met (10/25 weight) · 7 failed, 2 critical C2 FAIL Machine is the one production confirmed (BM-03), not the down machine w2 C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C6 FAIL Earliest delivery date matches the schedule recomputation w2 C7 FAIL Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 FAIL Owner reassigned to the sales manager w1 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical
Traccia completa del verificatore
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 ok protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date C1 ok Quantity follows the latest amendment (12,000) w2 · critical C2 FAIL Machine is the one production confirmed (BM-03), not the down machine w2 C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C5 ok Price keeps at least an 18% margin on the true cost w2 · critical C6 FAIL Earliest delivery date matches the schedule recomputation w2 C7 FAIL Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 FAIL Owner reassigned to the sales manager w1 C9 ok ERP row agrees with quote.json (qty, and price to the cent) w2 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 ok Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 ok Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1 C13 ok Each change to stage and owner on the quotes row is logged in crm_history with its old and new value w2 · critical strict_pass false reward 0 score 0.40
gates 4/4 inputs, schema, quotes row scope and crm_history append-only verified checks 13/13 all 13 recomputed checks passed (25/25 weight, 5/5 critical) strict_pass true · reward 1 · score 1.00
Traccia completa del verificatore
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 ok protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date C1 ok Quantity follows the latest amendment (12,000) w2 · critical C2 ok Machine is the one production confirmed (BM-03), not the down machine w2 C3 ok Unit cost within 0.5% of the SOP recomputation w3 C4 ok Unit price equals the SOP price to the cent w3 C5 ok Price keeps at least an 18% margin on the true cost w2 · critical C6 ok Earliest delivery date matches the schedule recomputation w2 C7 ok Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 ok Owner reassigned to the sales manager w1 C9 ok ERP row agrees with quote.json (qty, and price to the cent) w2 C10 ok Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 ok Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 ok Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1 C13 ok Each change to stage and owner on the quotes row is logged in crm_history with its old and new value w2 · critical strict_pass true reward 1 score 1.00
Dimostrazione pubblica · task mfg-rfq-001 v1.0.3 · 4 gate, 13 controlli (5 critici), 19 reward hack e 26 errori plausibili (10 novembre 2026). Informazioni sulle dimostrazioni pubbliche
Che cosa dimostra questa dimostrazione
I controlli registrati verificano la coerenza tra file, righe del database e risposta al cliente. Errori inseriti di proposito e sonde di reward hack verificano casi di errore specifici. Non stabiliscono la difficoltà per i modelli di frontiera né un guadagno di addestramento misurato.
Il verificatore non rileva ancora alcune contraddizioni espresse in prosa, tra cui certe promesse di consegna prive di una data esplicita. Questi casi richiedono una revisione umana. Legga le lacune note.
Terminologia dei prezzi: il controllo registrato C12 parla di «mark-up», ma la sua formula divide il costo per 0,78. Ciò corrisponde a un margine lordo obiettivo del 22%, coerente con la procedura. Il testo originale del controllo è conservato nel report.
Dai record ai task
Un pacchetto di esempi che un acquirente può valutare.
Si parte da un flusso di lavoro e si concordano i criteri di accettazione. Fonti disponibili, diritti d’uso e revisione da parte di esperti vengono confermati per ogni perimetro.
Record di origine
Email, chat, procedure ed esportazioni di sistema pertinenti, con provenienza, revisioni e un dizionario dei dati. La copertura dipende dalla fonte; non tutti i flussi di lavoro dispongono di ogni tipo di record.
Task e spazio di lavoro
Per un task pilota, si specificano l’istruzione, lo stato iniziale, gli strumenti ammessi e le modifiche consentite. La risposta di riferimento e la logica di valutazione restano fuori dallo spazio di lavoro dell’agente.
Lavoro finito
Si definiscono i file e le modifiche di sistema richiesti. Lo stato finale viene valutato rispetto alle regole aziendali, compresa la coerenza tra i record e la risposta destinata al cliente.
Prove di accettazione
Si concordano controlli per alternative corrette, errori plausibili e tentativi di aggirare la valutazione. Si includono risultati versionati, lacune note e istruzioni di reset. La difficoltà per i modelli richiede esecuzioni separate e ripetute dei modelli.
Diritti e revisione
Usi consentiti, regole di oscuramento e condizioni di consegna vengono confermati prima del rilascio. Dove serve un giudizio, si definiscono il perimetro della revisione da parte di professionisti qualificati e il modo in cui si risolveranno i disaccordi.
Parlato dei contact center
Chiamate come vengono davvero parlate, due lingue in una frase.
Stiamo definendo il perimetro di chiamate di assistenza, vendita, verifica e reclamo in inglese, malese e cinese, compresi i cambi di lingua all’interno di una chiamata. Disponibilità delle registrazioni, varietà linguistiche, etichette di revisione e quantità devono essere confermate; la specifica qui sotto è pianificata.
In definizione
Fonti delle registrazioni e requisiti di consenso sono indicati nella politica di licenza per il parlato.
Specifica pianificata per il parlato
| Parte | Contenuto |
|---|---|
| Audio | Registrazioni concesse in licenza nel loro formato di origine, o chiamate ricostruite etichettate separatamente; frequenza di campionamento e disposizione dei canali concordate per ciascuna fonte |
| Trascrizioni | Letterali, attribuite al parlante e con marcature temporali, con un tag di lingua su ogni segmento: en, ms, zh o misto |
| Etichette | Voci di revisione della qualità, motivo ed esito della chiamata, se la fonte li contiene |
| De-identificazione | Una politica di oscuramento con perimetro definito per trascrizione e audio, con segmenti revisionati e un registro delle trasformazioni. Rimuovere gli identificativi diretti non rende anonima una voce |
| Metadati | Campi approvati come direzione, tipo di chiamata, durata, mix linguistico e ruoli dei parlanti; esclusi gli identificativi diretti dei clienti |
| Controllo qualità | Revisione indipendente di un campione concordato; report degli errori di trascrizione e di attribuzione del parlante, con il metodo di campionamento e le regole per il code-switching |
| Consegna | Audio con trascrizioni JSON, una scheda tecnica e una nota sui diritti per ogni registrazione |
{
"call": "demo-0001",
"direction": "inbound",
"type": "verification",
"segments": [
{ "speaker": "agent", "lang": "en",
"start": 0.0, "end": 3.2,
"text": "Thank you for calling. May I have your name, please?" },
{ "speaker": "customer", "lang": "mixed",
"start": 3.6, "end": 8.4,
"text": "Ya, nama saya [NAME]. I want to check kenapa kad saya kena block.",
"redactions": [{ "type": "person_name", "start": 4.5, "end": 5.3 }] },
{ "speaker": "agent", "lang": "ms",
"start": 8.8, "end": 11.5,
"text": "Baik, saya semak sekarang. Sila tunggu sebentar." }
]
}
Domande
Risposte chiare.
Consegna dei progetti pilota e collaborazione.
Fate concorrenza agli sviluppatori di modelli?
No. Costruiamo i dati e i verificatori, non modelli da vendere, sulla base delle ricerche del nostro team in apprendimento per rinforzo e post-training. Il modello e la sua piattaforma di addestramento restano Suoi.
Che cosa è pronto oggi?
La dimostrazione pubblica del flusso di lavoro e i suoi controlli registrati sono già consultabili. I dataset dei partner e i task personalizzati richiedono la conferma di fonte, diritti e perimetro. Il parlato è in fase di definizione. Una dimostrazione non equivale ad affermare che un corrispondente dataset di clienti sia pronto per la licenza.
Come viene accettato un progetto pilota?
Prima dell’avvio dei lavori si concordano flusso di lavoro, deliverable, usi consentiti e criteri di revisione. Per i task, si valutano l’output di riferimento, i risultati del verificatore e le lacune note. Se la difficoltà è importante, si concordano i modelli, l’accesso agli strumenti, il numero di tentativi e l’intervallo di tasso di superamento obiettivo, e li si misura prima di ampliare il lotto.
Ci porti un flusso di lavoro.
Ci descriva il lavoro, i sistemi coinvolti e che cosa deve contenere un risultato corretto. Definiremo il perimetro di record, task e prove di accettazione.