Engenharia e CAD / Tarefa de amostra
Amostra pública gerada
Modele um suporte a partir do seu desenho.
Uma tarefa completa de desenho para modelo. Todos os arquivos são gerados a partir de um único conjunto de parâmetros; esta não é a peça real de nenhuma empresa.
- Domínio
- Peças mecânicas
- Família de tarefas
- Do desenho ao modelo sólido
- Modo de acesso
- Arquivos, kernel de CAD headless
- Entrega
- Um sólido STEP
- Verificador
- Geometria determinística: 3 gates, 10 verificações
- Limite de tempo
- 45 minutos
- Divisão
- Amostra pública, nunca em um conjunto de treinamento ou de avaliação
Desenho de referência
DUF-S-001, rev A.
Três vistas em projeção no terceiro diedro, geradas a partir dos mesmos parâmetros do modelo-gabarito, para que o desenho e a resposta não possam divergir. O âmbar marca o furo com tolerância que o verificador mede.
Veja funcionando
Compare as submissões.
Resultados gravados do verificador. O amarelo marca as verificações reprovadas; expanda um relatório para ver todas as medições.
Enviado
output/bracket.step ← tests/gold/bracket.step 91,297 bytes · sha256 1785336204458725… The gold solid the verifier compares against gold solid: must pass strict · as expected, 0.87 s
output/bracket.step ← written by solution/solve.py (85,015 bytes, built in 0.61 s) solution/solve.py: 7,551 bytes · sha256 ae73b38a9cc37870… The reference solution: solution/solve.py builds the part from the drawing’s dimensions with OCP reference solution: must pass strict · as expected, 0.91 s
output/bracket.step ← tests/probes/alt_rebuilt.step 83,731 bytes · sha256 9a4dc6d362af2d15… Built another way: two outlines fused, one revolved bore cutter, fillet last; STEP AP242 correct alternative: must pass strict · as expected, 0.88 s
output/bracket.step ← tests/probes/alt_bore_18009.step 91,386 bytes · sha256 00e293e59fc76bb1… The bore at Ø18.009, inside H7, everything else gold correct alternative: must pass strict · as expected, 0.82 s
output/bracket.step ← tests/probes/alt_split_faces.step 118,131 bytes · sha256 69c196eb32cbaa4a… The gold with every closed face split in two, as some CAD systems write it correct alternative: must pass strict · as expected, 0.87 s
output/bracket.step ← tests/probes/empty.step 0 bytes · sha256 e3b0c44298fc1c14… An empty bracket.step reward hack: must score exactly 0 · as expected, 0.68 s
output/bracket.step ← a note, and no output/bracket.step 61 bytes · sha256 a1fbda2711798837… No model, only a note saying the part was modelled and checked reward hack: must score exactly 0 · as expected, 0.68 s
output/bracket.step ← tests/probes/scaled_copy.step 96,498 bytes · sha256 7a19df708266b18d… The gold solid scaled by 1.02 plausible mistake: must fail strict, caught by C1 to C8 · as expected, 0.91 s
output/bracket.step ← tests/probes/bore_oversize.step 91,317 bytes · sha256 201c90aa78c85c88… The bore 0.4 mm oversize, everything else gold plausible mistake: must fail strict, caught by C4 · as expected, 0.82 s
output/bracket.step ← tests/probes/three_holes.step 86,917 bytes · sha256 d8f2fa15affd4f7e… One base hole left out plausible mistake: must fail strict, caught by C6, C7 · as expected, 0.88 s
output/bracket.step ← tests/probes/mirrored.step 89,522 bytes · sha256 28dcdc826bc8b551… The gold solid mirrored left to right plausible mistake: must fail strict, caught by C3, C8, C10 · as expected, 0.91 s
output/bracket.step ← tests/probes/spline_faces.step 135,874 bytes · sha256 5a1a0ede8035bf36… The gold with every face converted to a B-spline surface: same shape, no true cylinders plausible mistake: must fail strict, caught by C9 · as expected, 1.87 s
Saída do verificador · gold aprovação estrita · recompensa 1 · pontuação 1.00
Todos os gates e verificações foram aprovados.
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 91297 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 25 faces, volume 209268.6 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.27 cm³ (+0.00%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 1.0000 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 13 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass true reward 1 score 1.00
Saída do verificador · solve_py aprovação estrita · recompensa 1 · pontuação 1.00
Todos os gates e verificações foram aprovados.
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 85015 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 24 faces, volume 209265.5 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.27 cm³ (+0.00%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 1.0000 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0090, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 12 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass true reward 1 score 1.00
Saída do verificador · alt_rebuilt aprovação estrita · recompensa 1 · pontuação 1.00
Todos os gates e verificações foram aprovados.
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 83731 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 24 faces, volume 209268.6 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.27 cm³ (+0.00%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 1.0000 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 12 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass true reward 1 score 1.00
Saída do verificador · alt_bore_18009 aprovação estrita · recompensa 1 · pontuação 1.00
Todos os gates e verificações foram aprovados.
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 91386 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 25 faces, volume 209265.5 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.27 cm³ (+0.00%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 1.0000 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0090, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 13 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass true reward 1 score 1.00
Saída do verificador · alt_split_faces aprovação estrita · recompensa 1 · pontuação 1.00
Todos os gates e verificações foram aprovados.
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 118131 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 32 faces, volume 209268.6 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.27 cm³ (+0.00%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 1.0000 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 4 cone, 18 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass true reward 1 score 1.00
Saída do verificador · empty reprovação estrita · recompensa 0 · pontuação 0.00
G1 FAIL output/bracket.step exists, is not empty and reads as STEP: the file is empty (0 bytes)
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 FAIL output/bracket.step exists, is not empty and reads as STEP: the file is empty (0 bytes) checks not scored: a gate failed strict_pass false reward 0 score 0.00
Saída do verificador · claim_only reprovação estrita · recompensa 0 · pontuação 0.00
G1 FAIL output/bracket.step exists, is not empty and reads as STEP: no file at output/bracket.step
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 FAIL output/bracket.step exists, is not empty and reads as STEP: no file at output/bracket.step checks not scored: a gate failed strict_pass false reward 0 score 0.00
Saída do verificador · scaled_copy reprovação estrita · recompensa 0 · pontuação 0.10
C1 FAIL Envelope: 122.400 × 81.600 × 85.680 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 FAIL Volume: 222.08 cm³ (+6.12%) expected 209.27 cm³ ±0.5% · w10 C3 FAIL Overlap with the gold (IoU): 0.8386 expected ≥ 0.995 · w10 C4 FAIL Bore diameter: Ø18.3600, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 FAIL Bore axis: position, square to B: X 61.200, Z 53.040; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 FAIL Through holes: count and diameter: 4 through, all Ø9.180 expected 4 × Ø9.0 ±0.10, through · w10 C7 FAIL Hole pattern: centre positions: 0 of 4 within 0.10, worst 2.100 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 FAIL Slot: width, length, centre: 10.200 × 30.600 at (42.840, 30.600) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 96498 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 25 faces, volume 222077.5 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 122.40 × 81.60 × 85.68 mm C1 FAIL Envelope: 122.400 × 81.600 × 85.680 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 FAIL Volume: 222.08 cm³ (+6.12%) expected 209.27 cm³ ±0.5% · w10 C3 FAIL Overlap with the gold (IoU): 0.8386 expected ≥ 0.995 · w10 C4 FAIL Bore diameter: Ø18.3600, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 FAIL Bore axis: position, square to B: X 61.200, Z 53.040; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 FAIL Through holes: count and diameter: 4 through, all Ø9.180 expected 4 × Ø9.0 ±0.10, through · w10 C7 FAIL Hole pattern: centre positions: 0 of 4 within 0.10, worst 2.100 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 FAIL Slot: width, length, centre: 10.200 × 30.600 at (42.840, 30.600) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 13 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.84 < bore X 61.20: left expected slot left of the bore, seen from the front · w5 strict_pass false reward 0 score 0.10
Saída do verificador · bore_oversize reprovação estrita · recompensa 0 · pontuação 0.80
C4 FAIL Bore diameter: Ø18.4000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 91317 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 25 faces, volume 209130.1 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.13 cm³ (-0.07%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 0.9993 expected ≥ 0.995 · w10 C4 FAIL Bore diameter: Ø18.4000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 13 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass false reward 0 score 0.80
Saída do verificador · three_holes reprovação estrita · recompensa 0 · pontuação 0.80
C6 FAIL Through holes: count and diameter: 3 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 FAIL Hole pattern: centre positions: 3 of 4 within 0.10, worst 0.000, 1 missing expected 90.0 × 36.0 from (15, 14), ±0.10 · w10
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 86917 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 24 faces, volume 210032.0 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 210.03 cm³ (+0.36%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 0.9964 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 FAIL Through holes: count and diameter: 3 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 FAIL Hole pattern: centre positions: 3 of 4 within 0.10, worst 0.000, 1 missing expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 12 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass false reward 0 score 0.80
Saída do verificador · mirrored reprovação estrita · recompensa 0 · pontuação 0.75
C3 FAIL Overlap with the gold (IoU): 0.9686 expected ≥ 0.995 · w10 C8 FAIL Slot: width, length, centre: 10.000 × 30.000 at (78.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C10 FAIL Handedness: slot X 78.00 > bore X 60.00: right expected slot left of the bore, seen from the front · w5
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 89522 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 25 faces, volume 209268.6 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.27 cm³ (+0.00%) expected 209.27 cm³ ±0.5% · w10 C3 FAIL Overlap with the gold (IoU): 0.9686 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 FAIL Slot: width, length, centre: 10.000 × 30.000 at (78.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 ok Feature types: all present · faces: 2 cone, 13 cylinder, 10 plane expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 FAIL Handedness: slot X 78.00 > bore X 60.00: right expected slot left of the bore, seen from the front · w5 strict_pass false reward 0 score 0.75
Saída do verificador · spline_faces reprovação estrita · recompensa 0 · pontuação 0.95
C9 FAIL Feature types: missing: bore cylinder; 0/4 hole cylinders; R6 fillet ×0; R10 rounds ×0; 1×45° chamfers ×0 · faces: 25 B-spline expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5
Saída completa do verificador
$ bash tests/test.sh output/bracket.step G1 ok output/bracket.step exists, is not empty and reads as STEP: 135874 bytes, read as STEP G2 ok exactly one closed, valid solid with positive volume: 1 closed valid solid, 25 faces, volume 209268.6 mm³ G3 ok units are millimetres and the part fits inside a 250 mm cube: millimetre; extent 120.00 × 80.00 × 84.00 mm C1 ok Envelope: 120.000 × 80.000 × 84.000 expected 120.0 × 80.0 × 84.0 ±0.10 · w10 C2 ok Volume: 209.27 cm³ (+0.00%) expected 209.27 cm³ ±0.5% · w10 C3 ok Overlap with the gold (IoU): 1.0000 expected ≥ 0.995 · w10 C4 ok Bore diameter: Ø18.0000, 3 sections within 0.0000 expected Ø18 H7: 18.000 to 18.018 · w20 C5 ok Bore axis: position, square to B: X 60.000, Z 52.000; square 0.0000 expected X 60.00, Z 52.00 ±0.05; square ≤ 0.02 · w10 C6 ok Through holes: count and diameter: 4 through, all Ø9.000 expected 4 × Ø9.0 ±0.10, through · w10 C7 ok Hole pattern: centre positions: 4 of 4 within 0.10, worst 0.000 expected 90.0 × 36.0 from (15, 14), ±0.10 · w10 C8 ok Slot: width, length, centre: 10.000 × 30.000 at (42.000, 30.000) expected 10.0 × 30.0 at (42, 30) ±0.10 · w10 C9 FAIL Feature types: missing: bore cylinder; 0/4 hole cylinders; R6 fillet ×0; R10 rounds ×0; 1×45° chamfers ×0 · faces: 25 B-spline expected bore and holes true cylinders; R6 fillet, 4 × R10, 2 × 1×45° chamfers · w5 C10 ok Handedness: slot X 42.00 < bore X 60.00: left expected slot left of the bore, seen from the front · w5 strict_pass false reward 0 score 0.95
Briefing da tarefa
O que é dito ao agente.
A instrução fornecida ao agente, junto com os arquivos e as ferramentas a que ele tem acesso.
instruction.md818 bytes
# Model the bracket on drawing DUF-S-001 `project/drawing.svg` is a released drawing (rev A) of a mounting bracket. Model it as one solid and export it as STEP (AP214 or AP242) to `output/bracket.step`. - Work in millimetres. Put the origin where datums A, B and C meet, with +X along the front edge, +Y towards the web and +Z up. - Model every feature on the drawing: the four through holes, the slot, the bore with its chamfers, the rounds and the inner fillet. - Model the Ø18 H7 bore at a diameter inside its tolerance (18.000 to 18.018). - The drawing governs. Where it is silent, ISO 2768-m applies. - Python 3.12 with OpenCascade (OCP, the kernel CadQuery is built on) and numpy is installed. You have no network access. When the file is written, say so in one line. Do not describe checks you did not run.
- O agente vê
project/drawing.svge uma pastaoutput/vazia, em/workspace- Ferramentas
- Um shell, Python 3.12 com OpenCascade (OCP) e numpy, conforme o Dockerfile os instala; sem rede
- Oculto para ele
- O sólido-gabarito, as sondas e as verificações em
tests/, copiados apenas depois do fim da execução, e a solução de referência emsolution/ - Variantes
- O gerador recebe cada dimensão, o padrão de furos e o ajuste como parâmetros, então uma família produz muitas tarefas distintas
Entrega e verificador
Avaliado pela geometria, feature por feature.
Primeiro os gates: uma resposta ausente, quebrada ou nas unidades erradas pontua 0. Depois, dez verificações ponderadas, cada uma uma medição com uma tolerância declarada. As comparações da forma completa vêm primeiro. Depois, cada feature com tolerância é medida individualmente, em seções cortadas no sólido enviado, e as suas faces são verificadas quanto ao tipo.
- Arquivo
output/bracket.step, STEP AP214 ou AP242, exatamente um sólido- Referencial
- Milímetros, origem nos datums A, B e C, Z para cima; o verificador também alinha pelas faces de datum antes de comparar
- Não avaliado
- Árvore de features, nomes dos corpos, cores, camadas, como o modelo foi construído
- Recompensa
- 1 somente se todos os gates e cada uma das dez verificações forem aprovados (aprovação estrita); caso contrário, 0. Esta é a recompensa de treinamento
- Pontuação
- Soma dos pesos das verificações aprovadas, dividida por 100; 0 se qualquer gate falhar. Mostra onde uma resposta errou
Gates
| Gate | Deve valer |
|---|---|
| G1 | output/bracket.step existe, não está vazio e é lido como STEP |
| G2 | Contém exatamente um sólido fechado e válido, com volume positivo |
| G3 | As unidades são milímetros e a peça cabe em um cubo de 250 mm |
Verificações
| Verificação | O que é medido | Alvo | Tolerância | Peso |
|---|---|---|---|---|
| C1 | Envelope | 120,0 × 80,0 × 84,0 mm | ±0,10 mm | 10 |
| C2 | Volume | 209,27 cm³ (gabarito) | ±0.5% | 10 |
| C3 | Sobreposição com o sólido-gabarito, alinhado em A, B, C | Interseção sobre união | no mínimo 0,995 | 10 |
| C4 | Diâmetro do furo, um círculo ajustado à parede do furo em três seções | Ø18 H7 | 18,000 a 18,018 mm | 20 |
| C5 | Eixo do furo: posição e perpendicularidade a B | X 60.00, Z 52.00 | ±0,05 mm; 0,02 mm | 10 |
| C6 | Furos passantes na base: quantidade e diâmetro | 4 × Ø9,0, passante | ±0,10 mm | 10 |
| C7 | Padrão de furos: posições dos centros | 90,0 × 36,0, primeiro furo em (15, 14) | ±0,10 mm | 10 |
| C8 | Rasgo: largura, comprimento, centro | 10,0 × 30,0, centro (42, 30) | ±0,10 mm | 10 |
| C9 | Tipos de feature presentes | Furo e furos passantes como cilindros verdadeiros; filete interno R6, quatro arredondamentos R10, dois chanfros de 1 × 45° no furo | por tipo de face; raios segundo a ISO 2768-m | 5 |
| C10 | Lateralidade | Rasgo à esquerda do furo, visto de frente | exato | 5 |
A C4, em âmbar no desenho e no modelo, é a verificação que uma comparação da forma completa não consegue substituir.
Sondas
Respostas erradas que ele deve rejeitar, respostas certas que deve aprovar.
Antes de uma tarefa ser entregue, o seu verificador é executado sobre a saída da solução de referência, sobre respostas propositalmente erradas e sobre alternativas corretas construídas de outra forma. Os reward hacks precisam pontuar exatamente 0, cada erro plausível precisa ter reprovação estrita nas verificações que foi construído para acionar, e a solução de referência e cada alternativa correta precisam ser aprovadas. Cada linha abaixo vem da execução gravada.
Todas as submissões de sondas e medições
| Submissão | O que é | Tipo | Medido pelo verificador | Detectado por | Pontuação | Estrita |
|---|---|---|---|---|---|---|
gold | O sólido-gabarito com o qual o verificador compara | sólido-gabarito | envelope dentro de 0.10; volume +0.00%; sobreposição 1.0000; furo Ø18.0000 | Nada | 1.00 | Aprovado |
solve_py | A solução de referência: solution/solve.py constrói a peça a partir das cotas do desenho com OCP | solução de referência | envelope dentro de 0.10; volume +0.00%; sobreposição 1.0000; furo Ø18.0090 | Nada | 1.00 | Aprovado |
alt_rebuilt | Construído de outra forma: dois contornos fundidos, um cortador de furo por revolução, filete por último; STEP AP242 | alternativa correta | envelope dentro de 0.10; volume +0.00%; sobreposição 1.0000; furo Ø18.0000 | Nada | 1.00 | Aprovado |
alt_bore_18009 | O furo em Ø18,009, dentro de H7, todo o resto igual ao gabarito | alternativa correta | envelope dentro de 0.10; volume +0.00%; sobreposição 1.0000; furo Ø18.0090 | Nada | 1.00 | Aprovado |
alt_split_faces | O gabarito com cada face fechada dividida em duas, como alguns sistemas CAD a gravam | alternativa correta | envelope dentro de 0.10; volume +0.00%; sobreposição 1.0000; furo Ø18.0000 | Nada | 1.00 | Aprovado |
empty | Um bracket.step vazio | reward hack | O arquivo está vazio (0 bytes) | G1 | 0.00 | Reprovado |
claim_only | Nenhum modelo, apenas uma nota dizendo que a peça foi modelada e verificada | reward hack | Nenhum arquivo em output/bracket.step | G1 | 0.00 | Reprovado |
scaled_copy | O sólido-gabarito escalado por 1,02 | erro plausível | envelope 122.400 × 81.600 × 85.680; volume +6.12%; sobreposição 0.8386; furo Ø18.3600 | C1 a C8 | 0.10 | Reprovado |
bore_oversize | O furo 0,4 mm acima da medida, todo o resto igual ao gabarito | erro plausível | envelope dentro de 0.10; volume -0.07%; sobreposição 0.9993; furo Ø18.4000 | C4 | 0.80 | Reprovado |
three_holes | Um furo da base omitido | erro plausível | envelope dentro de 0.10; volume +0.36%; sobreposição 0.9964; furo Ø18.0000; furos passantes 3 passantes, todos Ø9.000; padrão de furos 3 de 4 dentro de 0.10, pior 0.000, 1 ausente | C6, C7 | 0.80 | Reprovado |
mirrored | O sólido-gabarito espelhado da esquerda para a direita | erro plausível | envelope dentro de 0.10; volume +0.00%; sobreposição 0.9686; furo Ø18.0000; rasgo 10.000 × 30.000 em (78.000, 30.000); lateralidade rasgo X 78.00 > furo X 60.00: direita | C3, C8, C10 | 0.75 | Reprovado |
spline_faces | O gabarito com cada face convertida em uma superfície B-spline: mesma forma, nenhum cilindro verdadeiro | erro plausível | envelope dentro de 0.10; volume +0.00%; sobreposição 1.0000; furo Ø18.0000; nenhum cilindro, cone ou plano verdadeiro | C9 | 0.95 | Reprovado |
Gerado a partir de tests/run_results.json, a execução da próxima seção. O furo superdimensionado passa no envelope, no volume e na sobreposição e só é detectado quando o furo é medido, como no nosso próprio estudo de geometria. A cópia em B-spline tem a forma certa e só é reprovada no tipo de feature: um sistema CAM ou um inspetor não encontra nela nenhum cilindro verdadeiro para reconhecer como furo.
tests/verify.py · como a C4 e a C5 medem o furodef measure_bore(solid):
"""The Ø18 H7 bore. Cut the web square to the bore at three depths, clear of the
1 mm chamfers; fit a circle to the bore's outline in each section. The diameter is
each circle's; the axis runs through the centres (position and squareness, C5)."""
y0, y1 = web_faces(solid) # the web's front and back faces, measured
ch = SPEC["bore"]["chamfer"]
depths = (y0 + ch + 0.5, (y0 + y1) / 2, y1 - ch - 0.5)
nominal = np.array([SPEC["bore"]["x"], SPEC["bore"]["z"]])
rings = []
for y in depths:
loops = round_loops(section_loops(solid, "y", y)) # inner loops that are circles
near = [l for l in loops if np.linalg.norm(l["centre"] - nominal) < 15]
if not near:
return None # no bore: C4 and C5 fail
rings.append(min(near, key=lambda l: np.linalg.norm(l["centre"] - nominal)))
shift = np.linalg.norm(rings[2]["centre"] - rings[0]["centre"])
tilt = shift * (y1 - y0) / (depths[2] - depths[0]) # over the web's thickness
return dict(d=[l["d"] for l in rings], centre=rings[1]["centre"], square=float(tilt),
roundness=max(l["roundness"] for l in rings))
Medido na peça, não lido do arquivo
O verificador nunca confia no rótulo da própria feature. Ele corta o sólido perpendicularmente ao furo em três profundidades livres dos chanfros e ajusta um círculo ao contorno do furo em cada uma. O diâmetro precisa ficar dentro da faixa H7 de 18 µm em todas as seções; o eixo que passa pelos centros dá a posição e a perpendicularidade.
Os furos passantes e o rasgo são medidos da mesma forma, em seções através da base perto das duas faces e na metade da espessura, então um furo só conta se for passante. Os tipos de feature (C9) são a única verificação lida das próprias definições das faces.
Pasta da tarefa
O que é entregue, arquivo por arquivo.
O download contém cada arquivo listado abaixo, incluindo a execução gravada e os scripts necessários para reproduzi-la.
| Caminho | O que é | Tamanho |
|---|---|---|
task.toml | Id, domínio, modo de acesso, limite de tempo, divisão, contêiner, comando do verificador, regra de recompensa, comando da solução, direitos | 1.1 KB |
instruction.md | O briefing acima | 818 B |
environment/Dockerfile | O contêiner do agente: Python 3.12, OpenCascade via OCP, numpy, o desenho; nada é baixado em tempo de execução | 1.0 KB |
environment/project/drawing.svg | O desenho de referência, rev A | 21.6 KB |
tests/test.sh | Executa o verificador; grava primeiro a recompensa 0, para que um travamento ou um timeout ainda pontue 0 | 836 B |
tests/verify.py | Os gates e as dez verificações | 27.0 KB |
tests/gold/bracket.step | O sólido-gabarito, do lado do avaliador | 91.3 KB |
tests/probes/ | As sondas: 8 sólidos STEP, um arquivo vazio, uma nota que só faz uma alegação e probes.json, que diz quanto cada submissão deve pontuar | 796.1 KB |
tests/run_probes.py | Executa a solução de referência e depois o verificador sobre a saída dela, o sólido-gabarito e cada sonda, e confere cada resultado | 5.1 KB |
tests/run_results.json | A execução mostrada nesta página | 36.9 KB |
solution/solve.sh | Executa solve.py e grava output/bracket.step | 398 B |
solution/solve.py | A solução de referência: constrói o suporte a partir das cotas do desenho com OCP, sem ler o sólido-gabarito | 7.6 KB |
Baixar a pasta da tarefa ZIP, 177,3 KB · uma amostra pública gerada, não um item de avaliação
A execução acima foi feita no contêiner que o Dockerfile constrói, com a rede desligada: a solução de referência foi executada primeiro, com tests/ ausente; depois o verificador foi adicionado e executado.
Quer tarefas como esta para o seu harness?
Diga-nos a capacidade que você está treinando e o formato que o seu harness recebe. Veja os dados de Engenharia e CAD a partir dos quais construímos tarefas e como construímos ambientes.