← 연구 아이디어

연구 아이디어

Use in materials 드묾 Maturity 초기 단계

Keep the core code deterministic, and let the LLM judge only at validated checkpoints

제한된 LLM 판단의 에이전틱 프로그램 · Agentic programs with bounded LLM judgment

Proposal AI suggestion

Application to materials research remains an unverified proposal.

This is a software pattern in which deterministic code takes the center of the pipeline, and the LLM makes limited judgments only at specified gates. It is an approach intended to improve verifiability and operational stability compared with delegating the entire system to an agent.

It is advisable to first separate the parts that can be made rule-based, such as materials data cleaning, structure generation, error classification, and exception handling, from the parts that require ambiguous judgment. I recommend assigning the LLM only narrow roles such as candidate selection, exception classification, and parameter recommendation, and then checking those results again with a rule-based verifier.

As a small experiment, modify one existing pipeline and limit the points where the LLM intervenes to 1~2. Then compare success rate, reproducibility, manual intervention time, and ease of recovery after failure; this will reveal the value of this pattern.

Materials problem to try it on
규칙 기반 파이프라인은 있으나 예외 처리와 판단이 병목인 구조 분석, 조성/구조 정리, 데이터 전처리 워크플로
Why it is worth trying now
에이전틱 소프트웨어를 재료 과학용 프로그램 패턴으로 정식화하려는 논의와 예시가 공개되면서, ‘무엇을 자동화하고 무엇을 검증할지’ 설계하기가 쉬워졌습니다. LLM의 도입 범위를 좁히면 비용과 위험을 통제하기도 수월합니다.
First step
현재 쓰는 재료 워크플로에서 사람이 개입하는 의사결정 지점을 3개만 골라, 그중 하나를 LLM+규칙 검증 구조로 바꿔 A/B 비교를 하십시오.
Risks and limits
LLM 판단이 엣지 케이스에서 흔들릴 수 있고, 검증 규칙을 설계하는 데 초기 공수가 큽니다. 또한 재료 데이터는 형식이 다양해 일반화가 어렵고, 추론 비용과 유지보수 비용이 예상보다 커질 수 있습니다.

Evidence Evidence from other fields

아래 링크는 이 기법이 다른 분야에서 통했다는 근거입니다. 소재 분야 적용 결과가 아닙니다.

  1. Agentic programs: an emerging form of scientific software in computational materials science

Related concepts and practice

AI가 최신 기법을 조사해 제안한 방향입니다. 검증된 결과가 아니며, 시도 여부와 위험은 연구 책임자가 판단해야 합니다.