병렬 탐색 에이전트로 복잡한 텍스트-SQL 생성

병렬 탐색 에이전트(PExA)

PExA는 대규모 언어 모델(LLM)-기반 텍스트-SQL 에이전트에서 latency-performance trade-off 문제를 해결하기 위해 설계된 프레임워크입니다. 이 프레임워크는 텍스트-SQL 생성을 소프트웨어 테스트 커버리지의 프레임워크로 재구성하여, 빠른 성능과 높은 정확도를 동시에 달성합니다.

소프트웨어 테스트 커버리지 프레임워크

PExA 프레임워크는 원래 쿼리를 더 간단하고 원자적 SQL로 구성된 테스트 케이스 스위트와 함께 준비합니다. 이 테스트 케이스 스위트는 원래 쿼리의 의미적 커버리지를 보장하는 데 사용됩니다. 테스트 케이스 커버리지가 충분히 완료된 후에, PExA 프레임워크는 최종 SQL을 생성합니다. 이 최종 SQL은 이전에 탐색된 테스트 케이스 SQL을 기반으로 생성됩니다.

실험 결과

PExA 프레임워크를 사용하여 연구팀은 Spider 2.0라는 최신 텍스트-SQL 벤치마크에서 70.2%의 실행 정확도를 달성하며, 새로운 최고 성능을 기록했습니다. 이 결과는 PExA 프레임워크의 유효성을 입증하고, latency-performance trade-off 문제를 해결하기 위한 새로운 접근 방식을 제공합니다.

결론

PExA 프레임워크는 대규모 언어 모델(LLM)-기반 텍스트-SQL 에이전트에서 latency-performance trade-off 문제를 해결하기 위한 새로운 프레임워크입니다. 이 프레임워크는 소프트웨어 테스트 커버리지의 프레임워크를 사용하여, 빠른 성능과 높은 정확도를 동시에 달성합니다. PExA 프레임워크는 텍스트-SQL 생성에서 새로운 최고 성능을 기록하고, latency-performance trade-off 문제를 해결하기 위한 새로운 접근 방식을 제공합니다.