자연어 To SQL

자연어 To SQL의 경우는 전용 모델 어느것을 사용하느냐가 승패의 중요한 승부처로 보임..

SOTA모델로 테스트는 의미가 없다 왜냐면 잘하니깐... 내부망에서 사용하고자 하면 구축형 오픈모델 선택을 잘해야 한다.

https://bird-bench.github.io/  

위에 사이트는 자연어 To SQL 벤치마크 사이트인데 확인해보면 다양한 도구 + LLM으로 평가하고 있다.

정확도와 일관성을 올리려면 LLM모델 하나 도입해서는 안된다는 인사이트를 얻을수 있다.

자주 언급되는 모델이 아래 XiYanSQL-QwenCoder모델을 테스트 하려고 한다.

https://github.com/XGenerationLab/XiYanSQL-QwenCoder

GitHub - XGenerationLab/XiYanSQL-QwenCoder: XiYanSQL models for Text-to-SQL.