Todas as consultas SQL fornecidas são extremamente simples, apenas selecionadas, de e onde as cláusulas.Ao empregar essas estratégias ao lado do GPT-4, sua abordagem superou todos os outros envios, alcançando uma precisão de execução de 85,3% no conjunto de testes de aranha.No entanto, o famoso desempenho do LLM ainda deixa muito a desejar, perdendo muito atrás do desempenho humano.Os avanços no LLMS abriram a porta, mas apenas ligeiramente, para problemas complexos, como o texto-para-sql.No entanto, quando desenvolvemos um, esses benchmarks serão os primeiros a nos informar.
Fonte: https://medium.com/dataherald/text-to-sql-benchmarks-and-the-current-state-of-the-art-63dd3b3943fe
