ARCS:面向精确Text-to-SQL的结构化消歧基准
Get the story
研究者提出结构化消歧范式,用显式、受约束的交互替代自由对话,以解决 Text-to-SQL 用户问题中的歧义,并构建基准 ARCS(Ambiguity Resolution Corpus for SQL),覆盖真实数据库上的自然无约束歧义及完整标注。实验显示 gpt-6-sol 端到端执行准确率仅 51%,开源模型均未超过 27%。该基准为 arXiv:2610.09396 [cs.CL]。
Generated from reports · updated 3 hr ago
Timeline
Follow the coverage from different angles.
- arXiv · Computation and LanguageARCS:通过结构化消歧实现精准 Text-to-SQL
研究者提出结构化消歧范式,用显式、受约束的交互替代自由对话来解决 Text-to-SQL 用户问题中的歧义,并构建基准 ARCS(Ambiguity Resolution Corpus for SQL),覆盖真实数据库上的自然无约束歧义及完整标注。实验显示 gpt-6-sol 端到端执行准确率仅 51%,开源模型均未超过 27%。该基准为 arXiv:2610.09396 [cs.CL]。
Heat trend
Current heat 9·Comparable peak 10(Oct 8)·Comparable change over 24 hours –
The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.