GPT、Gemini 和 Claude 比较：AI 助手在 SQL 编写中的表现

目录

• 背景
• SQL 技能比拼！
• 第一轮：问题解决（LeetCode SQL）
• 第二轮：业务逻辑
• 第三轮：查询优化
• 总结
• 下一步是什么

1. 背景

在数据分析领域，选择合适的 AI 助手可以大大提升工作效率。在最近的评测中，我们对比了 ChatGPT-4o、Claude 3.5 Sonnet 和 Gemini Advanced 三个模型在 SQL 编写中的表现。通过对 LeetCode SQL 问题的解决、业务逻辑处理和查询优化三个方面进行评估，我们希望帮助数据分析师选择最适合的工具。

2. SQL 技能比拼！

SQL 是数据分析中必不可少的技能，其简单明了的语法使其成为评估语言模型的理想选择。在本次比较中，我们重点关注 AI 在查询准确性、效率、代码格式化和可解释性方面的表现。

评估过程包括三个部分：

1. 问题解决： 通过解决 LeetCode SQL 问题来测试 AI 的基本 SQL 能力。
2. 业务逻辑： 通过实际数据集和业务问题评估 AI 处理复杂业务逻辑的能力。
3. 查询优化： 通过优化 SQL 查询评估 AI 提升性能的能力。

3. 第一轮：问题解决（LeetCode SQL）

3.1. 问题1 – LeetCode SQL 262 行程和用户

在这道被标记为“困难”的题目中，AI 需要连接同一表的不同列并解释多个过滤器。

GPT-4o： 第一次尝试就提供了正确的解决方案，并详细解释了思路。

Claude 3.5 Sonnet： 同样给出了准确的代码和详细的解释。

Gemini Advanced： 提供了正确的查询和解释，但它附加的 GitHub 链接与问题不相关。

3.2. 问题2 – LeetCode SQL 185 部门三大最高薪水

这道题需要使用窗口函数。

GPT-4o： 使用窗口函数解决了问题，并附有清晰的解释。

Claude 3.5 Sonnet： 提供了类似的正确解决方案。

Gemini Advanced： 正确解决了问题，并链接了相关的 GitHub 仓库。

3.3. 问题3 – LeetCode SQL 1341 电影评分

这道中等难度的题目要求合并两次聚合的结果。

GPT-4o： 提供的解决方案正确但稍显冗长。

Claude 3.5 Sonnet： 解决方案简洁高效。

Gemini Advanced： 解决方案错误，并未能利用其搜索到的正确答案。

第一轮中，Claude 3.5 Sonnet 表现最佳，GPT-4o 因效率问题失去一部分得分，Gemini Advanced 的“来源和相关内容”功能表现不一致。

4. 第二轮：业务逻辑

在这一轮中，我们为每个 AI 提供了合成数据集，并让它们根据业务需求编写 SQL 查询。

4.1. 问题4：月度销售计算

提示： 请编写一个 SQL 查询，计算美国用户的每月总订单金额。

GPT-4o： 提供了正确的查询，并主动添加了订单状态过滤器。得到满分和额外加分。

Claude 3.5 Sonnet： 同样提供了正确的查询，并注意到了数据不一致性。

Gemini Advanced： 同样给出了正确的查询。

4.2. 问题5：新用户数量

提示： 请编写一个 SQL 查询，计算每个月的首次用户数量。

所有三个模型都提出了正确的查询。

4.3. 问题6：最畅销的产品类别

提示： 请编写一个 SQL 查询，以按每月订单总金额获取前 5 个最受欢迎的产品类别。

所有三个模型都使用窗口函数提出了正确的查询。

5. 第三轮：查询优化

在这一轮中，我们评估 AI 对复杂 SQL 查询的优化能力。

5.1. 优化问题1：复杂查询

GPT-4o： 提供了优化的查询方案，并详细解释了改进之处。

Claude 3.5 Sonnet： 提供了类似的优化方案，效率更高。

Gemini Advanced： 提出了一些优化建议，但未能明显提升性能。

总结

在这次评测中，Claude 3.5 Sonnet 在 SQL 编写和优化方面的表现最佳，GPT-4o 紧随其后。Gemini Advanced 在某些方面表现不一致，但也展示了其独特的优势。在选择 AI 助手时，用户应根据具体需求和偏好进行选择。

下一步是什么

随着 AI 技术的不断发展，我们期待未来更多的创新和改进。用户可以通过持续学习和实践，充分利用 AI 工具来提升工作效率。

FAQ

1. 问：什么是 SQL 查询优化？

   • 答：SQL 查询优化是指通过改进查询结构和使用索引等方法，提高查询执行效率，减少资源消耗。

2. 问：AI 助手如何帮助数据分析？

   • 答：AI 助手可以通过自动生成 SQL 查询、提供数据洞察和优化建议，帮助数据分析师提高效率和准确性。

3. 问：选择 AI 助手时应考虑哪些因素？

   • 答：选择 AI 助手时，应考虑其准确性、效率、易用性以及与现有工作流程的兼容性。