AI送外卖到底有多强? 来看 Doubao-Seed-1.8 Agent 能力评测!

合集 · 大模型竞技场 (78)

  1. 1:40
    全网首测!DeepSeek 4 小时之前又发布了一个多模态模型 Janus-pro
  2. 4:24
    5分钟教你使用AI写一个风扇控制器
  3. 2:46
    10小时前发布的大模型 Mistral-small-24B 马上开测!
  4. 0:51
    NVIDIA又要跌?DeepSeek 刚用 FP8 没多久,这 FP4 训练要来了
  5. 1:43
    一招解决DeepSeek-R1无法连接网络问题!还能白嫖DeepSeek-R1!
  6. 1:17
    国产视频生成框架!能让老黄唱野狼 Disco!
  7. 4:03
    大模型竞技场 - Gemini-2.0-Flash 全网首测!
  8. 2:10
    微信刚上线 DeepSeek, 腾讯又把 AI 知识库也接入 DeepSeek 了?
  9. 2:52
    来啦!Grok-3 全网首测!登陆火星 demo!
  10. 1:55
    视觉大模型也能推理了?来看Ovis-2视觉模型的效果如何!
  11. 7:32
    谁是最强写代码模型? 我使用了最好的21个模型, 花了50刀, 总计测试252次
  12. 2:06
    全站最速!DeepSeek-V3-0324 写代码能力评测!不仅 OpenAI, Claude 也要颤抖了
  13. 4:18
    我用AI做了个网页版我的世界,还能用砸瓦鲁多
  14. 2:25
    全站最速!GPT-4.1 写代码能力评测!啊?又拉了?
  15. 5:53
    极限测试!Qwen3 写代码+画画!究竟是不是开源最强模型?
  16. 12:42
    我发现了AI最有用的用途——整理桌面!来看 Kimi-K2 Agent 能力实测!
  17. 2:02
    使用 AI 做了个以《三体》中叶文洁为视角的小短片——三体·独白
  18. 0:37
    nano-banana 幼儿园级教程① 如何将照片转换为城市天际线风格的建筑!
  19. 1:06
    nano-banana 幼儿园教程第②弹! 教你如何做模特图!
  20. 0:55
    nano-banana 幼儿园级教程第③弹! 如何实现贴纸自由!
  21. 0:46
    nano-banana 幼儿园教程第四弹! 教你如何克隆喜欢的图标!
  22. 0:41
    nano-banana 教程第五弹! 如何万物像素化!
  23. 1:10
    nano-banana 生成 8K 分辨率图片教程!
  24. 3:06
    Kimi-K2-0905 实测! 一口气输出1100行代码
  25. 1:41
    Qwen3-Max-Preview 实测! 给大家放个鞭炮
  26. 2:20
    Qwen3-Next-80B-A3B 实测! 能跟头部模型对打吗?
  27. 1:31
    刚发布的 Qwen3-TTS-Flash 实测!
  28. 2:54
    DeepSeek-V3.2 实测! 真就只提升了0.1?
  29. 2:18
    Claude-Sonnet-4.5 实测! 口嫌体正直国庆献礼?
  30. 2:22
    GLM-4.6 实测! 最近都很流行更新一大截然后版本就增加0.1嘛?
  31. 2:22
    DeepSeek 竟然是 INTJ, 如果改成 INFP 会怎样?
  32. 2:05
    claude-haiku-4.5 实测! 便宜大碗?
  33. 2:15
    Vibe Coding 不流行了? Spec Coding 教程来啦
  34. 2:36
    KAT-Coder-Pro-V1 实测! 早放3个月就好了?
  35. 2:07
    Minimax M2 实测! 你也晚了3个月?
  36. 1:16
    Cursor 推出炼蛊模式!一口气能开8个代理!
  37. 2:32
    Cursor 终于有自己的大模型啦!来看实测!
  38. 2:28
    Qwen3-Max-Thinking 实测! 呃......
  39. 2:17
    Kimi-K2-Thinking 实测! 差距继续缩小!
  40. 3:17
    Gemini 3.0 Pro 实测! SOTA! 不过发现两个重要问题!
  41. 0:52
    nano banana pro 幼儿园教程! 如何合成橱窗图片!
  42. 4:31
    Meta 的新模型 SAM 3 实测!
  43. 2:05
    什么? 用 Claude Code 剪视频?
  44. 2:50
    DeepSeek V3.2 正式版实测! 提升真的有限?
  45. 2:57
    教程来啦! 如何使用AI打造自媒体博主军火库
  46. 2:54
    GPT-5.2 实测! 美是真的美, 卡是真的卡
  47. 1:25
    一秒生成高斯点云? Apple新模型SHARP实测!
  48. 4:38
    AI送外卖到底有多强? 来看 Doubao-Seed-1.8 Agent 能力评测!
  49. 4:33
    现在都流行大模型月更吗? MiniMax-M2.1 实测!
  50. 3:42
    2025年全球大模型厂商下载量排行榜
  51. 3:27
    500张图片测试! 一个视频告诉你GLM-Image怎么用!
  52. 5:58
    不写 prompt 改看视频了! Kimi-K2.5 实测!
  53. 4:55
    提升明显! Qwen3-Max 正式版 vs Preview版 实测!
  54. 2:29
    不是说好了年前不发吗? DeepSeek 你个大猪蹄子
  55. 7:04
    GLM-5发布啦! 给大家带来实测! 国产大模型正式进入月更节奏!
  56. 5:06
    啊?一个月一个版本? MiniMax-M2.5 4000万 token 实测!
  57. 7:01
    Qwen3.5实测! 来看贺岁档大模型的实力!
  58. 4:32
    Gemini-3.1-pro 实测! 更新了个寂寞?
  59. 5:15
    inclusionAI Ling&Ring 2.5-1T 大模型实测!
  60. 6:07
    Agent 能力有多强? 来看豆包 Seed 2.0 实测!
  61. 5:10
    龙虾专用大模型? GLM-5-Turbo 实测!
  62. 3:44
    如何做一个生产级SKILL? 用MiniMax-M2.7给龙虾写SKILL的保姆教程
  63. 8:01
    从国产SOTA走向世界SOTA? GLM-5.1 实测!
  64. 6:06
    AI能帮我拍照了? Qwen3.5-Omni实测!
  65. 8:51
    花费106刀测试! Claude-Opus-4.7 到底更新了啥?
  66. 9:04
    Kimi-K2.6 前端/后端/Agent编程能力实测! 甚至还帮我做了个游戏!
  67. 2:32
    大模型写代码比说话还快是什么体验?
  68. 7:36
    Agentic Coding 能力大幅提升! Qwen3.7-Max实测!
  69. 5:39
    MiniMax-M3 最佳实践? 这个视频告诉你!
  70. 1:06
    Fable 5 超越人类还为时尚早!
  71. 0:44
    单卡 700TPS! Diffusion Gemma 来了!
  72. 5:40
    GLM-5.2实测! 什么才是Agent能力的提升?
  73. 1:43
    2分钟教你做一个可以自我迭代的 Agent
  74. 6:12
    Flash模型横评! 性价比之选竟然是这个?
  75. 6:33
    混元3实测! 300B参数竟然有这种Agent能力!
  76. 1:13
    1B就能达到这种效果?LingBot-Vision实测!
  77. 14:05
    Kimi-K3 全方位实测! 我竟然打游戏输给了她?!
  78. 4:57
    我用 LongCat-2.0 省了 88% 的 Agent 输入成本!
Description
给大家带来字节跳动刚刚发布的新模型 Doubao-Seed-1.8 Agent 能力评测!

大家经常看到我的评测都是让大模型写代码, 今天咱们整个新活, 如果让大模型送外卖, 看看大模型能赚多少钱? 

为了这个测试我写了个框架, 叫做硅基骑手, 内置了15个 tool call, 包括移动, 接单, 获取小票, 取餐, 送餐, 充电等等, 让大模型通过调用这些 tool call 来模拟整个外卖骑手的送餐过程.

本次首先评测了刚刚发布的 doubao-seed-1.8, 直接说结论:

整个执行过程非常丝滑, 这个新模型的最大输入上下文长度是224K, 我的测试连续运行了6.5小时, 总计消耗了9360万token! 完全耗尽了它的上下文, 执行了 1100 次 tool call!

即使是在停止工作前的最后一刻, 都可以继续进行工具调用, 而大多数小模型随着上下文增长是会性能越来越差最后完全无法进行 tool call 的.

这意味着 doubao-seed-1.8 在200K+的上下文长度上召回水平都相当不错, 特别适合用来执行, 复杂的 Agent 和 MCP 工具调用的场景. 

我有预感豆包模型这一波升级后, 周边应用例如豆包, 甚至豆包AI手机, 执行任务的能力都会得到提升.

Comments

柠檬酸酸不好吃 2025-12-18

这个豆包seed 1.8和豆包seed 1.6主要是提升了agent? 怎么感觉现在国内和国外的新模型都在强化Agent能力[颂乐人偶_眯眼笑]

♥ 9 ↩ 4

panlilu 2025-12-18

感觉可以搞个lite版的bench mark,去掉对多模态能力的考核。这样一些开源的小模型和deepseek、xiaomi-mimo-flash之类的纯文本模型都可以纳入评价体系了,只要有Agent能力的模型都可以。

♥ 7 ↩ 2

我纵言之将何补啊 2025-12-18

deepseek没多模态岂不是完蛋了[笑哭],能不能转一下帮DeepSeek弄

♥ 7 ↩ 12

阿里嘎多地里热吧 2025-12-21

大佬,求测试一下豆包新出的编程ai[星星眼]

♥ 4 ↩ 10

c牛6 2025-12-18

卧槽,露脸了[打call]

♥ 4

Troy_Mark 2025-12-25

1.8连宣传都没有,年利润百亿美金的公司默默的做到最强。。。 外卖测试的评分可是m2和glm4.7的跨级领先。我最近刚用,感觉这个有些方面比opus4.5也差不多了。国内也要有兜底的了。 感谢大佬的测评提供的数据比较!

♥ 3 ↩ 1

ly丽渊 2025-12-18

辛苦了,投两个币支持一下

♥ 2

panlilu 2025-12-18

露脸了哈哈哈

♥ 2

舍瓦说七遍 2025-12-18

血本巨制,必须三连[喜欢]

♥ 2

吾师科技 2025-12-18

大工程啊哥们

♥ 2

三角不是正方形 2025-12-18

玩的花呀,哥

♥ 2

gaakki 2025-12-18

这测试上下文大的模型优势怎样,例如那些1M的

♥ 1

东风扫叶 2025-12-18

大佬真牛

♥ 1

Bonuszzzz 2025-12-18

这是用啥agent框架写的测试代码呀

♥ 1 ↩ 1

阿婆来跳舞 2025-12-18

🐮

♥ 1

生活好苦 2026-01-30

火山的产品,再也不敢用了,那真叫一个…………

RZTH39 2025-12-23

新风格视频,观感蛮不错的,有大up之风了[颂乐人偶_眯眼笑]

离挽溪 2025-12-21

挺有趣的[Neuro sama收藏集_比心]

金炎依 2025-12-24

现在seed1.8能用了吗?为啥我不能用

猫猫会念经 2025-12-24

项目开源了吗?地址是什么[脱单doge]