10 月 22 日，Anthropic 推出了升级版的 Claude 3.5 Sonnet 以及新的 Claude 3.5 Haiku 模型，升级版 Claude 3.5 Sonnet 不仅编程能力更强，还带来全新功能 computer use（计算机使用），支持像人类一样操作计算机，可以遵循用户的命令在计算机屏幕上移动光标，点击相关位置，并通过虚拟键盘输入信息，模拟人们与自己计算机的交互方式。

当看到这则消息的时候，有没有觉得多模态大模型是一个可以在人机接口测试上大有作为的工具呢？未来我们只要针对交付的产品进行若干次使用，然后大模型就可以学习并 “智能” 的重复我们的步骤和验证。而且不需要我们去自己定义哪些关键字，哪些数据，哪些控件，哪个区域，这些都有大预言模型来完成了。而作为测试人员的我们，就要将领域知识，测试策略和测试驱动信息作为输入，一股脑灌给大模型了。然后一杯茶的功夫，我们就可以智能回归或者探索被测试的人机接口了。

是不是有些幻觉了？但是没有梦想，何来远方？拭目以待，对未来充满期待。