Beta 测试如何塑造 SearchSense:用户反馈驱动人工智能增强型科学搜索的发展

绿色桌面上,一盏亮着的灯泡置于一堆揉皱的彩色纸团之中。

引言

正如我们在之前的文章中所讨论的,我们正通过SearchSense开启一种先进的科学信息发现方法。改变搜索范式对用户影响深远,因此在整个过程中获取反馈并进行验证至关重要。

在重塑科学搜索的初期,我们假设用户需要更高的灵活性、自然语言搜索输入以及更智能的搜索系统。为了验证这一假设,我们邀请用户加入我们的开发之旅。

当前流程

我们拥有多种渠道来收集反馈并为产品路线图提供参考,包括:

  • 通过销售、客户支持和用户研究会议与用户直接沟通。
  • 应用内反馈机制(电子邮件和调查问卷)。
  • 产品使用情况和行为分析。

我们的客户成功、销售和客户中心团队是倾听用户心声的关键——这些辛勤工作的同事与用户保持着持续沟通,将亮点、痛点和改进建议反馈给产品团队。我们还会一对一地联系客户进行用户研究。这两种途径都为我们已发布的功能或正在考虑的新想法提供了丰富、高质量的定性反馈。直接倾听客户的声音使我们能够深入探讨主题,提出后续问题,并了解如何改善他们的体验。

用户与我们直接互动的另一种方式是通过应用内产品调查或电子邮件。这使他们能够通过及时且不干扰使用的方式分享反馈。

我们还在平台本身进行行为分析,以更好地了解用户与功能和内容的交互方式、这些模式随时间的变化情况以及存在的阻碍点。这有助于我们验证用户是否从我们的构建成果和交付结果中获得了价值。

为何进行 Beta 测试?

SearchSense源于大量的用户反馈、研究会议以及对直观且节省时间解决方案的日益增长的需求。这种演进似乎更适合通过系统性升级而非增量功能交付来支持。然而,构建新的搜索基础设施需要时间,我们希望找到一种方法来验证我们的构建方向是否正确。为此,我们邀请用户“走进工厂”,让他们在功能开发过程中尽早试用。这使我们能够快速获得有针对性的反馈,以验证新功能是否支持客户的使用场景、客户是否从中受益,并获取改进或增强的建议。

这有何帮助

我们学到了什么?从简单的用户界面调整到模型再训练,Beta 测试为我们提供了重要的见解和可执行的成果。关键的反馈主题包括:

  • 用户希望搜索结果提供可靠且高质量的数据。
  • 用户希望搜索解读过程具有透明度。
  • 用户希望针对不同的搜索场景提供替代路径。

我们了解到,用户乐于利用人工智能来提高效率,但也对“幻觉”问题和不透明的查询修改存有顾虑。为缓解这些担忧,CAS SciFinder 团队明确标注了人工智能的使用场景,展示了查询是如何被解读或修改的,并提供了无需人工智能修改即可重新运行查询的选项。我们注意到,CASDraw 的用户界面若能预设默认搜索类型,将比用户每次开始新结构搜索时都需手动选择更为便捷。总体而言,用户能够顺畅地适应新的搜索栏,并发现搜索后使用新的结果类型标签页非常高效。最重要的是,我们确信用户对 CAS 内容的熟悉感与信任度不仅未受影响,反而因人工智能的辅助而得到增强,使发现过程变得更加轻松快捷。在构建 SearchSense —— 这一功能时,我们特意采取了“博采众长”的策略,旨在确保用户能够利用权威可信的 CAS 内容,获得直观且先进的搜索体验。

‍