理解利用大型语言模型驱动指南使虚拟现实对盲人和低视力者无障碍访问

随着社交虚拟现实（VR）日益普及，解决盲人和低视力（BLV）用户的无障碍访问问题变得越来越关键。研究人员提出了一种AI"视力引导员"来帮助用户在虚拟现实中导航和回答他们的问题，但这一方案尚未与用户进行研究验证。为了填补这一研究空白，我们开发了一个由大型语言模型（LLM）驱动的引导员，并在有演员扮演其他用户的虚拟环境中与16名BLV参与者进行了使用研究。我们发现，当独处时，参与者将引导员视为一种工具，但在有他人在场时，他们以伙伴的方式对待它，给它起昵称、用其外观来合理化它的错误，并鼓励演员与引导员之间的互动。我们的工作加深了对引导员作为虚拟现实无障碍访问的多功能方法的理解，并为未来引导员的设计提供了建议。