我在我的一项用户研究项目中使用了ChatGPT,以下是发生的情况。

ChatGPT中文站
asking “how to use ChatGPT for user research?” to ChatGPT.

在用户体验(UX)研究领域中,人类洞察力引领设计进程,而现在数字领域中出现了一个新的盟友:ChatGPT这样的人工智能聊天机器人。作为研究人员,不禁想知道一个AI聊天机器人如何能增强用户研究的各个过程并推动其发展。本文将探讨整个用户研究过程中整合ChatGPT潜力的调查旅程,揭示其优势和风险。

AI的吸引力在于其迅速的认知能力和广泛的数据处理能力,这促使我探索其在用户研究等领域的应用,这些领域以前是人类翻译和直觉所保留的。用户研究过程是用户中心设计的基石,为这样的探索提供了一个引人注目的领域。通过利用ChatGPT的能力,我希望扩大我们对用户行为的理解,完善我们的产品开发策略,并最终塑造出与用户需求和欲望完美匹配的数字体验。

想象一下可能性:通过人工智能进行深入用户访谈,能够在几秒钟内分析和提取大量文本数据的趋势,并且甚至可以在无休止的数字合作者的协助下进行构思和原型制作。听起来像个梦想,对吧?ChatGPT生成类似人类的文本、理解复杂查询以及提供相关上下文的回复的能力,为重新定义我们如何理解用户开启了新的研究方法的大门。

然而,我必须指出,虽然我在开始测试ChatGPT进行用户研究的旅程时对人工智能的潜力充满热情,但我仍然坚信单靠人工智能是无法完全完成一个用户研究项目的。用户研究需要人的参与 — 毕竟,作为用户研究员,我们在向产品传达人类的故事,而人工智能工具不可能捕捉到人类叙述中的细微差别和复杂性。至少我最初是这么认为的。

让我们深入了解我的流程:

探索

在构建我的探索基础时,我精心选择了一项采用综合性定性调查方法的研究,该研究具有定性倾向。因此,我选择将ChatGPT整合到用户研究中的研究并非是任意的,而是一个有意的决定,与用户研究的本质相一致。我的目标是在涉及大量定性调查的情况下评估ChatGPT的潜力。换句话说,我选择进行这项研究是因为选择的方法导致了大量收集的数据。这项研究的特点在于广泛的数据收集,涉及对数百名用户提供的复杂响应细节进行解析。我希望确定ChatGPT是否可以帮助解读数据中的模式,识别相关性,并从中提取出总体主题,就像我可以通过亲和图、分析和其他技术实现的那样。

在使用ChatGPT进行提示实验时,我很快意识到无论我对ChatGPT的用途如何,最初的提示版本从未产生期望的结果。为了始终能够获得准确的输出,我发现有必要不仅改进提示内容,还要调整与人工智能的沟通方式和提供的指导方针。这个迭代的过程对于发挥ChatGPT的全部潜力至关重要。

ChatGPT中文站
GIF showing my first tries of using ChatGPT for user research planning

我很快意识到向聊天机器人提供明确指导的重要性。很明显,我需要详细解释聊天机器人在任务中的角色,尽可能详细地定义其目标,澄清其应采用的方法,并为期望的结果建立准确的指导方针。简而言之,解锁ChatGPT的全部潜力的关键在于对其交互进行极度精细的管理。

撰写研究计划

任何用户研究项目中最关键的时刻之一就是创建一个结构良好、目的明确的研究计划。因此,在确定ChatGPT的问题范围之后,我邀请了人工智能生成研究问题和目标,以引导研究朝着可行的洞察力方向发展,并制定方法规划。虽然根据我的专业知识,我知道根据我们的时间表和范围,最适合的方法应该是定性调查,但我还想看看ChatGPT是否能提出其他选择方案。

要这样做,我提示了聊天机器人:

假设您是一位专业的用户研究员,目前正在致力于一个以[问题领域]为重点的项目上。此外,请想象一下,您希望撰写一份详尽的研究计划,特别强调研究目标、研究问题、研究结果的潜在影响以及研究方法学。

这是项目的范围和限制条件:

问题范围:【提供问题范围的简明描述】

目标受众:【指定目标受众】

提供任何相关的背景信息或上下文

现在,请以高级用户研究员的身份为[问题空间]项目撰写详尽的研究计划。

然而,我从ChatGPT得到的初始反馈确实是有见地的,但在性质上有些普遍化。为了使ChatGPT能够生成更多项目特定和有针对性的建议,我意识到需要给它提供更精确的背景,包括我想要测试的假设、导致我们专注问题领域的信息/数据以及我打算瞄准的聊天机器人的角色。这就是当我开始重新说明我的目标时,我经历了大约6-7次的尝试,不断添加额外的背景并改变我加入背景的方式。

为了达到这个目标,我多次以不同的措辞和用词重新表达了我们问题领域的解释,并解释了我的角色、专业知识水平、我想要的确切结果的概要以及我想要实现的目标及其具体细节。我还在提示中增加了更具体的范围和背景。这种微妙的调整效果更好,因为ChatGPT的回答在相关性和准确性上有所改善。

通过不同的提示试验,塑造叙述方式,为ChatGPT提供更集中的背景信息,帮助我有效地引导其能力,以满足我们项目的具体需求。这一认识强调了迭代的细化的重要性,不仅包括对AI的回答,还包括我们输入的信息。通过这个迭代过程,ChatGPT的理解与项目的要求一起发展,最终得出与研究目标和范围和谐一致的洞见。

随着我们深入研究这个项目,我发现ChatGPT还可以在制定战略调查问题方面起到指导作用。通过加入更多的背景细节并向ChatGPT提供具体的任务,比如:

想象您是一位经验丰富的用户研究人员。您打算进行一项调查,以探索用户对[问题领域]的认知和偏好。您的主要研究目标是[ ]。

调查应遵守以下准则:

[列出任何具体的指导方针、限制条件或范围限制]

您的目标是将调查问题按照以下方式进行组织:

[解释问题结构,例如,“多选和开放性问题的混合,重点关注可用性和满意度”。]

请提供一组调查问题,您将在这个用户研究中使用。

我发现AI的回应非常有洞察力和行动导向。这种个性化的方法有助于生成与我们研究目标完全符合,并且与用户调研目标的各个方面相一致的调查问题。

分析数据

ChatGPT通过战略性地利用人工智能的帮助,确实使得对定性大规模数据的分析更加可行。数据集包含各种各样的输入,从全面的见解到不合格的回应和异常条目,使得复杂度增加。为了有效利用ChatGPT的分析能力,必须进行初步的数据清理阶段。在将数据集呈现给人工智能之前,必须手动筛选出异常值和不恰当的输入。这个准备步骤至关重要,因为它为ChatGPT理解和从微妙的定性数据中得出有意义的见解铺平了道路。否则,ChatGPT无法评估数据。

除了对数据进行精炼,与ChatGPT的有效沟通也被证明是一个关键因素。AI处理信息的能力取决于清晰的指示--让它知道每一行代表不同的用户输入,甚至提供有关正在分析的响应的背景说明。这种互动式对话确保了ChatGPT拥有导航定性数据分析复杂领域所需的信息。为此,我为我提出的每个调查问题准备了提示,例如,

您是一位非常有经验的用户研究员。最近您对【问题领域】进行了定性调查。在这次调查中,您希望了解【研究目标】。

从下面提供的数据集中,每行代表不同用户的调查回答,您的任务是分析与问题相关的用户数据:[在这里添加调查问题]。

您打算采用的分析方法是【例如亲和图表法】,目标是【例如识别回应中的趋势和模式】。您的最终目标是通过用户的引证性例子,揭示数据中的顶级模式和结果。

[在这里插入数据集,确保它准确地代表了调查回答。]

请继续识别和描述您在数据中发现的最显著的模式和结果,并使用用户引用来说明您的发现。

虽然ChatGPT在识别定性数据中的共识和饱和度方面表现出了优势,但也存在一些限制。对于聊天机器人来说,计算回答的百分比是一个挑战,需要更多的结构化和公式化理解。然而,它解开模式、找出共同主题并从数据中提取饱和度的本质的能力是相当有益的。人工智能的洞察力充当了指南针,引导注意力转向流行主题,并使深入分析更具针对性。

ChatGPT中文站
ChatGPT failing to provide a consistent and accurate data analysis

将洞察转化为行动

我希望在用户研究过程中探索ChatGPT的全部潜力,因此我很兴奋地测试它在更高级领域中的能力:将洞察力转化为可行的业务项目。基于此,我希望从发现的洞察力中提取出有形的步骤。然而,随着实验的展开,很明显即使是ChatGPT也有其限制。

这里,ChatGPT在用户研究过程的早期阶段取得的成就与其表现有所不同。虽然它在制定研究计划、生成调查问题甚至发现定性数据饱和方面有很大帮助,但在推荐可行商业项目时却失手了。它提供的输出过于普遍,令人失望,如“可用性增强”、“参与度增强”、“相关内容建议”或“关注用户生成内容”,缺乏使其真正可操作并与我们的产品开发过程相一致的上下文。

很明显,ChatGPT的不足与我所提供的背景知识有关。将洞察力转化为可行的业务任务的过程要求对我们的业务战略、市场定位和优先事项有微妙的理解。虽然ChatGPT在数据分析和模式识别方面表现出色,但将这些见解提炼成一致且符合背景的行动步骤需要战略思维的层次,至少目前仅限于人类理解。

总体意见

在回顾这段旅程时,重要的是要承认我对ChatGPT能力的探索是在特定的背景下进行的。我深入研究了用户调查的领域,以一项评估性研究(质性调查)作为我的基础,并且我在这里分享的观点都与该特定基础密切相关。

这个旅程展示了激动人心的机会和选择,揭示了ChatGPT在用户研究的不同部分可以成为一个有益的伙伴。如果一个人能够通过经验训练自己如何有效地提示聊天机器人,通过不断迭代来保持耐心,并提供必要的具体和细节,ChatGPT也可以成为在用户研究中自动化手动任务的有价值的工具。ChatGPT在需要快速完成任务、处理大量信息以及提出新思路的任务上都做得很好。这些成就真的很令人印象深刻,也突显了人工智能如何与我们一起工作,使工作更高效,让我们能够更加详细地观察事物。

但随着旅程的推进,很明显现在人工智能的能力存在局限性。尽管ChatGPT在某些领域显示出了很好的表现,但在需要谨慎的战略思考和整合不同要素的任务上却遇到了困难。简而言之,用户研究中存在着一些像棘手的难题,而这些问题需要人类基于经验和不同情境的理解所拥有的知识来解答。

总之,我在这项研究中使用ChatGPT的经验展示了人工智能在用户研究中的令人兴奋的可能性和局限性。这次冒险凸显了人类和人工智能如何共同努力来更好地理解事物。回顾我所做的一切,我既对接下来的事情感到兴奋,也对前方的旅程有所认识。这个旅程是人工智能不断改进,但人类理解仍然非常重要的地方。

总的来说,我喜欢人工智能在简化乏味而耗时的任务方面发挥作用,这让我有更多时间应对战略性挑战。我非常喜欢在这个项目中尝试人工智能和人工智能提示,甚至可能会让ChatGPT在写这篇文章时提供帮助!

免责声明:本项目使用了ChatGPT的GPT-3.5版本。

2023-10-20 17:14:43 AI中文站翻译自原文