What if ChatGPT generates quantitative research data? A case study in tourism

Abstract

研究目的本研究旨在探讨ChatGPT是否能够为那些可能通过数据伪造行为不道德的研究人员生成定量数据集。研究方法本研究进行了与旅游领域相关的两阶段案例研究, 并要求ChatGPT（v.3.5.）代表400名参与者回答第一个问卷, 以及代表800名参与者回答第二个问卷。通过描述统计、相关分析、探索性因子分析、验证性因子分析和哈曼的单因素测试对人工智能生成的数据集的质量进行了统计测试。研究发现结果显示, ChatGPT能够按照所需的样本大小水平回答问卷, 并以表格格式呈现生成的数据集, 以便进行分析。还观察到ChatGPT的回答是系统性的, 并且它创建了一个在统计上理想的数据集。然而, 本研究注意到所产生的数据在观察变量之间存在较高的相关性, 测量模型未能达到足够的拟合度, 并出现了共同方法偏差的问题。本研究得出的结论是, ChatGPT目前不能生成适用于高级统计分析的数据, 或者说不适合这样做。研究创新本研究表明, ChatGPT可以为试图不道德地伪造数据集的研究人员提供定量数据。因此, 它为关于ChatGPT不道德使用的持续争论提供了一个新而重要的论点。此外, 在本研究中首次对由人工智能生成的定量数据集进行了统计检验。结果表明, ChatGPT生成的数据在某些方面存在问题, 为期刊编辑在编辑过程中考虑的几个要点提供了启示。