近日，有研究者利用ChatGPT构建系统综述的文献检索策略，并撰写了一篇“Letter to the Editor”投稿到《Journal of Translational Medicine》（IF=7.4），一起来看下ChatGPT干这项工作的质量如何。

文章链接：https://translational-medicine.biomedcentral.com/articles/10.1186/s12967-023-04371-5

确认研究问题

研究者选择了Meta分析注册平台PROSPERO上的一项Meta分析（#CRD42023391396），旨在回答的研究问题是：When does weight regain occur in obese individuals after bariatric surgery?（肥胖者在减重手术后何时会出现体重反弹？）

该研究问题的PICOT为：

• Population：Obese individuals with age major than 18 years（年龄大于18岁的肥胖者）
• Intervention：bariatric surgery（减重手术）
• Comparator：diet, drugs or placebo（饮食、药物或安慰剂）
• Outcomes：time of weight regains（体重反弹的时间）
• Study type：trials（临床试验）

让ChatGPT制定检索策略

在确认研究问题后，研究者要求ChatGPT制定在MEDLINE数据库中的检索策略，输入给ChatGPT的提示语如下：

ChatGPT的回复如下：

接下来，研究者让ChatGPT重新制定检索策略，在另外两个广泛用于系统综述/Meta分析的数据库中进行检索：LILACS和Embase，并针对每个数据库给出了要考虑的检索术语（例如MEDLINE的MeSH）。输入给ChatGPT的提示语如下：

ChatGPT的回复如下：

研究者又让方法学专家制定了自己的检索策略，MEDLINE的检索策略如下：

ChatGPT制定检索策略的表现如何？

ChatGPT的回复速度很快，但ChatGPT制定的检索策略存在如下问题：

（1）没有考虑到同义词（Entry Terms）以及研究者临床实践中常使用的词；

（2）从结构上讲，该检索策略没有以正确的方式通过布尔逻辑运算符连接关键词，例如，检索策略将“Weight regain”和“Obesity”通过OR连接，但是“Obesity”和“Weight regain”代表的含义并不相同；

（3）ChatGPT的检索策略还设置了检索截止日期，但研究者并未让其设置。

研究者最后建议，应谨慎使用ChatGPT来制定搜索策略，因为可能存在内容和结构的问题，检索者在使用ChatGPT时应该意识到这些问题的存在。

参考文献：J Transl Med. 2024;22(1):1. doi: 10.1186/s12967-023-04371-5.

-----------限时福利---------

现在起至2024年2月9日前，到医咖会认证为基础会员，可获取有效期1个月的基础课程卡（包含22张基础课程券，可用于学习SPSS、R、Stata、Meta分析等16门基础课程）。

点击链接：mediecogroup.com/community/user/profile/edit/?type=certified，赶快认证吧！