ChiCTR2600117120 版本V1.0 版本创建时间2026/01/20 10:50:13 中国临床试验注册中心

审核状态：

Project audit state：

通过审核

Successful

注册号：

Registration number：

ChiCTR2600117120 

最近更新日期：

Date of Last Refreshed on：

2026-01-20 10:49:50 

注册时间：

Date of Registration：

2026-01-20 00:00:00 

注册号状态：

预注册

Registration Status：

Prospective registration

注册题目：

前瞻性评估四种大型语言模型聊天机器人对小儿外科疾病相关问题回答的准确性：一项实验性比较研究项目

Public title：

Prospective Evaluation of the Accuracy of Four Large Language Model Chatbots in Answering Pediatric Surgical Disease-Related Questions: An Experimental Comparative Study

注册题目简写：

English Acronym：

研究课题的正式科学名称：

前瞻性评估四种大型语言模型聊天机器人对小儿外科疾病相关问题回答的准确性：一项实验性比较研究项目

Scientific title：

Prospective Evaluation of the Accuracy of Four Large Language Model Chatbots in Answering Pediatric Surgical Disease-Related Questions: An Experimental Comparative Study

研究课题代号(代码)：

Study subject ID：

在二级注册机构或其它机构的注册号：

The registration number of the Partner Registry or other register：

申请注册联系人：

康婷 

研究负责人：

康婷 

Applicant：

Kang Ting 

Study leader：

Kang Ting 

申请注册联系人电话：

Applicant telephone：

+86 177 3683 5867

研究负责人电话：

Study leader's telephone：

+86 177 3683 5867

申请注册联系人传真 ：

Applicant Fax：

研究负责人传真：

Study leader's fax：

申请注册联系人电子邮件：

Applicant E-mail：

Kt0407hyll@163.com

研究负责人电子邮件：

Study leader's E-mail：

Kt0407hyll@163.com

申请单位网址(自愿提供)：

Applicant website(voluntary supply)：

研究负责人网址(自愿提供)：

Study leader's website(voluntary supply)：

申请注册联系人通讯地址：

四川省成都市武侯区国学巷37号

研究负责人通讯地址：

四川省成都市武侯区国学巷37号

Applicant address：

No. 37, Guoxue Lane, Wuhou District, Chengdu, Sichuan Province

Study leader's address：

No. 37, Guoxue Lane, Wuhou District, Chengdu, Sichuan Province

申请注册联系人邮政编码：

Applicant postcode：

研究负责人邮政编码：

Study leader's postcode：

申请人所在单位：

四川大学华西医院

Applicant's institution：

West China Hospital of Sichuan University

研究负责人所在单位：

四川大学华西医院

Affiliation of the Leader：

West China Hospital of Sichuan University

是否获伦理委员会批准：

是/Yes

Approved by ethic committee：

Yes

伦理委员会批件文号：

Approved No. of ethic committee：

[2025]审(2457)号

伦理委员会批件附件：

Approved file of Ethical Committee：

 查看附件View

批准本研究的伦理委员会名称：

四川大学华西医院生物医学伦理审查委员会

Name of the ethic committee：

Ethics Committee on Biomedical Research, West China Hospital of Sichuan University

伦理委员会批准日期：

Date of approved by ethic committee：

2025-12-16 00:00:00

伦理委员会联系人：

邓绍林

Contact Name of the ethic committee：

Deng Shaolin

伦理委员会联系地址：

四川省成都市武侯区国学巷37号

Contact Address of the ethic committee：

No. 37, Guoxue Lane, Wuhou District, Chengdu, Sichuan Province

伦理委员会联系人电话：

Contact phone of the ethic committee：

+86 28 8542 2654

伦理委员会联系人邮箱：

Contact email of the ethic committee：

研究实施负责（组长）单位：

四川大学华西医院

Primary sponsor：

West China Hospital of Sichuan University

研究实施负责（组长）单位地址：

四川省成都市武侯区国学巷37号

Primary sponsor's address：

No. 37, Guoxue Lane, Wuhou District, Chengdu, Sichuan Province

试验主办单位(项目批准或申办者)：

Secondary sponsor：

国家：

中国

省(直辖市)：

四川

市(区县)：

成都

Country：

China

Province：

Sichuan

City：

Chengdu

单位(医院)：

四川大学华西医院

具体地址：

四川省成都市武侯区国学巷37号

Institution
hospital：

West China Hospital of Sichuan University

Address：

No. 37, Guoxue Lane, Wuhou District, Chengdu, Sichuan Province

经费或物资来源：

本研究得到四川省自然科学基金（2024NSFSC1499）、四川大学华西医院博士后科研基金（2025HXBH053）和中国博士后科学基金（编号：GZC20231828）的资助。

Source(s) of funding：

This research was funded by the Natural Science Foundation of Sichuan Province (2024NSFSC1499), Postdoctoral Research and Development Fund of West China Hospital, Sichuan University(2025HXBH053), the China Postdoctoral Science Foundation (No. GZC20231828)

Target disease：

Pediatric Urinary System Disorders

Target disease code：

研究类型：

观察性研究

Study type：

Observational study

研究所处阶段：

 其它 

Study phase：

N/A

研究设计：

横断面 

Study design：

Cross-sectional 

研究目的：

本研究目的是全面评估并比较主流AI聊天机器人在常见小儿外科相关疾病问题上回答的优劣，以评估各种AI聊天机器人在小儿外科领域中辅助医学教育、预测诊断和为患者推荐治疗方案的潜力。  

Objectives of Study：

The objective of this study is to comprehensively evaluate and compare the strengths and weaknesses of mainstream AI chatbots in addressing common pediatric surgical conditions, thereby assessing their potential to assist medical education, aid in diagnostic prediction, and recommend treatment plans for patients within the field of pediatric surgery.

药物成份或治疗方案详述：

 

Description for medicine or protocol of treatment in detail：

 

纳入标准：

1.疾病及患儿入选标准： (1) 明确诊断为某一常见小儿外科疾病（如小儿泌尿外科疾病、小儿普通外科疾病等单一病种）； (2) 患儿年龄符合该疾病高发人群范围，病情稳定，无严重并发症； (3) 患儿家属愿意参与开放式问卷调研，能清晰表达关心的疾病相关问题。? 2.研究参与者入选标准： (1) 年满 18 周岁，具备完全民事行为能力，为入选患儿的直系亲属（父母、祖父母 / 外祖父母）； (2) 具备基本阅读理解和表达能力，能独立完成问卷填写（问题提供、排序）； (3) 知晓本研究目的，自愿参与并签署知情同意书； (4) 无沟通障碍，能配合研究团队完成问题收集及排序工作。? 3.AI 聊天机器人入选标准： (1) 主流 AI 聊天机器人，包括 ChatGPT 4（OpenAI）、Copilot、Claude AI 及我国的文心一言； (2) 包含免费版本和付费版本，且均为研究启动时的最新一版； (3) 能支持文字输入及应答输出，可稳定获取应答结果。? 4.评分专家入选标准： (1) 属于研究涉及疾病的相关领域； (2) 熟悉该疾病的诊疗规范及权威医学文献； (3) 无利益冲突，自愿参与评分工作。

Inclusion criteria

1. Disease and Patient Inclusion Criteria: (1) Clearly diagnosed with a specific common pediatric surgical disease (such as pediatric urological diseases or general pediatric surgical diseases); (2) The patient’s age falls within the high-risk group for the disease, with stable condition and no severe complications; (3) The patient’s family is willing to participate in an open-ended questionnaire survey and can clearly express concerns related to the disease. 2. Research Participant Inclusion Criteria: (1) At least 18 years old, possessing full civil capacity, and a direct relative of the selected patient (parents, grandparents); (2) Have basic reading comprehension and expression abilities, able to independently complete the questionnaire (provide questions, rank order); (3) Understand the purpose of this study, voluntarily participate, and sign a written informed consent form; (4) No communication barriers and able to cooperate with the research team in collecting and ranking questions. 3. AI Chatbot Inclusion Criteria: (1) Mainstream AI chatbots, including ChatGPT 4 (OpenAI), Copilot, Claude AI, and Baidu's Wenxin Yiyan; (2) Includes both free and paid versions, and all must be the latest version at the start of the study; (3) Must support text input and response output, and can consistently provide response results. 4. Scoring Expert Inclusion Criteria: (1) Belongs to a field related to the diseases involved in the study; (2) Familiar with diagnostic and treatment guidelines and authoritative medical literature on the disease; (3) No conflicts of interest and voluntarily participate in the scoring work.

排除标准：

1.疾病及患儿排除标准： (1) 罕见小儿外科疾病、多系统联合畸形或病情危重（如严重感染、休克等）的患儿； (2) 患儿合并其他严重器质性疾病或精神类疾病，可能影响家属对疾病问题的认知； (3) 疾病诊断不明确或治疗方案尚未确定的患儿。? 2.研究参与者排除标准： (1) 未满 18 周岁或无完全民事行为能力； (2) 存在认知障碍、精神疾病或沟通障碍，无法清晰表达问题或完成问卷； (3) 拒绝签署知情同意书或不配合问题收集、排序工作； (4) 与研究团队成员存在利益关联，可能影响问题提供的客观性； (5) 近 3 个月内参与过同类 AI 聊天机器人评估研究。? 3.AI 聊天机器人排除标准： (1) 无法稳定获取应答结果的 AI 机器人； (2) 无明确免费版本或付费版本区分的 AI 机器人； (3) 研究启动时已淘汰或停止更新的旧版本 AI 机器人； (4) 存在技术壁垒，无法以统一格式输入问题的 AI 机器人。? 4.评分专家排除标准： (1) 非该疾病相关领域的小儿外科医师； (2) 存在利益冲突（如与 AI 机器人开发公司有合作关系）； (3) 拒绝遵守盲法评分原则或不配合评分工作。

Exclusion criteria：

1. Disease and Pediatric Patient Exclusion Criteria: (1) Children with rare pediatric surgical diseases, multiple system malformations, or critical conditions (such as severe infection, shock, etc.); (2) Children with other serious organic diseases or psychiatric disorders that may affect family members' understanding of the disease; (3) Children with unclear disease diagnosis or undetermined treatment plans. 2. Research Participant Exclusion Criteria: (1) Under 18 years old or without full civil capacity; (2) Having cognitive impairment, psychiatric illness, or communication barriers that prevent clear expression of problems or completion of questionnaires; (3) Refusing to sign the informed consent form or not cooperating in the collection and prioritization of questions; (4) Having a conflict of interest with the research team members, which may affect the objectivity of the questions provided; (5) Participated in similar AI chatbot evaluation studies within the past 3 months. 3. AI Chatbot Exclusion Criteria: (1) AI chatbots that cannot provide stable response results; (2) AI chatbots without a clear distinction between free and paid versions; (3) Outdated AI chatbot versions that have been discontinued or stopped updating at the start of the study; (4) AI chatbots with technical barriers that prevent inputting questions in a standardized format. 4. Scoring Expert Exclusion Criteria: (1) Pediatric surgeons not related to the disease area; (2) Having a conflict of interest (e.g., a cooperative relationship with AI chatbot development companies); (3) Refusing to comply with blinded scoring principles or not cooperating in the scoring work.

研究实施时间：

Study execute time：

从 From 2026-01-23 00:00:00至 To 2026-07-05 00:00:00  

征募观察对象时间：

Recruiting time：

从From 2026-01-23 00:00:00 至 To 2026-01-23 00:00:00  

干预措施：

Interventions：

组别：

Chatgpt-4o 组

样本量：

30

Group：

Chatgpt-4o group

Sample size：

干预措施：

无

干预措施代码：

Intervention：

None

Intervention code：

组别：

Deepseek 组

样本量：

30

Group：

Deepseek group

Sample size：

干预措施：

无

干预措施代码：

Intervention：

None

Intervention code：

组别：

Gemini2.5pro 组

样本量：

30

Group：

Gemini2.5pro group

Sample size：

干预措施：

无

干预措施代码：

Intervention：

None

Intervention code：

组别：

Openevidence 组

样本量：

30

Group：

Openevidence group

Sample size：

干预措施：

无

干预措施代码：

Intervention：

None

Intervention code：

组别：

智谱清言组

样本量：

30

Group：

Zhipu Qingyan (ChatGLM) group

Sample size：

干预措施：

无

干预措施代码：

Intervention：

None

Intervention code：

研究实施地点：

Countries of recruitment and research settings：

国家：

 中国

省(直辖市)：

 四川 

市(区县)：

 成都 

Country：

China 

Province：

Sichuan 

City：

Chengdu 

单位(医院)：

四川大学华西医院 

单位级别：

三甲 

Institution
hospital：

West China Hospital of Sichuan University

Level of the institution：

Tertiary A

测量指标：

Outcomes：

指标中文名：

AI 聊天机器人应答质量

指标类型：

主要指标

Outcome：

AI Chatbot Response Quality

Type：

Primary indicator

测量时间点：

测量方法：

Measure time point of outcome：

Measure method：

指标中文名：

问卷可信度及 AI 应答接受度

指标类型：

次要指标

Outcome：

Questionnaire Reliability and AI Response Acceptance

Type：

Secondary indicator

测量时间点：

测量方法：

Measure time point of outcome：

Measure method：

采集人体标本：

Collecting sample(s)
from participants：

标本中文名：

无

组织：

Sample Name：

None

Tissue：

人体标本去向

 其它  

说明

Fate of sample：

0thers  

Note：

征募研究对象情况：

Recruiting status：

尚未开始

Not yet recruiting

年龄范围：

Participant age：
最小 Min age 岁 years
最大 Max age 岁 years

性别：

男女均可

Gender：

Both

随机方法（请说明由何人用什么方法产生随机序列）：

无

Randomization Procedure (please state who generates the random number sequence and by what method)：

None

是否公开试验完成后的统计结果:

Calculated Results after the Study Completed public access:

公开/Public

盲法：

Blinding：

试验完成后的统计结果（上传文件）：

Calculated Results after
the Study Completed(upload file)：

是否共享原始数据：

IPD sharing

No

共享原始数据的方式（说明：请填入公开原始数据日期和方式，如采用网络平台，需填该网络平台名称和网址）：

无

The way of sharing IPD”(include metadata and protocol, If use web-based public database, please provide the url)：

None

数据采集和管理（说明：数据采集和管理由两部分组成，一为病例记录表(Case Record Form, CRF)，二为电子采集和管理系统(Electronic Data Capture, EDC)，如ResMan即为一种基于互联网的EDC：

采用自行设计的病例记录表（CRF）收集受访者对 AI 回答的评分及排序数据，使用计算机软件（如 Excel）进行电子数据管理，记录受访者编号、题目评分、排序及深度访谈理由等信息。

Data collection and Management (A standard data collection and management system include a CRF and an electronic data capture：

A self-designed Case Record Form (CRF) is used to collect participants' scores, rankings of AI responses, and reasons for depth interviews. Data is electronically managed using computer software (e.g., Excel), recording participant IDs, item scores, rankings, and interview justifications.

数据与安全监察委员会：

Data and Safety Monitoring Committee：

暂未确定/Not yet

注册人：

Name of Registration：

  2026-01-20 10:49:50