Delphi4All — 用户手册
用德尔菲法开展共识会议
Delphi4All 是什么
Delphi4All 用于以德尔菲法开展共识会议。一组专家——即专家组成员——对众多可能的临床情形投票;系统算出哪里存在一致、哪里没有,只把存在分歧的部分重新交付投票,最后用尽可能简短的方式描述结果。
两种角色
- 协调员在网站上注册,建立研究,邀请专家,开启和结束各轮投票,并阅读最终报告。
- 专家不需要注册:他通过电子邮件收到一个个人访问码,凭它投票。该访问码用于识别他的投票,因此不可转告他人。
注册为协调员
注册需要两次确认,分四步完成。
- 填写注册表单:姓名、电子邮件地址、所属机构和申请理由。
- 您会收到一封带链接的邮件:打开它即确认该地址属于您。
- 管理员收到申请并决定是否批准。
- 申请获批后会收到第二封邮件,其中的链接用于设置密码。此后便可登录。
姓名、机构、语言和密码随时可以在个人资料中修改:点击顶栏中您自己的名字。
开始之前:需要准备什么
先在纸上草拟研究会更容易搭建,并且最好在录入之前与小组讨论:第一轮开始后,研究的结构就不能再改了。您需要三份清单。
- 问题:您想从专家组那里了解什么。例如:“对于急性腹痛的成年人,何时适合做超声检查?”
- 项目:需要评判的决策,也就是问题的可能答案。在这个例子中:超声、腹部 CT、住院。
- 可能改变答案的因素:专家认为会使某个项目更适合或更不适合的患者特征。在这个例子中:性别、年龄、怀孕、发热。它们将成为变量。
建议:只纳入小组中确实有人认为会改变判断的因素。每多一个因素,专家的工作量就会成倍增加,后文会说明。
创建研究
在“我的研究”页面,“新建研究”框只需要填写几项:
- “标题”和“说明”:专家在投票页面顶部看到的研究信息。建议把研究的问题写在说明里。
- “最低分”和“最高分”:量表。RAND/UCLA 方法使用 1 到 9,最好保持不变:低、中、高三个区间就是按这个量表设计的。
- “专家人数”:您预计的专家数量。这只是参考,真正起作用的是您在“专家”标签页中实际添加的人。
- “最多轮数”:通常两到三轮就够了。
点击“创建”后会打开研究页面,分为几个标签页:章节、项目、专家、权限矩阵、轮次、设置、报告。最好按这个顺序填写,后面各节也按这个顺序介绍。
章节、变量与选项
一项研究由若干章节组成。每个章节包含描述该情形的变量,每个变量有一份封闭的选项清单:例如性别有男和女,年龄有“65 岁以下”和“65 岁及以上”,怀孕有是和否。专家从不填写自由文本:他只在您定义的选项中选择。
一个章节把用相同变量描述的情形归在一起。如果研究同时涉及成人和儿童,而儿童要考虑不同的因素——比如体重——就建两个章节:“成人”和“儿童”。如果所有情形的描述方式都一样,一个章节就够了。
在“章节”标签页中操作:
- 在“新建章节”中填写标题,然后点击“创建”。
- 在章节内,于“新变量的名称”中填写名称——例如“性别”——然后按回车键或点击“新建变量”。光标会留在输入框中,可以马上输入下一个变量。只需要名称,内部代码由程序自动生成。
- 在每个变量旁边的“选项名称”中逐个输入它的选项,同样按回车键:先“男”,再“女”。
好用的选项要遵守两条规则。选项之间必须互斥:一个患者不能同时属于同一变量的两个选项。选项必须覆盖所有情况:每个患者都必须属于其中一个。所以,年龄用“65 岁以下”和“65 岁及以上”就很好;“年轻”和“年老”对五十岁的人来说就含糊不清。
情景数量:注意增长速度
程序会生成选项的所有可能组合。组合数等于各变量选项数的乘积,增长得非常快:
- 性别 (2) × 年龄 (2) × 发热 (2) = 8 个情景。
- 再加上怀孕 (2):16 个情景。
- 把年龄分成三档而不是两档:24 个情景。
- 五个变量、每个三个选项:243 个情景。
而且每个情景都要针对每个项目投票:24 个情景、3 个项目,每位专家每轮就要投 72 票。每个章节下方都会显示将生成多少个情景(排除例外前后都有)。添加变量和选项时请留意这个数字,并想一想每个变量是否真的值得它带来的工作量。
例外与情景
一个情景就是各变量取值的一种组合,每个变量取一个值:例如 性别=男、年龄=65 岁以下、怀孕=否。系统会自动生成每个章节的全部可能组合。例外用于排除不可能的组合——性别=男 与 怀孕=是——这些组合不会出现在投票中。
要创建例外,在章节底部的两个或更多下拉列表中各选一个值——例如性别选“男”、怀孕选“是”——其余保持“—”,然后点击“新建例外”。保持“—”的列表表示“任意值”。章节下方的情景数量会立即减少:在这个例子中从 16 变为 12。
变量、选项和例外都设置好后,点击“生成情景”。注意:一旦创建了第一轮,情景就不能再重新生成,因为已投的票对应的就是这些情景。开始之前请检查情景列表。
项目
项目就是针对每个情景提出的问题:通常不多,很少超过五个。在投票表中它们是列。对每个情景,专家为每个项目各打一个分。
在“项目”标签页中填写名称,必要时加上说明,然后点击“新建项目”。请把项目写成明确的决策,让专家能判断是否适当:“6 小时内做腹部超声”比“影像检查”好用。如果两个项目太相似,专家给出的分数会几乎一样,结果也就说明不了什么。
专家与访问码
协调员录入专家的姓名和地址——通常是九位,但数量不限。系统为每人生成一个唯一的访问码,连同投票链接一并通过邮件发送。遗失访问码的人可以请协调员重新发送。
在“专家”标签页中,每位专家需要填写“姓名”“电子邮件地址”和“语言”:邀请和投票页面会以该语言发送给他。“发送邀请”会发出带个人链接的邮件;如果您想自己发送,可用“复制链接”。在开始本轮之前不要发送邀请:否则专家打开链接会看到一个无可投票的页面。
权限矩阵
并非人人都要对所有内容投票。矩阵规定每位专家负责哪些章节与项目的组合。对某一「章节—项目」组合授予的权限,适用于该章节内的所有情景,因为投票的对象是情景而不是章节。
在“权限矩阵”标签页中,行是专家,列是“章节—项目”组合;点击一个格子即可开启或关闭,然后点“保存”。例如:在混合专家组中,如果放射科医生只评判超声和 CT、不评判住院,就关闭他的“住院”格子。“全部允许”和“全部禁止”作用于整张表。
没有动过的格子遵循“未设置单元格的默认权限”:因此之后新增的章节或项目不会因疏忽而被排除。如果所有人都对所有内容投票,就什么都不用做。
设置
“设置”标签页包含共识规则、各项阈值以及报告中使用的用词。默认值对应后文介绍的 RAND/UCLA 方法:如果没有明确的理由,就保持不变。
- “剔除的最低分个数”和“剔除的最高分个数”:计数前去掉多少个极端分数。默认:两端各一个。
- “仍算一致时允许落在区间外的票数”:有多少票可以落在区间之外而不破坏一致。默认:一票。
- “超过该票数落在区间外即为强分歧”:不超过这个数为弱分歧,超过则为强分歧。默认:两票。
- “判定单元格所需的最少票数”:低于这个数,单元格不作判定。默认:三票。
- “用词”:区间和结果所用的词语,例如用“适当”代替“高”。随时可以修改,研究进行中也可以。
第一轮开始前的最后检查
在请专家参与之前,快速检查一遍,免得从头再来:
- 每个章节都有自己的变量,每个变量至少有两个选项。
- 每个章节的情景数量与您预期的一致。
- 已点击“生成情景”。
- 所有项目都已添加,表述清楚。
- 专家的邮箱和语言都正确,矩阵也规定好了谁对什么投票。
- 在“轮次”标签页中:先“新建一轮”,再“开始本轮”。
- 直到这时,才在“专家”标签页中发送邀请。
手册接下来介绍投票过程中会发生什么。
如何投票
专家打开收到的链接,看到一张表:第一列是章节,按情景分成若干行;其余各列是项目。每个单元格里,量表的数字——通常是 1 到 9——并排排列:点击选中的数字,它周围会出现一个圆圈。投票过程中会自动保存;最后确认提交。
何时算作一致
量表分为三个区间:低分、中间、高分。对每个单元格,先去掉最高分和最低分——孤立的两端——再看其余分数落在哪里。如果除最多一个之外全部落在同一区间,即为一致。如果有两个落在区间外,分歧为弱;超过两个,分歧为强。
阈值、区间的边界以及用于称呼它们的词语,都可以在研究设置中修改:这些是您的选择,不是程序的规定。
第二轮
第一轮结束后,协调员可以开启第二轮:只有存在分歧的单元格会重新进入投票。投票者会看到数字下方有一条横线,从上一轮的最低分延伸到最高分,紧接着下面是上一轮的中位数。这样每个人在重新决定之前,都能看到整组此前的位置。
在中间区间形成的一致仍然算作一致,不会重新投票:那是全组的决定,而不是犹豫不决。
手动关闭单元格
如果某个单元格无法自行得出结论,协调员可以从统计表中将它关闭,附上备注,并可指定一个在会议上议定的结果。被关闭的单元格不再进入投票,最终报告中显示的就是所选的结果。重新开启即可恢复原状。
最终报告
报告不会逐一列出情景:它把情景归结为真正起作用的变量。如果某个项目对男性——无论年轻还是年老——都存在一致,报告就写「性别 = 男」,而不提年龄,因为年龄不改变结果。报告对每个章节和项目都指出决定性变量和无影响的变量。
报告的开头,同样的区域被写成句子,可直接粘贴到论文的结果部分。全部内容可导出为 CSV 和纯文本,页面打印时不含导航栏。
语言与研究用词
界面有多种语言,可在顶栏切换:每位专家用自己的语言投票。而用于称呼区间和结果的词语——适当、不确定、不适当、一致、分歧——不做翻译:它们是您研究的数据,写在设置里,因此对所有人以及在最终报告中都保持一致。