Delphi4All
Computer Angels

Delphi4All — Panduan pengguna

Konferensi konsensus dengan metode Delphi

Apa itu Delphi4All

Delphi4All dipakai untuk menyelenggarakan konferensi konsensus dengan metode Delphi. Sekelompok ahli — para panelis — memberi nilai pada banyak kemungkinan kasus klinis; sistem menghitung di mana ada kesepakatan dan di mana tidak, mengembalikan ke pemungutan suara hanya hal-hal yang membuat kelompok terbelah, dan pada akhirnya menguraikan hasilnya seringkas mungkin.

Dua peran

  • Koordinator mendaftar di situs, menyusun studi, mengundang para panelis, membuka dan menutup putaran, serta membaca laporan akhir.
  • Panelis tidak mendaftar: ia menerima kode akses pribadi lewat email dan memberi suara dengan kode itu. Kode tersebut menandai suaranya, jadi tidak boleh dibagikan.

Mendaftar sebagai koordinator

Pendaftaran memerlukan dua konfirmasi dan berlangsung dalam empat langkah.

  1. Isi formulir pendaftaran dengan nama, alamat email, institusi, dan alasan permohonan.
  2. Datang sebuah email berisi tautan: membukanya menegaskan bahwa alamat itu milik Anda.
  3. Administrator menerima permohonan dan memutuskan apakah menyetujuinya.
  4. Jika permohonan disetujui, datang email kedua berisi tautan untuk memilih kata sandi. Sejak itu Anda dapat masuk.

Nama, institusi, bahasa, dan kata sandi dapat diubah kapan saja dari profil Anda: nama Anda sendiri di bilah atas.

Sebelum mulai: apa yang perlu disiapkan

Studi lebih mudah disusun bila dirancang dulu di atas kertas, dan sebaiknya dibahas dengan kelompok sebelum dimasukkan: setelah putaran pertama, strukturnya tidak dapat diubah lagi. Anda memerlukan tiga daftar.

  • Pertanyaannya: apa yang ingin Anda ketahui dari panel. Misalnya: «kapan pemeriksaan USG tepat dilakukan pada orang dewasa dengan nyeri perut akut?».
  • Prosedur: keputusan yang akan dinilai, yaitu jawaban yang mungkin atas pertanyaan tersebut. Dalam contoh: USG, CT perut, rawat inap.
  • Faktor yang dapat mengubah jawaban: ciri-ciri pasien yang menurut para ahli membuat suatu prosedur lebih atau kurang tepat. Dalam contoh: jenis kelamin, usia, kehamilan, demam. Faktor-faktor inilah yang akan menjadi variabel.

Saran: masukkan hanya faktor yang benar-benar diyakini seseorang di kelompok dapat mengubah penilaian. Setiap faktor tambahan melipatgandakan pekerjaan panelis, seperti terlihat di bagian berikut.

Membuat studi

Dari «Studi saya», kotak «Studi baru» hanya meminta beberapa hal:

  • «Judul» dan «Keterangan»: bagaimana panelis akan melihat studi di bagian atas halaman pemungutan suara. Sebaiknya tuliskan pertanyaan studi di keterangan.
  • «Nilai terendah» dan «Nilai tertinggi»: skalanya. Metode RAND/UCLA memakai 1 sampai 9, dan sebaiknya dibiarkan begitu: tiga pita — bawah, tengah, dan atas — dirancang untuk skala itu.
  • «Jumlah panelis»: berapa ahli yang Anda perkirakan. Ini hanya acuan; yang menentukan adalah siapa yang benar-benar Anda tambahkan di tab Panelis.
  • «Jumlah putaran maksimum»: biasanya dua atau tiga sudah cukup.

Setelah «Buat», halaman studi terbuka dan terbagi dalam tab: Bab, Prosedur, Panelis, Matriks izin, Putaran, Pengaturan, Laporan. Sebaiknya diisi dengan urutan itu, yang juga merupakan urutan bagian-bagian berikutnya.

Bab, variabel, dan pilihan

Sebuah studi terdiri dari bab-bab. Tiap bab memuat variabel yang menggambarkan kasusnya, dan tiap variabel punya daftar pilihan yang tertutup: misalnya jenis kelamin dengan laki-laki dan perempuan, usia dengan di bawah 65 tahun dan 65 tahun ke atas, kehamilan dengan ya dan tidak. Panelis tidak pernah menulis teks bebas: ia memilih di antara pilihan yang Anda tetapkan.

Satu bab mengelompokkan kasus yang dijelaskan dengan variabel yang sama. Jika studi mencakup orang dewasa dan anak-anak, dan pada anak-anak faktor lain yang berperan — misalnya berat badan — buatlah dua bab, «Dewasa» dan «Anak». Jika semua kasus dijelaskan dengan cara yang sama, satu bab sudah cukup.

Caranya, di tab Bab:

  1. Di «Bab baru», ketik judul lalu tekan «Buat».
  2. Di dalam bab, pada «Nama variabel baru», ketik namanya — misalnya «Jenis kelamin» — lalu tekan Enter atau «Variabel baru». Kursor tetap di kolom itu, jadi Anda bisa langsung mengetik variabel berikutnya. Cukup namanya; kode internal dibuat sendiri oleh program.
  3. Di samping setiap variabel, pada «Nama pilihan», ketik pilihannya satu per satu, juga dengan Enter: «Laki-laki», lalu «Perempuan».

Ada dua aturan agar pilihan berfungsi. Pilihan harus saling meniadakan: seorang pasien tidak boleh masuk dua pilihan dari variabel yang sama. Dan pilihan harus mencakup semua kasus: setiap pasien harus masuk salah satunya. Jadi untuk usia, «di bawah 65 tahun» dan «65 tahun ke atas» sudah tepat; «muda» dan «tua» membingungkan untuk orang berusia lima puluh tahun.

Berapa skenario: waspadai pertambahannya

Program membuat semua kombinasi pilihan yang mungkin. Jumlahnya adalah hasil kali banyaknya pilihan setiap variabel, dan bertambah sangat cepat:

  • Jenis kelamin (2) × Usia (2) × Demam (2) = 8 skenario.
  • Ditambah Kehamilan (2): 16 skenario.
  • Membagi usia menjadi tiga kelompok, bukan dua: 24 skenario.
  • Lima variabel dengan masing-masing tiga pilihan: 243 skenario.

Dan setiap skenario dinilai untuk setiap prosedur: dengan 24 skenario dan 3 prosedur, setiap panelis memberi 72 suara per putaran. Di bawah setiap bab selalu tertera berapa skenario yang akan dihasilkan, sebelum dan sesudah pengecualian. Perhatikan angka itu saat menambah variabel dan pilihan, dan tanyakan pada diri sendiri apakah setiap variabel benar-benar sepadan dengan pekerjaan yang dituntutnya.

Pengecualian dan skenario

Skenario adalah satu kombinasi pilihan, satu untuk tiap variabel: misalnya jenis kelamin = laki-laki, usia = di bawah 65 tahun, kehamilan = tidak. Sistem sendiri membuat semua kombinasi yang mungkin dari tiap bab. Pengecualian menyingkirkan yang mustahil — jenis kelamin = laki-laki bersama kehamilan = ya — sehingga tidak muncul dalam pemungutan suara.

Untuk membuat pengecualian, di bagian bawah bab pilih satu nilai pada dua daftar pilihan atau lebih — misalnya «Laki-laki» pada Jenis kelamin dan «Ya» pada Kehamilan — biarkan yang lain pada «—», lalu tekan «Pengecualian baru». Daftar yang dibiarkan pada «—» berarti «nilai apa saja». Jumlah skenario di bawah bab langsung turun: dalam contoh dari 16 menjadi 12.

Setelah variabel, pilihan, dan pengecualian siap, tekan «Buat skenario». Perhatian: begitu putaran pertama dibuat, skenario tidak dapat dibuat ulang, karena suara yang sudah diberikan mengacu pada skenario tersebut. Periksa daftarnya sebelum mulai.

Prosedur

Prosedur adalah pertanyaan yang diajukan untuk tiap skenario: biasanya sedikit, jarang lebih dari lima. Dalam tabel pemungutan suara, prosedur adalah kolomnya. Untuk tiap skenario panelis memberi satu nilai pada tiap prosedur.

Di tab Prosedur, ketik namanya dan, bila perlu, keterangan, lalu tekan «Prosedur baru». Rumuskan sebagai keputusan yang tegas, yang bisa dinilai panelis tepat atau tidak: «USG perut dalam 6 jam» lebih baik daripada «Pencitraan». Jika dua prosedur terlalu mirip, panelis akan memberi nilai yang hampir sama dan hasilnya tidak banyak berarti.

Panelis dan kode akses

Koordinator memasukkan nama dan alamat para panelis — biasanya sembilan, tetapi jumlahnya bebas. Sistem membuat kode unik untuk masing-masing dan mengirimkannya lewat email bersama tautan untuk memberi suara. Siapa yang kehilangan kodenya dapat meminta koordinator mengirimnya lagi.

Di tab Panelis, setiap orang memerlukan «Nama lengkap», «Alamat email», dan «Bahasa»: undangan dan halaman pemungutan suara akan diterimanya dalam bahasa itu. «Kirim undangan» mengirim email berisi tautan pribadi; «Salin tautan» dipakai bila Anda lebih suka mengirimnya sendiri. Jangan kirim undangan sebelum putaran dibuka: siapa pun yang membuka tautan akan menemukan halaman tanpa apa pun untuk dinilai.

Matriks izin

Tidak semua orang harus menilai segalanya. Matriks menetapkan, untuk tiap panelis, kombinasi bab dan prosedur mana yang menjadi bagiannya. Izin yang diberikan pada satu pasangan bab-prosedur berlaku untuk semua skenario di dalam bab itu, sebab yang dinilai adalah skenario, bukan bab.

Di tab Matriks izin, barisnya adalah panelis dan kolomnya pasangan bab-prosedur; klik pada kotak untuk menyalakan atau mematikannya, lalu «Simpan». Contoh: jika dalam panel campuran seorang ahli radiologi hanya menilai USG dan CT, bukan rawat inap, matikan kotak rawat inap miliknya. «Izinkan semua» dan «Tolak semua» berlaku untuk seluruh tabel.

Kotak yang tidak Anda sentuh mengikuti «Izin bawaan untuk sel yang belum diatur»: karena itu bab atau prosedur yang ditambahkan belakangan tidak tertinggal karena lupa. Jika semua orang menilai semuanya, tidak ada yang perlu dilakukan.

Pengaturan

Tab Pengaturan berisi aturan konsensus, ambang-ambangnya, dan kata-kata yang dipakai dalam laporan. Nilai bawaan sesuai dengan metode RAND/UCLA yang dijelaskan di bagian berikut: jika tidak ada alasan khusus untuk mengubahnya, biarkan saja.

  • «Berapa nilai terendah yang disingkirkan» dan «Berapa nilai tertinggi yang disingkirkan»: berapa nilai ekstrem yang dibuang sebelum dihitung. Bawaan: satu di tiap sisi.
  • «Suara di luar pita yang masih dianggap sepakat»: berapa suara boleh jatuh di luar pita tanpa membatalkan kesepakatan. Bawaan: satu.
  • «Jumlah suara di luar pita yang membuat perbedaan pendapat menjadi kuat»: sampai angka ini perbedaan pendapat lemah, di atasnya kuat. Bawaan: dua.
  • «Suara minimum untuk menilai sebuah sel»: di bawah angka ini sel tidak dinilai. Bawaan: tiga.
  • «Peristilahan»: kata-kata untuk pita dan hasil, misalnya «sesuai» sebagai ganti «tinggi». Dapat diubah kapan saja, bahkan saat studi sedang berjalan.

Pemeriksaan akhir sebelum putaran pertama

Sebelum melibatkan panelis, pemeriksaan singkat mencegah Anda harus mengulang dari awal:

  1. Setiap bab punya variabelnya, dan setiap variabel punya setidaknya dua pilihan.
  2. Jumlah skenario di setiap bab sesuai dengan yang Anda harapkan.
  3. Anda sudah menekan «Buat skenario».
  4. Semua prosedur sudah ada dan dirumuskan dengan jelas.
  5. Alamat dan bahasa panelis sudah benar, dan matriks menentukan siapa menilai apa.
  6. Di tab Putaran: «Putaran baru», lalu «Mulai putaran».
  7. Baru sekarang, di tab Panelis, kirim undangannya.

Dari sini panduan berlanjut dengan apa yang terjadi selama pemungutan suara.

Bagaimana pemungutan suara berlangsung

Panelis membuka tautan yang ia terima dan menemukan sebuah tabel: kolom pertama berisi bab, terbagi menjadi satu baris per skenario; kolom lainnya adalah prosedur. Di tiap sel angka-angka skala — biasanya 1 sampai 9 — tertulis berjajar: klik angka yang dipilih dan muncul lingkaran di sekelilingnya. Suara tersimpan sendiri sambil jalan; di akhir, pengiriman dikonfirmasi.

Kapan disebut sepakat

Skala terbagi menjadi tiga pita: nilai rendah, pita tengah, nilai tinggi. Untuk tiap sel, nilai tertinggi dan terendah disisihkan — dua ujung yang terpencil — lalu dilihat di mana sisanya jatuh. Jika semuanya jatuh di pita yang sama kecuali paling banyak satu, ada kesepakatan. Jika dua jatuh di luar, perbedaan pendapat itu lemah; jika lebih dari dua, kuat.

Ambang, batas-batas pita, dan kata-kata yang dipakai untuk menyebutnya dapat diubah di pengaturan studi: itu pilihan Anda, bukan pilihan program.

Putaran kedua

Setelah putaran pertama ditutup, koordinator dapat membuka putaran kedua: hanya sel yang tadi berbeda pendapat yang kembali dinilai. Yang memberi suara melihatnya lagi dengan batang mendatar di bawah angka, membentang dari nilai terendah sampai tertinggi pada kali sebelumnya, dan tepat di bawahnya median putaran sebelumnya. Dengan begitu setiap orang melihat posisi kelompok sebelum memutuskan lagi.

Kesepakatan yang terbentuk di pita tengah tetap kesepakatan dan tidak kembali dinilai: itu keputusan kelompok, bukan keraguan.

Menutup sel secara manual

Jika sebuah sel tidak akan selesai dengan sendirinya, koordinator dapat menutupnya dari tabel statistik, dengan sebuah catatan dan, bila dikehendaki, dengan hasil yang diputuskan dalam konferensi. Sel yang ditutup tidak kembali dinilai, dan pada laporan akhir muncul hasil yang dipilih. Membukanya kembali memulihkan keadaan semula.

Laporan akhir

Laporan tidak menyebut skenario satu per satu: ia menyusutkannya menjadi variabel-variabel yang membuat perbedaan. Jika untuk satu prosedur kesepakatan berlaku bagi laki-laki, baik muda maupun tua, laporan menulis «jenis kelamin = laki-laki» dan tidak menyinggung usia, sebab usia tidak mengubah hasilnya. Untuk tiap bab dan prosedur disebutkan variabel penentu dan variabel tanpa pengaruh.

Di bagian atas laporan, wilayah yang sama ditulis sebagai kalimat, siap ditempelkan ke bagian hasil sebuah artikel. Semuanya dapat diekspor sebagai CSV dan teks biasa, dan halamannya tercetak tanpa navigasi.

Bahasa dan kata-kata studi

Antarmuka tersedia dalam beberapa bahasa dan diganti dari bilah atas: tiap panelis memberi suara dalam bahasanya sendiri. Sebaliknya, kata-kata yang menamai pita dan hasil — sesuai, tidak pasti, tidak sesuai, kesepakatan, perbedaan pendapat — tidak diterjemahkan: itu data studi Anda, ditulis di pengaturan, sehingga tampil sama bagi semua orang dan dalam laporan akhir.