psychology

Sona Systemによる実験参加者プール管理

DSCF1445
#写真はイメージです。
実験参加者プールは毎年いろいろな授業にお邪魔してGoogleフォームを使って作成している。4月と5月に1年生中心の授業に伺い、だいたい400名程度の希望者を募ることができる。Googleフォームへの入力なので、データはそのままスプレッドシートの形になる。90年代に北大でやっていた方式だと一般的信頼尺度のついた質問紙を配布して手書きしてもらう形式だったので、院生総出で1000部を軽く超える質問紙を入力したものだ。
ということで、データ入力の手間はないものの、いざ実験をやる段になるとこれがたいへん。データベースに入力されているメイルアドレスにメイルを一括送信し、「どのコマなら参加できるか返信してほしい」とやる。するとばらばらと大量の返信が届く。それを見ながら実験者が実験をする予定のスロットに参加者をはめこんでいく。
この作業はかなりたいへんで、手動のためにミスも多い。予め実験をやるスロットを作成しておき、Web上で参加者が自ら実験にサインアップできればどんなにいいだろう。しかも、「どの実験に参加したか」まで自動で記録されたらどんなに便利か。
それを実現する一つの方法がSona Systemsによるクラウドベースの実験参加者管理システム。$700/年間で夢のような実験参加者管理システムが手に入る。面倒くさい点としては、

  • 代理店がないので、事務手続き上面倒な場合が多い。
  • 支払いはクレジットカード/Paypalだけなので、これまた事務手続き上面倒な場合が多い。
  • 実験参加者用の画面は日本語化されているが、管理者用の画面は日本語化されていない (姓名も逆に表示される)。ただし、日本語を扱うことはできる。
  • 担当者と英語でやりとりしなければならない。
  • ユーザー (参加者、実験者など) のフィールドを追加できない。例えば性別のフィールドがないし、当然ふりがなを入力する欄はない。せめてカスタマイズできればよいのだが。
  • 設定項目が大量にある (ために、細かい設定ができるが、最初は面倒)。

くらい。いずれも運用上の工夫である程度なんとかできる。とりあえず設定項目が多い件については、「Ayaと同じにしてほしい」と言えばよいという情報は得たが、全項目を見て設定してみたので、その情報を残しておこう (偉そうに書いているが、実は彼に丸投げをした)。
いま気になっているのは、Adminのメイルアドレスを変更しても、Human Subjects/Privacy Policyなどに表示されるメイルアドレスが反映されないこと。これは手動で変更しなければいけない (依頼しなければいけない) のだろうか。
なお、以下の設定項目のうちcourse creditに関する部分とか、IRBに関する部分なんかはテキトーでよいと思う。「実験参加点を授業ごとに与えている」ような場合があれば慎重に。

設定項目

  • Site Name: お好きなものを
  • Site URL: https://hoge.sona-systems.comのhoge部分をカスタマイズ
  • Administrator Reply-To Email: お好きなものを
  • Participant Human Subject Policy Acknowledgment: No
  • Researcher Human Subject Policy Acknowledgment: No
  • Human Subject Policy Type: United States (Common Rule only)
  • IRB: IRB
  • Default Study Length: 90
  • Sign-Up Time Threshold: 24 hours before the study is to occur
  • Cancellation Time Threshold: 24 hours before the study is to occur
  • Time Threshold Includes Weekends: Yes
  • Random Study Order: Yes
  • Credit Display: No
  • Available Study Display: Yes
  • Online Study Display: Yes
  • Participant Progress Display: 空欄
  • Pre-Requisite/Disqualifier Display: Yes
  • Variable Credit Grant: Yes
  • Instructor Credit Grant: No
  • Sign-Up/Cancellation Confirmation Email: No
  • Daily Schedule Contact: 空欄
  • Automatic Reminder Email: Yes
  • Automatic Reminder Email Delay: 0 hours
  • Credit Notification Email: Yes
  • No-Show Account Limit: 0
  • Administrator No-Show Notification Email: 0
  • Administrator Account Notification Email: No
  • Administrator Pending Timeslots Email: Yes, for All Studies
  • Automatic Account Approval: No
  • Automatic Credit Grant Administrator Email: Yes
  • Lost Password Feature: Yes
  • Change Password Feature: Yes
  • Change Password Requirement: Yes
  • Study Approval: Only when adding a new study (admin. email notification on updates)
  • Study Approval Contact: 空欄
  • Study Scheduling Deadline: No Deadline
  • Researcher Manual Sign-Up/Cancellation: Sign-Up and Cancel (admin. CC on cancel)
  • Researcher Reminder Email: Yes
  • Participant Upper Case Names: No
  • Participant Display Order: Last Name (Surname)
  • Phone Number Display: No
  • Participant Identification: Full Name
  • Prescreen Viewing: Yes
  • Prescreen Aggregate Viewing: Yes
  • Prescreen Contact: Yes
  • Prescreen COntact Limit: 100
  • Prescreen Contact Admin. CC: Yes
  • Prescreen/Survey Concurrent Participant Limit: 10
  • Course Credit Reassignment: Yes
  • Course Reassignment: No
  • Date Format: Asian
  • Compensation Type: 円
  • Credit Type: Notes
  • @ Suffix: 空欄
  • Prescreen Requirement: Yes, prescreen administered on-line, participation mandatory
  • Credit/Pay Study Support: Pay only
  • P.I. Support: Yes
  • Multiple Researcher Support: Yes
  • Strict IRB Mode: No
  • Location Scheduling: Yes
  • Credit Increment: 0.5
  • Maximum Total Credits: No limit
  • Maximum Online Credits: No limit
  • Maximum Credit Enforcement Leniency: No
  • No-Show Penalty Credits: No Penalty
  • Penalty Type: Penalties increase credit requirements
  • Study Descriptions: Disabled
  • Duplicate Study Sign-Up: Yes
  • Passworded Studies: No
  • Web Studies: Both Studies Set Up Inside and Outside the System
  • Pre-Requisite Feature: Yes
  • Pre-Requisite Enforcement Leniency: Yes
  • Course Restriction Feature: Yes
  • Timeslot Usage Restriction: No Limit
  • Timeslot Usage Restriction Default: 5
  • Multiple Course Support: Yes
  • Course Credit Assignment: Yes
  • Multiple Course Requirements: Sum of all their courses
  • Participant Account Self-Creation: Yes
  • Student ID Deactivation: Yes
  • Student ID Requirement: Yes
  • Student ID Duplicates: No
  • Participant Phone Number Requirement: No
  • Participant Account Alt. Email: Yes

おまけ

実は2002年くらいに北大で実験参加者プールの管理をしていた僕は「もうこんな面倒くさい実験参加者への電話リクルート作業なんてやっていられない」ということで、「でんわばん」というシステムを業者に発注することを思いついたのだった。システムが完成する前に北大を出てしまったのでそのシステムがどの程度使われたか分からないが、電話でリクルートする院生たちがリクルートした実験参加者の情報をWeb上のスロットに埋めて行くというシステムだった。このシステムがなければ、リクルート電話をかける院生は「リクルート隊長」という役割の人 (僕が基本的に担当していた) に、実験参加者を一人確保するたびに電話する必要がある。
おのおの勝手に電話をすると、1スロットあたりの制限人数を超えてしまう可能性があるからだ。リクルート隊長はリクルーターから電話が来たら手元のファイルに参加者を入れて行き、埋まりそうなスロットが出てきたらリクルーター全員に電話で連絡をする。「そこのスロットにはもう入れないで!」。その隊長役を担うシステムをWebベースで作るという発想だった。Sona Systemができたのも2002年と知って感慨深いものがある。