小さな実験｜大きく変える前に、何を試せばいいのか

レイです。実験の範囲は、変更作業の容易さだけでなく、結果をどう解釈したいかから決めます。修理店で案内文、料金、受付方法を同時に変えたら、問い合わせの変化がどの変更に関係したのかは切り分けにくくなります。まず案内だけを変えるのは、現場で扱いやすい選択肢です。ここでは、二人で営む説明用の修理店「つむぎ」が案内を試す場面を使います。店の約束は、できない修理を引き受けないことです。

ただし「一度に一つ」が実験計画の普遍的な正解ではありません。NISTの実験計画資料には、複数の要因の組合せを調べる要因計画もあります。NIST：Full factorial designs。本稿で変更を絞るのは、小規模な現場で記録と解釈を引き受けられる範囲に収めるためです。

案内だけを変えても、他の条件が同じになるとは限りません。週末と平日では来店目的が違うかもしれず、担当者の説明も結果に関わります。変更箇所を一つにしたという事実だけで、その箇所が原因だとは断定しません。期間中の違いを記録して、解釈の留保を残します。

実務では、何を固定できたかと、固定できなかったかを並べる方が役に立ちます。料金は同じ、担当者は日によって違う、近隣の催事は未確認。この程度でも次の比較条件が見えます。因果を厳密に確かめたい判断なら、割付や必要な観測数を含め、設計を専門家と詰める段階に進みます。

修理例を一つ掲載する変更は、画面上なら取り消せます。しかし、掲載を見て来店した人の期待は、削除だけでは元に戻りません。可逆性を考えるときは、データを戻せるかに加えて、説明を受けた人へ誰がどう対応するかを見ます。小さな組織では、この後始末も同じ担当者の仕事になります。

つむぎでは、掲載前の案内を保存し、取り下げる判断は店主、問い合わせへの説明は受付担当と決めたとします。担当者が休みの日に止められないなら、その期間は試さないという選択もできます。戻せる手順が紙にあっても、実際に動ける人がいなければ、現場では使えません。

もう一つの選択は、公開前に案内案を見てもらうことです。何を扱う店に見えるか、どこが分かりにくいかを聞けば、公表せずに気づける点があります。一方、文章の感想を聞いただけでは、実際に相談するかは分かりません。期待を生む範囲と、確かめられる内容の両方を比べます。

取り消せる変更から始める狙いは、失敗を無かったことにすることではありません。影響が広がる前に、修正と説明の仕事を引き受けられるようにすることです。誰が止め、誰が伝え、残った依頼をどう扱うかまで書ければ、次に試せる範囲を現実的に選べます。

何を成功と呼ぶかは、案内を出す前に決めます。つむぎなら、相談者が対象範囲を理解できたかを主に見て、受付にかかる時間や対象外の期待も併せて確認する案があります。反応が良いという一言に、売上、理解、負担をまとめないようにします。

例えば相談が増えても、写真の確認と追加説明に手間がかかり、実際の修理時間が減ったらどうでしょう。顧客の理解に改善があっても、そのまま続ける運用には問題が残ります。反対に、相談数が同じでも行き違いが減れば、店の課題に合った変化かもしれません。店主の判断と受付担当の実感が違うなら、その違いも振り返りの材料にします。

NISTの変数選択の資料は、実験で見る入力と出力をチームで選び、関連する応答を含めることを勧めています。NIST：Process variables。これは工学上の指針です。受付時間と顧客理解を併せて見るという本稿の提案自体が、この資料で実証されているわけではありません。

数値の基準も、都合のよい結果が出てから作らないようにします。普段の記録、対応可能な人数、見逃せない困りごとから判断条件を決め、途中で変えたなら理由を残します。観察が足りなければ「まだ分からない」を選べることも、結果を無理に成功へ寄せないために必要です。

相談件数の変化が分かっても、なぜ変わったかは別の問いです。つむぎでは、来店した人に「相談前に分からなかったこと」を聞く方法が考えられます。案内を褒めてもらう聞き方より、迷った場面を具体的に思い出してもらう方が、直す箇所を探しやすくなります。

「写真があって安心した」という声があっても、全員が同じ理由で来たとは限りません。また、来なかった人の迷いは店頭では拾えません。顧客の言葉は、その人が説明してくれた経験として記録し、件数の増減すべてを説明する答えにしないようにします。

現場の記録にも偏りはあります。忙しい時間帯だけ聞けなかったり、話好きな常連の意見が多くなったりするかもしれません。誰に、いつ、どんな方法で聞いたかが分かれば、抜けている人を考えられます。会話を大量に保存するより、目的に必要な範囲を決めて扱います。

数字と声が食い違ったときが、次の問いを探す場面です。説明は好評なのに対象外の依頼が増えたなら、写真の印象と条件文の読み取りにずれがあるかもしれません。ここで一つの理由に決めず、案内をどう受け取ったかを確かめ直す。顧客の声は、その仮説を作る材料として使います。 運用に合わせて整理したいときは、3人と相談してみるを入口にできます。