AI を試した後の判断は、「時間」「出力の質と確認の手間」「運用と情報の扱い」の3つで見ると、続けるか止めるかを会議で説明できる形になります。逆に「便利だった」「思ったほどではなかった」という感想だけで打ち切ると、何が良くて何が足りなかったのかが残らず、次に別のツールを試すときも同じ議論を繰り返すことになります。
ここで言う「試した」とは、文字起こし、記録の下書き、通知文の要約、研修資料のたたき台づくりなど、現場の一部業務に AI を数週間当ててみた状態を指します。この記事では、その結果を事業所内でどう評価し、何を残すかを整理します。
「便利だった」はなぜ判断材料にならない?
「便利だった」という言葉には、少なくとも三つの別の意味が混ざっています。作業が早く終わった(時間)、できあがりが使えるものだった(質)、自分の手間が減った(負担)。この三つは一致しないことが多く、たとえば下書きは 1 分で出るが、固有名詞の修正に 10 分かかるなら、時間は減っていません。
さらに「便利だった」と言った人が誰かによって意味が変わります。使ったのが PC 操作に慣れた職員ひとりだった場合、その人の感想は事業所全体の判断にはなりません。夜勤帯の職員、パート職員、異動してきたばかりの職員が同じ結果を出せるかどうかは、別に確認する必要があります。これは 「あの人がいたから回っていた」を越える で扱った、定着の仕組みの問題と地続きです。
もうひとつ、感想だけの評価は「やめる理由」も残しません。半年後に別の部署から同じ提案が出たとき、「前にやって駄目だった」としか言えなければ、何が駄目だったのか再検証できません。評価を言葉にして残すこと自体が、次の判断を軽くします。
物差し1:時間は、誰のどの作業で動いたか
時間を見るときに大事なのは、合計ではなく「誰の」「どの工程の」時間が動いたかです。AI の導入では、ある工程の時間が減る代わりに、別の工程(確認・修正・貼り付け・体裁直し)に時間が移ることがよくあります。合計で見ると変わっていないのに、移った先が特定の職員に集中していれば、それは改善ではありません。
測り方は、精密である必要はありません。試行前に、対象業務を 2〜3 工程に分けて「おおよそ何分かかるか」を職員本人に書いてもらい、試行後に同じ形で書いてもらう。これだけで、移動の方向は見えます。ストップウォッチで測ると負担が増え、試行そのものが続かなくなります。
見るべき観点を整理すると、次のようになります。
| 観点 | 確認する内容 |
|---|---|
| 減った工程 | どの作業が短くなったか。短くなったのは一部の職員だけか |
| 増えた工程 | 確認、修正、転記、体裁直しにどれだけ回ったか |
| 移った先 | 増えた分を誰が引き受けているか(役職者・特定の職員への偏り) |
| 浮いた時間の行き先 | 別の業務に回ったか、残業が減ったか、何も変わっていないか |
最後の「浮いた時間の行き先」は見落とされやすい項目です。10 分浮いても、その 10 分で何も変わっていないなら、現場の実感としては「便利だが変わらない」になります。浮いた時間を何に充てるかまで決めておくと、評価のときに説明しやすくなります。
物差し2:出力の質と、確認の手間をどう見る?
二つ目は、AI が出したものの質です。ここで評価するのは「正しいかどうか」だけではありません。間違いの出方と、それを見つけるのにどれだけ手間がかかるかが本題です。
生成 AI は、事実と異なる内容をもっともらしい文章で出すこと(一般にハルシネーションと呼ばれます)があります。明らかにおかしい出力なら誰でも気づきますが、やっかいなのは「ありそうだが事実と違う」出力です。たとえば次のような場面です — 面談の文字起こしを要約させたところ、文章は自然だが、本人が言っていない希望が一文だけ補われていた。読み返した職員が、面談に同席していなければ気づけません。
そこで、質の評価は次の三つに分けて見ます。
- 誤りの種類:固有名詞の誤り、数字の誤り、言っていない内容の追加、ニュアンスの変化のどれが多いか
- 発見のしやすさ:原文と並べればすぐ分かるか、元の場面を知らないと分からないか
- 確認の所要時間:1 件あたり確認にどれくらいかかるか。確認を省略したくなる長さではないか
「元の場面を知らないと分からない誤り」が一定数出る業務は、AI を使う工程そのものを見直す対象になります。たとえば、下書きまでは AI に任せるが、本人の希望や状態の記述は必ず担当者が直接書く、といった線引きです。
なお、診療記録や介護記録の内容について責任を負うのは、あくまで記載した専門職と事業所です。AI が出したものをそのまま記録として残す運用は、確認の工程がどこにあるかを明示しないかぎり、評価以前の問題になります。この点は 記録に AI を使う前に決めておく「外に出してよい情報」の線引き で扱った整理とあわせて確認してください。
物差し3:誰が運用しても回るか、情報の扱いは規程と合うか
三つ目は、事業所として続けられるかという物差しです。ここが崩れていると、時間も質も良い結果だったのに運用を始められない、ということが起きます。
確認する項目は大きく四つあります。
| 項目 | 確認の観点 |
|---|---|
| 情報の取り扱い | 入力した内容がどこに保存され、学習に使われるか。利用規約で確認できているか |
| 規程との整合 | 個人情報保護規程、情報セキュリティ関連の内部規程、委託先管理の扱いと矛盾しないか |
| 操作の再現性 | 手順書があれば他の職員が同じ結果を出せるか。特定の人の工夫に依存していないか |
| 費用と契約 | 無料の範囲で続くのか、人数が増えたときにどうなるか |
制度面で参照先になるのは、個人情報保護法と、それを医療・介護の現場向けに具体化した「医療・介護関係事業者における個人情報の適切な取扱いのためのガイダンス」(個人情報保護委員会・厚生労働省)です。医療機関であれば「医療情報システムの安全管理に関するガイドライン」(厚生労働省)も関係します。AI の利用一般については「AI 事業者ガイドライン」(総務省・経済産業省)が公表されています。いずれも改定が重ねられているため、評価のたびに最新版を参照する前提で扱ってください。
実務上の判断軸はシンプルです。個人を識別できる情報を外部サービスに入力する運用かどうか。入力するなら、契約と規程、そして本人への説明の整理が必要になります。入力しない運用(氏名や固有の事情を伏せて使う、公開文書の要約に限るなど)であれば、確認すべき範囲は狭くなります。試行の段階で後者に絞っておくと、評価の議論が技術面に集中できます。
費用については、試行の入口を無料枠で設計する方法を 無料で試せる範囲の見極め方 — 小規模事業所のAI予算 で整理しています。
評価はいつ、誰が決める? — 試行の前に決める4項目
評価がうまくいかない原因の多くは、評価の方法を試行の後に考え始めることです。後から決めると、都合の良い印象だけが残ります。試行を始める前に、次の四つを紙一枚に書いておきます。
- 対象と期間:どの業務の、どの工程を、いつからいつまで試すか
- 比べる相手:今までのやり方の所要時間と質を、どう記録しておくか
- 判断の線:どうなったら続ける、どうなったらやめる、どうなったら条件付きで続けるか
- 決める人と場:誰が評価をまとめ、どの会議で決めるか
三つ目の「判断の線」は、厳密な数値である必要はありません。「確認に元の作業と同じだけ時間がかかるなら、この用途では続けない」「言っていない内容の追加が出る業務では使わない」といった文章で十分です。大事なのは、始める前に書いてあることです。
四つ目も省略されがちです。決める場を決めておかないと、報告が回覧で終わり、続きが誰の仕事か分からなくなります。会議で決めたことを動かす形については、決定が動き出す会議の終わり方 ― 残す4項目 の整理が使えます。
なお、評価の結論は「続ける/やめる」の二択にしないほうが実態に合います。多くの場合、答えは「この工程だけ続ける」「確認役を決めたうえで続ける」「人数を絞って三か月延長する」といった条件付きになります。条件を言葉にして残すことが、次の試行の出発点になります。
まとめ
AI を試した後の評価は、感想ではなく三つの物差しで見ます。
- 時間:誰のどの工程が減り、どこに移ったか。浮いた時間の行き先まで見る
- 質と確認の手間:誤りの種類、見つけやすさ、確認にかかる時間
- 運用と情報の扱い:他の職員でも回るか、規程と矛盾しないか、費用が続くか
そして、この三つを試行を始める前に書いておくこと。対象と期間、比べる相手、判断の線、決める人と場。この四項目が紙一枚にあるだけで、「便利だった」で終わる会議が「この工程は続け、この工程はやめる」という決定に変わります。
どの業務から試すかの入口については、AIの入れどころは業務の書き出しで決まる もあわせて参照してください。試す前の切り出しと、試した後の評価は、同じ一枚の紙の表と裏にあたります。
この記事は、AI で下書きを作り、益山康秀(運営者)が内容を確認して公開しています