初級者編
テスト運用をする
運用方法を決めるで、1日の流れが決まりました。残るは、その流れを実際に動かしてみることです。
ここまでの設定は、3通のサンプル発注書をもとに作ったものです。実際の業務では、様式の違う発注書や、読み取りにくいスキャン、マスタに載っていない商品など、サンプルにはなかったファイルが届きます。本運用に入る前に、さまざまなファイルを解析しながら、ここまでの設定が意図どおりに機能しているかを確認するのがテスト運用です。
このページで進めることlink
- 1event_noteテスト運用の進め方(期間・対象・体制)を決める
- 2description試すファイルをそろえる
- 3checklistチェックリストに沿って、工程ごとに設定が機能しているかを確認する
- 4troubleshootうまくいかなかったところを切り分け、どこを直すかを判断する
- 5flag本運用に移る条件を決める
テスト運用で確かめることlink
テスト運用で確かめることは、大きく2つです。
| 確かめること | 内容 |
|---|---|
| 設定が機能しているか | ドキュメントタイプ・外部ファイル・エクスポートパターン・書類作成用テンプレートが、業務ルールどおりの結果を出すか |
| 運用が回るか | 運用方法を決めるで決めた1日の流れが、実際の件数・体制で無理なく回るか |
設定が正しくても、1件あたりの確認に10分かかるようでは毎日は回りません。逆に、流れがスムーズでも結果が業務ルールに合っていなければ使えません。どちらも同時に確かめるのがテスト運用です。
進め方を決めるlink
サンプルテック社では、次のように進めることにしました。
| 決めること | 今回の進め方 |
|---|---|
| 期間 | 5営業日 |
| 対象 | 実際に届いた発注書すべて(1日20〜30件) |
| 体制 | 営業事務2〜3名(日々の運用)+業務改善担当1名(設定の修正) |
| 従来の業務 | テスト運用中も、これまでどおりの手作業を並行しておこなう |
| 記録 | うまくいかなかったことは、その場で記録に残す |
テスト運用中に出力したファイルを、そのまま次の工程に流したり、社内外の相手に渡したりしないでください。設定の調整中は解析結果が変わることがあります。必ず従来の手順を並行しておこない、出力したファイルは従来のファイルと突き合わせて確認するためのものとして扱ってください。
Tips:テスト運用は「うまくいかないところを見つける期間」です
テスト運用は、設定が正しいことを証明する期間ではなく、本運用に入る前に、うまくいかないところを見つけておく期間です。
初日からすべてが想定どおりに動くことはまずありません。むしろ、ここで問題が1つも出ないときは、試しているファイルが偏っている可能性があります。普段あまり届かない様式の書類や、読み取りにくいファイルなども、意識して混ぜてください。
試すファイルをそろえるlink
最初に、テスト運用で試すファイルをそろえます。「よくあるパターン」だけでなく、うまくいかなそうなパターンを意識して混ぜることが大切です。
| 試すファイル | 確かめたいこと |
|---|---|
| 普段もっとも多く届く書類 | 日常の大半を占めるパターンが安定して処理できるか |
| 様式の異なる書類(取引先・発行元ごとの違い) | 列構成や項目名が違っても、必要な項目を取得できるか |
| スキャンやFAXなど、画質の落ちたファイル | 読み取りにくい状態でも読み取れるか |
| 複数の書類が1ファイルにまとまったもの | 書類ごとに分けて処理できるか |
| 表の行数が多い書類 | 表の行が途中で欠けないか |
| 必要な項目に記載がない書類 | 決めたルール(「記載なし(要確認)」など)が機能するか |
| マスタに登録のない値を含む書類 | 誤った値が入らないか |
手元に様式の違う発注書が少ない場合は、配布資料の発注書④も試してみてください。日付が和暦で、規格・型番の列を持つ、①〜③とは異なる様式の発注書です。
チェックリストの使い方link
確認は、工程の順におこないます。前の工程に問題が残ったまま次を確認しても、どこが原因なのか判断できないためです。
ファイルを取り込めるか
アップロード・プロジェクト
解析結果が業務ルールどおりか
ドキュメントタイプ(プロンプト)
マスタとの突き合わせが合っているか
外部ファイル参照
ファイルが想定どおりに出力されるか
エクスポートパターン・書類作成用テンプレート
決めた運用が回るか
運用
進め方の目安は次のとおりです。
- 1日目:3〜5件の少量で、チェック1〜4をすべて確認する
- 2日目以降:件数を実際の業務量に近づけ、チェック5(運用)を中心に確認する
- 期間中:気づいたことは、その都度記録に残す
このあとのチェックリストは、発注書に限らずどのような書類でもそのまま使える形にしています。各項目の「今回の例」は、チュートリアルで扱っている発注書の場合の例です。自社の業務で使う場合は、ここをご自身の書類の項目に置き換えてご利用ください。
Tips:少ない件数から始める
初日から20件を流してしまうと、同じ問題が20件分の修正として跳ね返ってきます。
1日目は3〜5件にとどめ、設定の問題を先に潰してから件数を増やすほうが、結果的に早く終わります。
チェック1:ファイルを取り込めるかlink
普段の経路で届くファイルを取り込める
OKの状態:ドキュメント一覧に表示され、解析が始まる
NGのときに見直す場所:対応しているファイル形式・サイズの制限
今回の例メール添付のPDF
画質の落ちたファイルも取り込める
OKの状態:ドキュメント一覧に表示され、解析が始まる
NGのときに見直す場所:対応しているファイル形式・サイズの制限
今回の例FAXを複合機でスキャンしたPDF
1ファイルに複数の書類が入っていても分けられる
OKの状態:書類ごとに別のドキュメントとして扱える
NGのときに見直す場所:ファイル結合・分割
対象外の書類が混ざっていない
OKの状態:一覧に、そのドキュメントタイプの書類だけが並んでいる
NGのときに見直す場所:アップロード時のドキュメントタイプの指定
今回の例発注書以外の書類が混ざっていない
決めた単位のプロジェクトに入っている
OKの状態:ドキュメントに対象のプロジェクトのタグが付いている
NGのときに見直す場所:アップロード時のプロジェクトの指定
今回の例その日のプロジェクト
アップロードの詳しい手順は、マニュアルのファイルアップロード、1ファイルに複数の書類が入っている場合の扱いはファイル結合・分割で解説しています。
チェック2:解析結果が業務ルールどおりかlink
解析項目を項目の性質ごとに分けて、業務フローの設計で決めたルールどおりの値になっているかを確認します。
日付の項目
OKの状態:書類ごとの書き方の違いが、決めた形式にそろっている
NGのときに見直す場所:プロンプトの注意事項・回答例
今回の例発注日・納期がYYYY/MM/DDになっている
書類に似た記載が複数ある項目
OKの状態:取り違えずに、指定したほうの値が入っている
NGのときに見直す場所:プロンプト(基本命令・追加命令)
今回の例宛名ではなく、発行元の会社名を取引先名として取得
記載がないことがある項目
OKの状態:空欄のままにせず、決めたルールどおりに出力されている
NGのときに見直す場所:プロンプト(補足命令)
今回の例納期の記載がない場合に「記載なし(要確認)」
書類の外から補う項目
OKの状態:参照先から正しく補われている
NGのときに見直す場所:外部ファイル参照の設定
今回の例納品先の記載がない場合に、取引先マスタの住所
数値・金額の項目
OKの状態:計算や取り込みに使える形式になっている
NGのときに見直す場所:プロンプトの注意事項・回答例
今回の例数量が半角の数値だけで取得されている
表項目の行
OKの状態:表の行が、過不足なく取得できている
NGのときに見直す場所:解析方式・モデル
今回の例発注明細の5行がすべて取得されている
表項目の列の分かれ方
OKの状態:1つの記載にまとまっていても、決めた列に分かれている
NGのときに見直す場所:プロンプト(表項目)
今回の例「6 箱」が数量と単位に分かれている
表項目の自由記述
OKの状態:必要な記載が漏れずに取得できている
NGのときに見直す場所:プロンプト(表項目)
今回の例備考が、商品管理部への指示・注意として取得されている
プロンプトをどう直せばよいかは、プロンプトのコツで解説しています。
Tips:「惜しい結果」こそ記録しておく
明らかに間違っている結果は誰でも気づきますが、惜しい結果は見落とされがちです。
- 値は合っているが、日付や金額の形式が決めたものになっていない
- 名称は合っているが、敬称や記号などの余分な文字が残っている
- 数値は合っているが、全角で入っていたり単位が混ざっていたりする
こうした結果は、そのまま次のシステムに取り込むと取込エラーの原因になります。「人が直せば済む」で流さず、プロンプトで直せないかを検討してください。
チェック3:マスタとの突き合わせが合っているかlink
外部ファイル参照は、間違っていても、もっともらしい値が入るのが難しいところです。「それらしい値が入っている」ことではなく、参照先と突き合わせて正しいかを確認します。
突き合わせのキーになる項目
OKの状態:参照先のマスタの値と一致している
NGのときに見直す場所:外部ファイルの登録内容・プロンプト
今回の例取引先コードが取引先マスタと一致
社内の表記に置き換える項目
OKの状態:社内標準の表記と、対応するコードに置き換わっている
NGのときに見直す場所:外部ファイルの登録内容・プロンプト
今回の例商品名が、商品コードと社内標準の品名に置き換わる
書類よりマスタを優先する項目
OKの状態:書類に書かれた値ではなく、マスタの値が入っている
NGのときに見直す場所:プロンプト
今回の例単価が、商品マスタの仕入単価になっている
マスタに登録のない値
OKの状態:誤った値が入らず、要確認とわかる状態になっている
NGのときに見直す場所:プロンプト(補足命令)
似た候補の取り違え
OKの状態:ハイライトで、参照された行が意図したものになっている
NGのときに見直す場所:外部ファイルの登録内容
マスタに似た値が複数ある場合、取り違えが起きても結果の見た目では気づけません。テスト運用の期間中は、突き合わせた結果を参照先のマスタと見比べて確認してください。取り違えが起きた場合は、マスタ側の表記(名称や規格の書き方)を見直すことで改善できることがあります。
チェック4:ファイルが想定どおりに出力されるかlink
解析結果が整ったら、アウトプットを実際に出力して確認します。確認は、出力したファイルを、手作業で作っていたファイルと並べて見比べるのが確実です。
出力される項目と並び順
OKの状態:渡す相手がこれまで使っていたファイルと同じ並びになっている
NGのときに見直す場所:エクスポートパターンの出力項目
今回の例基幹システム取込データの列
表項目の展開
OKの状態:表の1行につき1行で、単項目が各行に繰り返し入っている
NGのときに見直す場所:エクスポートパターンの表項目の設定
今回の例発注明細が1行ずつ展開されている
テンプレートのレイアウト
OKの状態:列がずれず、テンプレートどおりに収まっている
NGのときに見直す場所:書類作成用テンプレートの変数
今回の例発注指示書の明細の列
出力ファイルの名前
OKの状態:誰が見ても中身がわかる名前になっている
NGのときに見直す場所:書類作成用テンプレートのファイル名設定
今回の例取引先名と出力日を含む名前
出力の単位
OKの状態:渡す単位どおりに、1ファイル/複数ファイルで出力されている
NGのときに見直す場所:書類作成の出力方法(まとめて出力/別々に出力)
今回の例取引先ごとに1ファイル
受け渡し先での取り込み
OKの状態:テスト環境で、エラーなく取り込める
NGのときに見直す場所:エクスポートパターンの出力項目・形式
今回の例基幹システムへの取り込み
Tips:受け渡し先での取り込みは、早めに1度試す
出力したファイルが、渡す先のシステムに取り込めるかどうかは、テスト運用のなるべく早い段階で試しておくことをおすすめします。
列の並びや項目名が合っていても、文字コードや日付の形式が原因で取り込めないことがあります。これはエクスポートパターンの設定で直せますが、気づくのが遅いほど、やり直す件数が増えてしまいます。
チェック5:決めた運用が回るかlink
設定の確認が終わったら、件数を実際の業務量に近づけて、決めた運用がそのまま回るかを確認します。
1件あたりの確認時間
OKの状態:想定した時間に収まっている
NGのときに見直す場所:確認する項目の絞り込み・プロンプト
1日の件数を処理しきれるか
OKの状態:その日の分が、その日のうちに出力まで終わる
NGのときに見直す場所:確認の手順・担当の分担
今回の例1日20〜30件
担当者が替わっても同じ手順で進められるか
OKの状態:別の担当者が、手順を聞かずに同じ結果にたどり着ける
NGのときに見直す場所:手順の文書化
要確認の書類の引き継ぎ
OKの状態:マークとコメントが残り、次の担当者が内容を把握できる
NGのときに見直す場所:マーク・コメントの運用ルール
クレジットの消費量
OKの状態:1か月の消費見込みが、契約しているクレジット数に収まっている
NGのときに見直す場所:解析方式・モデル・外部ファイルの参照範囲
進み具合の管理はステータス、要確認の書類を探すときはドキュメント検索/絞り込みが役に立ちます。
うまくいかないときの切り分けlink
結果が思ったとおりにならないとき、どこを直せばよいかは症状から絞り込めます。
| 症状 | 考えられる原因 | 見直す場所 |
|---|---|---|
| 特定の取引先・発行元の書類だけ結果が崩れる | その様式が想定に入っていない | プロンプト(その様式での読み取り方を追記する) |
| 同じ項目が、書類によって取れたり取れなかったりする | 指示があいまいで、判断が揺れている | プロンプト(どこを見るかを具体的に書く) |
| どの書類でも全体的に精度が低い | 元のファイルが読み取りにくい | スキャンの設定・解析方式・モデル |
| 明細の行が欠ける・余分な行が増える | 表の読み取り範囲が定まっていない | プロンプト(表項目)・解析方式 |
| マスタから取得した値が違う | マスタ側の表記が探しにくい | 外部ファイルの登録内容・プロンプト |
| 出力ファイルの列がずれる・空欄になる | 出力側の設定が解析項目と合っていない | エクスポートパターン・書類作成用テンプレート |
一度に複数の箇所を直さないでください。プロンプトとマスタを同時に直すと、結果が変わったときにどちらが効いたのか判断できなくなります。1か所直す → 再解析して確認する、を繰り返すのが近道です。
直したら、必ず同じファイルで再解析するlink
プロンプトや外部ファイルの設定を変更しても、すでに解析が終わっているドキュメントの結果は自動では変わりません。修正の効果を確かめるには、ドキュメントを確認するで扱った再解析を実行します。
- 項目単位の再解析:1つの解析項目だけを解析し直す。プロンプトを直したときに使う
- ドキュメント全体の再解析:すべての解析項目を解析し直す。外部ファイルや解析方式を変更したときに使う
再解析をおこなうと、あらためてクレジットを消費します。テスト運用では修正と再解析を繰り返すため、通常の運用より消費が多くなります。少ない件数で設定を固めてから件数を増やすことで、消費を抑えられます。
気づいたことを記録に残すlink
テスト運用では、同じ問題が何度も出てきます。その場の修正で終わらせず、記録に残して、設定の修正につなげます。
| 日付 | 書類(取引先) | 気づいたこと | 考えられる原因 | 対応 | 結果 |
|---|---|---|---|---|---|
| 12/25 | 株式会社東都オフィスサービス | 納期が空欄のまま | 補足命令が足りない | プロンプトに「記載がない場合は『記載なし(要確認)』と出力」を追加 | 再解析して解消 |
ドキュメントフォースの画面では、マークとコメントがこの記録の役割を果たします。判断に迷った項目にはその場でマークを付け、気づいたことをコメントに書いておけば、あとから検索・絞り込みでまとめて見直せます。
本運用に移る条件を決めるlink
「完璧になったら本運用」と考えると、いつまでも移れません。テスト運用を始める前に、どうなったら本運用に移るかを決めておきます。
サンプルテック社では、次の条件を満たしたら本運用に移ると決めました。
| 観点 | 本運用に移る条件 |
|---|---|
| 解析結果 | 商品コード・数量・納期の修正が、1日の件数のうち数件以内に収まっている |
| 確認時間 | 1件あたりの確認が、想定した時間内に収まっている |
| ファイル出力 | 3営業日続けて、取込データ・発注指示書が修正なしで出力できている |
| 基幹システム | 出力した取込データが、エラーなく取り込める |
| 運用 | 担当者が替わっても、同じ手順で1日の流れを回せる |
| クレジット | 1か月の消費見込みが、契約しているクレジット数に収まっている |
Tips:100%の精度を目指さなくてかまいません
解析結果は100%にはなりません。そのためにドキュメント検証という確認の工程があり、運用方法を決めるでも「どこまで確認するか」を決めました。
目指すのは「修正が発生しないこと」ではなく、修正が発生しても、決めた時間内に終わることです。条件を満たしたら本運用に移り、残った課題は運用しながら改善していきましょう。
ここまでで準備できていることlink
- テスト運用の期間・対象・体制が決まり、並行運用の形で進められている
- 様式の違う書類や読み取りにくい書類を含めて、さまざまなファイルを試せている
- 取り込み・解析結果・マスタ照合・ファイル出力・運用の5つを、チェックリストで確認できている
- うまくいかなかったときに、プロンプト・外部ファイル・出力設定のどこを見直せばよいか判断できる
- 修正後に再解析して効果を確かめる手順と、本運用に移る条件が決まっている
これで、設定から運用までの準備がすべて整いました。次のページドキュメントフォースのさまざまな機能を知るでは、ここまで扱わなかった機能もあわせて紹介します。
