1. homechevron_right
  2. チュートリアルchevron_right
  3. テスト運用をする

初級者編

テスト運用をする

運用方法を決めるで、1日の流れが決まりました。残るは、その流れを実際に動かしてみることです。

ここまでの設定は、3通のサンプル発注書をもとに作ったものです。実際の業務では、様式の違う発注書や、読み取りにくいスキャン、マスタに載っていない商品など、サンプルにはなかったファイルが届きます。本運用に入る前に、さまざまなファイルを解析しながら、ここまでの設定が意図どおりに機能しているかを確認するのがテスト運用です。

このページで進めることlink

  1. 1event_noteテスト運用の進め方(期間・対象・体制)を決める
  2. 2description試すファイルをそろえる
  3. 3checklistチェックリストに沿って、工程ごとに設定が機能しているかを確認する
  4. 4troubleshootうまくいかなかったところを切り分け、どこを直すかを判断する
  5. 5flag本運用に移る条件を決める

テスト運用で確かめることlink

テスト運用で確かめることは、大きく2つです。

確かめること内容
設定が機能しているかドキュメントタイプ・外部ファイル・エクスポートパターン・書類作成用テンプレートが、業務ルールどおりの結果を出すか
運用が回るか運用方法を決めるで決めた1日の流れが、実際の件数・体制で無理なく回るか

設定が正しくても、1件あたりの確認に10分かかるようでは毎日は回りません。逆に、流れがスムーズでも結果が業務ルールに合っていなければ使えません。どちらも同時に確かめるのがテスト運用です。

進め方を決めるlink

サンプルテック社では、次のように進めることにしました。

決めること今回の進め方
期間5営業日
対象実際に届いた発注書すべて(1日20〜30件)
体制営業事務2〜3名(日々の運用)+業務改善担当1名(設定の修正)
従来の業務テスト運用中も、これまでどおりの手作業を並行しておこなう
記録うまくいかなかったことは、その場で記録に残す
error

テスト運用中に出力したファイルを、そのまま次の工程に流したり、社内外の相手に渡したりしないでください。設定の調整中は解析結果が変わることがあります。必ず従来の手順を並行しておこない、出力したファイルは従来のファイルと突き合わせて確認するためのものとして扱ってください。

lightbulb

Tips:テスト運用は「うまくいかないところを見つける期間」です

テスト運用は、設定が正しいことを証明する期間ではなく、本運用に入る前に、うまくいかないところを見つけておく期間です。

初日からすべてが想定どおりに動くことはまずありません。むしろ、ここで問題が1つも出ないときは、試しているファイルが偏っている可能性があります。普段あまり届かない様式の書類や、読み取りにくいファイルなども、意識して混ぜてください。

試すファイルをそろえるlink

最初に、テスト運用で試すファイルをそろえます。「よくあるパターン」だけでなく、うまくいかなそうなパターンを意識して混ぜることが大切です。

試すファイル確かめたいこと
普段もっとも多く届く書類日常の大半を占めるパターンが安定して処理できるか
様式の異なる書類(取引先・発行元ごとの違い)列構成や項目名が違っても、必要な項目を取得できるか
スキャンやFAXなど、画質の落ちたファイル読み取りにくい状態でも読み取れるか
複数の書類が1ファイルにまとまったもの書類ごとに分けて処理できるか
表の行数が多い書類表の行が途中で欠けないか
必要な項目に記載がない書類決めたルール(「記載なし(要確認)」など)が機能するか
マスタに登録のない値を含む書類誤った値が入らないか

手元に様式の違う発注書が少ない場合は、配布資料の発注書④も試してみてください。日付が和暦で、規格・型番の列を持つ、①〜③とは異なる様式の発注書です。

チェックリストの使い方link

確認は、工程の順におこないます。前の工程に問題が残ったまま次を確認しても、どこが原因なのか判断できないためです。

1upload_file

ファイルを取り込めるか

アップロード・プロジェクト

2rule

解析結果が業務ルールどおりか

ドキュメントタイプ(プロンプト)

3join_inner

マスタとの突き合わせが合っているか

外部ファイル参照

4output

ファイルが想定どおりに出力されるか

エクスポートパターン・書類作成用テンプレート

5calendar_month

決めた運用が回るか

運用

進め方の目安は次のとおりです。

  • 1日目:3〜5件の少量で、チェック1〜4をすべて確認する
  • 2日目以降:件数を実際の業務量に近づけ、チェック5(運用)を中心に確認する
  • 期間中:気づいたことは、その都度記録に残す
info

このあとのチェックリストは、発注書に限らずどのような書類でもそのまま使える形にしています。各項目の「今回の例」は、チュートリアルで扱っている発注書の場合の例です。自社の業務で使う場合は、ここをご自身の書類の項目に置き換えてご利用ください。

lightbulb

Tips:少ない件数から始める

初日から20件を流してしまうと、同じ問題が20件分の修正として跳ね返ってきます。

1日目は3〜5件にとどめ、設定の問題を先に潰してから件数を増やすほうが、結果的に早く終わります。

チェック1:ファイルを取り込めるかlink

チェック 1-1

普段の経路で届くファイルを取り込める

check_circle

OKの状態:ドキュメント一覧に表示され、解析が始まる

build

NGのときに見直す場所:対応しているファイル形式・サイズの制限

今回の例メール添付のPDF

チェック 1-2

画質の落ちたファイルも取り込める

check_circle

OKの状態:ドキュメント一覧に表示され、解析が始まる

build

NGのときに見直す場所:対応しているファイル形式・サイズの制限

今回の例FAXを複合機でスキャンしたPDF

チェック 1-3

1ファイルに複数の書類が入っていても分けられる

check_circle

OKの状態:書類ごとに別のドキュメントとして扱える

build

NGのときに見直す場所:ファイル結合・分割

チェック 1-4

対象外の書類が混ざっていない

check_circle

OKの状態:一覧に、そのドキュメントタイプの書類だけが並んでいる

build

NGのときに見直す場所:アップロード時のドキュメントタイプの指定

今回の例発注書以外の書類が混ざっていない

チェック 1-5

決めた単位のプロジェクトに入っている

check_circle

OKの状態:ドキュメントに対象のプロジェクトのタグが付いている

build

NGのときに見直す場所:アップロード時のプロジェクトの指定

今回の例その日のプロジェクト

アップロードの詳しい手順は、マニュアルのファイルアップロード、1ファイルに複数の書類が入っている場合の扱いはファイル結合・分割で解説しています。

チェック2:解析結果が業務ルールどおりかlink

解析項目を項目の性質ごとに分けて、業務フローの設計で決めたルールどおりの値になっているかを確認します。

チェック 2-1

日付の項目

check_circle

OKの状態:書類ごとの書き方の違いが、決めた形式にそろっている

build

NGのときに見直す場所:プロンプトの注意事項・回答例

今回の例発注日・納期がYYYY/MM/DDになっている

チェック 2-2

書類に似た記載が複数ある項目

check_circle

OKの状態:取り違えずに、指定したほうの値が入っている

build

NGのときに見直す場所:プロンプト(基本命令・追加命令)

今回の例宛名ではなく、発行元の会社名を取引先名として取得

チェック 2-3

記載がないことがある項目

check_circle

OKの状態:空欄のままにせず、決めたルールどおりに出力されている

build

NGのときに見直す場所:プロンプト(補足命令)

今回の例納期の記載がない場合に「記載なし(要確認)」

チェック 2-4

書類の外から補う項目

check_circle

OKの状態:参照先から正しく補われている

build

NGのときに見直す場所:外部ファイル参照の設定

今回の例納品先の記載がない場合に、取引先マスタの住所

チェック 2-5

数値・金額の項目

check_circle

OKの状態:計算や取り込みに使える形式になっている

build

NGのときに見直す場所:プロンプトの注意事項・回答例

今回の例数量が半角の数値だけで取得されている

チェック 2-6

表項目の行

check_circle

OKの状態:表の行が、過不足なく取得できている

build

NGのときに見直す場所:解析方式・モデル

今回の例発注明細の5行がすべて取得されている

チェック 2-7

表項目の列の分かれ方

check_circle

OKの状態:1つの記載にまとまっていても、決めた列に分かれている

build

NGのときに見直す場所:プロンプト(表項目)

今回の例「6 箱」が数量と単位に分かれている

チェック 2-8

表項目の自由記述

check_circle

OKの状態:必要な記載が漏れずに取得できている

build

NGのときに見直す場所:プロンプト(表項目)

今回の例備考が、商品管理部への指示・注意として取得されている

プロンプトをどう直せばよいかは、プロンプトのコツで解説しています。

lightbulb

Tips:「惜しい結果」こそ記録しておく

明らかに間違っている結果は誰でも気づきますが、惜しい結果は見落とされがちです。

  • 値は合っているが、日付や金額の形式が決めたものになっていない
  • 名称は合っているが、敬称や記号などの余分な文字が残っている
  • 数値は合っているが、全角で入っていたり単位が混ざっていたりする

こうした結果は、そのまま次のシステムに取り込むと取込エラーの原因になります。「人が直せば済む」で流さず、プロンプトで直せないかを検討してください。

チェック3:マスタとの突き合わせが合っているかlink

外部ファイル参照は、間違っていても、もっともらしい値が入るのが難しいところです。「それらしい値が入っている」ことではなく、参照先と突き合わせて正しいかを確認します。

チェック 3-1

突き合わせのキーになる項目

check_circle

OKの状態:参照先のマスタの値と一致している

build

NGのときに見直す場所:外部ファイルの登録内容・プロンプト

今回の例取引先コードが取引先マスタと一致

チェック 3-2

社内の表記に置き換える項目

check_circle

OKの状態:社内標準の表記と、対応するコードに置き換わっている

build

NGのときに見直す場所:外部ファイルの登録内容・プロンプト

今回の例商品名が、商品コードと社内標準の品名に置き換わる

チェック 3-3

書類よりマスタを優先する項目

check_circle

OKの状態:書類に書かれた値ではなく、マスタの値が入っている

build

NGのときに見直す場所:プロンプト

今回の例単価が、商品マスタの仕入単価になっている

チェック 3-4

マスタに登録のない値

check_circle

OKの状態:誤った値が入らず、要確認とわかる状態になっている

build

NGのときに見直す場所:プロンプト(補足命令)

チェック 3-5

似た候補の取り違え

check_circle

OKの状態:ハイライトで、参照された行が意図したものになっている

build

NGのときに見直す場所:外部ファイルの登録内容

info

マスタに似た値が複数ある場合、取り違えが起きても結果の見た目では気づけません。テスト運用の期間中は、突き合わせた結果を参照先のマスタと見比べて確認してください。取り違えが起きた場合は、マスタ側の表記(名称や規格の書き方)を見直すことで改善できることがあります。

外部ファイルの参照結果は、マニュアルの外部ファイルの利用とハイライトを使って確認できます。

チェック4:ファイルが想定どおりに出力されるかlink

解析結果が整ったら、アウトプットを実際に出力して確認します。確認は、出力したファイルを、手作業で作っていたファイルと並べて見比べるのが確実です。

チェック 4-1

出力される項目と並び順

check_circle

OKの状態:渡す相手がこれまで使っていたファイルと同じ並びになっている

build

NGのときに見直す場所:エクスポートパターンの出力項目

今回の例基幹システム取込データの列

チェック 4-2

表項目の展開

check_circle

OKの状態:表の1行につき1行で、単項目が各行に繰り返し入っている

build

NGのときに見直す場所:エクスポートパターンの表項目の設定

今回の例発注明細が1行ずつ展開されている

チェック 4-3

テンプレートのレイアウト

check_circle

OKの状態:列がずれず、テンプレートどおりに収まっている

build

NGのときに見直す場所:書類作成用テンプレートの変数

今回の例発注指示書の明細の列

チェック 4-4

出力ファイルの名前

check_circle

OKの状態:誰が見ても中身がわかる名前になっている

build

NGのときに見直す場所:書類作成用テンプレートのファイル名設定

今回の例取引先名と出力日を含む名前

チェック 4-5

出力の単位

check_circle

OKの状態:渡す単位どおりに、1ファイル/複数ファイルで出力されている

build

NGのときに見直す場所:書類作成の出力方法(まとめて出力/別々に出力)

今回の例取引先ごとに1ファイル

チェック 4-6

受け渡し先での取り込み

check_circle

OKの状態:テスト環境で、エラーなく取り込める

build

NGのときに見直す場所:エクスポートパターンの出力項目・形式

今回の例基幹システムへの取り込み

lightbulb

Tips:受け渡し先での取り込みは、早めに1度試す

出力したファイルが、渡す先のシステムに取り込めるかどうかは、テスト運用のなるべく早い段階で試しておくことをおすすめします。

列の並びや項目名が合っていても、文字コードや日付の形式が原因で取り込めないことがあります。これはエクスポートパターンの設定で直せますが、気づくのが遅いほど、やり直す件数が増えてしまいます。

チェック5:決めた運用が回るかlink

設定の確認が終わったら、件数を実際の業務量に近づけて、決めた運用がそのまま回るかを確認します。

チェック 5-1

1件あたりの確認時間

check_circle

OKの状態:想定した時間に収まっている

build

NGのときに見直す場所:確認する項目の絞り込み・プロンプト

チェック 5-2

1日の件数を処理しきれるか

check_circle

OKの状態:その日の分が、その日のうちに出力まで終わる

build

NGのときに見直す場所:確認の手順・担当の分担

今回の例1日20〜30件

チェック 5-3

担当者が替わっても同じ手順で進められるか

check_circle

OKの状態:別の担当者が、手順を聞かずに同じ結果にたどり着ける

build

NGのときに見直す場所:手順の文書化

チェック 5-4

要確認の書類の引き継ぎ

check_circle

OKの状態:マークとコメントが残り、次の担当者が内容を把握できる

build

NGのときに見直す場所:マーク・コメントの運用ルール

チェック 5-5

クレジットの消費量

check_circle

OKの状態:1か月の消費見込みが、契約しているクレジット数に収まっている

build

NGのときに見直す場所:解析方式・モデル・外部ファイルの参照範囲

進み具合の管理はステータス、要確認の書類を探すときはドキュメント検索/絞り込みが役に立ちます。

うまくいかないときの切り分けlink

結果が思ったとおりにならないとき、どこを直せばよいかは症状から絞り込めます。

症状考えられる原因見直す場所
特定の取引先・発行元の書類だけ結果が崩れるその様式が想定に入っていないプロンプト(その様式での読み取り方を追記する)
同じ項目が、書類によって取れたり取れなかったりする指示があいまいで、判断が揺れているプロンプト(どこを見るかを具体的に書く)
どの書類でも全体的に精度が低い元のファイルが読み取りにくいスキャンの設定・解析方式・モデル
明細の行が欠ける・余分な行が増える表の読み取り範囲が定まっていないプロンプト(表項目)・解析方式
マスタから取得した値が違うマスタ側の表記が探しにくい外部ファイルの登録内容・プロンプト
出力ファイルの列がずれる・空欄になる出力側の設定が解析項目と合っていないエクスポートパターン・書類作成用テンプレート
info

一度に複数の箇所を直さないでください。プロンプトとマスタを同時に直すと、結果が変わったときにどちらが効いたのか判断できなくなります。1か所直す → 再解析して確認する、を繰り返すのが近道です。

直したら、必ず同じファイルで再解析するlink

プロンプトや外部ファイルの設定を変更しても、すでに解析が終わっているドキュメントの結果は自動では変わりません。修正の効果を確かめるには、ドキュメントを確認するで扱った再解析を実行します。

  • 項目単位の再解析:1つの解析項目だけを解析し直す。プロンプトを直したときに使う
  • ドキュメント全体の再解析:すべての解析項目を解析し直す。外部ファイルや解析方式を変更したときに使う
info

再解析をおこなうと、あらためてクレジットを消費します。テスト運用では修正と再解析を繰り返すため、通常の運用より消費が多くなります。少ない件数で設定を固めてから件数を増やすことで、消費を抑えられます。

気づいたことを記録に残すlink

テスト運用では、同じ問題が何度も出てきます。その場の修正で終わらせず、記録に残して、設定の修正につなげます。

日付書類(取引先)気づいたこと考えられる原因対応結果
12/25株式会社東都オフィスサービス納期が空欄のまま補足命令が足りないプロンプトに「記載がない場合は『記載なし(要確認)』と出力」を追加再解析して解消

ドキュメントフォースの画面では、マークとコメントがこの記録の役割を果たします。判断に迷った項目にはその場でマークを付け、気づいたことをコメントに書いておけば、あとから検索・絞り込みでまとめて見直せます。

本運用に移る条件を決めるlink

「完璧になったら本運用」と考えると、いつまでも移れません。テスト運用を始める前に、どうなったら本運用に移るかを決めておきます。

サンプルテック社では、次の条件を満たしたら本運用に移ると決めました。

観点本運用に移る条件
解析結果商品コード・数量・納期の修正が、1日の件数のうち数件以内に収まっている
確認時間1件あたりの確認が、想定した時間内に収まっている
ファイル出力3営業日続けて、取込データ・発注指示書が修正なしで出力できている
基幹システム出力した取込データが、エラーなく取り込める
運用担当者が替わっても、同じ手順で1日の流れを回せる
クレジット1か月の消費見込みが、契約しているクレジット数に収まっている
lightbulb

Tips:100%の精度を目指さなくてかまいません

解析結果は100%にはなりません。そのためにドキュメント検証という確認の工程があり、運用方法を決めるでも「どこまで確認するか」を決めました。

目指すのは「修正が発生しないこと」ではなく、修正が発生しても、決めた時間内に終わることです。条件を満たしたら本運用に移り、残った課題は運用しながら改善していきましょう。

ここまでで準備できていることlink

  • テスト運用の期間・対象・体制が決まり、並行運用の形で進められている
  • 様式の違う書類や読み取りにくい書類を含めて、さまざまなファイルを試せている
  • 取り込み・解析結果・マスタ照合・ファイル出力・運用の5つを、チェックリストで確認できている
  • うまくいかなかったときに、プロンプト・外部ファイル・出力設定のどこを見直せばよいか判断できる
  • 修正後に再解析して効果を確かめる手順と、本運用に移る条件が決まっている

これで、設定から運用までの準備がすべて整いました。次のページドキュメントフォースのさまざまな機能を知るでは、ここまで扱わなかった機能もあわせて紹介します。

© Document Force Inc. All rights reserved.