AIモデルを導入したものの、チームが同じミスを修正し続けているという状況であれば、業務データを用いたモデルのトレーニングが次のステップとして考えられます。ただし、既存のモデルで十分な場合もあります。カスタムAIモデルのトレーニングには、既存のモデルを適応させる手法も含まれるため、必ずしもゼロから構築する必要はありません。
本格的に取り組む前に、トレーニングの内容を把握し、期待される改善がコストに見合うかどうかを判断する必要があります。まずはアプローチを決定し、データ準備からデプロイまでの工程を理解した上で、必要なコストと時間を算出しましょう。
クイックサマリー
- 選択肢の評価: 既存モデルの利用、ファインチューニング、ゼロからのトレーニングのうち、精度、速度、予算のニーズに最適なものはどれかを見極めます。
- 高品質なデータの準備: モデルの精度を確保するため、ドメイン固有の事例を一貫した基準でラベル付けし、収集・検証します。
- 反復とテスト: 反復的にトレーニングを行い、受け入れ基準に基づいてエラーをレビューし、未知のデータセットを用いて検証します。
- 総コストの把握: データ準備、計算リソース、ソフトウェア統合、継続的なモニタリングにかかる費用を考慮に入れます。
カスタムAIトレーニングは本当に必要か?
既存のモデルでチームが納得できる結果が得られていますか?そのモデルはワークロードに対して十分な速度で動作し、予算内に収まっていますか?もしこれらのニーズを満たしているなら、追加のトレーニングは不要です。
期待を満たさない場合は、業務で実際に使用する事例を用いて、他の利用可能なモデルと比較してください。繰り返される分類エラー、処理の遅延、高い運用コストは、それぞれ異なる問題です。モデルのトレーニングを決定する前に、どの問題を解決すべきかを特定しましょう。
トレーニングに踏み切る前に、既存のモデルで何ができなかったのか、どのような結果が得られれば追加作業を行う価値があるのかを書き出してください。
カスタムAIモデルのトレーニング方法
AIモデルのトレーニングを開始する前に、自社のビジネスの仕組み、どのようなAIが必要か、そしてそのAIがチームをどのように支援できるかを理解する必要があります。日々の業務において「正しい結果」とは何かを定義してください。その定義が、収集すべきデータや事例の指針となり、各反復段階でモデルの出力を評価する基準となります。
1. タスクと期待される出力の定義
モデルへの入力、期待される出力、および許容されるエラーの範囲を定義する必要があります。
例えば、ひび割れを検出するためにトレーニングされたモデルは、 外壁点検 必要なもの:
- 入力: さまざまな照明条件下で、異なる解像度や撮影距離から捉えた、多種多様なひび割れの画像および動画。
- 期待される出力: 点検者が確認できるよう、ひび割れの疑いがある箇所を特定した情報。
- 合格基準: 点検者が許容できるひび割れの見落とし率および誤検知率(検証したサンプルに基づく)。
2. 学習データの準備と検証
モデルが扱う業務からサンプルを収集します。 点検用カスタムAIモデルの場合、現場で見られる素材や欠陥の種類を、さまざまな照明条件や撮影角度から捉えた画像を含めてください。
画像に正しいラベルが付けられ、欠陥箇所が正確にマークされていることを確認してください。データセット全体で同じ欠陥に異なるラベルが付けられないよう、レビュー担当者間で共通の分類ルールを設ける必要があります。ラベルの判断が分かれる場合は、ルールに基づいて検証してから学習データに含めてください。ラベルに一貫性がないと、モデルが何を識別すべきか混乱してしまいます。
サンプルを確認したら、評価用に別のセットを確保しておきます。その際、同じ画像が両方のセットに含まれないようにしてください。確保したサンプルは、モデルが未見の画像に対して欠陥を認識できるかどうかを評価するために使用します。
3. モデルと学習環境の選択
ひび割れの点検において、画像分類モデルはひび割れの有無を報告し、物体検出モデルはひび割れの場所をマークします。点検には場所の特定が必要となるため、物体検出に対応した学習ツールを選定してください。そのツールの入力要件によって、用意した画像やラベルをそのままアップロードできるか、再フォーマットが必要かが決まります。
AutoMLツールは、対応するタスクにおいてモデルの選択や学習設定を自動的に処理します。もし既存の選択肢では対応できないモデルや学習手法が必要な場合は、カスタムコードを使用して独自の環境を構築することも可能です。そのコードをマネージドクラウドサービス上で実行すれば、ハードウェアの保守はプロバイダーに任せることができ、チームは学習ジョブの設定や、必要な処理能力およびメモリの選択に集中できます。

4. モデルの学習とエラーのレビュー
最初の学習結果は、後の修正版と比較するための基準となります。まずはモデルのドキュメントで推奨されている設定から開始し、各実行時のデータセットのバージョン、学習設定、所要時間、結果を記録してください。
各修正版の確認には、別の検証用データセットを使用します。これらのサンプルはモデルの学習には使用されないため、学習データ以外のデータに対するモデルの処理能力を評価できます。学習時のエラーが減少しているにもかかわらず検証時のエラーが増加している場合は、過学習(オーバーフィッティング)の兆候です。
エラーは、どこを調査すべきかを示しています。モデルがバルコニー下のひび割れを見落とし続ける場合は、トレーニング画像に影の中のひび割れが含まれているかを確認してください。見落としがある場合は、そうした状況の映像を追加する必要があります。もし既にそのような映像があるなら、データを追加する前に、ひび割れが正しくラベル付けされていたかを確認してください。
トレーニングデータを修正して再トレーニングを行った後、同じ検証用画像を使用して、見落とされたひび割れと誤検知を比較してください。
結果の例:検査員が確認した100個のひび割れを含む、同一の検証セット。
修正後のモデルでは、ひび割れを8個多く検出できましたが、検査員が確認すべき誤検知が15個増えました。見落としが減ったとしても、誤検知が合意した制限を超えている場合、この修正は受け入れられません。両方の要件を満たした場合にのみ、その修正を採用してください。
5. 未知のデータを用いたモデルの評価
モデルが、トレーニング中には見ていないものの、実際の検査で遭遇する素材や状況において、許容基準を満たしているかを確認してください。例えば、主に日中のコンクリートのひび割れでトレーニングされたモデルは、ひび割れたレンダリング、影のある壁、より鋭角な角度で撮影された映像でもテストする必要があります。
予測結果を検査員が確認したラベルと比較し、状況ごとに見落としと誤検知を記録してください。すべての状況で同じパフォーマンスである必要はありませんが、エラーは合意した制限内に収める必要があります。日中に確実にひび割れを見つけられるからといって、影の中での見落としが多すぎることを正当化することはできません。
モデルが制限を超える場合は、トレーニングデータやモデルを修正し、新しい未知のデータで再度テストしてください。以前は正しく処理できていた素材や状況についても確認し、変更によって新たなエラーが発生していないかを確認してください。同じ許容基準に対して修正版のテストを継続してください。基準を満たさない状況については、その検査にモデルを使用する前にさらなる改善が必要です。
6. デプロイとパフォーマンスの監視
モデルが評価を通過したら、それを 検査ソフトウェアに接続します。検査員が結果を検証するには、各検出結果にソース画像やビデオフレーム、および正確な建物内の位置情報が紐付いている必要があります。現場全体を処理する前に、ソフトウェアがこれらの詳細を正しく転送できることを確認してください。
レビュー中、検査員は誤検知を記録し、不正確な位置マーカーを修正し、モデルが見落としたひび割れを追加する必要があります。これらの修正は日常的なエラーの記録となりますが、フラグが立てられた映像のみを確認するだけでは、見落としの一部がカウントされません。モデルが「ひび割れなし」と報告した映像のサンプルも検査してください。
レビュー結果を使用して、見落とし率と誤検知率を合意した制限値に対して追跡してください。カメラや撮影方法の変更には特に注意が必要です。変更前後のエラー率を比較し、パフォーマンスが低下していないかを確認してください。エラーが制限を超える場合は、調査を行う間、該当する検査をマニュアルレビューに戻してください。再トレーニングや交換を行ったモデルは、使用を開始する前に必ず評価を通過させる必要があります。
AIモデルのトレーニング費用とスケジュール
カスタムAIモデルのトレーニングにかかる費用と期間は、手元にあるデータ、ニーズを満たすために必要な変更、および導入前に必要なソフトウェア連携によって異なります。
- データ準備: 例として、3,000枚の画像にそれぞれ2分かけてラベル付けを行うと仮定します。これは100時間に相当します。2人のレビュー担当者が1日4時間ずつ作業する場合、品質チェックや修正を除いても約13営業日必要です。これらの時間にレビュー担当者の時給を掛けると、ラベル付けのコストが算出されます。ひび割れの境界線をなぞるような詳細なアノテーションには、別途時間見積もりが必要です。
- トレーニングと評価: コンピューティング費用は、トレーニング中に使用されるリソースをカバーします。予測結果の確認やエラーの修正には実行の合間に専門家の作業時間が必要となるため、処理時間だけで納期を確定することはできません。見積もりには、何回分の修正が含まれているか、および追加の実行にはどの程度の費用がかかるかを明記する必要があります。
- 検査ソフトウェアの統合: 画像ストア、資産データベース、またはレポートシステムへの接続には、開発およびテスト作業が必要です。調査結果を正しい検査記録に反映させるには、建物識別子の違いや互換性のない画像フォーマットを調整しなければなりません。所要期間は、既存の接続状況と、新たに追加が必要な接続によって異なります。
- 導入: ローンチに先立ち、ホスティングのセットアップとテスト、および調査結果が検査担当者に届くまでの時間が必要です。導入後は、処理、ストレージ、検査担当者によるレビュー、再トレーニングが継続的な費用となります。コンピューティングコストは使用リソースと課金体系によって異なり、レビューコストは調査結果の数と検査担当者が確認に費やす時間によって決まります。
提示されたスケジュールが、未加工の映像から始まるのか、それともすでにラベル付けされトレーニングの準備が整ったデータから始まるのかを確認してください。
結論
カスタムAIモデルのトレーニングは、既存のモデルではビジネスに必要なタスクを十分にこなせない場合に検討する価値があります。その不足部分によって、トレーニング例で何をカバーすべきか、どのエラーを削減すべきかが決まります。その後、未知のデータでテストを行い、トレーニング済みのモデルが学習していない例に対しても機能することを証明します。
その基準に到達するには、トレーニングを実行するだけでは不十分です。データの準備、エラーのレビュー、修正作業はすべて、統合を開始する前の予算とスケジュールに追加されます。モデルが運用段階に入ると、その結果が処理、検査担当者によるレビュー、メンテナンスといった継続的なコストに見合うかどうかが判断の焦点となります。
検査担当者にとって、レビューには元の映像や建物の場所まで遡れる調査結果が必要です。H3 Zoomは、貴社の検査データでトレーニングされたカスタムモデルをサポートする検査インテリジェンスプラットフォームであり、検証に必要なソースエビデンスと資産記録を添えて調査結果を提供します。


