バイオメトリクス部会精度評価技術グループ活動報告｜日本自動認識システム協会

バイオメトリクス部会 精度評価技術グループ活動報告

2024年度

6月 第2回
精度評価
技術グループ会※		 2024年6月17日（参加7名）

■SC37イタリア国際会議ロビー活動について

【議事】

  1. グループ長挨拶
  2. 前回議事録確認(第１回技術グループ会、第1回検討会）、事務局報告
  3. 国際標準化状況報告、５１５２発行関連イベントについて
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化
    • （１）NP提案の方向性について
    • （２）データ分析結果について
    • （３）ロビー活動について
5月 第1回
画像合成
検討委員会※		 2024年5月29日（参加15名）

【議事】

  1. 委員長挨拶
  2. 前回議事録確認、事務局連絡
  3. 国際標準化状況報告
  4. 国際標準化提案内容、説明資料の確認、Q＆A等
4月 第1回
精度評価
技術グループ会※		 2024年4月24日開催（参加9名）

【議事】

  1. グループ長挨拶、メンバー報告
  2. 前回議事録確認(第６回）、事務局報告（プレスリリース）
  3. 関連活動状況報告＞国際標準化状況報告
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化
    • （1）2024年度 精度評価技術グループ活動について
    • （2）R6受託事業内容－実施計画－について
    • （3）委員検討報告－R6国際標準化のスコープー

※JAISA自主活動として2024年度活動開始

2023年度

3月 第6回
精度評価
技術グループ会		 2024年3月14日(木) 開催（参加者9名）

【議事】

  1. グループ長代行挨拶、メンバー報告
  2. 前回（報告会）議事録確認(第５回）、事務局報告
  3. 関連活動状況報告＞国際標準化状況報告
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化
    • （１）R5活動成果（成果報告書：概要、第Ⅰ部、第Ⅱ部）について
    • （２）R6事業内容について
    • （３）R6国際標準化のスコープ、スケジュールについて
    • （４）その他の活動について
2月 第5回
画像合成応用
性能評価方法
検討委員会		 2024年2月15日(木) 開催（参加者10名）

■画像合成手法を用いた生体認証性能評価方法に関する標準化調査活動

【議事】

  1. 委員長挨拶
  2. 報告内容
    • （１）性能評価に関する文献調査
    • （２）オープンデータによる評価検証
    • （３）標準化規格案検討
  3. 質疑
1月 第4回
画像合成応用
性能評価方法
検討委員会		 2024年１月5日(金)開催（参加10名）

■画像合成応用性能評価方法調査の報告内容検討

【議事】

  1. 委員長挨拶
  2. 前回議事録確認、事務局報告（異業種間連携、他）
  3. 関連活動報告（国際標準化状況）
  4. 国際標準化内容の検討
    ＞岡山国際会議プレゼンテーション内容について
    ＞技術検討会_課題解決_データ分析状況
    ＞2024年度、2025年度の提案スケジュールについて
  5. 成果報告書の目次、執筆担当について
12月 第5回
精度評価
技術グループ会		 2023年12月26日(火)　参加8名

■画像合成応用性能評価方法調査内容の詳細検討２

【議事】

  1. グループ長代行挨拶、メンバー報告
  2. 前回（報告会）議事録確認(第４回）、事務局報告
  3. 関連活動状況報告
    ＞国際標準化状況報告
    －WG5/5152　－19795-10、9868、－WG3/20059
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化
    • （１）メンバー検討事項報告
      ＞気になる論文、＞技術検討会のデータ分析状況
    • （２）国際標準化岡山会議（SC37・WG5）プレ内容
    • （３）R6国際標準開発スケジュールについて
    • （４）成果報告書
    • （５）その他の活動について
      ＞技術検討会の報告会について　＞1月岡山会議_開催支援（デモ展示）について
11月 第3回
画像合成応用
性能評価方法
検討委員会		 2023年11月16日(木)開催（参加12名）

■画像合成応用性能評価方法の検討内容

【議事】

  1. ご挨拶
  2. 前回議事録確認
  3. 関連活動報告
    ＞国際標準化状況 ＞異業種間連携、他
  4. 国際標準化提内容の検討
  5. 本日のまとめ
10月 第4回
精度評価
技術グループ会		 2023年10月26日(木)開催（参加9名）

■画像合成応用性能評価方法調査内容の詳細検討

【議事】

  1. グループ長代行挨拶、メンバー報告
  2. 前回（報告会）議事録確認(第2回）、事務局報告
  3. 関連活動状況報告＞国際標準化状況報告
    －WG5/5152 　－19795-10、9868　－WG3/30107-1、他
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化
    • （１）第２回検討委員会報告・今年度スケジュール
    • （２）メンバー検討事項報告
      ＞気になる論文、＞人工画像データベースの検討
      ＞摂動画像の検討　＞Text-to-image（DALL-e2）の検討
    • （３）その他の活動について
      ＞データサイエンス技術検討会の研修会について
      ＞国際標準化（SC37・WG5）提案内容について
      ＞1月岡山会議_開催支援（デモ展示）について
9月 第2回
画像合成応用
性能評価方法
検討委員会		 2023年9月21日(木)開催（参加11名）

■画像合成応用性能評価方法の検討内容

【議事】

  1. 委員長挨拶
  2. 前回議事録確認
  3. 関連活動報告
    • （１）【省調01】異業種連携調査委員会
    • （２）【JAISA】自動認識総合展パネル／フォーラム
    • （３）SC37国際標準化状況報告
  4. 検討事項報告
    • （１）文献調査
    • （２）人工画像データベースの検討（仮）
    • （３）摂動画像の検討(仮）
    • （４）Text-to-image（DALL-e2）の検討
  5. 国際会議提案内容について
    －技術研修会（人工画像データベースの検討会） －その他の行事について
8月 第3回
精度評価
技術グループ会		 2023年8月22日(火)開催（参加10名）

■適用性検証について

【議事】

  1. グループ長挨拶、メンバー報告
  2. 前回（報告会）議事録確認(第2回）、事務局報告
  3. 関連活動状況報告＞国際標準化状況報告
    －WG5/5152 19795-10、9868　－WG3/30107-1
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化
    • （１）第１回検討委員会報告・今年度スケジュール
    • （２）メンバー検討事項報告
      ＞気になる論文(2件)、＞人工画像データベースの検討。＞摂動画像の検討
      ＞Text-to-image（DALL-e2）の検討
    • （３）その他の活動について
      ＞国内国際標準化（SC37・WG5）提案、＞データ分析の研修会、他について
7月 第1回
画像合成応用
性能評価方法
検討委員会		 2023年7月24日(月)開催　(参加出席者15名、オブザーバー・事務局含む）

■画像合成応用性能評価方法に関する国際標準化活動開始※

【議事内容】

  1. ご挨拶（来賓、委員長、副委員長）、自己紹介
  2. 関連活動報告（受託事業、国際標準化状況報告）
  3. 今年度の活動について
    • （１）活動計画
    • （２）実施事項
    • （３）検討内容報告
    • （４）検討スケジュール
6月 第2回
精度評価
技術グループ会		 2023年6月19日（参加10名）

【議事内容】

  1. グループ長挨拶、メンバー近況報告
  2. 前回（第1回）議事録確認、事務局連絡
  3. 関連活動状況報告
    • （１）国際標準化状況報告
      ＞WG5/5152、19795-10、9868　＞WG3/30107-1、20059
    • （２）国際標準化調査活動 【省調01】実施計画（案）概要紹介
    • （３）SC37日本活動状況_METI報告20230621(案)
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化
    • （１）活動概要（推進内容、体制、目標）、国際標準化3か年計画
    • （２）画像合成手法を用いた性能評価ターゲットマトリックス（案）
    • （３）分析データ（オープンデータ）の収集と適用性評価方法について
    • （４）エストニア・タリン国際会議（5152他）について
5月 第1回
精度評価
技術グループ会		 2023年5月26日開催（参加9名）

【議事内容】

  1. グループ長挨拶・事務局連絡
  2. 前回議事録確認
  3. 関連活動状況報告
    • （１）バイオメトリクス部会総会実施報告（部会活動、省２９、省調０１、他）
    • （２）国際標準化状況報告
      －WG5/5152、19795-10、9868、－WG3/30107-1
    • （３）EAB & CITER BIOMETRICS WORKSHOP　2023年4月18日－19日
  4. 画像合成手法を用いた生体認証性能評価方法に関する国際標準化)
    • ①活動概要（推進内容、体制、目標）、国際標準化3か年計画
    • ②令和5年実施計画（実施項目）
    • ③性能評価ターゲット（メンバー提案）

2022年度

2月 第5回
画像合成応用
性能評価方法
調査WG
（令和4年度
標準化調査
報告会）		 2023年2月13日(月) （参加者43名）

■画像合成手法を用いた生体認証性能評価方法に関する標準化調査活動

  • 鷲見委員長、久保課長補佐より当該活動への参加御礼をいただいた。
  • WG2からは鷲見委員長に挨拶、日間賀グループ長に調査内容、山田主査にこれからの性能評価方法について報告いただいた。

【開催プログラム】

  • 主催者挨拶－画像合成手法を用いた生体認証性能評価方法に関する標準化調査

    調査委員長 鷲見 和彦 氏

  • 来賓挨拶－国際標準化の取り組みについて

    経済産業省産業技術環境局国際電気標準課 課長補佐 久保 淳　氏

  • 生体認証利活用パターン調査報告

    JAISAバイオメトリクス部会 部会長 杉澤 正俊 氏

  • 画像合成応用性能評価方法調査報告

    JAISA バイオメトリクス部会 精度評価技術グループ長 日間賀 充寿氏

  • これからの性能評価方法に関する標準化

    国際標準化SC37／WG5小委員会 主査 山田 茂史 氏

1月 第4回
画像合成応用
性能評価方法
調査WG		 2023年1月13日(金) （参加14名、オブザーバー・同席者・事務局含む）

■画像合成応用性能評価方法調査の報告内容検討

・SG1文献調査：
報告すべき文献と執筆担当者を決めた。
・SG2技術調査：
深層学習を用いた顔画像生成技術と3Ｄモデルを用いた顔画像生成技術を中心にご報告いただいた。
・SG3文献調査：
代表的なアルゴリズムでリアル顔画像および人工顔画像のスコアを算出、各々のスコア分布の様子を比較、検証結果を報告いただいた。

【議事】

  1. 委員長挨拶
  2. 前回議事録確認、事務局報告
    3. 関連活動報告（5152、19795、9868、WG1報告）
  3. 活動報告(活動内容と隘路)
    • （１）SG1文献調査
    • （２）SG2技術調査
    • （３）SG3評価検証調査・技術検討会
    • （４）成果報告書目次（案）
  4. 令和5年度からの国際標準規格開発について
12月 第35回
精度評価
技術グループ会		 2022年12月15日(木) （参加8名）

■画像合成応用性能評価方法調査内容の詳細検討２

  • SG1~SG3からの報告を受け、追加すべき調査内容や報告すべき事項などを議論した。
  • 令和5年度からの国際標準規格開発について日本提案内容とスケジュールを計画した。

【議事】

  1. グループ長挨拶
  2. 前回議事録確認、事務局連絡
  3. 関連活動状況報告
    • （１）国際標準化状況報告（5152、19795-10、9868、他）
    • （２）生体認証利活用パターン調査
  4. 精度評価技術検討
    • （１）今年度活動(画像合成応用性能評価方法調査)の検討状況報告
      • SＧ１：文献調査　－SＧ２：技術調査（画像合成）
      • SＧ３：評価検証（性能評価）、技術検討会（含むインターシップ）
    • （２）R4年度報告書執筆担当案（事務局案）について
  5. 令和5年度国際標準化の研究開発活動について
11月 第3回
画像合成応用
性能評価方法
調査WG		 2022年11月10日(木) （参加12名）

■画像合成応用性能評価方法調査の報告内容検討

・SG1文献調査：
大分類は、見え方の変動、評価法に関わるものの２つにすることとした。
・SG2技術調査：
幅を広げすぎないよう顔で画像合成、モーフィング、GANという形で行い、別途、検討会を開き、意識合わせをするものとした。
・SG3文献調査：
技術検討会で議論している内容も含め、評価用のデータセット、実画像と合成画像の精度（他人受入率）の違いについて報告いただいた。

【議事】

  1. 委員長挨拶
  2. 前回議事録確認、事務局報告
  3. 関連活動報告（5152、19795-10、9868、WG1報告）
  4. 活動報告(活動報告と隘路)
    • （１）SG1文献調査
    • （２）SG2技術調査
    • （３）SG3評価検証調査・技術検討会
    • （４）成果報告書目次（案）
  5. 令和5年度からの国際標準規格開発について
10月 第34回
精度評価
技術グループ会		 2022年10月26日(金) （参加8名）

■画像合成応用性能評価方法調査内容の詳細検討１

  • 生体認証利活用パターン調査報告を受け、実証実験だけで、市場に定着しない案件も少なくないとの意見があった。
  • あらかじめ、市場に定着するための性能評価を行うためにも画像合成応用性能評価の必要性を感じた。

【議事】

  1. グループ長挨拶、新メンバー挨拶
  2. 前回議事録確認、事務局連絡
  3. 関連活動状況報告
    • （１）国際標準化状況報告（5152、19795-10、9868、他）
    • （２）生体認証利活用パターン調査
  4. 精度評価技術検討
    • （１）今年度活動(画像合成応用性能評価方法調査)の検討状況報告
      • SＧ１：文献調査、
      • SＧ２：技術調査（画像合成）、
      • SＧ３：評価検証（性能評価）
    • （２）令和5年度からの国際標準規格開発について
9月 第2回
画像合成応用
性能評価方法
調査WG		 2022年9月22日(木) （参加10名）

■画像合成応用性能評価方法の調査内容報告

  • 新任委員の方からご挨拶とBIOSIG（IEEE国際会議、ドイツ開催）参加報告を頂いた。
  • SG１～SG3の調査状況報告を頂き、報告すべき内容を議論した。
  • 議論を深めるためにSG毎の打合せを開催することとした。

【議事】

  1. 委員長挨拶、新任紹介
  2. 前回議事録確認、事務局報告
  3. 関連活動報告（5152、19795-10、9868、BIOSIG、他）
  4. 活動報告
    • （１）前回の振り返り、
    • （２）SG1文献調査、
    • （３）SG2技術調査、
    • （４）SG3評価検証調査、
    • （５）成果報告書目次について、
    • （６）今後の進め方
  5. 研修会等の関連行事について
8月 精度評価
技術グループ会		 2022年8月26日(金) （参加10名）

■来年度活動テーマの検討

  • 国際標準化状況報告では5152、19795-10、9868、他の進捗状況を確認した。
  • 精度評価技術検討では今年度活動の検討事項報告として、モーフィング技術応用やテンプレートの有効期間などについて議論した。
  • 令和5年度からの国際標準規格開発について日本提案内容とスケジュールについて議論を開始した。
  • 研修会内容、インターシップ受入について検討した。

【議事】

  1. グループ長挨拶
  2. 前回議事録確認、事務局連絡
  3. 関連活動状況報告
    • （１）国際標準化状況報告（5152、19795-10、9868、他）
    • （２）生体認証利活用パターン調査
  4. 精度評価技術検討
    • （１）今年度活動(画像合成応用性能評価方法調査)の検討事項報告
    • （２）令和5年度からの国際標準規格開発について
    • （３）研修会、インターシップ等について
  5. 今後の活動について
    • （１）第２回WG1開催について
    • （２）新精度評価技術研修会（仮称）
7月 第1回
画像合成応用
性能評価方法
調査WG
（合同調査
委員会）		 2022年7月21日(水) （参加出席者26名、オブザーバー・事務局含む）

■画像合成応用性能評価方法調査WG2活動開始※

  • 活動内容を2つのWG間で情報共有し、参加メンバーの役割分担を行った。
  • WG2では3つのサブグループに分かれて議論を進めるものとした。

【議事内容】

  1. 令和４年度活動実施計画報告
  2. 調査範囲、担当者の決定、参考文献に関する意見交換
    • SＧ１：文献調査　－SＧ２：技術調査（画像合成技術）
    • SＧ３：評価検証（性能評価）、技術検討会（含むインターシップ）
  3. 調査・報告の方法説明

※令和４年度政府戦略分野に係る国際標準化活動「テーマ名：画像合成手法を用いた生体認証性能評価方法に関する標準化調査」として活動

6月第32回
精度評価
技術グループ会		2022年6月3日(火) （参加11名）

■受託事業の活動内容について

  • 今年度の活動は規格開発前の調査活動。利活用パターン調査と画像合成応用性能評価方法の調査を行う。
  • 体制は昨年度と同じ。調査委員会、SC37 WG5、精度評価技術グループ会の有識者で構成する。

【議事内容】

  1. 1. グループ長挨拶・事務局連絡（新メンバー紹介）
  2. 2. 前回議事録確認
  3. 3. 関連活動状況報告－国際標準化状況報告、生体認証利活用パターン調査
  4. 4-1. 5152対応－Proposed Disposition of Commentsについて
  5. 4-2. 画像合成応用性能評価方法調査について

    ①調査項目と進捗状況、②文献調査報告、③基準開発検討

  6. 5. 今後の活動について
4月第31回
精度評価
技術グループ会		2022年4月26日(木) （参加9名）

■今年度活動について

  • 今年度は極値統計を用いた精度評価（ISO/IEC 5152）をフォローするとともに、新しい取り組みとして利活用パターン調査と画像処理応用性能評価方法調査を計画する。
  • 画像処理応用性能評価方法
    • （a）人種の違い（肌の色、顔の凹凸）、人間の変化（経年変化、外見変化、内部変動）
    • （b）環境の違い（光源、照度、計測向き）
    • （c）攻撃（フェイク画像）への耐性など
    について議論した。

【議事内容】

  1. グループ長挨拶・事務局連絡
  2. 前回議事録確認
  3. 国際標準化状況報告（5152、19795₋10、9868、他）
  4. 今年度の精度評価技術グループ会の活動について
    • ①2022年度バイオメトリクス部会活動概要
    • ②生体認証利活用パターン調査
    • ➂画像処理応用性能評価方法調査
  5. 今後の予定

2021年度

3月第30回
精度評価技術
グループ会		2022年3月24日(木)開催（参加8名）

前回議事録を確認、3年間の活動纏め（成果報告書第2部）公開について報告し、来年度活動について議論した。特に、コロナ禍により出荷金額は減少傾向にあるものの、生体認証の利用シーンが増えてきていることを鑑み、①生体認証利活用パターン調査、②画像処理応用性能評価方法調査、③生体認証人材育成プログラム策定について検討していくものとしました。

【議題】

  1. グループ長挨拶・事務局連絡
  2. 前回議事録確認
  3. 活動報告
  4. 来年度の活動について
  5. 今後の予定
2月第29回
精度評価技術
グループ会		2021年2月10日(木)開催（参加7名）

本会議後、活動報告会の事前打ち合わせとして開催しました。活動報告会の講演者に主張点やポイントを紹介いただき、講演内容を確認しました。また、今年度活動に関する質疑や来年度以降の活動についてどのように紹介するかを打ち合わせた。さらに、来年度活動の内容を議論しました。

【議題】

  1. グループ長挨拶・事務局連絡
  2. 前回議事録確認
  3. 活動報告
  4. 来年度の活動について
  5. 今後の予定
12月第28回
精度評価技術
グループ会		2021年12月23日(木)開催（参加7名）

国際標準化の状況を伺うとともに、GPとｒＧＥＶでの分析結果報告を受け、GPとｒＧＥＶの併用や使い分けについて情報交換するとともに、既存方式（３のルール）との違いについて意見交換しました。

【議題】

  1. グループ長挨拶・事務局連絡
  2. 前回議事録確認
  3. 関連活動報告
  4. 検討課題・検討結果について
  5. 来年度の活動と体制について
  6. 今後の予定
10月第27回
精度評価技術
グループ会		2021年10月21日(木)開催（参加8名）

国際標準化の状況を伺うとともに、信頼区間の分析結果報告を受け、今年度適用評価すべきことの明確化を図り、画像合成手法を用いた性能評価方法に関わる内容について、議論しました。

【議題】

  1. グループ長挨拶・事務局連絡
  2. 前回議事録確認
  3. 関連活動報告
  4. 検討課題・検討結果について
  5. 来年度以降の活動について
8月第26回
精度評価技術
グループ会		2021年8月26日(木)開催（参加8名）

国際標準化の状況を伺うとともに、統計解析モデルrGevの信頼区間の求め方について、実データ（公開データ）での評価結果を基に議論しました。ISO/IEC5152WD3日本コメントについて意見交換をおこなった。また、産業界への普及啓発として研修会の実施内容等についての議論も開始しました。さらに来年度の調査活動について意見を交換しました。

【議題】

  1. グループ長挨拶・事務局連絡
  2. 前回議事録確認
  3. 関連活動報告
  4. ISO/IEC5152WD3日本コメントについて
6月第25回
精度評価技術
グループ会		2021年6月24日(木)開催（参加8名）

極値統計を用いた新しい精度評価方式の適用評価の検討課題と検討結果について議論、来年度以降の活動についても意見交換をおこなった。3年間行ってきた新しい精度評価方式についての適用評価を纏めていくものとしました。

【議題】

  1. グループ長挨拶
  2. 前回議事録確認・事務局報告
  3. 関連活動報告
  4. 検討課題・検討結果について
  5. 国際標準化活動について
  6. 今後の活動について
4月第24回
精度評価技術
グループ会		2021年4月22日開催（参加7名）

今年度初めてのグループ会を実施。昨年に引き続きコロナ禍でオンラインベースの会合で開催することとしました。今年度は３か年計画の国際標準化総仕上げの３年目。技術グループ会での適用評価検証により、計画通り国際標準化を委員会段階に達することを目標としました。

【議題】

  1. グループ長挨拶
  2. 前回議事録確認、報告事項
  3. 昨年度の活動成果と今年度の活動計画について
  4. WD2対応案について
  5. 検討結果について

2020年度

3月精度評価技術
グループ会		参加者 8 名

第23回技術グループ会3月10日（水）開催

1月の国際委員会で1stWD(ワーキングドラフト)から２nd WDに進むことが承認され、２nd WDについて議論しました。また、今年度の活動成果をまとめるとともに、来年度活動の検討を開始しました。また、次回を2021年4月22日(木)に開催するものとしました。

01月精度評価技術グループ参加者 9 名

第22回技術グループ会1月7日（木）開催

1月の国際会議に向け、各国からいただいた1stWD(ワーキングドラフト)のコメント対応について議論しました。また、研修会で行った適用評価結果の良い例、悪い例について参加メンバーで検証し、今後の検討課題について議論しました。

【議事録】

12月精度評価研修会参加者 7 名

2020年度精度評価研修会（10月～12月、5回開催）

新精度評価方法の国際標準化を支援する取り組みとして、評価手順の確認と極値統計利用のスキルアップを目的として、オープンソース統計解析ソフトRを用いた極値統計の研修会を実施しました。
Step１．Rの環境構築
Step２．対象データ(顔データ、歩容データ)の抽出と評価手順
Step３．rGEVを用いた精度評価結果
Step４．GPを用いた精度評価結果
Step５．精度評価結果の比較、適用評価レポートの書き方
また、その内容を3月の「会員向け講演会」で報告しました。

【会員向け講演会】マーケティンググループ/活動報告（3月）

11月精度評価技術グループ参加者 9 名

第21回技術グループ会を11月12日(木)開催
今回のグループ会では、国際委員会へ提出したワーキングドラフト（WD）を踏まえ、検討課題を議論しました。特に、各国からの指摘事項について、どのように対応していくかを議論しました。また、精度評価研修会を開始したことを報告。どのようなデータセットを用いて、評価手順を検証するかを打合せました。

【議事録】

09月精度評価技術グループ参加者 9 名

第20回技術グループ会を8月11日(火)に開催しました。
議題は以下の通りです。議事録は現在作成中です。

  1. グループ長挨拶
  2. 前回議事録確認、連絡事項
  3. 関連活動の状況報告および課題
  4. 技術グループ会活動について
  5. 検討結果報告
  6. 今後の予定
08月精度評価技術グループ参加者 9 名

第20回精度評価技術グループ会 8月11日(火)開催
国際標準化に向け、２つの極値統計モデルを用いた精度評価手順について議論を重ねました。特に国際標準化で提案段階から作業段階へステップアップしたことを踏まえ、どのように普及啓発していくかについても検討、JAISAホームページで補足資料を掲載することとしました。

【議事録】【補足資料】

06月精度評価技術グループ参加者 9 名

第19回技術グループ会を6月18日（木）に開催しました。
検討委員会およびSC37WG5から活動状況報告をいただき、 技術グループ会活動で行う適用評価の目的として、研究開発の目的はモダリティの拡大、GPとｒGevの使い方、評価手順などを研究開発してくこと。研究開発したものを産業界に広めるため、研修会を開いていくこと、そして、国際標準にすべきことを明確にしていくこととしました。これらの目的を達成するために、顔認証や歩容認証のデータに極値統計を適用評価していくこととしました。

[議事録] 第19回精度評価技術グループ会　議事録

[参考資料]

04月精度評価技術グループ参加者 9 名

第18回技術グループ会を4月23日（木）に新型コロナウイルスの感染拡大に伴い、Web会議(Zoom会議システムにて開催しました。2020年度を始めるにあたり、年間計画について審議しました。特に、本会自主活動(精度評価技術グループ会)、受託事業（検討委員会）および国内SC37WG５(小委員会)での役割分担を明らかとし、活動の連携体制を議論した。その結果、本会自主活動は主に研究開発的な議論を進め、検討委員会にて適用評価結果をオーソライズ、その結果を踏まえ、SC37WG５にて文書化、国際提案していくものしました。研究開発としては、顔認証や歩容認証などの適用評価を行うことにしました。

[議事録] 第18回精度評価技術グループ会　議事録

[参考資料]

03月精度評価技術グループ参加者 9 名

第17回技術グループ会を年3月5日(木)に開催しました。
1月国際会議決議に従い、日本からNWIPとしてフォーム４（申請書）、ベースドキュメント(スコープ等)の提出内容を議論しました。
また、2019年度の活動成果をまとめ、来年度の活動について検討した。今年度の成果は下記の通りです。

(1)SC３７国際会議(公開文書：N306)
Mitsutoshi Himaga, Shigefumi Yamada (Japanese national body/JISC)：An introduction of alternative Biometric Performance Testing and Reporting Methodology, ISO/IEC JTC1/SC37 Working Group 5 Biometric Testing and Reporting(2020.1.21)

(2) 電子情報通信学会 BioX研究会(2019年10月)
山田茂史 (富士通研究所)：少数サンプルによる生体認証精度評価方法提案への取り組み、電子情報通信学会バイオメトリクス研究会(2019.10.03)

(3)SBRA（2019年12月、ポスターセッション）
山田茂史 (JAISA)：少数サンプルによる生体認証精度評価方法提案への取り組み、第9回バイオメトリクスと認識・認証シンポジウム(2019.12.6)
鈴木彦太郎、日間賀充寿 (JAISA)：一般極値分布を用いた統計的外挿の検討、第9回バイオメトリクスと認識・認証シンポジウム（2019.12.6）

(4) 電子情報通信学会 BioX研究会(2020年３月)
日間賀充寿(JAISA)：［招待講演］統計的外挿による他人受入率推定方式の検討、電子情報通信学会バイオメトリクス研究会（2020.3.4）

[議事録] 第17回精度評価技術グループ会　議事録

[参考資料]

01月精度評価技術グループ参加者 9 名

第16回技術グループ会を1月16日（木）に開催しました。
1月20日からのSC37国際会議（ニューオリンズ会議）に備え、提案資料の最終案をチェックしました。特に、ｒGevとGPによる極値統計適用結果を示すこととし、米国NIST（National Institute of Standards and Technology）が公開している指紋データベース(被験者サンプル数6,000名)を使用、少ないサンプル数で同程度の性能評価ができたことを説明することとしました。

[議事録] 第16回精度評価技術グループ会　議事録

[参考資料]

2019年

12月精度評価技術グループ参加者 9 名

第15回技術グループ会を12月3日(火)に開催しました。
前回に引き続き、極値統計の２分布について、統計数理研究所でのヒヤリング内容を含め、バイオメトリクス精度評価への適用検討を進めました。極値統計を悪用することができないようにすることも鑑み、QQプロットを評価結果として提示し、評価の正当性を示すことを評価基準に含めることとしました。これらのことを踏まえ、1月国際会議の提案資料について議論、大筋をまとめました。

[議事録] 第15回精度評価技術グループ会　議事録

[参考資料]

10月精度評価技術グループ参加者 9 名

第14回技術グループ会を10月31日(木)に開催しました。
「精度評価時のサンプル数を削減する新しい精度評価方式」について、極値統計の２分布について検討を進めました。

①一般化パレート分布：Generalized Pareto Distribution (GP)
②一般化極値分布：Generalized Extreme Value Distribution (rGEV)

特に、極値統計手法による精度推定方式でのパラメータの決め方、やその診断結果(例えば、QQプロットでフィッティングしたグラフ)などとともに、国際標準化のスケジュールについて議論、１月国際会議の説明案（について検討しました。

[議事録] 第14回精度評価技術グループ会　議事録

[参考資料]

09月精度評価技術グループ参加者 8 名

９月２０日(金)に、第１３回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「精度評価時のサンプル数を削減する新しい精度評価方式」について、スコープならびに次の両方式について検討をしました。

①一般化パレート分布とブートストラップ法の併用による精度推定方式
②極値統計手法による精度推定方式

また、検討により開発する少数サンプルを用いた精度評価方法の国際標準化に向けた検討も行いました。

[議事録] 第13回精度評価技術グループ会　議事録

[参考資料]

08月精度評価技術グループ参加者 8 名

８月２３日(金)に、第１２回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「精度評価時のサンプル数を削減する新しい精度評価方式」について、国際標準化に向けた取り組みスコープならびに次の両方式について検討をしました。

①一般化パレート分布とブートストラップ法の併用による精度推定方式
②極値統計手法による精度推定方式

[議事録] 第12回精度評価技術グループ会　議事録

[参考資料]

07月精度評価技術グループ参加者 7 名

７月２６日(金)、第11回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「精度評価時のサンプル数を削減する新しい精度評価方式」として、次の両方式について検討をしました。

①一般化パレート分布とブートストラップ法の併用による精度推定方式
②極値統計手法による精度推定方式

[議事録] 第11回精度評価技術グループ会　議事録

[参考資料]

06月精度評価技術グループ参加者 7 名

６月５日(水)に、第１０回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「精度評価時のサンプル数を削減する新しい精度評価方式」として、次の両方式について検討をしました。

①一般化パレート分布とブートストラップ法の併用による精度推定方式
②極値統計手法による精度推定方式

[議事録] 第１０回精度評価技術グループ会　議事録

[参考資料]

05月精度評価技術グループ参加者 7 名

５月２４日(金)に、第９回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「精度評価時のサンプル数を削減する新しい精度評価方式」として、次の両方式について検討をしました。

①一般化パレート分布とブートストラップ法の併用による精度推定方式
②極値統計手法による精度推定方式

[議事録] 第９回精度評価技術グループ会　議事録

[参考資料]

02月精度評価技術グループ参加者 8 名

２月２２日(金)に、第８回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「精度評価時のサンプル数を削減する新しい精度評価方式」として、次の両方式について検討をしました。

①一般化パレート分布とブートストラップ法の併用による精度推定方式
②極値統計手法による精度推定方式

[議事録] 第8回精度評価技術グループ会　議事録

[参考資料]

2018年

12月精度評価技術グループ参加者 8 名

１２月１８日(火)に、第７回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「新しい精度評価方法」に関して「分布の裾野近似法の検討結果」について報告と検討をしました。

[議事録] 第7回精度評価技術グループ会　議事録

[参考資料]

11月精度評価技術グループ参加者 8 名

１０月３１日(水)に、第６回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「新しい精度評価方法」に関して「分布の裾野近似法の適用性実験結果報告と検討」について検討しました。

[議事録] 第6回精度評価技術グループ会　議事録

[参考資料]

08月精度評価技術グループ参加者 8 名

８月１日(水)に、第５回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「新しい精度評価方法」に関して「分布の近似手法」について検討しました。

[議事録] 第5回精度評価技術グループ会　議事録

[参考資料]

06月精度評価技術グループ参加者 7 名

６月１日(金)に、第４回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「新しい精度評価方法」に関して「分布の近似手法」について検討しました。

[議事録] 第4回精度評価技術グループ会　議事録

[参考資料]

04月精度評価技術グループ参加者 8 名

４月６日(金)に、第３回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「新しい精度評価方法」に関してスコープと取り組み方法論と精度値の推定方法を検討しました。

[議事録] 第3回精度評価技術グループ会　議事録

[参考資料]

03月精度評価技術グループ参加者 8 名

３月６日(火)に、第２回精度評価技術グループ会を開催いたしました。
本技術グループで検討している「新しい精度評価方法」に関する各参加者の知見をご紹介いただいた後、今後の取組み内容について話し合いました。

[議事録] 第2回精度評価技術グループ会　議事録

[参考資料]

01月精度評価技術グループ参加者 6 名

１月２４日(水)に、第1回精度評価技術グループ会を開催いたしました。
精度評価技術グループの設立経緯と背景の説明の後、本技術グループで今後取り組む「新しい精度評価方法」の検討に際しての「考慮事項」「取組み内容」「取組みスケジュール」「経費等」について話し合いました。
特に、オープンな議論・検討を促進するために必要な「知的所有権の扱い」について話し合い、参加者の合意内容を議事録に記載の上、順守して今後の活動に取り組むこととなりました。

[議事録] 第1回精度評価技術グループ会　議事録

[参考資料]