トップへ 　
　 検索 辞書 交通 地図 天気
　　　 | 研究テーマ | デモ | 論文・国際会議 | 研究会 | その他 | English |

| 研究テーマ

複数カメラを用いた講義映像の自動撮影
本研究では，遠隔講義などに用いる講義映像を自動で撮影する システムの実現を目指している． カメラマンのような柔軟な撮影知識を用いて受講者の期待する 臨場感のある講義映像を撮影するためには， 黒板のブロック分割や講義者の行動を認識することが必要となり， それらの認識手法を明らかにし， 作成した撮影規則を用いて撮影を行う． さらには，複数台のカメラから得られる映像の中から 最も良い映像１つを選択するスイッチャーの働きも自動化する．
視聴覚情報の統合による会議映像の自動撮影
ネットワーク環境の整備に伴い， 遠隔会議システムの利用が増加している． 本研究では，遠隔会議などに用いる会議映像を自動で撮影する システムの実現を目指している． ここでは，会議を撮影するために重要な特徴になると考えられる， マイクから得られる音声情報とカメラから得られる画像情報を 統合することによって決定した注目者をもとにして カメラ制御を行い，自動的にプロのカメラマンが撮影するような 会議映像を作成する手法を明らかにする．
全方位カメラによる非日常行動（異常行動）の獲得
高齢化社会の到来により，一人暮らしや介護を必要とする 高齢化世帯が著しく増加している．このため， これまで以上に在宅での生活支援が必要になると予測されており， さまざまな介護支援システムが実用化されつつある． 本研究では被介護者の手を煩わせないこと， 異常な行動に対するモデルを必要としないこと， プライバシーを保護することを条件とした， 画像処理による異常行動警報システムの構築を目標としている．
３次元情報発生量の分布によるカメラワークの決定
シーン上の３次元空間中で人が注目している領域を 抽出し，その注目領域を効果的に映像化する手法を明らかにする． まず，人が注目している領域を情報を発している領域と考え， 空間中の情報発生量の分布を抽出する， 次に抽出した情報発生量の大きいボクセルを多く含むような カメラアングルを設定することで映像化を行う．
人物の顔・手領域の追跡と手話認識
肌色の情報や追跡の情報などから動画像中における 人の顔や手を抽出する手法を提案している． さらには，抽出した手の動きや形から手話動作を認識し， 手話文を日本語文に翻訳するインタフェースの構築を目的としている． 本研究では，動画像処理により抽出した顔や手の位置関係や動きなどから 手話文が示す単語を認識し，各単語の品詞や手話文の構文規則を用いて 格構造の関係を把握して日本語文に翻訳する.
物体認識とアクティブビジョン
類似したアスペクトを持つ物体を認識する時，最も認識しやすい視点に カメラを移動するアクティブビジョンを提案している． また，アクティブビジョンに関する多くの手法では 認識しやすいカメラ位置を捜し出すための移動ステップを 数多く必要としたが， 本研究では過去の移動ステップで得られた認識情報を統合することで 移動ステップを減らし，効率良く認識する手法を明らかにしようとしている．

| デモ

（動画のためファイルサイズはかなり大きいです．）

  1. 認識情報の統合とアクティブビジョンへの応用
    （SSPR'98 and SPR'98, pp.366-373, August 1998. 参照）


    mpg file (12MB)

  2. 情報発生量の分布に基づく講義映像の自動撮影
    （信学論(D-II)，vol.J82-D-II, no.10, pp.1590-1597, Oct. 1999．参照）


    パンニング mpg file (4.1MB)
    スイッチング・ズーミング mpg file (3.5MB)

  3. 板書領域のブロック抽出
    （信学論(D-I)，vol.J83-D-I, no.11, pp.1187-1195, Nov. 2000．参照）


    mpg file (3.5MB)

  4. 講義者の行動理解
    （信学ソ大， no.D-12-73, p.260, Oct. 2000．参照）


    mpg file (4.5MB)

  5. デジタルカメラワークを用いた体操床演技の自動映像生成
    （MIRU2000, pp.I-331-I-336, July 2000．参照）


    MIRU VIDEO PROCEEDINGS mpg file (30.5MB)（マスタテープが古いため音質は悪いです）

  6. 状況理解と映像評価による知的撮影
    （信学論(D-II)，vol.J85-D-II, no.4, pp.594-603, April 2002．参照）

    【処理結果】

    mpg file (8.8MB)

    【撮影結果】

    mpg file (14.1MB)

  7. 視聴覚情報を用いた会議撮影
    （信学論(D-II)，vol.J85-D-II, no.3, pp.537-542, March 2002．参照）


    mpg file (2.0MB)

  8. 形状情報量の分布に基づくシーンの映像表現
    （信学技報，PRMU2003-190,Jan. 2004．参照）


    mpg file (13.1MB)

| 論文発表・国際会議

  1. 青木 茂樹，大西 正輝，小島 篤博，福永邦雄，
    ``独居高齢者の行動パターンに注目した非日常状態の検出，''
    電気学会論文誌，vol.125-E, no.6, pp.259-265, June 2005．
    pdf file

  2. Shigeki Aoki, Masaki Onishi, Atsuhiro Kojima, Kunio Fukunaga,
    ``Learning and Recognizing Behavioral Patterns Using Position and Posture of Human,''
    Proc. of IEEE Conference on Cybernetics and Intelligent Systems, pp.1299-1302, Dec. 2004.
    pdf file

  3. Masaki Onishi, Kunio Fukunaga,
    ``Shooting the Lecture Scene Using Computer-controlled Cameras Based on Situation Understanding and Evaluation of Video Images,''
    Proc. 17th International Conference on Pattern Recognition, vol.1, pp,781-784, Aug. 2004.
    pdf file

  4. 大西 正輝，村上 昌史，福永 邦雄，
    ``受講者の心理状態を考慮した講義の自動撮影，''
    電子情報通信学会論文誌 (D-II)，vol.J87-D-II, no.8, pp.1728-1734, Aug. 2004．
    pdf file

  5. 青木 茂樹，岩井 嘉男，大西 正輝，小島 篤博，福永 邦雄，
    ``人物の位置・姿勢に注目した行動パターンの学習・認識と非日常状態検出への応用，''
    電子情報通信学会論文誌 (D-II)，vol.J87-D-II, no.5, pp.1083-1093, May 2004．
    pdf file

  6. 青木 茂樹，大西 正輝，小島 篤博，福永 邦雄，
    `` HMM による行動パターンの認識，''
    電子情報通信学会論文誌 (D-II)，vol.J85-D-II, no.7, pp.1265-1270, July 2002．
    pdf file

  7. 大西 正輝，村上 昌史，福永 邦雄，
    ``状況理解と映像評価に基づく講義の知的自動撮影，''
    電子情報通信学会論文誌 (D-II)，vol.J85-D-II, no.4, pp.594-603, April 2002．
    pdf file

  8. 大西 正輝，影林 岳彦，福永 邦雄，
    ``視聴覚情報の統合による会議映像の自動撮影，''
    電子情報通信学会論文誌 (D-II)，vol.J85-D-II, no.3, pp.537-542, March 2002．
    pdf file

  9. Masaki Onishi, Takehiko Kagebayashi, Kunio Fukunaga,
    ``Production of Video Images by Computer Controlled Cameras and Its Application to TV Conference System,''
    Proc. of IEEE Conference on Computer Vision and Pattern Recognition, vol.2, II-131-II-137, Dec. 2001.
    pdf file

  10. 大西 正輝，泉 正夫，福永 邦雄，
    ``講義映像における板書領域のブロック分割とその応用，''
    電子情報通信学会論文誌 (D-I)，vol.J83-D-I, no.11, pp.1187-1195, Nov. 2000．
    pdf file

  11. Masaki Onishi, Masao Izumi, Kunio Fukunaga,
    ``Production of Video Images by Computer Controlled Camera Operation Based on Distribution of Spatiotemporal Mutual Information,''
    Proc. 15th International Conference on Pattern Recognition, Volume 4, pp.102-105, Sep. 2000.
    pdf file

  12. Masaki Onishi, Masao Izumi, Kunio Fukunaga,
    ``Blackboard Segmentation Using Video Image of Lecture and Its Applications,''
    Proc. 15th International Conference on Pattern Recognition, Volume 4, pp.615-618, Sep. 2000.
    pdf file

  13. 浅沼 克紀，大西 正輝，小島 篤博，福永 邦雄，
    ``色情報と領域追跡情報を用いた人物の顔と手の領域の抽出，''
    電気学会論文誌，vol.119-C, no.11, pp.1351-1358, Nov. 1999．
    pdf file

  14. 大西 正輝，泉 正夫，福永 邦雄，
    ``情報発生量の分布に基づく遠隔講義撮影の自動化，''
    電子情報通信学会論文誌 (D-II)，vol.J82-D-II, no.10, pp.1590-1597, Oct. 1999．
    pdf file

  15. M. Onishi, M. Izumi, K. Fukunaga,
    ``Object Recognition Using Sequential Images and Application to Active Vision,''
    SSPR'98 and SPR'98 Advances in Pattern Recognition, pp.366-373, August 1998.
    pdf file

  16. 西川 昇，大西 正輝，松本 拓矢，泉 正夫，福永 邦雄，
    ``カメラ位置姿勢制御を用いたモデルベース物体認識，''
    電気学会論文誌，vol.118-C, no.2, pp.210-216, Feb. 1998．
    pdf file

| 研究会発表

  1. 青木 茂樹，大西 正輝，小島 篤博，福永 邦雄，
    ``人物の行動パターンに基づく非日常状態の検出，''
    第51回システム制御情報学会研究発表講演会論文集(SCI'07)，4F4-3，pp.287-288，May 2007.

  2. 青木 茂樹，大西 正輝，小島 篤博，福永 邦雄，
    ``人物の行動パターンの学習・認識と非日常状態検出への応用，''
    SICE システムインテグレーション部門学術講演会講演論文集， pp.559-560, Dec. 2005．
    ＳＩ２００５ベストセッション賞受賞

  3. 山下 拓也，青木 茂樹，大西 正輝，福永 邦雄，
    ``形状情報量の分布に基づくシーンの映像表現，''
    電子情報通信学会技術研究報告，PRMU2003-190, pp.25-30, Jan. 2004．

  4. 青木 茂樹，大西 正輝，小島 篤博，福永 邦雄，
    ``人物の行動パターンの学習・認識と独居高齢者の非日常状態検出への応用，''
    第18回生体・生理工学シンポジウム論文集(BPES2003)， 3B1-3，pp.311-314, Oct. 2003．

  5. 青木 茂樹，大西 正輝，小島 篤博，福永 邦雄，
    ``全方位視覚センサによる行動パターンの学習・認識と非日常状態検出への応用,''
    日本ロボット学会第21回学術講演会，3K33, Sep. 2003．

  6. 山下 拓也，青木 茂樹，大西 正輝，福永 邦雄，
    ``形状情報量の分布に基づくシーンの撮影の自動化，''
    第2回情報科学技術フォーラム講演論文集，LI-010, pp.181-182, Sep. 2003．
    (情報技術レターズ採録)
    ヤングリサーチャー賞授賞
    pdf file

  7. 青木 茂樹，高橋 昌史，大西 正輝，小島 篤博，福永 邦雄，
    ``ウェアラブルカメラによる動作の認識とテキスト表現，''
    電子情報通信学会技術研究報告，IE2003-37, PRMU2003-67, MVE2003-49, July 2003．

  8. 青木 茂樹，大西 正輝，小島 篤博，福永 邦雄，
    ``人物の行動パターンに注目した非日常状態の検出，''
    情報処理学会関西支部支部大会講演論文集，pp.89-92, Nov. 2002．

  9. 青木 茂樹，岩井 嘉男，大西 正輝，小島 篤博，福永 邦雄，
    ``人物の位置・姿勢に注目した行動パターンの認識，''
    電子情報通信学会技術研究報告，PRMU2002-82,WIT2002-25, pp.13-18, Sep. 2002．

  10. 大西 正輝，村上 昌史，福永 邦雄，
    ``視聴者の心理状態を考慮した撮影の自動化，''
    画像の認識・理解シンポジウム (MIRU2002), vol.II, pp.37-42, July 2002．

  11. 山下 拓也，大西 正輝，福永 邦雄，
    ``3次元復元データを用いたシーンの自動撮影，''
    電子情報通信学会総合大会，no.D-12-163, p.339, March 2002．

  12. 岩井 嘉男，青木 茂樹，大西 正輝，福永 邦雄，
    ``人物の位置および姿勢に注目した行動パターンの学習と認識，''
    電子情報通信学会総合大会，no.D-12-22, p.198, March 2002．

  13. 青木 茂樹，大西 正輝，小島 篤博，菅原 康博，福永 邦雄，
    ``人感センサによる独居高齢者の行動パターンの認識，''
    電子情報通信会技術研究報告，WIT2001-50, pp.43-48, March 2002．

  14. 村上 昌史，大西 正輝，福永 邦雄，
    ``視聴者の心理モデルを考慮したシーンの映像化手法，''
    電子情報通信学会技術報告，PRMU2001-198, pp.33-40, Jan. 2002．

  15. 青木 茂樹，大西 正輝，小島 篤博，福永 邦雄，
    ``人物の行動パターンの学習と認識，''
    電気学会関西支部連合大会，G15-16, p.G338, Nov. 2001．

  16. 村上 昌史，大西 正輝，福永 邦雄，
    ``視聴者の感情を考慮したシーンの映像化手法，''
    電気学会関西支部連合大会，G15-15, p.G339, Nov. 2001．

  17. 青木 茂樹，大西 正輝，小島 篤博，岩橋 由雄，福永 邦雄，
    ``人物の非日常的行動の検出とそのモニタリングシステムへの応用，''
    第45回システム制御情報学会研究会，pp.561-562，May 2001．

  18. 大西 正輝，村上 昌史，福永 邦雄，
    ``状況理解と映像評価による知的自動撮影システム ―複数カメラを用いた講義映像生成―，''
    電子情報通信学会総合大会，no.SD-5-3, pp.355-356, March 2001．

  19. 青木 茂樹，大西 正輝，小島 篤博，岩橋 由雄，福永 邦雄，
    ``人物の行動パターンに注目した異常通知システム，''
    電子情報通信学会技術報告，PRMU2000-220，pp.139-146，March 2001．

  20. 村上 昌史，大西 正輝，福永 邦雄，
    ``状況理解と映像評価を考慮した講義の知的自動撮影，''
    情報処理学会研究報告，2001-CVIM-125-5，pp.39-46，Jan. 2001．

  21. 松谷 篤志，大西 正輝，福永 邦雄，
    ``手話動作から抽出した単語の格構造解析による手話文認識，''
    電気学会関西支部連合大会, G15-17, p.G360, Nov. 2000．

  22. 村上 昌史，大西 正輝，福永 邦雄，
    ``講義者の行動認識に基づく講義撮影の自動化，''
    電子情報通信学会情報・システムソサイエティ大会， no.D-12-73, p.260, Oct. 2000．

  23. 大西 正輝，泉 正夫，福永 邦雄，
    ``デジタルカメラワークを用いた自動映像生成，''
    画像の認識・理解シンポジウム (MIRU2000),vol.I, pp.331-336, July 2000．
    pdf file

  24. 大西 正輝，泉 正夫，福永 邦雄，
    ``講義映像における板書領域のブロック抽出とその自動撮影，''
    電子情報通信学会技術報告，PRMU99-128, pp.197-204, Nov. 1999．

  25. 青木 茂樹，大西 正輝，小島 篤博，山田 憲一，三宅 克実，福永 邦雄，
    ``運転者の目領域抽出による視線推定，''
    電子情報通信学会技術報告，PRMU98-152, pp.15-22, Nov. 1999．

  26. 大西 正輝，泉 正夫，福永 邦雄，
    ``講義映像における板書領域の抽出と分割，''
    電気学会関西支部連合大会，G16-1, p.G332 , Nov. 1999．

  27. 松谷 篤志，浅沼 克紀，大西 正輝，福永 邦雄，
    ``個人差を考慮した連続ＤＰ法によるジェスチャ認識，''
    電気学会関西支部連合大会，G16-4, p.G335, Nov. 1999．

  28. 大西 正輝，泉 正夫，福永 邦雄，
    ``情報発生量による遠隔講義映像の自動生成とその評価，''
    電子情報通信学会技術報告，PRMU98-176, pp.1-6, Jan. 1999．

  29. 大西 正輝，泉 正夫，福永 邦雄，
    ``情報発生量に基づく講義映像の自動撮影，''
    電気学会関西支部連合大会，G16-7, p.G349, Nov. 1998．

  30. 大西 正輝，松本 昌紀，福永 邦雄，
    ``動画像処理による遠隔講義映像の自動生成とその評価，''
    電子情報通信学会技術報告，ET98-62, pp.9-16, Oct. 1998．

  31. 浅沼 克紀，田原 典枝，大西 正輝，小島 篤博，福永 邦雄，
    ``人物行動のテキスト生成のための位置・姿勢推定，''
    電子情報通信学会総合大会，no.D-12-149, p.348, March 1998．

  32. 松本 昌紀，大西 正輝，福永 邦雄，
    ``動画像処理による遠隔講義撮影の自動化，''
    電子情報通信学会総合大会，no.D-12-152, p.351, March 1998．

  33. 大西 正輝，西川 昇，八幡 洋一郎，泉 正夫，福永 邦雄，
    ``カメラ移動に基づく複数画像の認識情報を用いた物体認識，''
    電子情報通信学会総合大会，no.D-12-214, p.421, March 1997．

| その他

  1. 解説：大西 正輝，
    ``状況理解と映像評価による講義撮影の自動化
    ―コンピュータを用いた臨場感のある講義映像の撮影―，''
    画像ラボ，Vol.13, No.9, pp.1-4, Sep. 2002．

  2. 解説：大西 正輝，福永 邦雄，
    ``映像生成のためのカメラワークならびにスイッチング操作の自動化
    ―臨場感のある遠隔講義映像の撮影自動化―，''
    画像ラボ，Vol.11, No.9, pp.10-13, Sep. 2000．

  3. 特許：福永 邦雄，菅原 康博，青木 茂樹，大西 正輝，小島 篤博，
    ``行動パターン異変監視システム，''（出願中：特願2002-374625）．

  4. 新聞：日経産業新聞 2000/1/18（火）5 面，臨場感のある授業映像． （全文）

トップへ・ 産総研での研究へ・ 理研ＢＭＣでの研究へ

月に２回程度の更新を目標としています

Copyright(c) Masaki Onishi All rights reserved.