日本学術振興会 科学研究費助成事業 学術変革領域研究(B) 2022〜

言語相互行為における身振りと手話を対象とした身体記号学

研究成果

2023年度

論文

・Victor Skobov, Mayumi Bono. (2023). “Making Body Movement in Sign Language Corpus Accessible for Linguists and Machines with Three-Dimensional Normalization of MediaPipe”. Findings of the 2023 Conference on Empirical Methods in Natural Language Processing,(EMNLP), (Long paper)

・ Mayumi Bono, Rui Sakaida, Kanato Ochiai,Satoshi Fukushima. (2023). Intersubjective Understanding in Finger Braille Interpreter-mediated Interaction: Two Case Studies of Other-initiated Repair. Lingua, Elsevior. https://doi.org/10.1016/j.lingua.2023.103569

・Minh Duc Vo, An Quoc Luong, Akihiro Sugimoto, Hideki Nakayama. (2023). A-CAP: Anticipation Captioning with Commonsense Knowledge. Proceedings of the Conference on Computer Vision and Pattern Recognition (CVPR) .

・Yi-Pei Chen, An-Zi Yen, Hen-Hsen Huang, Hideki Nakayama, Hsin-Hsi Chen. (2023). LED: A Dataset for Life Event Extraction from Dialogs. Proceedings of the 17th Conference of the European Chapter of the Association for Computational Linguistics (EACL) Findings Volume .

講演・口頭発表等

・ 坊農 真弓 (2024). 文部科学省助成事業『身体記号学』(国立情報学研究所坊農研究室・東京大学中山研究室) 　第22回手話言語研究セミナー (2月4日, 全国手話研修センター)

・平 英司・ 坊農 真弓・ 岡田 智裕 (2023).手話コーパスによる「見る」を含意する日本手話の類義語の研究[口頭発表]　第49回日本手話学会大会（12月9日, 東京大学先端科学技術研究センター）

・相良啓子 (2023). 日本手話と台湾手話における語彙の歴史的変遷および台湾手話の現状.　開発途上国における社会発展と国家と手話の関係をめぐる課題研究会（12月1日, オンライン）

・Keiko Sagara. (2023). Diachronic change and Variation within and between sign languages in Japan, Taiwan and South Korea: The impact of language contact.(Oct. 24, National Chung Cheng University, Taiwan)

・Keiko Sagara. (2023). Toward the Development of Sign Language Studies in Asia. XIX World Congress of the World Federation of the Deaf.(July 14, International Convention Center, Korea)

・Mayumi Bono, Robert Adam. (2023). Online Cross-Signing Project Between the United Kingdom and Japan: First Phase of Data Collection [Paper presentation]. Online Proceedings of JSAI-isAI2023.(Jun. 5-6, Kumamoto-Jo Hall, Japan)

・Kanato Ochiai, Mayumi Bono. (2023). Finger Braille as a Personal Medium: Exploring Communication Methods for Deafblind People Based on Computer-Mediated Communication Studies [Paper presentation]. Online Proceedings of JSAI-isAI2023.(Jun. 5-6, Kumamoto-Jo Hall, Japan)

書籍

・相良 啓子 (2024). 日本手話の歴史的研究－系統関係にある台湾手話、韓国手話の数詞、親族表現との比較から－　ひつじ書房

・Mayumi Bono, Tomohiro Okada, Kouhei Kikuchi,Rui Sakaida, Victor Skobov, Yusuke Miyao and Yutaka Osugi. (2023). Chapter 13. Utterance unit annotation for the Japanese Sign Language Dialogue Corpus: Towards a method for detecting interactional boundaries in spontaneous sign language dialogue, Wehrmeyer, Ella. (Ed.), Advances in Sign Language Corpora [SCL 108] (pp. 353-382). John Benjamins Publishing Company.

・アダム・ケンドン 著／坊農 真弓・牧野 遼作（訳）チブルカみお（翻訳協力）(2023). 23章　共在相互行為において自らを空間づけること・自らの向きを定めること　エスノメソドロジー・会話分析ハンドブック (pp. 292-309)　新曜社

・相良 啓子 (2023). 適応することば [日本手話]　菊澤律子・吉岡乾（編）しゃべるヒト：ことばの不思議を科学する (pp. 248-255)　文理閣

・大杉 豊・坊農 真弓 (2023). 色々の名称とことば [日本手話言語]　菊澤律子・吉岡乾（編）しゃべるヒト：ことばの不思議を科学する (pp. 233-238) 　文理閣

・相良 啓子 (2023). 色々に数えることば [日本手話]　菊澤律子・吉岡乾（編）しゃべるヒト：ことばの不思議を科学する (pp. 204-210)　文理閣

・坊農 真弓 (2023). 会話の連鎖組織　菊澤律子・吉岡乾（編）しゃべるヒト：ことばの不思議を科学する (pp. 84-95)　文理閣

MISC

・コラム　坊農 真弓 (2024). バベルの塔はすべての言語を分かったのか　『人工知能』39(1) ,1.

2022年度

論文

・浅野 倫子・坊農 真弓・川合 伸幸・小橋 康章・森田 純哉・中村 國則・白水 始・創刊30周年記念特集編集編委員会・寺田 和憲・清河 幸子・服部 雅史・布山 美慕・平 知宏 (2023). 座談会：『認知科学』の過去・現在・未来を語る　認知科学, 30(1), 89-93.

・坊農 真弓・今井 倫太 (2023). 「対話・インタラクション」研究の発展と潮流　認知科学, 30(1), 37-45.

・創刊30周年記念特集研究編委員会・日髙 昇平・坊農 真弓・小林 春美,・織田 涼・高橋 康介 (2023). 第1部 研究編 「認知科学各分野の30年とこれからの展望」 編集にあたって　認知科学, 30(1), 8-11.

・Rui Yang, Duc Minh Vo, Hideki Nakayama. (2023). Indirect Adversarial Losses via an Intermediate Distribution for Training GANs. Proceedings of the IEEE Winter Conference on Applications of Computer Vision (WACV) .

・Hong Chen, Rujun Han, Te-Lin Wu, Hideki Nakayama, Nanyun Peng. (2022). Character-centric Story Visualization via Visual Planning and Token Alignment. Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing (EMNLP) , 8259-8272.

・Rui Yang, Duc Minh Vo, Hideki Nakayama. (2022). Stochastically Flipping Labels of Discriminator’s Outputs for Training Generative Adversarial Networks. IEEE Access 10, 103644-103654.

・Rui Yang, Raphael Shu, Hideki Nakayama. (2022). Improving Noised Gradient Penalty with Synchronized Activation Function for Generative Adversarial Networks. IEICE Transactions on Information and Systems E105-D(9), 1537-1545.

・ Eiko Yasui. (2023). SignSequence-initial pointing: Spotlighting what just happened as a cause of a new sequence. Discourse Studies Online first.

・林 誠・安井 永子 (2023). サッカー指導場面での「身体的実演」に見られるコーチと選手の相互行為　小宮 友根・黒嶋 智美（編）実践の論理を描く：相互行為のなかの知識・身体・こころ (pp. 158-175)　 勁草書房

・ Eiko Yasui. (2023). Japanese onomatopoeia in bodily demonstrations in a traditional dance instruction: A resource for synchronizing body movements. Journal of Pragmatics, 207, 45-61.

・榎本 剛士 (2022). 「英語教育」の指標的類像として見る「英語の授業」　ポエティクスの新展開：プルリモーダルな実践の詩的解釈に向けて (pp. 251-277)　ひつじ書房

・Astha Verma, A. Venkata Subramanyam, Zheng Wang 0007, Shin'ichi Satoh 0001, Rajiv Ratn Shah. (2023). Unsupervised Domain Adaptation for Person Re-Identification Via Individual-Preserving and Environmental-Switching Cyclic Generation. IEEE Trans. Multim. 25, 364-377.

・Xiao Wang, Zheng Wang, Wu Liu, Xin Xu, Qijun Zhao, Shin'ichi Satoh 0001. (2022). Towards Causality Inference for Very Important Person Localization. ACM Multimedia, 6618-6626.

・Taorong Liu, Liang Liao, Zheng Wang, Shin'ichi Satoh 0001. (2022). Reference-Guided Texture and Structure Inference for Image Inpainting. ICIP, 1996-2000.

・Zhixiang Wang, Xiang Ji, Jia-Bin Huang, Shin'ichi Satoh 0001, Xiao Zhou, Yinqiang Zheng. (2022). Neural Global Shutter: Learn to Restore Video from a Rolling Shutter Camera with Global Reset Feature. CVPR, 17773-17782.

・Andreu Girbau, Ferran Marqués, Shin'ichi Satoh 0001. (2022). Multiple Object Tracking from appearance by hierarchically clustering tracklets. BMVC, 362-362.

・Qier Meng, Liang Liao,Shin'ichi Satoh 0001. (2022). Weakly-Supervised Learning With Complementary Heatmap for Retinal Disease Detection. IEEE Transactions on Medical Imaging 41(8), 2067-2078.

・Liang Liao, Wenyi Chen, Jing Xiao 0004, Zheng Wang 0007, Chia-Wen Lin, Shin'ichi Satoh 0001. (2022). Unsupervised Foggy Scene Understanding via Self Spatial-Temporal Label Diffusion. IEEE Transactions on Image Processing 31, 3525-3540.

・ Quan Zhao, Jing Xiao 0004, Zheng Wang 0007, Xujie Ma, Mi Wang, Shin'ichi Satoh 0001. (2022). Vehicle Counting in Very Low-Resolution Aerial Images via Cross-Resolution Spatial Consistency and Intraresolution Time Continuity. IEEE Transactions on Geoscience and Remote Sensing 60, 1-13.

・Mengshun Hu, Jing Xiao 0004, Liang Liao, Zheng Wang 0007, Chia-Wen Lin, Mi Wang, Shinichi Satoh 0001. (2022). Capturing Small, Fast-Moving Objects: Frame Interpolation via Recurrent Motion Enhancement. IEEE Transactions on Circuits and Systems for Video Technology 32(6), 3390-3406.

・Yuting Liu, Zheng Wang 0007, Miaojing Shi, Shinichi Satoh 0001, Qijun Zhao, Hongyu Yang. (2022). Discovering regression-detection bi-knowledge transfer for unsupervised cross-domain crowd counting. Neurocomputing 494, 418-431.

・Zhaohui Zhu, Marc A. Kastner 0001, Shin'ichi Satoh 0001. (2022). On Assisting Diagnoses of Pareidolia by Emulating Patient Behavior. MMM (1) , 299-310.

・Donnaphat Trakulwaranont, Marc A. Kastner 0001, Shin'ichi Satoh 0001. (2022). Personalized Fashion Recommendation Using Pairwise Attention. MMM (2), 218-229.

・Yutaka Osugi , Aiko Akiyama, Yuenwa,San. (2022,December18). Sign language, what is it? : an ESCAP guide towards legal recognition of sign languages in Asia and the Pacific. United Nations ESCAP.

・相良 啓子 (2022). Historical Relationships between Numeral Signs in Japanese Sign Language, South Korean Sign Language and Taiwan Sign Language, In Kazumi Matsuoka, Onno Crasborn and Marie Coppola (eds.), East Asian Sign Linguistics (pp. 7-36). Boston/Berlin: de Gruyter Mouton.

講演・口頭発表等

・坊農 真弓 (2023). オンラインクロスサイン：共有表現・共有言語がないろう者同士はいかにしてコミュニケーションするのか― [招待発表]　第47回社会言語科学会研究大会 (3月16日-18日, 東京国際大学)

・ロバート・アダム, 坊農 真弓 (2023). ウィズコロナ・アフターコロナ時代のビデオ電話におけるクロスサイン現象の探究 [特別講演]　第21回手話言語研究セミナー (2月5日, 伊藤研修センター)

・Ted Supalla, Yutaka Osugi . (2023). Integrating Historical Sign Language Database Design and Historical Linguistics for Tracing Etymological and Morphological Changes. 2023 Linguistic Society of America 97th Annual Meeting.(January 6)

・安井 永子 (2022). 指さしと相互行為：会話における指さしの多様な働きと指示の達成 [基調講演]　第48回日本手話学会大会 (12月10日, 東京大学先端科学技術研究センター)

・Shin'ichi Satoh (2022). Boosting Image Retrieval by Diffusion[Invited Speeches]. SoICT2022.(December 1-3)

・Keiko Sagara, Nick Palfreyman. (2022). Variation within and between sign languages in Japan, Taiwan and South Korea: The impact of language contact. 15th Biennial Desert Linguistics Society (HDLS15). (November 11-13. The University of New Mexico)

・Yasusuke Minami, Nisisawa HiroYuki, Mitsuhiro Okada, Rui Sakaida. (2022) . “Does it feel spacious?”: Negotiations between the visual and non-visual world. 7th Copenhagen Multimodality Day. (November 4)

・Hideki Nakayama. (2022).Incorporating External Knowledge for Vision and Language Systems. 2nd Workshop on Trends and Advances in Machine Learning and Automated Reasoning for Intelligent Robots and Systems (IROS2022). (October 27, Kyoto, Japan)

・相良 啓子 (2022). Diachronic change in Japanese Sign Language, Taiwan Sign Language and South Korean Sign Language: Focus on kinship terms.The 14th Theoretical Issues in Sign Language Research conference (TISLR14). (September 26-30, National Museum of Ethnology)

・岡田 将吾 (2022). あなたは対話を楽しんでいますか？：対話における内面状態推定の課題と展望 [招待講演]　人工知能学会 言語・音声理解と対話処理研究会（SLUD）第95回研究会 (9月15日-16日, オンライン)

・菊地 浩平 (2022). 手話通訳場面におけるアクセシビリティ実践の研究 [口頭発表]　日本認知科学会第39回大会 (9月8日-10日, オンライン)

・佐藤 真一 (2022). 機械学習によるメディア画像処理：大規模学習データセットに基づく機械学習手法の威力とその限界 [招待発表]　第41回日本医用画像工学会大会 (7月29日-31日, 名古屋大学)

書籍

・坂井田 瑠衣 (2023). 第６章「同じ世界を知る」ことはいかにして可能か: 視覚障害者の歩行訓練から　佐藤 貴宣・栗田 季佳（編）障害理解のリフレクション: 行為と言葉が描く〈他者〉と共にある世　ちとせプレス

・岡田 智裕 (2023). マウス・アクション　松岡和美・内堀朝子（編）手話言語学のトピック：基礎から最前線へ (pp. 249-278)　くろしお出版

・片岡, 邦好・武黒 麻紀子・榎本 剛士 (2022). ポエティクスの新展開 : プルリモーダルな実践の詩的解釈に向けて　ひつじ書房

・高梨 克也・坂井田 瑠衣 (2022). 第4章 日常生活場面の相互行為分析　鈴木 宏昭 (編) 認知科学講座3 心と社会　東京大学出版会

・中山 英樹・二反田 篤史・田村 晃裕,・井上 中順・牛久 祥孝 (2022). 深層学習からマルチモーダル情報処理へ　サイエンス社

MISC

・コラム　坊農 真弓 (2023). エジンバラからこんにちは　NII Today, (98), 22.

・エッセイ　相良 啓子 (2022). 身体環境の変化と音声言語・手話言語　月刊みんぱく, (9月), 5.