RUDN Journal of Language Studies, Semiotics and SemanticsRUDN Journal of Language Studies, Semiotics and SemanticsВестник Российского университета дружбы народов. Серия: Теория языка. Семиотика. Семантика2313-22992411-1236Peoples’ Friendship University of Russia named after Patrice Lumumba (RUDN University)4180610.22363/2313-2299-2024-15-3-664-683HLEXETDISCURSIVE LINGUISTICSДИСКУРСИВНАЯ ЛИНГВИСТИКАResearch ArticleEvent Construal through Spatial Relations in Science Documentaries: Language and ImageКонструирование событий через призму пространственных отношений в научно-популярном кино: язык и изображениеhttps://orcid.org/0009-0004-1981-00512035-7040OvagimianNare A.ОвагимянНаре Армени

Senior Lecturer at the Department of English, Faculty of Translation and Interpreting

старший преподаватель кафедры английского языка переводческого факультета

n.ovagimian@yandex.ruhttps://orcid.org/0000-0001-7215-060456642747500AAB-798920194419-0090KioseMaria I.КиосеМария Ивановна

Leading Researcher; Laboratory for multichannel communication, Institute of Linguistics, RAS

доктор филологических наук, доцент, главный научный сотрудник Центра Cоциокогнитивных исследований дискурса Московского государственного лингвистического университета; ведущий научный сотрудник Лаборатории мультиканальной коммуникации Института языкознания РАН

maria_kiose@mail.ruMoscow State Linguistic UniversityМосковский государственный лингвистический университетInstitute of Linguistics RASИнститут языкознания РАН03122024153VOL 15, NO3 (2024)ТОМ 15, №3 (2024)66468304122024Copyright ©; 2024, Ovagimian N.A., Kiose M.I.Copyright ©; 2024, Овагимян Н.А., Киосе М.И.2024Ovagimian N.A., Kiose M.I.Овагимян Н.А., Киосе М.И.https://creativecommons.org/licenses/by-nc/4.0https://journals.rudn.ru/semiotics-semantics/article/view/41806

Information construal in cinematic discourse employs different semiotic modes; meanwhile, their variance is yet to be explored. The study is aimed at exploring spatial event construal in the language and image modes of science documentaries. We hypothesise that three major event types - environmental events, human-environment interaction events and interpersonal interaction events - employ different spatial construal patterns in language and image, which results from mode allowances and constraints. To verify the hypothesis, we use spatial image schema topology while identifying the image schemas in the lexical and grammatical structure of language and in the layout of the objects, the manner of their movement and interaction in image. The research data include 353 events in single clauses and in shots extracted from two English-language science documentaries. The results show the prevalence of the source-path-goal schema in both semiotic modes, which consequently prevents it from differentiating between event types both within and across the modes. The schemas scale, straight, and near-far display a tendency to differentiate between events; however, no significant distinctions were observed, presumably due to the ontological nature of events as well as the semiotic characteristics of the modes. Additionally, the study reveals that spatial construal of events can follow parallel alignment, commonly with the schemas source-path-goal, contact, near-far, and complementary alignment with the schemas centre-periphery, scale, up-down, front-back, straight, left-right, which reflects a complex nature of inter-semiotic relations in cinematic discourse. The findings of the article contribute to the understanding of event construal in the multimodal discourse of science documentaries.

Конструирование информации в кинодискурсе происходит с участием разных семиотических модальностей, при этом особенности их варьирования изучены слабо. Исследование направлено на изучение особенностей представления событий в терминах пространства в языковой и визуальной модальностях научно-популярных документальных фильмов. Гипотеза исследования заключается в том, что три основные типа события - окружающей среды, взаимодействия человека и окружающей среды, взаимодействия людей между собой - задействуют разные возможности конструирования пространства в языке и изображении, что обусловлено возможностями и ограничениями модальностей. Для проверки гипотезы используется метод анализа образ-схем пространственных отношений, которые определяются в лексической и грамматической семантике языка и в расположении, движении и взаимодействии объектов в изображении. Материалом анализа являются 353 события, соотнесенные с клаузами в языке и с кадрами в изображении в двух англоязычных научно-популярных фильмах. Было установлено, что образ-схема ИСТОЧНИК-ПУТЬЦЕЛЬ превалирует в обоих модусах, что не дает ей возможности значимо различать типы событий внутри и между модусами. Схемы ШКАЛА, ПРЯМО, БЛИЖЕ-ДАЛЬШЕ демонстрируют некоторые тенденции в разграничении типов событий, однако значимые различия не были обнаружены, что определенно обусловлено онтологической природой интерпретируемых событий, как и семиотическими характеристиками самих модусов. Также выявлено, что конструирование пространственных отношений в событиях языка и изображения может происходить параллельно (с использованием образ-схем ИСТОЧНИК-ПУТЬ-ЦЕЛЬ, КОНТАКТ, БЛИЖЕ-ДАЛЬШЕ) и комплементарно (с использованием образ-схем ЦЕНТРПЕРИФЕРИЯ, ШКАЛА, ВЕРХ-НИЗ, СПЕРЕДИ-ПОЗАДИ, ПРЯМО, СЛЕВА-СПРАВА), что отражает сложную природу межсемиотических связей в кинодискурсе. Выводы статьи способствуют более глубокому пониманию конструирования событий в мультимодальном дискурсе научно-документальных фильмов.

multimodalitysemiotic modeimage schemaspatial relations construalpopular science cinematic discourseeventdocumentary filmмультимодальностьсемиотическая модальностьязыкизображениеобраз-схемаконструирование пространственных отношенийнаучно-популярный кинодискурсдокументальный фильмLemke, J. (1998). Multiplying meaning: Visual and verbal semiotics in scientific text. In: Martin J.R., Veel R. (Eds.), Reading science: Critical and functional perspectives on discourses of science. London: Routledge. pp. 87-114.Bezemer, J. & Kress, G. (2008). Writing in multimodal texts: A social semiotic account of designs for learning. Written Communication, 25(2), 166-195. https://doi.org/10.1177/0741088307313177Liu, Y. & O’Halloran, K.L. (2009). Intersemiotic texture: Analyzing cohesive devices between language and images. Social Semiotics, 19(4), 367-388. https://doi.org/10.1080/10350330903361059Forceville, C. & Jeulink, M. (2011). The flesh and blood of embodied understanding: The source-path-goal schema in animation film. Pragmatics & Cognition, 19(1), 37-59. https://doi.org/10.1075/pc.19.1.02forForceville, C.J. (2017). From image schema to metaphor in discourse: The force schemas in animation films. In: Hampe B. (Ed.) Metaphor: Embodied Cognition and Discourse. Cambridge: Cambridge University Press. pp. 239-256. https://doi.org/10.1017/9781108182324.014Coëgnaerts, M. & Kravanja, P. (2012). The visual and multimodal representation of time in film, or: How time is metaphorically shaped in space. Image and narrative online magazine of the visual narrative, 13(3), 85-100.Lou, A. (2017). Viewpoint and image schemas in multimodal political discourse. Journal of Pragmatics, 122, 77-90. https://doi.org/10.1016/j.pragma.2017.07.002Khan, S. & Siddiqui, B. (2023). Space Image Schema in multimodal representation of Afghan migrants living in Pakistan: a cognitive linguistics approach to multimodal discourse analysis. Journal of Positive School Psychology, 7(4), 1920-1948.Kiose, M.I. (2023). Image schemas as an instrument of multimodal research. Germanistika-2022: nove et nova. Materials of the V International Scientific Conference, Moscow, 07-09 December 2022, A.A. Klinovskaya (Ed.) [et al.]. Moscow: Moscow State Linguistic University. pp. 136-140. (In Russ.).Киосе М.И. Теории образ-схем как инструмент полимодальных исследований // Германистика-2022: nove et nova: материалы V Международной научной конференции, Москва, 07-09 декабря 2022 года / редколл.: А.А. Клиновская [и др.]. М.: Московский государственный лингвистический университет, 2023. С. 136-140.Deane, P.D. (2005). Multimodal spatial representation: On the semantic unity of over. From perception to meaning: Image schemas in cognitive linguistics, 29, 235-282. https://doi.org/10.1515/9783110197532.3.235Unsworth, L. & Cléirigh, C. (2014). Multimodality and reading: The construction of meaning through image-text interaction. London: Routledge.Gibbs, R. & Colston, H. (1995). The cognitive psychological reality of image schemas and their transformations. Cognitive Linguistics, 6(4), 347-378. https://doi.org/10.1515/cogl.1995.6.4.347Mandler, J.M. & Cánovas, C.P. (2014). On defining image schemas. Language and Cognition, 6(4), 510-532. https://doi.org/10.1017/langcog.2014.14Royce, T. (1998). Synergy on the page: Exploring intersemiotic complementarity in pagebased multimodal text. JASFL Occasional papers, 1(1), 25-49.Johnson, M. (1987). The body in the mind: The bodily basis of meaning, imagination, and reason. Chicago: University of Chicago Press. https://doi.org/10.7208/chicago/9780226177847.001.0001Sweetser, E. (1990). From etymology to pragmatics: metaphorical and cultural aspects of semantic structure. New York: Cambridge University Press. https://doi.org/10.1017/cbo9780511620904Ioannou, G. (2020). Image schemas as prototypes in the diachronic evolution of kámnō and eutheiázō in Greek: A behavioural-profile analysis. Lingua, 245(4), 102938. https://doi.org/10.1016/j.lingua.2020.102938Langacker, R. (1987). Foundations of cognitive grammar: Volume I: Theoretical prerequisites. Stanford: Stanford University Press.Langacker, R. (1991). Concept, Image, and Symbol: The Cognitive Basis of Grammar. Berlin; New York: Mouton de Gruyter.Brugman, C. & Lakoff, G. (1988). Cognitive Topology and Lexical Networks. Lexical Ambiguity Resolution, 477-508. https://doi.org/10.1016/b978-0-08-051013-2.50022-7Vandeloise, C. (1991). Spatial prepositions: A case study from French. Chicago: University of Chicago Press.Talmy, L. (2005). The fundamental system of spatial schemas in language. From perception to meaning: Image schemas in cognitive linguistics, 29, 199-234. https://doi. org/10.1515/9783110197532.3.199Jackendoff, R. (1996). The architecture of the linguistic-spatial interface. In: P. Bloom, M.A. Peterson, L. Nadel & M.F. Garrett (Eds.), Language and Space. Mass.: The MIT Press. pp. 1-30. https://doi.org/10.7551/mitpress/4107.003.0003Levinson, S.C. (1996). Frames of References and Molyneux’s Question: Crosslinguistic Evidence. In: P. Bloom, M.A. Peterson, L. Nadel & M.F. Garrett (Eds.), Language and Space. Mass.: The MIT Press. pp. 109-170. https://doi.org/10.7551/mitpress/4107.003.0006Cienki, A. (1997). Some properties and groupings of image schemas. Lexical and syntactical constructions and the construction of meaning, 3-15. https://doi.org/10.1075/ cilt.150.04cieTalmy, L. (2000). Toward a cognitive semantics. Vol. II: Typology and process in concept structuring. Mass.: The MIT Press.Clausner, T.C. & Croft, W. (1999). Domains and image schemas. Cognitive Linguistics, 10(1), 1-31. https://doi.org/10.1515/cogl.1999.001Cienki, A. (1998). STRAIGHT: An image schema and its metaphorical extensions. Cognitive Linguistics, 9(2), 107-150. https://doi.org/10.1515/cogl.1998.9.2.107Evans, V. (2007). Glossary of cognitive linguistics. Edinburgh: Edinburgh University Press.Hurtienne, J. & Blessing, L. (2007). Design for Intuitive Use-Testing image schema theory for user interface design. In: Proceedings of ICED 2007, the 16th International Conference on Engineering Design, Paris, France, 28-31.07. 2007. Paris. pp. 829-830.Zykova, I.V. (Ed.). (2021). Linguistic creativity in different discourse types: Limitations and allowances. Moscow: R. Valent. Зыкова И.В. (ред.) Лингвокреативность в дискурсах разных типов: Пределы и возможности. М.: Р-Валент, 2021.Kiose, M.I. (2022). Event Construal in Text and Image. Gaze Behavior and Discourse Interpretations. RUDN Journal of Language Studies, Semiotics and Semantics, 13(2), 396-415. https://doi.org/10.22363/2313-2299-2022-13-2-396-415Maksimenko, O.I. & Podlegaeva, E.P. (2023). Animated videoverbal text: problems of translation and interpretation. Moscow: Nauka. (In Russ.).Максименко О.И., Подлегаева Е.П. Анимационный видеовербальный текст: проблемы перевода и интерпретации. М.: Наука, 2023.Halliday, M. & Matthiessen, C. (2004). An Introduction to Functional Grammar (3rd ed.). London: Routledge. https://doi.org/10.4324/9780203783771Martinec, R. & Salway, A. (2005). A system for image-text relations in new (and old) media. Visual communication, 4(3), 337-371. https://doi.org/10.1177/1470357205055928Kiose, M.I. (2021). Secrets of interpretation of text and image. Construal and oculographic experiment. Moscow: R.Valent. (In Russ.).Киосе М.И. Секреты интерпретации текста и изображения. Конструирование и окулографический эксперимент. М.: Р-Валент, 2021.Kiose, М.I. & Efremov, А.А. (2020). HETEROSTAT. Software for Comprehensive Parametrical Discourse Analysis. Registration Date: 21.09.2020. Registration Number: 2020661240. 2020.