И все же в подавляющем большинстве жанров и актов устной коммуникации телесный код и другие невербальные знаковые системы тесно взаимодействуют с речью и языком, так что коммуникация людей без участия соматических знаков часто выглядит либо странной, либо неполноценной. Отсюда следует, что полное описание того, как протекает устная коммуникация, невозможно без анализа механизмов, моделей, способов и инструментов взаимодействия естественного языка и соответствующего ему языка тела[5].
Проблема описания взаимодействия естественного языка и других знаковых кодов, в частности языка тела, получила в лингвистической и семиотической литературе название проблемы мультимодальности[6]. А сравнительно недавно лингвисты и специалисты в области невербальной семиотики заговорили о мультимодальной лингвистике как об отдельной науке, изучающей мультимодальную коммуникацию[7].
Задача описать то, как в коммуникативных актах невербальные семиотические коды взаимодействуют с естественным языком и друг с другом, становится еще более актуальной и важной, когда мы обращаемся к межъязыковой и межкультурной коммуникации людей. В этом случае приходится учитывать различие не только естественных языков, но также телесных и других знаковых кодов. Так, для правильного перевода на английский язык фразы Она сидела на корточках надо знать, что сочетание сидеть на корточках в английском языке обычно передается одним словом — глаголом to squat. А если мы захотим перевести на японский язык такой простой диалог, как — У тебя все хорошо? — Она ответила ему жестом «ОК», то столкнемся с более серьезными трудностями. Дело в том, что одним переводом слов и грамматических конструкций естественного языка, как в первом примере, нам здесь не обойтись. Нужно еще знать, что в традиционной японской культуре жест, имеющий форму кольца, образованного большим и указательным пальцами руки, сходную с формой жеста «ОК», имеет совсем другой смысл, а именно он означает ‘деньги (разговор о деньгах) в ситуации купли-продажи’ (цит. по (Крейдлин 2002, 135–136)).
Подводя промежуточный итог, отметим, что все коммуникативные акты, встречающиеся в живом потоке устной речи, и все высказывания в этих актах можно разделить на три класса.
В первый класс попадают те акты и высказывания, в которых используется только естественный язык (их, как мы говорили выше, не так уж много). Во второй класс, и таких актов и высказываний большинство, попадают те, в которых используются сразу оба кода — языковой и невербальный телесный код (а возможно, и какие-то другие знаковые коды). Наконец, в третий класс входят высказывания, которые целиком основываются на телесном коде. Такие высказывания иногда называют жестовыми сообщениями, а сами акты — жестовыми актами (часто, характеризуя высказывание, вместо прилагательного жестовый используется прилагательное невербальный).
Если посмотреть на это деление с другой стороны, так сказать со стороны телесного кода, то можно выделить три группы невербальных телесных знаков[8].
Первую группу образуют эмблематические жестовые знаки, или эмблемы. Это телесные знаки, которые могут замещать языковые элементы в устном коммуникативном акте без изменения смысла исходного высказывания.
Многие эмблемы объединяются в разного рода смысловые классы, причем у разных культур есть свои «любимые», то есть самые популярные, классы эмблем. Так, у русской культуры «любимым» является класс жестов, имеющих общий смысл ‘прерывание контакта человека с миром’. К этому классу относятся жесты закрыть лицо руками, закрыть глаза рукой, заткнуть уши, прикрыть рот рукой, отвернуться и некоторые другие. Кроме того, в русском языке тела широко представлены жесты класса ‘приглашение к выпивке’. Это, в частности, жесты «штопор», «стаканчик», пощелкать по горлу (в английской терминологии cork gesture[9]). Для японской культуры чрезвычайно многочисленным является класс жестов-поклонов, демонстрирующих разные степени уважения к человеку или почтительного отношения к какому-то сакральному объекту. Этот класс жестов настолько социально важен, что ему специально обучают в школах и разного рода учреждениях; например, ему обучают продавцов крупных магазинов, работников банков и ряда других организаций. Совокупность правил японской культуры и японского языка тела, содержащих информацию о том, кто, кому и в каких ситуациях должен кланяться первым и как кланяться в ответ, — это целая наука.
5
См. появившиеся в последнее время многочисленные работы, посвященные механизмам и правилам взаимодействия вербальных и невербальных кодов в диалогическом общении. Эти работы ведутся по разным направлениям. Помимо исследований общего характера, выделим физиологические, психологические, социологические и компьютерные разработки. Из публикаций лингвосемиотического направления особо отметим книги и статьи (McNeil 1992; Kendon 2004; Cienki, Müller 2008; Федорова, Кибрик 2014).
6
Термины модальность и мультимодальность используются в этом и похожих контекстах не в лингвистическом, а в психологическом смысле, то есть как обозначения отдельного канала или нескольких каналов восприятия. Так, говорят о зрительной (визуальной) модальности, слуховой (аудиальной) модальности, тактильной модальности и др.
7
Сегодня многие исследователи, отмечая значительные сходства жестов и естественно-языковых единиц, даже рассматривают жесты и язык как часть единого знакового кода, см., например, работы (Kendon 1994; McNeil 1992; McNeil, Duncan 2000). В чаcтности, Надия Хамруни (Nadia Hamrouni) в своей рецензии (Hamrouni 2014, 137) на сборник работ «Gesture and Multimodal Development» («Жест и мультимодальная коммуникация»), вышедший в 2012 году (см. (Colletta 2012)), пишет: «Все больше исследователей подчеркивают, что жесты не следует рассматривать как „паралингвистическое дополнение“ к <естественному> языку, напротив, в совокупности с языком они формируют единую систему коммуникации» (здесь и далее перевод наш. — Авторы).
9
Английская народная этимология связывает название жеста со звуком вылетающей из бутылки пробки.