Люди общаются между собой, используя слова, интонацию, жесты, мимику, движения глаз. Все эти коммуникативные каналы используются одновременно и в связке. Поэтому обычная человеческая коммуникация является мультиканальным процессом. Мы погружены в эту коммуникацию в течение всей жизни, и тем не менее она остается малоисследованным явлением. Этому есть по крайней мере две причины. Во-первых, процесс мультиканальной коммуникации эфемерен и протекает, не оставляя материальных следов. Во-вторых, содержание разных коммуникативных каналов традиционно относится к ведению разных наук, слабо связанных между собой. Так, вербальный компонент исследуется лингвистами, а жесты и движения глаз, прежде всего, психологами. Исследовательская группа, базирующаяся в Институте языкознания РАН, поставила своей задачей комплексное изучение мультиканального дискурса на основе единого теоретического и методологического подхода. В настоящее время (конец 2018 года) в рамках этого подхода сформирован ресурс «Рассказы и разговоры о грушах», включающий серию записей естественной коммуникации между несколькими участниками, в совокупности с вокальной и кинетической аннотацией этих записей. Записи были выполнены при помощи оригинальных технических решений, включающих высококачественную аудиозапись и видеозапись, а также регистрацию движений глаз. Используемая нами вокальная аннотация следует принципам, ранее разработанным для устной речи, см. spokencorpora.ru. Для целей данного проекта были выработаны принципы аннотации кинетического поведения. С результатами исследований на основе корпуса «Рассказы и разговоры о грушаx» можно ознакомиться в наших публикациях и докладах. Связаться с нашей командой и задать вопросы о проекте и корпусе можно по адресу.