Федеральное государственное бюджетное учреждение науки
«Санкт-Петербургский Федеральный исследовательский центр
Российской академии наук»

Лаборатория речевых и многомодальных интерфейсов

Публикации

OCEAN-AI framework with EmoFormer cross-hemiface attention approach for personality traits assessment

Авторы: Ryumina Elena, Markitantov Maxim, Ryumin Dmitry, Karpov Alexey

Expert Systems with Applications 239

Год публикации: 2024

DOI: 10.1016/j.eswa.2023.122441

Перейти к публикации

Аналитический обзор методов автоматического анализа экстралингвистических компонентов спонтанной речи

Авторы: Povolotskaia Anastasiia, Karpov Alexey

Informatics and Automation / Информатика и автоматизация 23

Год публикации: 2024

DOI: 10.15622/ia.23.1.1

Перейти к публикации

Remote Heart Rate Estimation Based on Transformer with Multi-Skip Connection Decoder: Method and Evaluation in the Wild

Авторы: Othman Walaa, Kashevnik Alexey, Ali Ammar, Shilov Nikolay, Ryumin Dmitry

Sensors 24

Год публикации: 2024

DOI: 10.3390/s24030775

Перейти к публикации

End-to-End Visual Speech Recognition for Human-Robot Interaction

Авторы: Ivanko D., Ryumin D., Markitantov M.

Год публикации: 2024

DOI: 10.1063/5.0197720

Перейти к публикации

Gated Siamese Fusion Network based on multimodal deep and hand-crafted features for personality traits assessment

Авторы: Ryumina Elena, Markitantov Maxim, Ryumin Dmitry, Karpov Alexey

Pattern Recognition Letters 185

Год публикации: 2024

DOI: 10.1016/j.patrec.2024.07.004

Перейти к публикации

A Survey of Masked Face Recognition Methods and Corpora/Data

Авторы: Kosulin Kirill, Karpov Alexey

Springer Geography

Год публикации: 2024

DOI: 10.1007/978-3-031-50609-3_3

Перейти к публикации

Применение телеконсультаций для оценки личностного адаптационного потенциала и выявления показаний к оказанию квалифицированной психологической помощи работникам в удаленных регионах РФ

Авторы: Бубеев Ю.А., Сыркин Л.Д., Поляков А.В., Усов В.М., Карпов А.А., Иванов А.В.

Авиакосмическая и экологическая медицина 58

Год публикации: 2024

DOI: 10.21687/0233-528X-2024-58-1-5-16

Перейти к публикации

A Method for Recognition of Sentiment and Emotions in Russian Speech Transcripts Using Machine Translation

Авторы: Dvoynikova Anastasia, Kagirov Ildar, Karpov Alexey

Informatics and Automation / Информатика и автоматизация 23

Год публикации: 2024

DOI: 10.15622/ia.23.4.9

Перейти к публикации

Multi-modal Arousal and Valence Estimation under Noisy Conditions

Авторы: Dresvyanskiy Denis, Markitantov Maxim, Yu Jiawei, Kaya Heysem, Karpov Alexey

2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition Workshops (CVPRW) 33

Год публикации: 2024

DOI: 10.1109/CVPRW63382.2024.00480

Перейти к публикации

Подход к распознаванию депрессии по речи человека с использованием полуавтоматической разметки данных

Авторы: Величко А.Н., Карпов А.А.

Информационно-управляющие системы 4

Год публикации: 2024

DOI: 10.31799/1684-8853-2024-4-2-11

Перейти к публикации

Audio–visual speech recognition based on regulated transformer and spatio–temporal fusion strategy for driver assistive systems

Авторы: Ryumin Dmitry, Axyonov Alexandr, Ryumina Elena, Ivanko Denis, Kashevnik Alexey, Karpov Alexey

Expert Systems with Applications 252

Год публикации: 2024

DOI: 10.1016/j.eswa.2024.124159

Перейти к публикации

Создание и анализ многомодального корпуса данных для автоматического распознавания агрессивного поведения людей

Авторы: Уздяев М.Ю., Карпов

Научно-технический вестник информационных технологий, механики и оптики 24, 5

Год публикации: 2024

DOI: 10.17586/2226-1494-2024-24-5-834-842

Перейти к публикации

Audio-Visual Speech and Gesture Recognition by Sensors of Mobile Devices

Авторы: Ryumin Dmitry, Ivanko Denis, Ryumina Elena

Sensors 23

Год публикации: 2023

DOI: 10.3390/s23042284

Перейти к публикации

A Review of Recent Advances on Deep Learning Methods for Audio-Visual Speech Recognition

Авторы: Ivanko Denis, Ryumin Dmitry, Karpov Alexey

Mathematics 11

Год публикации: 2023

DOI: 10.3390/math11122665

Перейти к публикации

Impact of Visual Modalities in Multimodal Personality and Affective Computing

Авторы: Ryumina E. V., Karpov A. A.

The International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences XLVIII-2/W3-2023

Год публикации: 2023

DOI: 10.5194/isprs-archives-XLVIII-2-W3-2023-217-2023

Перейти к публикации

Improved Automatic Lip-Reading Based on the Evaluation of Intensity Level of Speaker’s Emotion

Авторы: Ivanko D., Ryumina E., Ryumin D.

The International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences XLVIII-2/W3-2023

Год публикации: 2023

DOI: 10.5194/isprs-archives-XLVIII-2-W3-2023-89-2023

Перейти к публикации

CROSS-LANGUAGE TRANSFER LEARNING USING VISUAL INFORMATION FOR AUTOMATIC SIGN GESTURE RECOGNITION

Авторы: Ryumin D., Ivanko D., Axyonov A.

The International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences XLVIII-2/W3-2023

Год публикации: 2023

DOI: 10.5194/isprs-archives-XLVIII-2-W3-2023-209-2023

Перейти к публикации

Подготовка речевых и текстовых данных для создания системы автоматического распознавания карельской речи

Авторы: Кипяткова И. С., Родионова А. П., Кагиров И. А., Крижановский А. А.

Учёные записки Петрозаводского государственного университета / Proceedings of Petrozavodsk State University 45

Год публикации: 2023

DOI: 10.15393/uchz.art.2023.924

Перейти к публикации

Multimodal Personality Traits Assessment (MuPTA) Corpus: The Impact of Spontaneous and Read Speech

Авторы: Ryumina Elena, Ryumin Dmitry, Markitantov Maxim, Kaya Heysem, Karpov Alexey

INTERSPEECH 2023

Год публикации: 2023

DOI: 10.21437/Interspeech.2023-1686

Перейти к публикации

Multi-Corpus Learning for Audio–Visual Emotions and Sentiment Recognition

Авторы: Ryumina Elena, Markitantov Maxim, Karpov Alexey

Mathematics 11

Год публикации: 2023

DOI: 10.3390/math11163519

Перейти к публикации

Neural network-based method for visual recognition of driver's voice commands using attention mechanism

Авторы: Axyonov A.A., Ryumina E.V., Ryumin D.A., Ivanko D.V., Karpov A.A.

Scientific and Technical Journal of Information Technologies, Mechanics and Optics 23

Год публикации: 2023

DOI: 10.17586/2226-1494-2023-23-4-767-775

Перейти к публикации

Bimodal sentiment and emotion classification with multi-head attention fusion of acoustic and linguistic information

Авторы: Dvoynikova A., Karpov A.

Computational Linguistics and Intellectual Technologies 22

Год публикации: 2023

DOI: 10.28995/2075-7182-2023-22-51-61

Перейти к публикации

Intelligent Interfaces and Systems for Human-Computer Interaction

Авторы: Karpov Alexey, Dvoynikova Anastasia, Ryumina Elena

Proceedings of the Seventh International Scientific Conference “Intelligent Information Technologies for Industry” (IITI’23) / Lecture Notes in Networks and Systems

Год публикации: 2023

DOI: 10.1007/978-3-031-43789-2_1

Перейти к публикации

Методика и программная система интегрального анализа деструктивных паралингвистических явлений в разговорной речи

Авторы: Величко А. Н., Карпов А. А.

Информационно-управляющие системы 4

Год публикации: 2023

DOI: 10.31799/684-8853-2023-4-2-11

Перейти к публикации

Подход к автоматическому распознаванию эмоций в транскрипциях речи

Авторы: Двойникова А. А., Кондратенко К. О.

Изв. вузов. Приборостроение Т. 66, № 10

Год публикации: 2023

DOI: 10.17586/0021-3454-2023-66-10-818-827

Перейти к публикации

Deep Models for Low-Resourced Speech Recognition: Livvi-Karelian Case

Авторы: Kipyatkova Irina, Kagirov Ildar

Mathematics 11

Год публикации: 2023

DOI: 10.3390/math11183814

Перейти к публикации

Система автоматического распознавания карельской речи

Авторы: Кипяткова И.С., Кагиров И.А.

Информационно-управляющие системы 3

Год публикации: 2023

DOI: 10.31799/684-8853-2023-3-16-25

Перейти к публикации

EMO-AVSR: Two-Level Approach for Audio-Visual Emotional Speech Recognition

Авторы: Ivanko Denis, Ryumina Elena, Ryumin Dmitry, Axyonov Alexandr, Kashevnik Alexey, Karpov Alexey

Speech and Computer

Год публикации: 2023

DOI: 10.1007/978-3-031-48309-7_2

Перейти к публикации

EMOLIPS: Towards Reliable Emotional Speech Lip-Reading

Авторы: Ryumin Dmitry, Ryumina Elena, Ivanko Denis

Mathematics 11

Год публикации: 2023

DOI: 10.3390/math11234787

Перейти к публикации

Запись и апробация набора речевых данных для распознавания негативных эмоций в речи

Авторы: Поволоцкая А.А., Евдокимова В.В., Скрелин П.А.

TERRA LINGUISTICA 14, 2

Год публикации: 2023

DOI: 10.18721/JHSS.14206

Современные проблемы автоматического распознавания речи: выявление и анализ экстралингвистических вокализаций в спонтанной разговорной речи

Авторы: Поволоцкая А.А., Карпов А.А.

Анализ разговорной русской речи (АР3-2023) Труды десятого междисциплинарного семинара. Санкт-Петербург, 2023 Издательство: ООО "Скифия-принт" (Санкт-Петербург)

Год публикации: 2023

DOI:

Phone Durations Modeling for Livvi-Karelian ASR

Авторы: Kipyatkova Irina, Kagirov Ildar

Speech and Computer / Lecture Notes in Computer Science LNAI 14339

Год публикации: 2023

DOI: 10.1007/978-3-031-48312-7_7

Перейти к публикации

База данных аннотаций речевых записей на карельском языке (AnKaS – Database of Annotations of Karelian Speech Recordings)

Авторы: Кипяткова И. С., Родионова А. П., Кагиров И. А., Крижановский А. А.

Год публикации: 2023

DOI:

Перейти к публикации

Программное обеспечение для распознавания уровня вовлеченности и характеристик эмоций участников телеконференции (Recognizing the Engagement Level and Emotions Characteristics of the Teleconference participants - RELECT)

Авторы: Двойникова Анастасия Александровна, Маркитантов Максим Викторович, Аксёнов Александр Александрович, Карпов Алексей Анатольевич

Год публикации: 2023

DOI:

Перейти к публикации

Автоматическое распознавание эмоционально окрашенной речи по видеоинформации

Авторы: Рюмина Елена

Альманах научных работ молодых ученых Университета ИТМО 1

Год публикации: 2023

DOI:

Перейти к публикации

Аналитический обзор многомодальных корпусов данных для распознавания эмоций

Авторы: Двойникова А.А.

Альманах научных работ молодых ученых Университета ИТМО. 1

Год публикации: 2023

DOI:

Перейти к публикации

Анализ вовлеченности и эмоций собеседников виртуальной коммуникации

Авторы: Двойникова А.А.

Сборник трудов XII Конгресса молодых учёных 2

Год публикации: 2023

DOI:

Перейти к публикации

Мобильная система автоматического распознавания аудиовизуальной речи водителя (DAVIS – Driver’s Audio-Visual Speech Recognition)

Авторы: Иванько Денис Викторович, Рюмин Дмитрий Александрович, Аксёнов Александр Александрович, Карпов Алексей Анатольевич, Кашевник Алексей Михайлович

Год публикации: 2023

DOI:

Перейти к публикации

Ассистивная мобильная система аудиовизуального человеко-машинного взаимодействия для обеспечения безопасного вождения (MIDriveSafely – Multimodal Interaction for Drive Safely)

Авторы: Иванько Денис Викторович, Рюмин Дмитрий Александрович, Аксёнов Александр Александрович, Карпов Алексей Анатольевич, Кашевник Алексей Михайлович

Год публикации: 2023

DOI:

Перейти к публикации

Системы регистрации жестовой информации и их применение в авиакосмических исследованиях

Авторы: Кагиров И.А.

Авиакосмическое приборостроение 3

Год публикации: 2023

DOI: 10.25791/aviakosmos.10.2023.1369

Перейти к публикации

Современные проблемы автоматического распознавания речи: анализ экстралингвистических явлений

Авторы: Поволоцкая А.А.

Всероссийская школа Национального центра физики и математики по искусственному интеллекту и большим данным в технических, промышленных, природных и социальных системах для студентов, аспирантов, молодых ученых и специалистов. Тезисы.

Год публикации: 2023

DOI:

Перейти к публикации

Способ аудиовизуального распознавания средств индивидуальной защиты на лице человека

Авторы: Рюмина Елена Витальевна, Маркитантов Максим Викторович, Рюмин Дмитрий Александрович, Карпов Алексей Анатольевич

Год публикации: 2023

DOI:

Перейти к публикации

Способ генерации цветных защитных масок на изображениях лиц людей

Авторы: Кухарев Георгий Александрович, Рюмина Елена Витальевна, Маркитантов Максим Викторович, Рюмин Дмитрий Александрович, Карпов Алексей Анатольевич

Год публикации: 2023

DOI:

Перейти к публикации

Корпус для мультимодального оценивания персональных качеств личности человека (MuPTA - Multimodal Personality Traits Assessment Corpus)

Авторы: Рюмина Елена Витальевна, Маркитантов Максим Викторович, Рюмин Дмитрий Александрович, Карпов Алексей Анатольевич

Год публикации: 2023

DOI:

Перейти к публикации

Программный комплекс для аудиовизуального распознавания эмоций и сентимента (Audio-Visual Emotions and Sentiment Recognition - AVESR)

Авторы: Маркитантов Максим Викторович, Рюмина Елена Витальевна, Карпов Алексей Анатольевич

Год публикации: 2023

DOI:

Перейти к публикации

Системы детектирования утомления при моделировании операторской деятельности космонавтов

Авторы: А.М. Кашевник, А.А. Карпов, Ю.А. Бубеев, В.М. Усов, А.В. Иванов

Пилотируемые полеты в космос 4(49)

Год публикации: 2023

DOI:

Перейти к публикации

End-to-End Modeling and Transfer Learning for Audiovisual Emotion Recognition in-the-Wild

Авторы: Dresvyanskiy Denis, Ryumina Elena, Kaya Heysem, Markitantov Maxim, Karpov Alexey, Minker Wolfgang

Multimodal Technologies and Interaction 6

Год публикации: 2022

DOI: 10.3390/mti6020011

Перейти к публикации

Method for Generating Synthetic Images of Masked Human Faces

Авторы: Letenkov M.A., Iakovlev R.N., Markitantov M.V., Ryumin D.A., Saveliev A.I., Karpov A.A.

Научная визуализация том 14, номер 2

Год публикации: 2022

DOI: 10.26583/sv.14.2.01

Перейти к публикации

A method of multimodal machine sign language translation for natural human-computer interaction

Авторы: Аксёнов А.А,, Кагиров И.А., Рюмин Д.А.

Scientific and Technical Journal of Information Technologies, Mechanics and Optics 22, 3

Год публикации: 2022

DOI: 10.17586/2226-1494-2022-22-3-585-593

Перейти к публикации

Методы аудиовизуального распознавания людей в масках

Авторы: Косулин К.Э., Карпов А.А.

Научно-технический вестник информационных технологий, механики и оптики Т. 22, № 3

Год публикации: 2022

DOI: 10.17586/2226-1494-2022-22-3-415-432

Перейти к публикации

Method for generating masks on face images and systems for their recognition

Авторы: Kukharev G.A., Ryumina E.V., Shulgin N.A.

Scientific and Technical Journal of Information Technologies, Mechanics and Optics 22

Год публикации: 2022

DOI: 10.17586/2226-1494-2022-22-3-547-558

Перейти к публикации

Метод генерации обучающих данных для компьютерной системы обнаружения защитных масок на лицах людей

Авторы: Рюмина Е.В., Рюмин Д.А., Маркитантов М.В., Карпов А.А.

Компьютерная оптика 46

Год публикации: 2022

DOI: 10.18287/2412-6179-CO-1039

Перейти к публикации

АНАЛИТИЧЕСКИЙ ОБЗОР КОРПУСОВ ДЛЯ АВТОМАТИЧЕСКОГО ОЦЕНИВАНИЯ ПСИХОФИЗИЧЕСКИХ СОСТОЯНИЙ ЧЕЛОВЕКА

Авторы: Рюмина Елена

Альманах научных работ молодых ученых Университета ИТМО 2

Год публикации: 2022

DOI:

Перейти к публикации

Обзор мультимодальных корпусов для исследования влияния эмоционального состояния диктора на автоматическое распознавание фраз по губам

Авторы: Рюмина Е., Иванько Д.

Альманах научных работ молодых ученых Университета ИТМО 2

Год публикации: 2022

DOI:

Перейти к публикации

Visual Speech Recognition in a Driver Assistance System

Авторы: Ivanko D., Ryumin D., Kashevnik A., Axyonov A., Karpov A.

EUSIPCO 2022: 30th European Signal Processing Conference

Год публикации: 2022

DOI:

Перейти к публикации

DAVIS: Driver’s Audio-Visual Speech recognition

Авторы: Ivanko D., Ryumin D., Kashevnik A., Axyonov A., Kitenko A., Lashkov I., Karpov A.

Interspeech

Год публикации: 2022

DOI:

Перейти к публикации

Применение методов синтеза обучающих данных для распознавания частично скрытых лиц на изображениях

Авторы: Летенков М. А., Яковлев Р. Н., Маркитантов М. В., Рюмин Д. А., Карпов А. А.

Известия ВУЗов. Приборостроение 65, 11

Год публикации: 2022

DOI:

Перейти к публикации

In search of a robust facial expressions recognition model: A large-scale visual cross-corpus study

Авторы: Ryumina Elena, Dresvyanskiy Denis, Karpov Alexey

Neurocomputing 514

Год публикации: 2022

DOI: 10.1016/j.neucom.2022.10.013

Перейти к публикации

Biometric Russian Audio-Visual Extended MASKS (BRAVE-MASKS) Corpus: Multimodal Mask Type Recognition Task

Авторы: Markitantov Maxim, Ryumina Elena, Ryumin Dmitry, Karpov Alexey

Interspeech 2022

Год публикации: 2022

DOI: 10.21437/Interspeech.2022-10240

Перейти к публикации

Complex Paralinguistic Analysis of Speech: Predicting Gender, Emotions and Deception in a Hierarchical Framework

Авторы: Velichko Alena, Markitantov Maxim, Kaya Heysem, Karpov Alexey

Interspeech

Год публикации: 2022

DOI: 10.21437/Interspeech.2022-11294

Перейти к публикации

Analytical Review of Methods for Solving Data Scarcity Issues Regarding Elaboration of Automatic Speech Recognition Systems for Low-Resource Languages

Авторы: Kipyatkova Irina, Kagirov Ildar

Informatics and Automation 21

Год публикации: 2022

DOI: 10.15622/ia.21.4.2

Перейти к публикации

Russian Sign Language Database for Clinical Use: Data and Annotation Peculiarities

Авторы: Kagirov I. A., Ryumin D. A.

NSU Vestnik. Series: Linguistics and Intercultural Communication 20

Год публикации: 2022

DOI: 10.25205/1818-7935-2022-20-3-90-108

Перейти к публикации

Аналитический обзор методов автоматического распознавания вовлеченности пользователя в виртуальную коммуникацию

Авторы: А.А. Двойникова, И.А. Кагиров, А.А. Карпов

Информационно-управляющие системы 5 (120)

Год публикации: 2022

DOI: 10.31799/1684-8853-2022-5-12-22

Перейти к публикации

Emotional Speech Recognition Based on Lip-Reading

Авторы: Ryumina Elena, Ivanko Denis

Speech and Computer

Год публикации: 2022

DOI: 10.1007/978-3-031-20980-2_52

Перейти к публикации

MIDriveSafely: Multimodal Interaction for Drive Safely

Авторы: Ivanko Denis, Kashevnik Alexey, Ryumin Dmitry, Kitenko Andrey, Axyonov Alexandr, Lashkov Igor, Karpov Alexey

INTERNATIONAL CONFERENCE ON MULTIMODAL INTERACTION

Год публикации: 2022

DOI: 10.1145/3536221.3557037

Перейти к публикации

Метод визуального анализа лица водителя для автоматического чтения речи по губам при управлении транспортным средством

Авторы: А.А. Аксёнов, Д.А. Рюмин, А.М. Кашевник, Д.В. Иванько, А.А. Карпов

Компьютерная оптика Т. 46, № 6

Год публикации: 2022

DOI: 10.18287/2412-6179-CO-1092

Перейти к публикации

RUSAVIC Corpus: Russian Audio-Visual Speech in Cars

Авторы: Ivanko D., Axyonov A., Ryumin D., Kashevnik A., Karpov A.

Proceedings of the Language Resources and Evaluation Conference

Год публикации: 2022

DOI:

Перейти к публикации

End-to-end Visual Speech Recognition for Human-Robot Interaction

Авторы: Ivanko Denis, Ryumin Dmitry, Markitantov Maxim

Proceedings of IV International Scientific Conference MIP: Engineering-IV-2022: Modernization, Innovations, Progress: Advanced Technologies in Material Science, Mechanical and Automation Engineering

Год публикации: 2022

DOI: 10.47813/mip.4.2022.4.82-90

Перейти к публикации

Investigation of Transfer Learning for End-to-End Russian Speech Recognition

Авторы: Kipyatkova Irina

Speech and Computer / Lecture Notes in Computer Science

Год публикации: 2022

DOI: 10.1007/978-3-031-20980-2_30

Перейти к публикации

Analysis of infoware and software for human affective states recognition

Авторы: Dvoynikova Anastasia, Markitantov Maxim, Ryumina Elena, Uzdiaev Mikhail, Velichko Alena, Ryumin Dmitry, Lyakso Elena, Karpov Alexey

Informatics and Automation 6, 21

Год публикации: 2022

DOI: 10.15622/ia.21.6.2

Перейти к публикации

Метод интеллектуального оценивания персональных качеств личности человека по визуальным данным

Авторы: Рюмина Е.В.

Сборник трудов XI Конгресса молодых ученых (Санкт-Петербург, 4-8 апреля 2022 г.) 2

Год публикации: 2022

DOI:

Перейти к публикации

An analysis of automatic techniques for recognizing human's affective states by speech and multimodal data

Авторы: Dvoynikova A., Markitantov M., Ryumina E., Uzdiaev M., Velichko A., Kagirov I., Kipyatkova I., Lyakso E., Karpov A.

Proceedings of the 24th International Congress on Acoustics ICA-2022

Год публикации: 2022

DOI:

Перейти к публикации

Аналитический обзор методов извлечения текстовых транскрипций из речевых высказываний

Авторы: Ролинский С.О., Двойникова А.А.

Альманах научных работ молодых ученых Университета ИТМО 2

Год публикации: 2022

DOI:

Перейти к публикации

Распознавание вовлеченности собеседников с помощью анализа мел-спектрограмм

Авторы: Двойникова А.А.

Сборник трудов XI Конгресса молодых ученых 2

Год публикации: 2022

DOI:

Перейти к публикации

Распознавание кашля с помощью анализа спектрограмм

Авторы: Двойникова А.А.

Альманах научных работ молодых ученых Университета ИТМО 2

Год публикации: 2022

DOI:

Перейти к публикации

DyCoDa: A Multi-modal Data Collection of Multi-user Remote Survival Game Recordings

Авторы: Dresvyanskiy Denis, Sinha Yamini, Busch Matthias, Siegert Ingo, Karpov Alexey, Minker Wolfgang

Lecture Notes in Computer Science, SPECOM 2022 13721

Год публикации: 2022

DOI: 10.1007/978-3-031-20980-2_15

Перейти к публикации

Self-Configuring Genetic Programming Feature Generation in Affect Recognition Tasks

Авторы: Mamontov Danila, Minker Wolfgang, Karpov Alexey

Lecture Notes in Computer Science, SPECOM 2022 13721

Год публикации: 2022

DOI: 10.1007/978-3-031-20980-2_40

Перейти к публикации

Multi-level Fusion of Fisher Vector Encoded BERT and Wav2vec 2.0 Embeddings for Native Language Identification

Авторы: Krebbers Dani, Kaya Heysem, Karpov Alexey

Lecture Notes in Computer Science, SPECOM 2022 13721

Год публикации: 2022

DOI: 10.1007/978-3-031-20980-2_34

Перейти к публикации

Editorial: Towards Omnipresent and Smart Speech Assistants

Авторы: Siegert Ingo, Hillmann Stefan, Weiss Benjamin, Szczuka Jessica M., Karpov Alexey

Frontiers in Computer Science 4

Год публикации: 2022

DOI: 10.3389/fcomp.2022.966163

Перейти к публикации

Метод анализа речевого сигнала для автоматического определения агрессии в разговорной речи

Авторы: Величко А.Н.

Вестник ВГУ. Системный анализ и информационные технологии №4

Год публикации: 2022

DOI: 10.17308/sait/1995-5499/2022/4/180-188

Перейти к публикации

Application of training data synthesis methods for recognition of partially hidden faces in images

Авторы: Letenkov M.A., Iakovlev R.N., Markitantov M.V., Ryumin D.A., Karpov A.A.

Izvestiâ vysših učebnyh zavedenij. Priborostroenie 65

Год публикации: 2022

DOI: 10.17586/0021-3454-2022-65-11-842-850

Перейти к публикации

Medical exoskeleton “Remotion” with an intelligent control system: Modeling, implementation, and testing

Авторы: Kagirov Ildar, Kapustin Alexander, Kipyatkova Irina, Klyuzhev Konstantin, Kudryavcev Alexander, Kudryavcev Igor, Loskutov Yury, Ryumin Dmitry, Karpov Alexey

Simulation Modelling Practice and Theory 107

Год публикации: 2021

DOI: 10.1016/j.simpat.2020.102200

Перейти к публикации

Approach to Image-based Face Recognition in Setting of Partial Face Occlusion by Personal Protective Equipment

Авторы: Letenkov M., Iakovlev R., Karpov. A.

16th International Conference on Electromechanics and Robotics "Zavalishin's Readings" (ER(ZR)-2021) 232

Год публикации: 2021

DOI: 10.1007/978-981-16-2814-6_22

Перейти к публикации

Multimodal Corpus Design for Audio-Visual Speech Recognition in Vehicle Cabin

Авторы: Kashevnik Alexey, Lashkov Igor, Axyonov Alexandr, Ivanko Denis, Ryumin Dmitry, Kolchin Artem, Karpov Alexey

IEEE Access

Год публикации: 2021

DOI: 10.1109/ACCESS.2021.3062752

Перейти к публикации

Влияние методов снижения скорости на эффективность систем распознавания эмоций по мимике лица

Авторы: Е.В. Рюмина, Д.В. Дресвянский

Альманах научных работ молодых ученых Университета ИТМО 3

Год публикации: 2021

DOI:

Перейти к публикации

A novel method for protective face mask detection using convolutional neural networks and image histograms

Авторы: E. Ryumina, D. Ryumin, D. Ivanko, A. Karpov

Год публикации: 2021

DOI: 10.5194/isprs-archives-XLIV-2-W1-2021-177-2021

Перейти к публикации

A Bimodal Approach for Speech Emotion Recognitionusing Audio and Text

Авторы: Oxana Verkholyak, Anastasia Dvoynikova, Alexey Karpov

Journal of Internet Services and Information Security № 1, vol. 11

Год публикации: 2021

DOI: 10.22667/JISIS.2021.02.28.080

Перейти к публикации

XXII Международная конференция SPECOM-2020 “Речь и компьютер”

Авторы: Карпов А.А., Потапова Р.К., Потапов В.В.

Известия Российской академии наук. Серия литературы и языка Т. 80, № 2

Год публикации: 2021

DOI: 10.31857/S241377150014560-9

Перейти к публикации

METHOD OF MULTI-MODAL VIDEO ANALYSIS OF HAND MOVEMENTS FOR AUTOMATIC RECOGNITION OF ISOLATED SIGNS OF RUSSIAN SIGN LANGUAGE

Авторы: Axyonov А., Ryumin D., Kagirov I.

The International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences XLIV-2/W1-2021

Год публикации: 2021

DOI: 10.5194/isprs-archives-XLIV-2-W1-2021-7-2021

Перейти к публикации

A NOVEL TASK-ORIENTED APPROACH TOWARD AUTOMATED LIP-READING SYSTEM IMPLEMENTATION

Авторы: Ivanko D., Ryumin D.

The International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences XLIV-2/W1-2021

Год публикации: 2021

DOI: 10.5194/isprs-archives-XLIV-2-W1-2021-85-2021

Перейти к публикации

Аналитический обзор систем автоматического определения депрессии по речи

Авторы: Величко Алёна Николаевна, Карпов Алексей Анатольевич

Информатика и автоматизация 20

Год публикации: 2021

DOI: 10.15622/ia.2021.3.1

Перейти к публикации

Speaker-Dependent Visual Command Recognition in Vehicle Cabin: Methodology and Evaluation

Авторы: Ivanko Denis, Ryumin Dmitry, Axyonov Alexandr, Kashevnik Alexey

Speech and Computer / Lecture Notes in Computer Science

Год публикации: 2021

DOI: 10.1007/978-3-030-87802-3_27

Перейти к публикации

Подходы к автоматическому распознаванию жестовой информации: аппаратное обеспечение и методы

Авторы: Д.А. Рюмин, И.А. Кагиров

Пилотируемые полеты в космос

Год публикации: 2021

DOI: 10.34131/MSF.21.3.82-99

Перейти к публикации

Deep Learning Based Engagement Recognition in Highly Imbalanced Data

Авторы: Dresvyanskiy Denis, Minker Wolfgang, Karpov Alexey

International Conference on Speech and Computer 12997

Год публикации: 2021

DOI: 10.1007/978-3-030-87802-3_16

Перейти к публикации

X-Bridge: Image-to-Image Translation with Reconstruction Capabilities

Авторы: Gruber Ivan, Hrúz Marek, Železný Miloš, Karpov Alexey

International Conference on Speech and Computer 12997

Год публикации: 2021

DOI: 10.1007/978-3-030-87802-3_22

Перейти к публикации

End-to-End Russian Speech Recognition Models with Multi-head Attention

Авторы: Kipyatkova Irina

Speech and Computer / Lecture Notes in Computer Science 12997

Год публикации: 2021

DOI: 10.1007/978-3-030-87802-3_30

Перейти к публикации

Developing of a Software-Hardware Complex for Automatic Audio-Visual Speech Recognition in Human–Robot Interfaces

Авторы: Ivanko D., Ryumin D., Karpov A.

Proceedings of the International Conference on Electromechanics and Robotics “Zavalishin’s Readings”. Smart Innovation, Systems and Technologies 232

Год публикации: 2021

DOI: 10.1007/978-981-16-2814-6_23

Перейти к публикации

Analytical Review of Audiovisual Systems for Determining Personal Protective Equipment on a Person's Face

Авторы: Dvoynikova Anastasia, Markitantov Maxim, Ryumina Elena, Ryumin Dmitry, Karpov Alexey

Informatics and Automation / Информатика и автоматизация 20

Год публикации: 2021

DOI: 10.15622/20.5.5

Перейти к публикации

Annotation Confidence vs. Training Sample Size: Trade-Off Solution for Partially-Continuous Categorical Emotion Recognition

Авторы: Ryumina Elena, Verkholyak Oxana, Karpov Alexey

Interspeech 2021

Год публикации: 2021

DOI: 10.21437/Interspeech.2021-1636

Перейти к публикации

Ensemble-Within-Ensemble Classification for Escalation Prediction from Speech

Авторы: Verkholyak Oxana, Dresvyanskiy Denis, Dvoynikova Anastasia, Kotov Denis, Ryumina Elena, Velichko Alena, Mamontov Danila, Minker Wolfgang, Karpov Alexey

Interspeech 2021

Год публикации: 2021

DOI: 10.21437/Interspeech.2021-1821

Перейти к публикации

Аналитический обзор моделей и методов автоматического распознавания жестов и жестовых языков

Авторы: Рюмин Д.А., Кагиров И.А., Аксёнов А.А., Карпов А.А.

Информационно-управляющие системы 6

Год публикации: 2021

DOI: 10.31799/1684-8853-2021-6-10-20

Перейти к публикации

Методы и модели автоматического распознавания речи

Авторы: Кипяткова И.С., Карпов А.А., Кулешов С.В., Зайцева А.А.

СПб: СПб ФИЦ РАН

Год публикации: 2021

DOI:

Automatic Detection of Deceptive and Truthful Paralinguistic Information in Speech using Two-Level Machine Learning Model

Авторы: Velichko A.N., Karpov A.A.

Computational Linguistics and Intellectual Technologies: Proceedings of the International Conference “Dialogue 2021” 20 (27)

Год публикации: 2021

DOI: 10.28995/2075-7182-2021-20-698-704

Перейти к публикации

Влияние обратного перевода на распознавание эмоций в транскрипциях спонтанной русской речи

Авторы: Двойникова А.А., Карпов А.А.

Анализ разговорной русской речи (АРЗ-2021): труды девятого междисциплинарного семинара

Год публикации: 2021

DOI:

Перейти к публикации

Автоматическое определение эмоционального состояния участников предметных разговоров по транскрипциям речи

Авторы: Двойникова А.А., Мамонтов Д.Ю., Карпов А.А.

Альманах научных работ молодых ученых Университета ИТМО 3

Год публикации: 2021

DOI:

Перейти к публикации

Сентимент-анализ транскрипции разговорной речи при помощи автоматического машинного перевода

Авторы: Двойникова А.А.

Сборник трудов IX конгресса молодых ученых 1

Год публикации: 2021

DOI:

Перейти к публикации

Программное обеспечение для определения депрессивного состояния по речи человека

Авторы: Величко Алёна Николаевна

2021680548

Год публикации: 2021

DOI:

Устройство для мониторинга состояния оператора эргатической системы в условиях воздействия вибраций

Авторы: Ронжин А.Л., Кулешов С.В., Черноусова П.С., Кипяткова И.С., Ватаманюк И.В.

Патент 202551

Год публикации: 2021

DOI:

Перейти к публикации

3D-технологии в современных информационных системах: теория и практика

Авторы: Кулешов С.В., Зайцева А.А., Аксенов А.Ю., Карпов А.А., Кипяткова И.С., Ватаманюк И.В.

СПб ФИЦ РАН. СПб.,

Год публикации: 2021

DOI: -

Influence of emotion distribution and classification on a call processing for an emergency call center

Авторы: Bojanić Milana, Delić Vlado, Karpov Alexey

Telfor Journal 13

Год публикации: 2021

DOI: 10.5937/telfor2102075B

Перейти к публикации

Influence of emotion distribution and classification on a call processing for an emergency call center

Авторы: Bojanić Milana, Delić Vlado, Karpov Alexey

Telfor Journal 13

Год публикации: 2021

DOI: 10.5937/TELFOR2102075B

Перейти к публикации

Applying Ensemble Learning Techniques and Neural Networks to Deceptive and Truthful Information Detection Task in the Flow of Speech

Авторы: Velichko A., Budkov V., Kagirov I., Karpov A.

Studies in Computational Intelligence, Springer SCI 868, IDC-2019 868

Год публикации: 2020

DOI: https://doi.org/10.1007/978-3-030-32258-8_54

Перейти к публикации

Lower Limbs Exoskeleton Control System Based on Intelligent Human-Machine Interface

Авторы: Kagirov I., Karpov A., Kipyatkova I., Klyuzhev K., Kudryavcev A., Kudryavcev I., Ryumin D.

Studies in Computational Intelligence, Springer SCI 868, IDC 2019 868

Год публикации: 2020

DOI: https://doi.org/10.1007/978-3-030-32258-8_56

Перейти к публикации

Vision-Based Assistive Systems for Deaf and Hearing Impaired People

Авторы: Ryumin D., Ivanko D., Kagirov I., Axyonov A., Karpov A.

Intelligent Systems Reference Library 175

Год публикации: 2020

DOI: 10.1007/978-3-030-33795-7_7

Перейти к публикации

Multimedia Database of Russian Sign Language Items in 3D

Авторы: Кагиров И.А., Рюмин Д.А., Аксёнов А.А., Карпов А.А.

Voprosy Jazykoznanija 1

Год публикации: 2020

DOI: 10.31857/S0373658X0008302-1

Перейти к публикации

Using Complexity-Identical Human- and Machine-Directed Utterances to Investigate Addressee Detection for Spoken Dialogue Systems

Авторы: Akhtiamov Oleg, Siegert Ingo, Karpov Alexey, Minker Wolfgang

Sensors 20

Год публикации: 2020

DOI: 10.3390/s20092740

Перейти к публикации

Аналитический обзор методов распознавания эмоций по выражениям лица человека

Авторы: Рюмина Е.В., Карпов А.А.

Научно-технический вестник информационных технологий, механики и оптики 20

Год публикации: 2020

DOI: 10.17586/2226-1494-2020-20-2-163-176

Перейти к публикации

Call Redistribution for a Call Center Based on Speech Emotion Recognition

Авторы: Bojanić Milana, Delić Vlado, Karpov Alexey

Applied Sciences 10

Год публикации: 2020

DOI: 10.3390/app10134653

Перейти к публикации

Сравнительный анализ методов устранения дисбаланса классов эмоций в видеоданных выражений лиц

Авторы: Рюмина Е.В., Карпов А.А.

Научно-технический вестник информационных технологий, механики и оптики 5, 20

Год публикации: 2020

DOI: 10.17586/2226-1494-2020-20-5-683-691

Перейти к публикации

Ensembling End-to-End Deep Models for Computational Paralinguistics Tasks: ComParE 2020 Mask and Breathing Sub-Challenges

Авторы: Markitantov Maxim, Dresvyanskiy Denis, Mamontov Danila, Kaya Heysem, Minker Wolfgang, Karpov Alexey

Interspeech 2020

Год публикации: 2020

DOI: 10.21437/Interspeech.2020-2666

Перейти к публикации

Transfer Learning in Speaker’s Age and Gender Recognition

Авторы: Markitantov Maxim

Speech and Computer

Год публикации: 2020

DOI: 10.1007/978-3-030-60276-5_32

Перейти к публикации

Gesture-Based Intelligent User Interface for Control of an Assistive Mobile Information Robot

Авторы: Kagirov Ildar, Ryumin Dmitry, Železný Miloš

Lecture Notes in Computer Science 12336

Год публикации: 2020

DOI: 10.1007/978-3-030-60337-3_13

Перейти к публикации

Emotion Recognition and Sentiment Analysis of Extemporaneous Speech Transcriptions in Russian

Авторы: Dvoynikova A., Verkholyak O., Karpov A.

Lecture Notes in Computer Science, Springer LNAI 12335, SPECOM 2020

Год публикации: 2020

DOI: 10.1007/978-3-030-60276-5_14

Перейти к публикации

Is Everything Fine, Grandma? Acoustic and Linguistic Modeling for Robust Elderly Speech Emotion Recognition

Авторы: Gizem Soğancıoğlu, Oxana Verkholyak, Heysem Kaya, Dmitrii Fedotov, Tobias Cadée, Albert Ali Salah, Alexey Karpov

Proc. Interspeech 2020

Год публикации: 2020

DOI: 10.21437/Interspeech.2020-3160

Перейти к публикации

Experimenting with Attention Mechanisms in Joint CTC-Attention Models for Russian Speech Recognition

Авторы: Kipyatkova Irina, Markovnikov Nikita

Lecture Notes in Computer Science, LNAI 12335, Springer

Год публикации: 2020

DOI: 10.1007/978-3-030-60276-5_22

Перейти к публикации

An Experimental Analysis of Different Approaches to Audio–Visual Speech Recognition and Lip-Reading

Авторы: Ivanko Denis, Ryumin Dmitry, Karpov Alexey

Proceedings of 15th International Conference on Electromechanics and Robotics "Zavalishin's Readings"

Год публикации: 2020

DOI: 10.1007/978-981-15-5580-0_16

Перейти к публикации

Аналитический обзор подходов к распознаванию тональности русскоязычных текстовых данных

Авторы: Двойникова А.А., Карпов А.А.

Информационно-управляющие системы 4

Год публикации: 2020

DOI: 10.31799/1684-8853-2020-4-20-30

Перейти к публикации

Application of Brain-computer Interfaces in Assistive Technologies

Авторы: Gundelakh Filipp, Stankevich Lev, Sonkin Konstantin, Nagornova Ganna, Shemyakina Natalia

SPIIRAS Proceedings 19

Год публикации: 2020

DOI: 10.15622/SP.2020.19.2.2

Перейти к публикации

Lipreading with LipsID

Авторы: Hlaváč Miroslav, Gruber Ivan, Železný Miloš, Karpov Alexey

Speech and Computer 12335

Год публикации: 2020

DOI: 10.1007/978-3-030-60276-5_18

Перейти к публикации

The Hierarchical Memory Based on Compartmental Spiking Neuron Model

Авторы: Bakhshiev Aleksandr, Korsakov Anton, Stankevich Lev

Artificial General Intelligence

Год публикации: 2020

DOI: 10.1007/978-3-030-52152-3_4

Перейти к публикации

Метод автоматического видеоанализа движений рук и распознавания жестов в человеко-машинных интерфейсах

Авторы: Рюмин Д.А.

Научно-технический вестник информационных технологий, механики и оптики 4, 20

Год публикации: 2020

DOI: 10.17586/2226-1494-2020-20-4-525-531

Перейти к публикации

Многомодальная база данных русской речи водителей в кабине транспортных средств (RUSAVIC)

Авторы: Лашков И.Б., Аксёнов А.А., Иванько Д.В., Рюмин Д.А., Карпов А.А., Кашевник А.М.

Год публикации: 2020

DOI:

Перейти к публикации

Мультимедийная база данных элементов русского жестового языка (TheRuSLan)

Авторы: Рюмин Д., Аксёнов А., Кагиров И.А., Карпов А.А.

Год публикации: 2020

DOI:

Перейти к публикации

Facial Expression Recognition using Distance Importance Scores Between Facial Landmarks

Авторы: Ryumina E.V., Karpov A.A.

CEUR-WS Proceedings, 30th International Conference Graphicon-2020 2744

Год публикации: 2020

DOI: 10.51130/graphicon-2020-2-3-32

Перейти к публикации

TheRuSLan: Database of Russian Sign Language

Авторы: Ildar Kagirov, Denis Ivanko, Dmitry Ryumin, Alexandr Axyonov, Alexey Karpov

Proceedings of the 12th Language Resources and Evaluation Conference

Год публикации: 2020

DOI:

Перейти к публикации

Analytical review of methods for identifying emotions in text data

Авторы: Dvoynikova A., Verkholyak O., Karpov A.

CEUR-WS 2552

Год публикации: 2020

DOI:

Перейти к публикации

Сентимент-анализ разговорной речи при помощи метода, основанного на тональных словарях

Авторы: Двойникова А.А., Верхоляк О.В., Карпов А.А.

Альманах научных работ молодых ученых 3

Год публикации: 2020

DOI:

Перейти к публикации

Class-based LSTM Russian Language Model with Linguistic Information

Авторы: Kipyatkova Irina, Karpov Alexey

Proceedings of the 12th Conference on Language Resources and Evaluation (LREC 2020)

Год публикации: 2020

DOI:

Перейти к публикации

Исследование методов улучшения интегральных систем распознавания речи при недостатке обучающих данных

Авторы: Кипяткова И.С., Марковников Н.М.

Труды Всероссийской акустической конференции

Год публикации: 2020

DOI:

Перейти к публикации

Сравнительное исследование архитектур нейронных сетей для интегральной системы распознавания речи

Авторы: Кипяткова И.С., Карпов А.А.

Известия высших учебных заведений. Приборостроение 11

Год публикации: 2020

DOI: 10.17586/0021-3454-2020-63-11-1027-1033

Перейти к публикации

Combining Clustering and Functionals based Acoustic Feature Representations for Classification of Baby Sounds

Авторы: Heysem Kaya, Oxana Verkholyak, Maxim Markitantov, Alexey Karpov

In Companion Publication of the 2020 International Conference on Multimodal Interaction (ICMI ’20 Companion)

Год публикации: 2020

DOI:

Перейти к публикации

Программная система комплексного анализа паралингвистических явлений в речи (ComPAS - Complex Paralinguistic Analysis of Speech)

Авторы: Верхоляк О. В., Маркитантов М. В., Величко А. Н., Кипяткова И. С.,Карпов А. А.

2020664233

Год публикации: 2020

DOI:

Аналитический обзор аудиовизуальных корпусов речи для автоматического распознавания возраста диктора

Авторы: Маркитантов М.В.

Альманах научных работ молодых учёных XLIX научной и учебно-методической конференции Университета ИТМО 3

Год публикации: 2020

DOI:

Перейти к публикации

A Study of Data Scarcity Problem for Automatic Detection of Deceptive Speech Utterances

Авторы: Velichko A., Karpov A.

CEUR Workshop Proceedings, 3rd International Conference on R. Piotrowski's Readings in Language Engineering and Applied Linguistics PRLEAL’19 2552

Год публикации: 2020

DOI:

Перейти к публикации

Способ многомодального бесконтактного управления мобильным информационным роботом

Авторы: Рюмин Дмитрий, Кипяткова Ирина Сергеевна, Кагиров Ильдар Амирович, Аксёнов Александр, Карпов Алексей Анатольевич

Год публикации: 2020

DOI:

Перейти к публикации

Метод извлечения информативных видеопризнаков для распознавания эмоций

Авторы: Рюмина Е.В.

Альманах научных работ молодых ученых Университета ИТМО 3

Год публикации: 2020

DOI:

Перейти к публикации

Аналитический обзор современных методов детектирования лиц

Авторы: Аксёнов А.А., Рюмина Е.В.

Альманах научных работ молодых ученых Университета ИТМО 3

Год публикации: 2020

DOI:

Перейти к публикации

A Multimodal User Interface for an Assistive Robotic Shopping Cart

Авторы: Ryumin D., Kagirov I., Axyonov A., Pavlyuk N., Saveliev A., Kipyatkova I., Karpov A.

Electronics 9(12)

Год публикации: 2020

DOI: 10.3390/electronics9122093

Перейти к публикации

Программа для распознавания эмоций в речи (ProSpER – Program for Speech Emotion Recognition)

Авторы: Величко Алёна Николаевна, Верхоляк Оксана Владимировна, Карпов Алексей Анатольевич

Год публикации: 2020

DOI:

Перейти к публикации

ГОЛОСОВОЙ ПОРТРЕТ РЕБЕНКА С ТИПИЧНЫМ И АТИПИЧНЫМ РАЗВИТИЕМ

Авторы: ЛЯКСО ЕЛЕНА ЕВГЕНЬЕВНА, ФРОЛОВА ОЛЬГА ВЛАДИМИРОВНА, ГРЕЧАНЫЙ СЕВЕРИН ВЯЧЕСЛАВОВИЧ, МАТВЕЕВ ЮРИЙ НИКОЛАЕВИЧ, ВЕРХОЛЯК ОКСАНА ВЛАДИМИРОВНА, КАРПОВ А. А.

Год публикации: 2020

DOI:

Перейти к публикации

Effect of Emotion Distribution on a Call Processing for an Emergency Call Center

Авторы: Bojanić M., Delić V., Karpov A.

Proc. 28th Telecommunications Forum TELFOR 2020

Год публикации: 2020

DOI: 10.1109/TELFOR51502.2020.9306564

Перейти к публикации

Possibilities analysis of using remote method for evaluating forest recovery using remote sensing data of the Earth

Авторы: Bogdanov A.P., Karpov A.A., Voronin V.V., Aleshko R.A.

Proceedings of the Saint Petersburg Forestry Research Institute

Год публикации: 2020

DOI: 10.21178/2079-6080.2020.1.44

Перейти к публикации

Method for Transferring Non-Forest Cover to Forest Cover Land Using Landsat Imageries

Авторы: Karpov A.

Lesnoy Zhurnal (Forestry Journal)

Год публикации: 2020

DOI: 10.37482/0536-1036-2020-3-83-92

Перейти к публикации

A methodology of multimodal corpus creation for audio-visual speech recognition in assistive transport systems

Авторы: Axyonov A.A., Ivanko D.V., Lashkov I.B., Ryumin D.A., Kashevnik A.M., Karpov A.A.

Informatization and communication 5

Год публикации: 2020

DOI: 10.34219/2078-8320-2020-11-5-87-93

Перейти к публикации

MOTHERS SPEECH BEHAVIOR IN THE INTERACTION WITH CHILDREN WITH DOWN SYNDROME

Авторы: Lyakso Elena E., Frolova Olga V.

Theoretical and Applied Linguistics 6

Год публикации: 2020

DOI: 10.22250/2410-7190_2020_6_1_103_124

Перейти к публикации

Speech Features and Electroencephalogram Parameters in 4- to 11-Year-Old Children

Авторы: Lyakso Elena, Frolova Olga, Matveev Yuri

Frontiers in Behavioral Neuroscience 14

Год публикации: 2020

DOI: 10.3389/fnbeh.2020.00030

Перейти к публикации

Approbation of a method for studying the reflection of emotional state in children's speech and pilot psychophysiological experimental data

Авторы: Lyakso Elena

International Journal of Advanced Trends in Computer Science and Engineering 9

Год публикации: 2020

DOI: 10.30534/ijatcse/2020/91912020

Перейти к публикации

GENDER, AGE, CHILD STATE: PERCEPTUAL STUDY OF SPEECH OF 8-9 YEAR OLD TYPICALLY DEVELOPING CHILDREN, CHILDREN WITH AUTISM SPECTRUM DISORDERS AND DOWN SYNDROME

Авторы: LYAKSO ELENA E., FROLOVA OLGA V., NIKOLAEV ALEKSANDR S., GORODNYI VIKTOR A., GRIGOREV ALEKSEY S., KURAZHOVA ANNA V.

Theoretical and Applied Linguistics 3

Год публикации: 2020

DOI: 10.22250/2410-7190_2020_6_3_61_76

Перейти к публикации

Acoustic features of child speech in dialogues with adults and peers: Orphanage vs. family, typical development vs. intellectual disabilities

Авторы: Frolova Olga V., Lyakso Elena E.

Comprehensive Child Studies 2

Год публикации: 2020

DOI: 10.33910/2687-0223-2020-2-2-98-108

Перейти к публикации

Application of Brain-computer Interfaces in Assistive Technologies

Авторы: Gundelakh Filipp, Stankevich Lev, Sonkin Konstantin, Nagornova Ganna, Shemyakina Natalia

SPIIRAS Proceedings 19

Год публикации: 2020

DOI: 10.15622/sp.2020.19.2.2

Перейти к публикации

Modeling of neuron resource optimization processes as an element of self-organizing dynamic spiking neural structures

Авторы: Bakhshiev Aleksandr, Gundelakh Filipp, Stankevich Lev

Procedia Computer Science 169

Год публикации: 2020

DOI: 10.1016/j.procs.2020.02.169

Перейти к публикации

Combining Clustering and Functionals based Acoustic Feature Representations for Classification of Baby Sounds

Авторы: Kaya Heysem, Verkholyak Oxana, Markitantov Maxim, Karpov Alexey

Companion Publication of the 2020 International Conference on Multimodal Interaction

Год публикации: 2020

DOI: 10.1145/3395035.3425182

Перейти к публикации

Automatic lip-reading of hearing impaired people

Авторы: Ivanko D., Ryumin D., Karpov A.

International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences - ISPRS Archives No. 42 2/W12

Год публикации: 2019

DOI: https://doi.org/10.5194/isprs-archives-XLII-2-W12-97-2019

Перейти к публикации

Исследование влияния высокоскоростных видеоданных на точность распознавания аудиовизуальной речи

Авторы: Иванько Д.В., Рюмин Д.А., Карпов А.А., Железны М.

Информационно-управляющие системы № 2 (99)

Год публикации: 2019

DOI: https://doi.org/10.31799/1684-8853-2019-2-26-34

Перейти к публикации

Modeling short-term and long-term dependencies of the speech signal for paralinguistic emotion classification

Авторы: Verkholyak O.V., Kaya H., Karpov A.A.

SPIIRAS Proceedings No. 1

Год публикации: 2019

DOI: https://doi.org/10.15622/sp.18.1.30-56

Перейти к публикации

Methods for Determination of Psychophysiological Condition of User Within Smart Environment Based on Complex Analysis of Heterogeneous Data

Авторы: Levonevskiy D., Shumskaya O., Velichko A., Uzdiaev M., Malov D.

Proceedings of 14th International Conference on Electromechanics and Robotics “Zavalishin's Readings” 154

Год публикации: 2019

DOI: https://doi.org/10.1007/978-981-13-9267-2_42

Перейти к публикации

Human-Robot Interaction with Smart Shopping Trolley using Sign Language: Data Collection

Авторы: Ryumin D., Ivanko D., Kagirov I., Axyonov A., Karpov A., Zelezny M.

IEEE International Conference on Pervasive Computing and Communications Workshops (PerCom Workshops)

Год публикации: 2019

DOI: 10.1109/PERCOMW.2019.8730886

Перейти к публикации

Исследование влияния высокоскоростных видеоданных на точность распознавания аудиовизуальной речи

Авторы: Иванько Д.В., Рюмин Д.А., Карпов А.А., Железны М.

Информационно-управляющие системы номер 2, том 99

Год публикации: 2019

DOI: https://doi.org/10.31799/1684-8853-2019-2-26-34

Перейти к публикации

Automatic detection and recognition of 3D manual gestures for human-machine interaction

Авторы: Ryumin D., Kagirov I., Ivanko D., Axyonov A., Karpov A.

International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences (ISPRS Archives) XLII-2/W12

Год публикации: 2019

DOI: https://doi.org/10.5194/isprs-archives-XLII-2-W12-179-2019

Перейти к публикации

Automatic lip-reading of hearing impaired people

Авторы: Ivanko D., Ryumin D., Karpov A.

International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences (ISPRS Archives) XLII-2/W12

Год публикации: 2019

DOI: https://doi.org/10.5194/isprs-archives-XLII-2-W12-97-2019

Перейти к публикации

Lip-reading Using Pixel-based and Geometry-based Features for Multimodal Human-Robot Interfaces

Авторы: Ivanko D., Ryumin D., Kipyatkova I., Axyonov A., Karpov A.

Springer, Smart Innovation, Systems and Technologies том 154

Год публикации: 2019

DOI: https://doi.org/10.1007/978-981-13-9267-2_39

Перейти к публикации

Vision-Based Systems for Deaf and Hearing Impaired People

Авторы: Ryumin D., Ivanko D., Kagirov I., Axyonov A., Karpov A.

Springer, Computer Vision in Advanced Control Systems том 175

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-33795-7_7

Перейти к публикации

Исследование влияния высокоскоростных видеоданных на точность распознавания аудиовизуальной речи

Авторы: Иванько Д.В., Рюмин Д.А., Карпов А.А., Железны М.

Информационно-управляющие системы (Informatsionno-Upravliaiushchie Sistemy) № 2

Год публикации: 2019

DOI: https://doi.org/10.31799/1684-8853-2019-2-26-34

Перейти к публикации

Predicting Depression and Emotions in the Cross-roads of Cultures, Para-linguistics, and Non-linguistics

Авторы: Heysem Kaya, Dmitrii Fedotov, Denis Dresvyanskiy, Metehan Doyran, Danila Mamontov, Maxim Markitantov, Alkim Almila Akdag Salah, Evrim Kavcar, Alexey Karpov, Albert Ali Salah

In Proc. 9th ACM International Audio/Visual Emotion Challenge and Workshop AVEC’19

Год публикации: 2019

DOI: https://doi.org/10.1145/3347320.3357691

Перейти к публикации

Аналитический обзор систем автоматического распознавания возраста диктора по голосу

Авторы: Маркитантов М.В.

Сборник трудов VIII конгресса молодых ученых Т. 3

Год публикации: 2019

DOI:

Перейти к публикации

Интеллектуальный интерфейс для управления роботизированным медицинским экзоскелетом нижних конечностей Remotion

Авторы: Кагиров И.А., Карпов А.А., Кипяткова И.С., Клюжев К.С., Куд-рявцев А.И., Кудрявцев И.А., Рюмин Д.А.

Авиакосмическая и экологическая медицина №5, Т.53

Год публикации: 2019

DOI: 10.21687/0233-528X-2019-53-5-92-98

Перейти к публикации

Automatic Recognition of Speaker Age and Gender Based on Deep Neural Networks

Авторы: Markitantov M., Verkholyak O.

Lecture Notes in Computer Science

Год публикации: 2019

DOI:

Перейти к публикации

Жестовое управление коллаборативным роботом

Авторы: Кагиров И.А., Толстой И.М., Савельев А.И., Карпов А.А.

Робототехника и техническая кибернетика. №2, Т.7

Год публикации: 2019

DOI: 10.31776/RTCJ.7208

Перейти к публикации

Программная система для определения пола и возраста диктора по голосу (GASpeakerRecognizer)

Авторы: Маркитантов М. В., Карпов А. А.

2019662952

Год публикации: 2019

DOI:

Интеллектуальный интерфейс для управления роботизированным медицинским экзоскелетом нижних конечностей Remotion

Авторы: Кагиров И.А., Карпов А.А., Кипяткова И.С., Клюжев К.С., Кудрявцев А.И., Кудрявцев И.А., Рюмин Д.А.

Авиакосмическая и экологическая медицина (Aviakosmicheskaia i Ekologicheskaia Meditsina) № 5, Т. 53

Год публикации: 2019

DOI: https://doi.org/10.21687/0233-528X-2019-53-5-92-98

Перейти к публикации

Автоматическое распознавание возраста и пола диктора на основе глубоких нейронных сетей

Авторы: Маркитантов М.В., Карпов А.А.

Информационно-измерительные и управляющие системы Т. 17, № 5

Год публикации: 2019

DOI: DOI: 10.18127/j20700814-201905-10

Перейти к публикации

Vision-Based Assistive Systems for Deaf and Hearing Impaired People

Авторы: Ryumin D., Ivanko D., Kagirov I., Axyonov A., Karpov A.

Computer Vision in Advanced Control Systems, Springer vol. 175

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-33795-7_7

Перейти к публикации

Метод мультимодального распознавания одноручных жестов

Авторы: Аксенов А.А., Рюмин Д.А., Кагиров И.А.

Информационно-измерительные и управляющие системы №5, Т.17

Год публикации: 2019

DOI: 10.18127/j20700814-201905-11

Method for Multimodal Recognition of One-Handed Sign Language Gestures Through 3D Convolution and LSTM Neural Networks

Авторы: Kagirov I., Ryumin D., Axyonov A.

Proc. 21th International Conference on Speech and Computer SPECOM-2019, Istanbul, Turkey LNAI vol. 11658

Год публикации: 2019

DOI: 10.1007/978-3-030-26061-3_20

Перейти к публикации

Метод мультимодального распознавания одноручных жестов

Авторы: Аксенов А.А., Рюмин Д.А., Кагиров И.А., Иванько Д.В.

Информационно-измерительные и управляющие системы № 5, T. 17

Год публикации: 2019

DOI:

Перейти к публикации

Applying Ensemble Learning Techniques and Neural Networks to Deceptive and Truthful Information Detection Task in the Flow of Speech

Авторы: Velichko A., Budkov V., Kagirov I., Karpov A.

International Symposium on Intelligent and Distributed Computing (IDC-2019) SCI, volume 868

Год публикации: 2019

DOI: 10.1007/978-3-030-26061-3_20

Перейти к публикации

Hierarchical Two-Level Modelling of Emotional States in Spoken Dialog Systems

Авторы: Verkholyak O., Fedotov D., Kaya H., Zhang Y., Karpov A.

IEEE International Conference on Acoustics, Speech, and Signal Processing ICASSP-2019

Год публикации: 2019

DOI: https://doi.org/10.1109/ICASSP.2019.8683240

Перейти к публикации

Predicting depression and emotions in the cross-roads of cultures, para-linguistics, and non-linguistics

Авторы: Kaya H., Fedotov D., Dresvyanskiy D., Doyran M., Mamontov D., Markitantov M., Akdag Salah A., Kavcar E., Karpov A., Salah A.A.

In Proc. 9th ACM International Audio/Visual Emotion Challenge and Workshop AVEC’19

Год публикации: 2019

DOI: https://doi.org/10.1145/3347320.3357691

Перейти к публикации

Lower Limbs Exoskeleton Control System Based on Intelligent Human-Machine Interface

Авторы: Kagirov I., Karpov A., Kipyatkova I., Klyuzhev K., Kudryavcev A., Kudryavcev I., Ryumin D.

International Symposium on Intelligent and Distributed Computing (IDC-2019) SCI, volume 868

Год публикации: 2019

DOI: 10.1007/978-3-030-32258-8_54

Перейти к публикации

Human-Robot Interaction with Smart Shopping Trolley using Sign Language: Data Collection

Авторы: Ryumin D., Ivanko D., Kagirov I., Axyonov A., Karpov A., Zelezny M.

IEEE International Conference on Pervasive Computing and Communications Workshops, PerCom Workshops 2019

Год публикации: 2019

DOI: https://doi.org/10.1109/PERCOMW.2019.8730886

Перейти к публикации

Time-Continuous Emotion Recognition Using Spectrogram Based CNN-RNN Modelling

Авторы: Fedotov D., Kim B., Karpov A., Minker W.

Lecture Notes in Computer Science, Springer LNAI 11658, SPECOM 2019

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-26061-3_10

Перейти к публикации

Cross-Corpus Data Augmentation for Acoustic Addressee Detection

Авторы: Akhtiamov O., Siegert I., Karpov A., Minker W.

20th ACL International Conference on Discourse and Dialogue SIGDial-2019

Год публикации: 2019

DOI:

Перейти к публикации

Проект специализированного корпуса русского жестового языка для применения в человеко-машинных интерфейсах.

Авторы: Кагиров И.А.

Труды 8-го междисциплинарного семинара «Анализ разговорной русской речи» (АР3-2019) нет

Год публикации: 2019

DOI: нет

Перейти к публикации

Контекстное непрерывное распознавание эмоций в русской речи с использованием рекуррентных нейронных сетей

Авторы: Федотов Д.В., Верхоляк О.В., Карпов А.А.

Труды 8-го междисциплинарного семинара «Анализ разговорной русской речи» АР3-2019

Год публикации: 2019

DOI:

Перейти к публикации

Управление роботизированным медицинским экзоскелетом посредством интеллектуального интерфейса.

Авторы: И.А. Кагиров, А.А. Карпов, И.С. Кипяткова, К.С. Клюжев, А.И. Кудрявцев, И.А. Кудрявцев, Д.А. Рюмин.

Труды международной научно-технической конференции «Экстремальная робототехника-2019» нет

Год публикации: 2019

DOI: 10.31776/ConfER.30.2019

Перейти к публикации

Automatic Lip-Reading of Hearing Impaired People

Авторы: Ivanko D., Ryumin D., Karpov A.

International Workshop on vol. XLII-2/W12

Год публикации: 2019

DOI: https://doi.org/10.5194/isprs-archives-XLII-2-W12-97-2019

Перейти к публикации

Speaking Style Based Apparent Personality Recognition

Авторы: Yu J., Markov K., Karpov A.

Lecture Notes in Computer Science, Springer LNAI 11658, SPECOM 2019

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-26061-3_55

Перейти к публикации

Smartphone-Based Driver Support in Vehicle Cabin: Human-Computer Interaction Interface

Авторы: Kashevnik A., Lashkov I., Ryumin D., Karpov A.

Lecture Notes in Computer Science, Springer LNAI 11659, ICR 2019

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-26118-4_13

Перейти к публикации

Human-Robot Interaction with Smart Shopping Trolley using Sign Language: Data Сollection

Авторы: Ryumin D., Ivanko D.V., Axyonov A., Kagirov I., Karpov A.A., Železný M.

The 1st International Workshop on Pervasive Computing and Spoken Dialogue Systems Technology

Год публикации: 2019

DOI: https://doi.org/10.1109/PERCOMW.2019.8730886

Перейти к публикации

Lip-reading Using Pixel-based and Geometry-based Features for Multimodal Human-Robot Interfaces

Авторы: Ivanko D., Ryumin D., Kipyatkova I., Axyonov A., Karpov A.

Smart Innovation, Systems and Technologies, Springer, Zavalishin’s Readings 2019 Том 154

Год публикации: 2019

DOI: https://doi.org/10.1007/978-981-13-9267-2_39

Перейти к публикации

Интеллектуальный интерфейс для управления роботизированным медицинским экзоскелетом нижних конечностей Remotion

Авторы: Кагиров И.А., Карпов А.А., Кипяткова И.С., Клюжев К.С., Кудрявцев А.И., Кудрявцев И.А., Рюмин Д.А.

Авиакосмическая и экологическая медицина №5, 2019

Год публикации: 2019

DOI: 10.21687/0233-528X-2019-53-5-92-98

Перейти к публикации

Жестовое управление коллаборативным роботом

Авторы: Кагиров И.А., Толстой И.М., Савельев А.И., Карпов А.А.

Робототехника и техническая кибернетика Т. 7, № 2

Год публикации: 2019

DOI: https://doi.org/10.31776/RTCJ.7208

Перейти к публикации

Корпус слитной русской речи для систем автоматического распознавания речи

Авторы: Кипяткова И.С., Кагиров И.А., Карпов А.А.

Год публикации: 2019

DOI:

Перейти к публикации

Smartphone-Based Driver Support in Vehicle Cabin: Human-Computer Interaction Interface

Авторы: Kashevnik A., Lashkov I., Ryumin D., Karpov A.

4th International Conference, ICR 2019, Istanbul, Turkey, Springer, LNAI vol. 11659

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-26118-4_13

Перейти к публикации

Автоматическое распознавание возраста и пола по голосу на основе глубоких нейронных сетей

Авторы: Маркитантов М.В., Карпов А.А.

Информационно-измерительные и управляющие системы Т. 17, № 5

Год публикации: 2019

DOI: 10.18127/j20700814-201905-10

Перейти к публикации

Vision-Based Assistive Systems for Deaf and Hearing Impaired People

Авторы: Ryumin D., Ivanko D., Kagirov I., Axyonov A., Karpov. A.

Computer Vision in Advanced Control Systems Intelligent Systems Reference Library Book Series, volume 175

Год публикации: 2019

DOI: 10.1007/978-3-030-33795-7_7

Перейти к публикации

Method for Multimodal Recognition of One-Handed Sign Language Gestures Through 3D Convolution and LSTM Neural Networks

Авторы: Kagirov I., Ryumin D., Axyonov A.

21st International Conference, SPECOM 2019, Istanbul, Turkey vol. 11658

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-26061-3_20

Перейти к публикации

Исследование методов построения моделей кодер-декодер для распознавания русской речи

Авторы: Марковников Н.М., Кипяткова И.С.

Информационно-управляющие системы 4

Год публикации: 2019

DOI: 10.31799/1684-8853-2019-4-45-53

Перейти к публикации

Управление роботизированным медицинским экзоскелетом посредством интеллектуального интерфейса

Авторы: Кагиров И.А., Карпов А.А., Кипяткова И.С., Клюжев К.С., Кудрявцев А.И., Кудрявцев И.А., Рюмин Д.А.

Труды международной научно-технической конференции «Экстремальная робототехника»

Год публикации: 2019

DOI: 10.31776/ConfER.30.2019

Перейти к публикации

Интеллектуальный интерфейс для управления роботизированным медицинским экзоскелетом нижних конечностей Remotion

Авторы: Кагиров И.А., Карпов А.А., Кипяткова И.С., Клюжев К.С., Кудрявцев А.И., Кудрявцев И.А., Рюмин Д.А.

Авиакосмическая и экологическая медицина 5

Год публикации: 2019

DOI: 10.21687/0233-528X-2019-53-5-92-98

Перейти к публикации

Исследование методов построения интегральных систем распознавания русской речи без выделения признаков

Авторы: Марковников Н.М., Кипяткова И.С.

Труды 8-го междисциплинарного семинара «Анализ разговорной русской речи» АР3-2019

Год публикации: 2019

DOI:

Перейти к публикации

Lower Limbs Exoskeleton Control System Based on Intelligent Human-Machine Interface

Авторы: Kagirov I., Karpov A., Kipyatkova I., Klyuzhev K., Kudryavcev A., Kudryavcev I., Ryumin D.

Intelligent Distributed Computing XIII. IDC 2019. Studies in Computational Intelligence, Springer vol. 868

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-32258-8_54

Перейти к публикации

Lip-reading Using Pixel-based and Geometry-based Features for Multimodal Human-Robot Interfaces

Авторы: Ivanko D., Ryumin D., Kipyatkova I., Axyonov A., Karpov A.

Smart Innovation, Systems and Technologies, Springer vol. 254

Год публикации: 2019

DOI: https://doi.org/10.1007/978-981-13-9267-2_39

Перейти к публикации

DESIGN OF AN INTELLECTUAL INTERFACE IN THE CONTEXT OF THE MEDICAL EXOSKELETON CONTROL TASK

Авторы: KAGIROV I., KARPOV A., KIPYATKOVA I., KLYUZHEV K., KUDRYAVCEV A., KUDRYAVCEV I., RYUMIN D.

Proceedings of the International Scientific and Technological Conference Extreme Robotics

Год публикации: 2019

DOI: 10.31776/ConfER.30.2019

Перейти к публикации

Design of an Intellectual Interface in the Context of the Medical Exoskeleton Control Task

Авторы: Kagirov I., Karpov A., Kipyatkova I., Klyuzhev K., Kudryavcev A., Kudryavcev I., Ryumin D.

Extreme Robotics № 1, vol. 1

Год публикации: 2019

DOI:

Перейти к публикации

LSTM-Based Language Models for Very Large Vocabulary Continuous Russian Speech Recognition System

Авторы: Kipyatkova I.

Lecture Notes in Computer Science, Springer, SPECOM 2019 LNAI 11658

Год публикации: 2019

DOI: 10.1007/978-3-030-26061-3_23

Перейти к публикации

Investigating Joint CTC-Attention Models for End-to-End Russian Speech Recognition

Авторы: Markovnikov N., Kipyatkova I.

Lecture Notes in Computer Science, Springer, SPECOM 2019 LNAI 11658

Год публикации: 2019

DOI: 10.1007/978-3-030-26061-3_35

Перейти к публикации

Lower Limbs Exoskeleton Control System Based on Intelligent Human-Machine Interface

Авторы: Kagirov I., Karpov A., Kipyatkova I., Klyuzhev K., Kudryavcev A., Kudryavcev I., Ryumin D.

Studies in Computational Intelligence, Springer SCI 868, IDC 2019

Год публикации: 2019

DOI: 10.1007/978-3-030-32258-8_54

Перейти к публикации

Lip-reading Using Pixel-based and Geometry-based Features for Multimodal Human-Robot Interfaces

Авторы: Ivanko D., Ryumin D., Kipyatkova I., Axyonov A., Karpov A.

Smart Innovation, Systems and Technologies, Springer, Zavalishin’s Readings 2019 154

Год публикации: 2019

DOI: 10.1007/978-981-13-9267-2_39

Перейти к публикации

Программная система для автоматического распознавания речи на основе моделей с использованием коннекционной временной классификации

Авторы: Марковников Н.М., Кипяткова И.С.

Свидетельство о государственной регистрации ПрЭВМ № 2019615375 Федеральной службы по интеллектуальной собственности от 25 апреля 2019 г.

Год публикации: 2019

DOI:

Перейти к публикации

Корпус слитной русской речи для систем автоматического распознавания речи

Авторы: Кипяткова И.С., Кагиров И.А., Карпов А.А.

Свидетельство о государственной регистрации БД № 2019620328 Федеральной службы по интеллектуальной собственности от 27 февраля 2019 г.

Год публикации: 2019

DOI:

Перейти к публикации

Vision-Based Assistive Systems for Deaf and Hearing Impaired People. Computer Vision in Advanced Control Systems

Авторы: Ryumin D., Ivanko D., Kagirov I., Axyonov A., Karpov A.

Springer vol. 175

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-33795-7_7

Перейти к публикации

Метод мультимодального распознавания одноручных жестов

Авторы: Аксёнов А.А., Рюмин Д.А., Кагиров И.А., Иванько Д.В.

Информационно-измерительные и управляющие системы № 5

Год публикации: 2019

DOI: 10.18127/j20700814-201905-11

Перейти к публикации

Human-Robot Interaction with Smart Shopping Trolley using Sign Language: Data Сollection.

Авторы: Ryumin D., Ivanko D.V., Axyonov A., Kagirov I., Karpov A.A., Železný M.

The 1st International Workshop on Pervasive Computing and Spoken Dialogue Systems Technology

Год публикации: 2019

DOI: https://doi.org/10.1109/PERCOMW.2019.8730886

Перейти к публикации

Method for Multimodal Recognition of One-Handed Sign Lan-guage Gestures Through 3D Convolution and LSTM Neural Networks

Авторы: Kagirov I., Ryumin D., Axyonov A.

21st International Conference, SPECOM 2019, Istanbul, Turkey vol. 11658

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-26061-3_20

Перейти к публикации

Lip-reading Using Pixel-based and Geometry-based Features for Multimodal Human-Robot Interfaces

Авторы: Ivanko D., Ryumin D., Kipyatkova I., Axyonov A., Karpov A.

Smart Innovation, Systems and Technologies, Springer vol. 254

Год публикации: 2019

DOI: https://doi.org/10.1007/978-981-13-9267-2_39

Перейти к публикации

Hierarchical Two-level Modelling of Emotional States in Spoken Dialog Systems

Авторы: Verkholyak O., Fedotov D., Kaya H., Zhang Y., Karpov A.

Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing ICASSP-2019 -

Год публикации: 2019

DOI: 10.1109/ICASSP.2019.8683240

Перейти к публикации

Взаимодействие человека и робота в пилотируемом космическом полете: онтологический подход

Авторы: Карпов А.А., Сергеев С.Ф., Лахин О.И., Михайлюк М.В., Крючков Б.И., Усов В.М.

Пилотируемые полеты в космос № 4

Год публикации: 2019

DOI: 10.34131/MSF.19.4.70-91

Перейти к публикации

Разработка прототипа системы автоматического определения ложной и истинной информации в речи

Авторы: Величко А.Н., Будков В.Ю.

Труды 8-го междисциплинарного семинара «Анализ разговорной русской речи» АР3-2019, Санкт-Петербург, СПбГУ

Год публикации: 2019

DOI:

Перейти к публикации

Modeling short-term and long-term dependencies of the speech signal for paralinguistic emotion classification

Авторы: Verkholyak O.V., Kaya H., Karpov A.A.

Труды СПИИРАН 1 (62)

Год публикации: 2019

DOI: DOI: 10.15622/sp.18.1.30-56

Перейти к публикации

Контекстное непрерывное распознавание эмоций в русской речи с использованием рекуррентных нейронных сетей

Авторы: Федотов Д.В., Верхоляк О.В., Карпов А.А.

Анализ разговорной русской речи (АРЗ-2019): труды восьмого междисциплинарного семинара - 2019

Год публикации: 2019

DOI:

Перейти к публикации

Automatic Recognition of Speaker Age and Gender Based on Deep Neural Networks

Авторы: Markitantov M., Verkholyak O.

SPECOM 2019. Lecture Notes in Computer Science Vol. 11658

Год публикации: 2019

DOI: https://doi.org/10.1007/978-3-030-26061-3_34

Перейти к публикации

Управление роботизированным медицинским экзоскелетом посредством интеллектуального интерфейса

Авторы: Кагиров И.А., Карпов А.А., Кипяткова И.С., Клюжев К.С., Кудрявцев А.И., Кудрявцев И.А., Рюмин Д.А.

Труды 30-й международной научно-технической конференции «Экстремальная робототехника 2019»

Год публикации: 2019

DOI: 10.31776/ConfER.30.2019

Перейти к публикации

Cyber-Physical System Control Based on Brain-Computer Interface

Авторы: Gundelakh Filipp, Stankevich Lev, Kapralov Nikolay V., Ekimovskii Jaroslav V.

Cyber-Physical Systems and Control

Год публикации: 2019

DOI: 10.1007/978-3-030-34983-7_45

Перейти к публикации

Разработка прототипа системы автоматического определения ложной и истинной информации в речи

Авторы: Величко А. Н., Будков В. Ю.

Анализ разговорной русской речи (АРз-2019)

Год публикации: 2019

DOI:

Перейти к публикации

Мобильная автономная робототехническая платформа с блочной изменяемой структурой

Авторы: Савельев А.И., Харьков И.Ю., Павлюк Н.А., Карпов А.А.

2704048

Год публикации: 2019

DOI:

Перейти к публикации

Comparative Analysis of Classification Methods for Automatic Deception Detection in Speech

Авторы: Velichko A., Budkov V., Kagirov I., Karpov A.

Lecture Notes in Computer Science (including subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics) No. 11096 LNAI

Год публикации: 2018

DOI:

Перейти к публикации

Multimodal subscriber interfaces for infocommunication systems

Авторы: Basov O., Kipyatkova I., Saveliev A.

Computing and Informatics 36

Год публикации: 2017

DOI:

Перейти к публикации

Using a high-speed video camera for robust audio-visual speech recognition in acoustically noisy conditions

Авторы: Ivanko D., Karpov A., Ryumin D., Kipyatkova I., Saveliev A., Budkov V., Ivanko D., Železný M.

International Conference on Speech and Computer 10458

Год публикации: 2017

DOI: 10.1007/978-3-319-66429-3_76

Перейти к публикации

Multimodal Subscriber Interfaces for Infocommunication Systems

Авторы: Oleg Basov, Irina Kipyatkova, Anton Saveliev

Computing and Informatics 4(36)

Год публикации: 2017

DOI:

Methods and Algorithms of Audio-Video Signal Processing for Analysis of Indoor Human Activity

Авторы: Vatamaniuk Irina V., Budkov Victor Yu, Kipyatkova Irina S., Karpov Alexey A.

Intelligent Systems Reference Library / Computer Vision in Control Systems-4

Год публикации: 2017

DOI: 10.1007/978-3-319-67994-5_6

Перейти к публикации

Bimodal speech recognition fusing audio-visual modalities

Авторы: Karpov A., Ronzhin A., Kipyatkova I., Ronzhin A., Verkhodanova V., Saveliev A., Zelezny M.

International Conference on Human-Computer Interaction 9732

Год публикации: 2016

DOI: 10.1007/978-3-319-39516-6_16

Перейти к публикации

Multimodal Information Coding System for Wearable Devices of Advanced Uniform

Авторы: Ronzhin Andrey L., Basov Oleg O., Motienko Anna I., Karpov Alexey A., Mikhailov Yuri V., Zelezny Milos

Human Interface and the Management of Information: Information, Design and Interaction / Lecture Notes in Computer Science

Год публикации: 2016

DOI: 10.1007/978-3-319-40349-6_52

Перейти к публикации

Педипуляторы антропоморфного робота Антарес с двухмоторной сборкой колена и двухсегментной стопой

Авторы: М.М. Бизин, А.В. Денисов, А.С. Кодяков, Н.А. Павлюк, Л.А. Станкевич

Робототехника и техническая кибернетика 4(13)

Год публикации: 2016

DOI:

Перейти к публикации

О способах контактного соединения группы модульных роботов

Авторы: А.Л. Ронжин, И.В. Ватаманюк, Л.А. Станкевич, Н.Е. Шляхов

Робототехника и техническая кибернетика 3(12)

Год публикации: 2016

DOI:

Перейти к публикации

Модели кодирования полимодальной информации

Авторы: Басов О.О., Кипяткова И.С., Савельев А.И., Саитов И.А.

Информационно-управляющие системы 2(81)

Год публикации: 2016

DOI:

Перейти к публикации

Применение RFID-технологий для информационной поддержки космонавтов на борту пилотируемого комплекса при использовании медицинских укладок и аптечек

Авторы: А.В. Поляков, В.П. Дашевский, А.А. Карпов, Б.И. Крючков, В.М. Усов

Пилотируемые полеты в космос 1(18)

Год публикации: 2016

DOI:

Перейти к публикации

Russian voice interface

Авторы: Ronzhin A., Karpov A.

Pattern Recognition and Image Analysis No. 17 2 (June 2007)

Год публикации: 2007

DOI:

Перейти к публикации

Контакты

Телефон

328-04-21

e-mail

karpov@iias.spb.su

Официальный сайт лаборатории

Официальный сайт лаборатории

http://hci.nw.ru/ru