Мультимедійні бази даних з налаштуванням на користувальну модальність

Abstract

В роботі розглядається проблема підвищення ефективності мультимедійних баз даних за рахунок урахування когнітивних особливостей здобувачів вищої освіти, зокрема їх модальності сприйняття інформації. Запропоновано формальну модель користувальницької модальності, представлену у вигляді нормованого вектора переваг, що відображає ступінь домінування візуального, аудіального, текстового та кінестетичного каналів сприйняття. Розроблено метод представлення мультимедійного контенту в тому ж модальному просторі, що забезпечує можливість кількісного зіставлення користувача та даних. На цій основі реалізовано механізм адаптивного ранжування, що враховує як семантичну релевантність, так і відповідність форми подання інформації когнітивним уподобанням користувача. Проведено педагогічний експеримент за участю здобувачів, результати якого показали статистично значуще покращення ключових метрик: Precision@10, NDCG@10, приросту знань та задоволеності користувачів. Встановлено, що облік користувальницької модальності дозволяє підвищити релевантність видачі, знизити когнітивне навантаження та збільшити ефективність освітнього процесу. Отримані результати підтверджують перспективність інтеграції когнітивних характеристик користувача в архітектуру мультимедійних інформаційних систем та формують основу розробки адаптивних навчальних систем нового покоління.