Журнал
Научно-технический вестник информационных технологий, механики и оптики
УДК:004.855.3
Номер:4 (104)
Скачать PDF0 Кбайт
СИСТЕМА ОБУЧЕНИЯ ВИЗУАЛЬНЫМ ПОНЯТИЯМ НА ОСНОВЕ СООТНЕСЕНИЯ ЛЕКСЕМ И КЛЮЧЕВЫХ ТОЧЕК
Аннотация:
Предмет исследования.Исследован процесс формирования визуальных понятий на основе двух неразмеченных потоков информации (визуального и текстового). Метод. Формирование визуальных понятий осуществляется путем соотнесения визуальных паттернов с появляющимися одновременно с ними лексемами. Процесс обучения разбивается на два этапа: раннее зрительное обучение (первичное обучение), обучение на основе лексико-семантической информации (вторичное обучение). Первый этап заключается в построении словаря визуальных слов, служащего основой для второго этапа. Вторичное обучение предполагает анализ двух потоков информации, связанных по времени. В каждом канале проводится разделение информации на отдельные единицы, которые, в свою очередь, описываются на основе векторов признаков. Визуальные понятия формируются путем выявления связи между признаками, извлеченными из двух каналов информации. Основные результаты. Реализована система формирования визуальных понятий, которая протестирована на видеоданных, сопровожденных субтитрами. Результаты тестирования показали принципиальную возможность формирования визуальных понятий данной системой. Практическая значимость. Описанная в работе система может быть использована для задач распознавания статических и динамических объектов, поиска изображений объектов в архиве видеоданных, автоматического создания баз визуальных понятий на основе произвольных видеофайлов, содержащих текстовое описание.
Ключевые слова:
Постоянный URL
Статьи в номере
- АКТУАЛЬНЫЕ ЗАДАЧИ И ДОСТИЖЕНИЯ СИСТЕМ ПАРАЛИНГВИСТИЧЕСКОГО АНАЛИЗА РЕЧИ
- МЕТОДЫ ПОСТРОЕНИЯ ВЫСОКОСТАБИЛЬНЫХ ЭРБИЕВЫХ СУПЕРЛЮМИНЕСЦЕНТНЫХ ВОЛОКОННЫХ ИСТОЧНИКОВ ОПТИЧЕСКОГО ИЗЛУЧЕНИЯ
- АНАЛИЗ ПЕЛЕНГАЦИОННЫХ ХАРАКТЕРИСТИК ИМПУЛЬСНОГО ОПТИЧЕСКОГО КООРДИНАТОРА ЦЕЛИ ПРИ ОБЛУЧЕНИИ САМОЛЕТОВ-ЦЕЛЕЙ
- ВЛИЯНИЕ МЕТОДОВ ОБРАБОТКИ И ОЧИСТКИ ПОВЕРХНОСТИ СИТАЛЛА СО-115М НА ПРОЧНОСТЬ ОПТИЧЕСКОГО КОНТАКТА
- РОБАСТНЫЕ АЛГОРИТМЫ ПАРАМЕТРИЧЕСКОГО ОЦЕНИВАНИЯ В НЕКОТОРЫХ ЗАДАЧАХ ОБЕСПЕЧЕНИЯ УСТОЙЧИВОСТИ
- ИНТЕРВАЛЬНАЯ ОЦЕНКА СОСТОЯНИЙ СИНГУЛЯРНЫХ СИСТЕМ ДИФФЕРЕНЦИАЛЬНЫХ УРАВНЕНИЙ С ЗАПАЗДЫВАНИЕМ
- ИСПОЛЬЗОВАНИЕ ПУЛЬСАЦИЙ ДАВЛЕНИЯ КОЛЕБЛЮЩЕГОСЯ ГАЗОВОГО ПОТОКА ДЛЯ ОБРАБОТКИ ТЕРМОУПРОЧНЕННЫХ ОБРАЗЦОВ СТАЛИ 40Х
- СИНТЕЗ, СТРУКТУРА И СПЕКТРАЛЬНЫЕ СВОЙСТВА КАЛИЕВО-АЛЮМОБОРАТНЫХ СТЕКОЛ С НАНОКРИСТАЛЛАМИ ФЕРРИТА МАРГАНЦА
- КРИТЕРИИ ОЦЕНКИ И МОДЕЛИ ИНФОРМАЦИОННЫХ СИСТЕМ, ОБЛАДАЮЩИХ СВОЙСТВОМ ПОВЕДЕНИЯ
- ДИНАМИЧЕСКИЕ МОДЕЛИ ОТЛАДКИ ПРОГРАММ C ВЕРОЯТНОСТНЫМ ОБНАРУЖЕНИЕМ ОШИБОК И РАСПРЕДЕЛЕНИЕМ ЭРЛАНГА ДЛИТЕЛЬНОСТИ ИХ ИСПРАВЛЕНИЯ
- ИЗМЕРЕНИЕ РАССТОЯНИЯ ПО ЕДИНСТВЕННОМУ ДЕФОКУСИРОВАННОМУ СНИМКУ
- ПРИМЕНЕНИЕ БИНАРНЫХ ДЕСКРИПТОРОВ ДЛЯ ТРЕКИНГА МНОЖЕСТВА ЛИЦ В СИСТЕМАХ ВИДЕОНАБЛЮДЕНИЯ
- ТОЧНОСТЬ, СКОРОСТЬ И СЛОЖНОСТЬ УСТРОЙСТВ КОДИРОВАНИЯ ИЗОБРАЖЕНИЙ ПО ОПОРНЫМ ТОЧКАМ
- РЕАЛИЗАЦИЯ ТЕХНОЛОГИИ ОБНАРУЖЕНИЯ УТЕЧКИ ИНФОРМАЦИИ ПРИ ПРОВЕДЕНИИ АТАК ПО СТОРОННИМ КАНАЛАМ, ОСНОВАННОЙ НА МЕТОДЕ ВЫЧИСЛЕНИЯ НОРМАЛИЗОВАННОЙ ВНУТРИКЛАССОВОЙ ДИСПЕРСИИ
- РАЗРАБОТКА СИСТЕМЫ АВТОМАТИЧЕСКОГО РАСПОЗНАВАНИЯ РЕЧИ ДЛЯ ЕГИПЕТСКОГО ДИАЛЕКТА АРАБСКОГО ЯЗЫКА В ТЕЛЕФОННОМ КАНАЛЕ
- РАСПРЕДЕЛЕНИЕ И АДАПТАЦИЯ ВИДЕОПОТОКА В ФОРМАТЕ SVC В ГЕТЕРОГЕННОЙ СЕТИ
- МОЛЕКУЛЯРНО-ДИНАМИЧЕСКОЕ МОДЕЛИРОВАНИЕ ВЗАИМОДЕЙСТВИЯ ЛИЗИНОВОГО ДЕНДРИМЕРА И ПЕПТИДОВ СЕМАКС
- ВОЛЬТ-АМПЕРНЫЕ ХАРАКТЕРИСТИКИ ДЛЯ ДВУХ СИСТЕМ КВАНТОВЫХ ВОЛНОВОДОВ С ПРИСОЕДИНЕННЫМИ КВАНТОВЫМИ РЕЗОНАТОРАМИ
- МОДЕЛЬНОЕ ИССЛЕДОВАНИЕ МАШИНЫ ДВОЙНОГО ПИТАНИЯ С ТОКОВЫМ УПРАВЛЕНИЕМ
- КОМПЬЮТЕРНОЕ МОДЕЛИРОВАНИЕ ПРОЧНОСТНЫХ ХАРАКТЕРИСТИК ДАТЧИКА ИНДУКЦИОННОГО ЛАГА
- ИССЛЕДОВАНИЕ РЕЖИМА СИЛЬНОГО КОНФАЙНМЕНТА КВАНТОВЫХ ТОЧЕК СЕЛЕНИДА КАДМИЯ ВО ФТОРОФОСФАТНЫХ СТЕКЛАХ
- СИСТЕМА ТЕХНИЧЕСКОГО ЗРЕНИЯ ДЛЯ РОБОТИЗИРОВАННОГО МАКЕТА НАДВОДНОГО СУДНА
- ИССЛЕДОВАНИЕ РОСТА НАНОКРИСТАЛЛОВ ХЛОРИДА СЕРЕБРА ВО ФТОРОФОСФАТНОМ СТЕКЛЕ