DATA ANALYSIS BY SQL-MAPREDUCE PLATFORM
Аннотация:
The paper deals with the problems related to the usage of relational database management system (RDBMS), mainly in the analysis of large data content, including data analysis based on web services in the Internet. A solution of these problems can be represented as a web-oriented distributed system of the data analysis with the processor of service requests as an executive kernel. The functions of such system are similar to the functions of relational DBMS, only with the usage of web services. The processor of service requests is responsible for planning of data analysis web services calls and their execution. The efficiency of such web-oriented system depends on the efficiency of web services calls plan and their program implementation where the basic element is the facilities of analyzed data storage – relational DBMS. The main attention is given to extension of functionality of relational DBMS for the analysis of large data content, in particular, the perspective estimation of web services data analysis implementation on the basis of SQL/MapReduce platform. With a view of obtaining this result, analytical task was chosen as an application-oriented part, typical for data analysis in various social networks and web portals, based on data analysis of users’ attendance. In the practical part of this research the algorithm for planning of web services calls was implemented for application-oriented task solution. SQL/MapReduce platform efficiency is confirmed by experimental results that show the opportunity of effective application for data analysis web services.
Ключевые слова:
Постоянный URL
Статьи в номере
ОПТИЧЕСКИЙ КОНТРОЛЬ В СИСТЕМЕ УПРАВЛЕНИЯ КАЧЕСТВОМ ПРОИЗВОДСТВА ПОРШНЕВЫХ КОЛЕЦ
ПРИМЕНЕНИЕ ОПТИКО-СПЕКТРАЛЬНЫХ ТЕХНОЛОГИЙ ДЛЯ КОНТРОЛЯ И ДИАГНОСТИКИ ОТБЕЛЬНЫХ ПРОИЗВОДСТВ В ЦЕЛЛЮЛОЗНО-БУМАЖНОЙ ПРОМЫШЛЕННОСТИ
ДИСТАНЦИОННАЯ ЛАЗЕРНАЯ ИДЕНТИФИКАЦИЯ ТИПА СТРОИТЕЛЬНОГО МАТЕРИАЛА
ОПТИМИЗАЦИЯ ДИНАМИЧЕСКИХ ПАРАМЕТРОВ ОПТИЧЕСКОГО ЩУПА ТРИГГЕРНОГО ТИПА
- Анализ геномных вариантов клеток Escherichia coli К-12, устойчивых к инфекции фагом Т7
- Тест
- АНАЛИЗ МЕТОДОВ ОБРАБОТКИ ИНТЕРФЕРОМЕТРИЧЕСКИХ ДАННЫХ В СПЕКТРАЛЬНОЙ ОПТИЧЕСКОЙ КОГЕРЕНТНОЙ ТОМОГРАФИИ
- ВОССТАНОВЛЕНИЕ ИЗОБРАЖЕНИЯ С ЦИФРОВОЙ ФУРЬЕ-ГОЛОГРАММЫ В УСЛОВИЯХ ПРЕВЫШЕНИЯ ЧАСТОТЫ НАЙКВИСТА
- ОПРЕДЕЛЕНИЕ МАЛЫХ СМЕЩЕНИЙ ПОВЕРХНОСТИ ОБЪЕКТОВ МЕТОДОМ ЦИФРОВОЙ ГОЛОГРАФИИ
- ТЕРАГЕРЦОВЫЕ СПЕКТРЫ ПРОПУСКАНИЯ И ОТРАЖЕНИЯ КАТАРАКТАЛЬНО ИЗМЕНЕННЫХ ХРУСТАЛИКОВ ГЛАЗА ЧЕЛОВЕКА
- ФОРМИРОВАНИЕ РЕКУРРЕНТНОЙ АЛГОРИТМИЧЕСКОЙ СРЕДЫ КОРРЕКЦИИ МНОГОКРАТНЫХ ИСКАЖЕНИЙ СИСТЕМАТИЧЕСКИХ КОДОВ НА ОСНОВЕ КВАЗИСИНДРОМОВ В ТЕМПЕ АППАРАТНОГО ВРЕМЕНИ
- ИССЛЕДОВАНИЕ ФИЗИЧЕСКИХ ПРОЦЕССОВ В ИМПУЛЬСНОЙ КСЕНОНОВОЙ ЛАМПЕ ПРИ РАБОТЕ В ЭЛЕКТРИЧЕСКОЙ СХЕМЕ НАКАЧКИ НА ОСНОВЕ МОДУЛЯТОРА С ЧАСТИЧНЫМ РАЗРЯДОМ НАКОПИТЕЛЬНОЙ ЕМКОСТИ
- СИНТЕЗ ОПТИМАЛЬНЫХ ИСКУССТВЕННЫХ НЕЙРОННЫХ СЕТЕЙ С ПОМОЩЬЮ МОДИФИЦИРОВАННОГО ГЕНЕТИЧЕСКОГО АЛГОРИТМА
- ИДЕНТИФИКАЦИЯ И НАСТРОЙКА СИСТЕМЫ УПРАВЛЕНИЯ ЭЛЕКТРОПРИВОДА АЗИМУТАЛЬНОЙ ОСИ ТЕЛЕСКОПА
- ПРОБЛЕМНО-ОРИЕНТИРОВАННАЯ АГЕНТНАЯ ПЛАТФОРМА ДЛЯ СОЗДАНИЯ ПОЛИМОДЕЛЬНЫХ КОМПЛЕКСОВ ПОДДЕРЖКИ УПРАВЛЕНИЯ БЕЗОПАСНОСТЬЮ РЕГИОНА
- СИСТЕМЫ ДУБЛИРОВАННЫХ ВЫЧИСЛИТЕЛЬНЫХ КОМПЛЕКСОВ С ПЕРЕРАСПРЕДЕЛЕНИЕМ ЗАПРОСОВ
- ПРИМЕНЕНИЕ ПОСЛЕДОВАТЕЛЬНОСТЕЙ ДЕ БРЕЙНА ДЛЯ ПОСТРОЕНИЯ ПСЕВДОРЕГУЛЯРНЫХ КОДОВЫХ ШКАЛ
- ЗАДАЧИ РАЗВИТИЯ IT-ИНФРАСТРУКТУРЫ ПРЕДПРИЯТИЯ
- КИНЕМАТИЧЕСКОЕ УПРАВЛЕНИЕ ДВУХПАРАМЕТРИЧЕСКОЙ СКАНИРУЮЩЕЙ АНТЕННОЙ
- КОЛИЧЕСТВЕННОЕ ОПИСАНИЕ НЕЛИНЕЙНОЙ ДИНАМИКИ ПОРИСТОЙ АКРИЛОВОЙ ТОНКОЙ ПЛЕНКИ
- МЕТОДИКА РАСЧЕТА СВОБОДНОКОНВЕКТИВНОГО ТЕПЛООБМЕНА НА ТВЕРДЫХ ПОВЕРХНОСТЯХ В ШИРОКОМ ИНТЕРВАЛЕ ТЕМПЕРАТУР
- МАТЕМАТИЧЕСКИЕ МОДЕЛИ ОЦЕНКИ ИНФРАСТРУКТУРЫ СИСТЕМЫ ЗАЩИТЫ ИНФОРМАЦИИ НА ПРЕДПРИЯТИИ
- ПОИСК ВРЕДОНОСНЫХ ПРОГРАММ НА ОСНОВЕ АНАЛИЗА ПРОЦЕССА РАСПРОСТРАНЕНИЯ
- ВЕРОЯТНОСТНАЯ МОДЕЛЬ ОЦЕНКИ ИНФОРМАЦИОННОГО ВОЗДЕЙСТВИЯ
- МЕХАНИЗМЫ И ПОСЛЕДСТВИЯ ПРЕДНАМЕРЕННЫХ ЭЛЕКТРОМАГНИТНЫХ ВОЗДЕЙСТВИЙ НА ПЕРЕДАЧУ ДАННЫХ
- ИНТЕГРИРОВАННЫЕ ТЕХНОЛОГИИ ПРОЕКТИРОВАНИЯ ИЗДЕЛИЙ ИЗ ПОЛИМЕРНЫХ КОМПОЗИЦИОННЫХ МАТЕРИАЛОВ
- ОБЕСПЕЧЕНИЕ КАЧЕСТВА ПОВЕРХНОСТЕЙ ДЕТАЛЕЙ НА ЭЛЕКТРОЭРОЗИОННОМ ОБОРУДОВАНИИ
- НАУЧНЫЕ ПРЕДПОСЫЛКИ МЕНЕДЖМЕНТА ИНТЕЛЛЕКТУАЛЬНОЙ СОБСТВЕННОСТИ В РЕШЕНИИ ЗАДАЧ ИННОВАЦИОННОГО РАЗВИТИЯ РОССИИ
- МЕТОДОЛОГИЧЕСКИЕ ОСНОВЫ УСТОЙЧИВОСТИ И УСТОЙЧИВОГО РАЗВИТИЯ ПРЕДПРИНИМАТЕЛЬСКИХ СТРУКТУР КАК СОЦИАЛЬНО-ЭКОНОМИЧЕСКИХ СИСТЕМ
- СОВЕРШЕНСТВОВАНИЕ СИСТЕМЫ УПРАВЛЕНИЯ РИСКАМИ ПРИ ПЕРЕМЕЩЕНИИ ТОВАРОВ И ТРАНСПОРТНЫХ СРЕДСТВ ЧЕРЕЗ ТАМОЖЕННУЮ ГРАНИЦУ РОССИЙСКОЙ ФЕДЕРАЦИИ
- РАСПРЕДЕЛЕНИЕ ВЕНЧУРНЫХ ИНВЕСТИЦИЙ ПО СТАДИЯМ ИННОВАЦИЙ В РОССИИ И США
- МОДЕЛЬ УПРАВЛЕНИЯ ПРОЕКТАМИ КОМПЕТЕНТНОСТНО-ОРИЕНТИРОВАННЫХ ОСНОВНЫХ ОБРАЗОВАТЕЛЬНЫХ ПРОГРАММ ВУЗА
- ТЕМПЕРАТУРНАЯ ЗАВИСИМОСТЬ ПОКАЗАТЕЛЯ ПРЕЛОМЛЕНИЯ ВОДНЫХ РАСТВОРОВ ЭТИЛЕНГЛИКОЛЯ И ПРОПИЛЕНГЛИКОЛЯ
- АРХИТЕКТУРА ПРОГРАММНОГО ОБЕСПЕЧЕНИЯ АВТОМАТИЗИРОВАННОГО РАБОЧЕГО МЕСТА РАЗРАБОТЧИКА БОРТОВОГО АВИАЦИОННОГО ОБОРУДОВАНИЯ
- РЕАЛИЗАЦИЯ ЖИЗНЕННОГО ЦИКЛА «ПРОЕКТИРОВАНИЕ-ПРОИЗВОДСТВО-ЭКСПЛУАТАЦИЯ» БОРТОВОГО ОБОРУДОВАНИЯ НА ПРЕДПРИЯТИЯХ АВИАЦИОННОЙ ПРОМЫШЛЕННОСТИ
- О РАБОТАХ ПО ЗАЩИТЕ ИНФОРМАЦИИ ОТ ПРЕДНАМЕРЕННЫХ ЭЛЕКТРОМАГНИТНЫХ ВОЗДЕЙСТВИЙ
- ВАРИАНТЫ ОБЪЕДИНЕНИЯ РАЗНОТИПНЫХ КАНАЛОВ ВЫЧИСЛИТЕЛЬНОЙ СЕТИ
- ОЦЕНКА ФУНКЦИОНАЛЬНОЙ БЕЗОПАСНОСТИ ДУБЛИРОВАННЫХ ВЫЧИСЛИТЕЛЬНЫХ СИСТЕМ
- ОБЗОР СИСТЕМ ФИНАНСОВОГО ПЛАНИРОВАНИЯ, ПРЕДСТАВЛЕННЫХ НА РЫНКЕ КАЗАХСТАНА
- МУЗЫКАЛЬНО-КОМПЬЮТЕРНЫЕ ТЕХНОЛОГИИ В СИСТЕМЕ СОВРЕМЕННОГО МУЗЫКАЛЬНОГО ОБРАЗОВАНИЯ