Введение в технологии Big Data - ответы на вопросы на СтудИзбе

Сколько Петабайт в Зеттабайте?

• 1024
• 128
• 32
• 4

Говоря о том, как временные окна фильтров влияют на аудиосигнал, можно утверждать, что они …

• повышают его частоту дискретизации
• изменяют амплитуду аудиосигнала во временной области
• позволяют анализировать и модифицировать сигнал в различные моменты времени

Анализ временных рядов включает в себя несколько ключевых аспектов. Например, временные ряды используют для обнаружения неожиданных изменений в данных, которые могут указывать на важные события или проблемы, требующие дальнейшего исследования. Назовите данный аспект.

• Идентификация трендов.
• Выявление сезонности и цикличности.
• Анализ аномалий.

… – это процесс преобразования входных данных в выходные в контексте алгоритмов

• Компиляция
• Итерация
• Отображение
• Энкодинг

… – это разделение звуковых образов, которое применяется для восстановления записей с мест преступлений или инцидентов, где важно изолировать речь или другие звуки из фонового шума для дальнейшего анализа

• Преобразование Фурье
• Форензика
• Временные окна фильтров
• Развертка временных рядов

Отметьте причину создания NoSQL баз данных…

• высокая стоимость горизонтальной масштабируемости RDBMS при сохранении требования
• высокой доступности
• недостаточная гибкость языка запросов SQL
• невозможность хранить большие объёмы
• данных дороговизна лицензий RDBMS

Одним из ключевых преимуществ тепловых карт является их способность наглядно представлять плотность и распределение данных. Цвета на карте могут варьироваться от холодных до теплых тонов, где теплые цвета обычно представляют более высокие значения, а холодные – более низкие. Например, тепловые карты могут демонстрировать распределение населения по городам или регионам, показывая более плотно населенные районы в более теплых цветах. К какой области применения тепловых карт относится данный пример?

• Анализе веб-данных.
• Биоинформатика.
• География.

Разработчики систем стабилизации, несмотря на их значительные достижения и предложенные усовершенствования, сталкиваются с рядом технических и физических ограничений. Что требуется для преодоления существующих ограничений систем стабилизации и управления беспилотных летательных аппаратов (БПЛА)?

• Требуется получение принципиально новой технологии стабилизации, без такой технологии преодолеть существующие ограничения невозможно.
• Требуется разработать новые более надежные и чувствительные сенсоры. Только это может помочь преодолеть существующие ограничения.
• Требуется комплексный подход, включающий исследования и разработку новых материалов, сенсоров и актуаторов с улучшенными характеристиками.

Для создания HDR-изображений требуются как специализированный софт, так и аппаратные средства. Какие аппаратные требования предъявляются к оборудованию для создания исходных снимков для HDR-изображений?
Тип ответа: Одиночный выбор • с выбором одного правильного ответа из нескольких предложенных вариантов

• Для создания исходных снимков подойдет большинство современных цифровых камер и даже смартфонов с режимом HDR.
• Для создания исходных снимков подойдет большинство современных цифровых камер, но смартфоны использовать для этой цели нельзя.
• Для создания исходных снимков подойдет только зеркальная цифровая камера профессионального уровня, большинство современных цифровых камер для этой цели не могут быть использованы.

Процесс определения эмоционального оттенка текста, например, определение того, является ли отзыв положительным, негативным или нейтральным, – это …

• информативный анализ текста
• анализ настроений
• стилистический анализ текста
• лингвистический анализ текста

… цветовая модель – это модель, в которой цвета создаются путем поглощения (вычитания) некоторых волн света, отражая другие; примером является CMYK-модель

Одной из наиболее распространенных и важных задач в области аудиообработки является отделение голосов людей от фоновых звуков или эмбиента. Используя методы разделения звуковых образов, можно эффективно изолировать голосовые сигналы от фоновых шумов. Разделение звуковых образов используется для множества целей, включая ремикширование и мастеринг треков. Например, технология разделения позволяет инженерам извлекать вокальные партии из существующих записей для их последующего использования в ремиксах или для создания новой музыки. Также это применяется для улучшения качества записи путем отделения и детальной обработки инструментальных и вокальных дорожек. Какую область использования разделения звуковых образов иллюстрируют эти примеры?

• Музыкальная продукция.
• Видеопродакшен.
• Область коммуникационных технологий.

… – это распределенная база данных, разработанная для обработки больших объемов данных на множестве серверов без единой точки отказа; обеспечивает высокую доступность и масштабируемость

• MongoDB
• Cassandra
• Redis

Теория … – это раздел прикладной математики, изучающий поведение динамических систем и способы их управления для достижения желаемых результатов

Установите правильную последовательность шагов разработки системы стабилизации беспилотных летательных аппаратов (БПЛА):

• 1 моделирование поведения системы
• 2 применение алгоритмов управления
• 3 аналитика реального времени
• 4 тестирование прототипа

Отказоустойчивость Big Data – это, когда…

• активируются до 1000 компьютеров
• сбой в одном звене системы не ведет к сбоям в других звеньях
• недостоверные данные удаляются из системы
• данные обрабатываются на других серверах

… объектов – это линии или границы, которые обозначают края объектов на изображении и помогают отделить объекты друг от друга и от фона

Этот процесс в контексте текстовой информации включает группировку слов или предложений на основе их семантической близости или других схожих характеристик. Эта задача позволяет структурировать большие объемы текстовых данных, выявляя в них скрытые паттерны и темы. Данный метод может использоваться для идентификации синонимов или тематически связанных терминов в больших корпусах текста. Например, слова «автомобиль», «машина» и «транспортное средство» могут быть сгруппированы в одну группу – это значительно упрощает анализ текста, позволяя системам обработки естественного языка (NLP) лучше понимать контекст и смысл текстов. О каком процессе идет речь?

• кластеризация
• токенизация
• лемматизация

Существуют различные программы для обработки звука. Примером является популярное программное обеспечение для создания музыки на платформе macOS. Оно включает в себя инструменты для записи, редактирования и микширования музыкальных композиций, а также широкий выбор виртуальных инструментов и эффектов. Назовите данную программу.

• Audacity
• Pro Tools
• Logic Pro

Аналитик это …

• специалист в области анализа и моделирования
• специалист в предметной области
• человек, решающий определенные задачи
• человек, который имеет опыт в программировании

Что представляет из себя Apache Hadoop?

• Система управления базами данных
• Графический редактор
• Язык программирования
• Веб-браузер
• Фреймворк для обработки и хранения больших данных

В широком смысле алгоритм можно определить как …

• процесс шифрования данных
• набор инструкций или правил для выполнения определенной задачи
• устройство для обработки информации
• программа для обучения искусственного интеллекта

… – это раздел компьютерных наук, посвященный созданию машин, способных выполнять задачи, требующие человеческого интеллекта

Расстояние … – это мера различия между двумя строками одинаковой длины, определяемая количеством позиций, на которых соответствующие символы этих строк различны

Проклятием размерности в анализе данных называют …

• увеличение времени обработки данных с увеличением их объема
• сложности, возникающие при работе с данными большого объема
• возрастание сложности и уменьшение точности анализа данных при увеличении их размерности
• проблемы с хранением больших объемов данных

Для выявления и анализа взаимосвязей между переменными используют … анализ, позволяющий не только выявить взаимосвязи между переменными, но и моделировать будущие тенденции на основе этих связей

… – это графическое представление распределения тонов в изображении, где по горизонтальной оси отложены уровни яркости, а по вертикальной – количество пикселей для каждого уровня

• Томограмма
• Гистограмма
• График
• Диаграмма рассеяния

Сегментация изображений, ключевой этап в обработке визуальных данных, требует применения специализированных инструментов и языков программирования для эффективной обработки и анализа. В частности, есть библиотека для глубокого обучения от Google, позволяющая эффективно реализовывать и тренировать сверточные нейронные сети (CNN), которые являются основой для многих современных методов сегментации изображений. Эта библиотека обеспечивает не только возможность обучения моделей на высоком уровне, но и их быстрое применение для обработки изображений в реальном времени. О какой библиотеке идет речь?

• TensorFlow
• OpenCV
• Pillow

Интегрированные среды разработки (IDE) – это комплексные программные решения, которые предоставляют разработчикам удобный интерфейс для написания, тестирования и отладки кода. В числе наиболее популярных IDE – мощная среда от Microsoft для разработки на C#, VB.NET, C++ и других языках. Поддерживает разработку приложений для Windows, мобильных платформ и веба. Назовите данный продукт.

• IntelliJ IDEA
• Visual Studio
• Eclipse

… представляет собой данные, которые не поддаются легкому разделению и хранению в традиционных реляционных базах данных из-за их неоднородной структуры; эти данные часто содержат элементы, которые могут быть интерпретированы и обработаны только с помощью специфических или сложных алгоритмов

• Детекция объектов
• Слабоструктурированная информация
• Цифровое изображение
• Текстурный масштаб

… нейросети – это класс глубоких нейронных сетей, специализированных на анализе визуальных данных, способных автоматически и эффективно извлекать важные признаки из изображений

Упорядочьте шаги создания HDR-изображения:

• 1 съемка с разной экспозицией
• 2 комбинирование снимков
• 3 тоновая коррекция

…, или элемент изображения, является базовой единицей, определяющей визуальное представление изображения на экране или в цифровом файле. Каждый пиксель содержит информацию о цвете и яркости, что позволяет создавать сложные и многоцветные изображения

Как происходит обучение нейронной сети?

• эксперты настраивают нейронную сеть
• сеть запускается на обучающем множестве, и незадействованные нейроны выкидываются
• сеть запускается на обучающем множестве, и подстраиваются весовые значения
• сеть запускается на обучающем множестве, и добавляются или убираются соединения между нейронами

Установите соответствие характеристик больших данных и их описаний:

• A. Объем (Volume)
• B. Скорость (Velocity)
• C. Разнообразие (Variety)
• D. характеристика больших данных, относящаяся к количеству генерируемых и хранимых данных
• E. характеристика больших данных, относящаяся к темпу, с которым данные генерируются, обрабатываются и анализируются
• F. аспект больших данных, относящийся к различным типам и форматам данных, с которыми необходимо работать

Выберите технологию потоковой обработки событий в режиме реального времени

• Apache Kafka
• Apache Hadoop
• MapReduce
• Spark Streaming

Расписание движения поездов может рассматриваться как пример…

• Табличной модели
• Натурной модели
• Математической модели
• Графической модели

Искусственные нейронные сети (ИНС) — модели машинного обучения, использующие комбинации распределенных простых операций, зависящих от обучаемых параметров, для обработки входных данных. Какого вида ИНС не существует?

• Наивные
• Рекуррентные
• Импульсные
• Противоборствующие

Установите соответствие понятий и их определений:

• A. Диаграммы разброса
• B. Методы уменьшения размерности
• C. Временные ряды
• D. графические представления, показывающие взаимосвязь между двумя переменными, где каждая точка представляет одно наблюдение в системе координат
• E. техники, применяемые для сокращения количества переменных в анализе данных, с сохранением при этом важной информации
• F. последовательность точек данных, собранных в последовательные моменты времени, часто используемая для анализа тенденций и паттернов в данных, которые изменяются со временем

Сокращение «ПИД-регуляторы» расшифровывается как «пропорционально-…-дифференциальные регуляторы»

Слова, которые очень часто встречаются в тексте, но не несут значимой семантической нагрузки для анализа текста (например, предлоги, союзы, местоимения) – это …

• слова-символы
• стоп-слова
• омонимы
• слова-сигналы

Разработчиками беспилотных летательных аппаратов (БПЛА) была создана система, использующая комбинацию гироскопических сенсоров и алгоритмов машинного обучения для мгновенной коррекции полетного пути. Благодаря этому беспилотник способен эффективно противостоять воздействию ветра, сохраняя заданную траекторию и высоту. Тестирование в экстремальных условиях показало высокую эффективность системы, подтвердив ее способность адаптироваться к резким изменениям внешней среды. Применение какой системы описано в этом примере?

• Это пример применения системы стабилизации.
• Это пример применения системы навигации.
• Это пример применения системы повышения мощности и скорости полета.

Прикладные программные решения для разделения звуковых образов играют важную роль в множестве сфер, от музыкальной индустрии до улучшения аудио в образовательных и корпоративных презентациях. Программное обеспечение предоставляет специализированные инструменты для изоляции вокала и отделения фоновых шумов или музыки от основного аудиопотока. Приведите примеры таких программных продуктов.

• iZotope RX, Adobe Audition.
• QuickTime, IINA.
• MediaMonkey, JRiver MediaCenter.

Преобразование … – это математический инструмент, позволяющий переходить между временным и частотным представлениями звукового сигнала, выявляя составляющие его частоты.

Область искусственного интеллекта, занимающаяся разработкой алгоритмов, способных обучаться и делать предсказания или решения на основе данных, – это …

• машинное обучение
• глубокое обучение
• экспертные системы
• компьютерное зрение

Интегрированные среды разработки (IDE) – это комплексные программные решения, которые предоставляют разработчикам удобный интерфейс для написания, тестирования и отладки кода. Например, специализированная IDE для Python от JetBrains, предоставляет широкий набор инструментов для разработки на Python, включая фреймворки для веб-разработки и научных вычислений Назовите данный продукт.

• IntelliJ IDEA
• Visual Studio
• PyCharm

… – это процесс приведения слова к его базовой форме (лемме), с учетом его семантических характеристик

… – это примеры использования временных рядов в области экономики и финансов

• Ежедневные цены акций, курс валют, экономические индикаторы, (например, индексы потребительских цен)
• Ежечасные или ежедневные данные о температуре, осадках, влажности
• Ежемесячные или годовые данные о продажах, показатели трафика веб-сайтов, статистика клиентских обращений

Основным принципом работы таких систем является непрерывный мониторинг состояния беспилотного летательного аппарата (БПЛА) с помощью датчиков (гироскопов, акселерометров, магнитометров) и применение корректирующих мер через исполнительные механизмы (например, моторы и сервоприводы) для поддержания заданной ориентации и высоты полета.
О каких системах идет речь?

В данном процессе учитывается контекст и имеет место полное преобразование слова до его канонической формы. Особенно важен этот процесс в языках с богатой морфологией и сложной системой склонений, где одно и то же слово может иметь множество различных форм. Это требует глубокого понимания языка и доступа к обширным лексическим базам данных.
О каком процессе идет речь?

Этот процесс в контексте текстовой информации включает группировку слов или предложений на основе их семантической близости или других схожих характеристик. Эта задача позволяет структурировать большие объемы текстовых данных, выявляя в них скрытые паттерны и темы.
Данный метод может использоваться для идентификации синонимов или тематически связанных терминов в больших корпусах текста. Например, слова «автомобиль», «машина» и «транспортное средство» могут быть сгруппированы в одну группу – это значительно упрощает анализ текста, позволяя системам обработки естественного языка (NLP) лучше понимать контекст и смысл текстов.
О каком процессе идет речь?

Сегментация изображений, ключевой этап в обработке визуальных данных, требует применения специализированных инструментов и языков программирования для эффективной обработки и анализа.
В частности, есть библиотека для глубокого обучения от Google, позволяющая эффективно реализовывать и тренировать сверточные нейронные сети (CNN), которые являются основой для многих современных методов сегментации изображений. Эта библиотека обеспечивает не только возможность обучения моделей на высоком уровне, но и их быстрое применение для обработки изображений в реальном времени.
О какой библиотеке идет речь?

Эта библиотека является одной из наиболее известных и широко используется для обработки изображений и компьютерного зрения. Она предоставляет разработчикам комплексный набор алгоритмов и функций. Это включает в себя не только улучшение видимости изображений, но и более сложные процессы, такие как распознавание объектов и трекинг движения. Эта библиотека поддерживает разработку высокопроизводительных приложений для реального времени, что делает ее незаменимой для проектов, связанных с автоматической обработкой визуальной информации.
Назовите описанную библиотеку.

Анализ временных рядов включает в себя несколько ключевых аспектов. Например, временные ряды используют для обнаружения неожиданных изменений в данных, которые могут указывать на важные события или проблемы, требующие дальнейшего исследования.
Назовите данный аспект.

Анализ временных рядов включает в себя несколько ключевых аспектов. Один из основных аспектов анализа временных рядов связан с определением общих тенденций или направлений. Например, можно получить указание на успешный продукт или маркетинговую кампанию в данных о продажах.
Назовите данный аспект.

Существуют различные инструменты и платформы для работы с большими данными.
В качестве примера можно назвать популярный фреймворк для обработки больших данных, который обеспечивает высокую скорость обработки за счет использования в памяти вычислений и оптимизированных алгоритмов. Он поддерживает различные типы задач, включая пакетную обработку, потоковую передачу данных, машинное обучение и графовые вычисления. Это делает его идеальным выбором для задач, требующих быстрой обработки и анализа данных в реальном времени.
О какой программной платформе говорится в данном примере?

Интегрированные среды разработки (IDE) – это комплексные программные решения, которые предоставляют разработчикам удобный интерфейс для написания, тестирования и отладки кода.
В числе наиболее популярных IDE – распространенная среда для разработки на Java,Kotlin и других языках. Она известна своими продвинутыми возможностями анализа кода и удобством использования.
Назовите данную среду разработки.

Ваша команда разработчиков работает над созданием алгоритма для оптимизации логистических операций в крупной розничной сети.
Что необходимо предпринять для разработки этого алгоритма, чтобы обеспечить его эффективность и точность?

Системы … находят широкое применение в различных типах беспилотных летательных аппаратов (БПЛА), используемых для коммерческих и военных целей, например, в сфере аэрофотосъемки эти системы позволяют дронам снимать высококачественные изображения и видео даже при сильном ветре

Аналитика реального времени – это …

Сокращение «ПИД-регуляторы» расшифровывается как «пропорционально-…-дифференциальные регуляторы»

Теория … – это раздел прикладной математики, изучающий поведение динамических систем и способы их управления для достижения желаемых результатов

Процесс определения эмоционального оттенка текста, например, определение того, является ли отзыв положительным, негативным или нейтральным, – это …

Расстояние … – это метрика, измеряющая разницу между двумя строками текста как минимальное количество односимвольных изменений (вставки, удаления, замены), необходимых для преобразования одной строки в другую

Слова, которые очень часто встречаются в тексте, но не несут значимой семантической нагрузки для анализа текста (например, предлоги, союзы, местоимения) – это …

Данные, не имеющие заранее определенной структуры или формата, включая тексты, изображения, аудио и видео, – это …

… – это процесс разделения цифрового изображения на множество сегментов (или областей), чтобы упростить его анализ или изменить его представление; сегменты могут представлять отдельные объекты, границы или области с однородными атрибутами

… – это процесс группировки пикселей или точек данных на основе их схожести, который используется в сегментации для разделения изображения на смысловые области

… обучение – это подраздел машинного обучения, в котором используются нейронные сети с множеством уровней (слоев) для извлечения высокоуровневых признаков из данных

Аддитивная цветовая модель, основанная на смешивании красного, зеленого и синего света для воспроизведения широкого спектра цветов, – …

… цветовая модель – это модель, в которой цвета создаются путем поглощения (вычитания) некоторых волн света, отражая другие; примером является CMYK-модель

Звук представляется в цифровой форме …

… нейросети – это класс глубоких нейронных сетей, специализированных на анализе визуальных данных, способных автоматически и эффективно извлекать важные признаки из изображений

…, или элемент изображения, является базовой единицей, определяющей визуальное представление изображения на экране или в цифровом файле. Каждый пиксель содержит информацию о цвете и яркости, что позволяет создавать сложные и многоцветные изображения

Преобразование … – это математический инструмент, позволяющий переходить между временным и частотным представлениями звукового сигнала, выявляя составляющие его частоты.

… информация – это данные, организованные в четком и упорядоченном формате, часто хранящиеся в таблицах или базах данных, где каждая запись имеет одинаковую структуру

Говоря об основных вызовах и проблемах, связанных с использованием больших данных, следует упомянуть … данных, так как с ростом объемов данных увеличивается и риск их утечки или неправомерного использования

В широком смысле алгоритм можно определить как …

Наборы данных, которые из-за своего объема, скорости генерации и разнообразия не могут быть обработаны традиционными методами баз данных, – это …

Что означает термин «Big Data» в информационных технологиях?

• Комплексный набор методов обработки структурированных и неструктурированных данных колоссальных объемов
• Представление времени, дня, месяца и года в качестве значения количества миллисекунд, прошедших с начала нашей эры
• Файлы с большим количеством данных
• Комплексный набор методов для создания файлов большого объёма

В 2016 году программа AlphaGo обыграла одного из мировых по шахматам чемпионов Ли Седоля. Какая компания разработала ИИ AlphaGo?

• Facebook
• Google
• Microsoft
• Yandex

Изначально Big Data применяли лишь в…

• геологии
• академической среде
• спутниковой связи
• криптовалютах

Какой язык программирования из перечисленных является наиболее важным для аналитика?

• C++
• PHP
• F#
• R

Интеллектуальный анализ данных или Data Mining…

• Информация, которая организована и проанализирована с целью сделать ее понятной и применимой для решения задачи или принятия решений.
• Оперативная обработка транзакций
• Термин, используемый для описания открытия знаний в базах данных, выделения знаний, изыскания данных, исследования данных, обработки образцов данных, очистки и сбора данных; здесь же подразумевается сопутствующее ПО
• Оперативная обработка транзакций

Традиционные методы визуализации могут находить следующее применение…Представлять пользователю информацию в наглядном виде

• Компактно описывать закономерности, присущие исходному набору данных
• Снижение размерности или сжатие информации

Программа от Google научилась рисовать на основе эскизов, сделанных людьми. Что при этом учитывала программа?

• стиль типичный для похожих изображений
• только конечный результат
• концепцию (идею) рисунка
• цветовую гамму типичную для похожих изображений

Укажите фактор, способствовавший появлению тренда больших данных...

• маркетинговые кампании крупных корпораций
• повышение издержек на хранение данных
• появление новых технологий обработки потоковых данных
• выпуск баз данных с обработкой данных в памяти

Какое из нижеперечисленных понятий не относится к перечню необходимых критериев для создания проекта, связанного с Большими данными?

• Географическое положение
• Производительность
• Гибкость анализа
• Скорость принятия решения

Данные могут быть получены в результате...

• Измерений
• Экспериментов
• Арифметических и логических операций

Принципом Big Data не является…

• горизонтальная масштабируемость
• локализация данных
• отказоустойчивость обработки
• мобильность приложений

Что означает термин NoSQL?

• Не SQL
• Не только SQL
• Без SQL
• SQL – плохо

На основе какого языка был создан R?

• C
• S
• Java
• Python

Какая компания создала технологию MapReduce?

• Google
• Yahoo
• EMC
• Oracle

Одна из главных целей Data Mining – это получение…

• связей малых выборок данных, распространение их на большие массивы
• скриншотов всех обработок данных
• аудита сайтов, веб-ресурсов
• гарантированной сетевой безопасности

В краудсорсинге вклад в проект каждого участника осуществляется…

• лишь финансами
• лишь затратами времени
• ресурсами – компьютер, время и др.
• привлечением аутсорсинга

Примером применения Big Data не может быть…

• зондирование Земли из космоса
• родительский контроль
• хранение данных клиентов в соцсетях
• доступ к крупнейшим библиотекам

Эффективно применять Data Mining с целью защиты от…

• мошенников
• инфицирующих ботов
• инфицированных клиентов
• инсайдеров

Дайте определение Big Data

• Комплексный набор инструментов обработки структурированных данных колоссальных объемов
• Комплексный набор подходов, инструментов и методов обработки структурированных и неструктурированных данных колоссальных объемов
• Комплексный набор методов обработки неструктурированных данных колоссаль
• Комплексный набор методов обработки структурированных данных колоссальных объемов

Отметьте верное понимание Variety в контексте характеристик Big Data…

• высокая скорость генерирования данных
• разные типы данных в колонках таблиц реляционных СУБД
• разнообразие отраслей, являющихся источниками данных
• разнообразие типов данных, включающих в себя структурированные, полуструктурированные и неструктурированные

Итак, вы решили работать с большими данными. Какой из этих инструментов вам вряд ли пригодится?

• SQL
• Texmaker
• Python
• R