Лабораторная работа 3: Лабораторная работа
Описание
Перед запуском примера необходимо создать места ввода и вывода в формате HDFS. Используйте следующие команды для создания каталога ввода/пользователя/cloudera/wordcount/ ввода в HDFS
Создайте примеры текстовых файлов для использования в качестве входных данных и переместите их в каталог user/cloudera/wordcount/input в HDFS. Вы можете использовать любые файлы по своему выбору; для удобства следующие команды оболочки создают несколько небольших входных файлов для иллюстрации. Файл Makefile также содержит большинство следующих команд.
Скомпилируйте класс WordCount
Создайте файл JAR для приложения WordCount
Запустите приложение WordCount из файла JAR, передав пути к входным и выходным каталогам в формате HDFS
Если вы хотите запустить образец снова, сначала вам нужно удалить выходной каталог
Показать/скрыть дополнительное описание
Написать программу для подсчета количества слов на языке java или воспользоваться примерами программ. Перед запуском примера необходимо создать места ввода и вывода в формате HDFS. Используйте следующие команды для создания каталога ввода/пользователя/cloudera/wordcount/ ввода в HDFS Создайте примеры текстовых файлов для использования в качестве входных данных и переместите их в каталог user/cloudera/wordcount/input в HDFS. Вы можете использовать любые файлы по своему выбору; для удобства следующие команды оболочки создают несколько небольших входных файлов для иллюстрации. Файл Makefile также содержит большинство следующих команд. Скомпилируйте класс WordCount Создайте файл JAR для приложения WordCount Запустите приложение WordCount из файла JAR, передав пути к входным и выходным каталогам в формате HDFS Если вы хотите запустить образец снова, сначала вам нужно удалить выходной каталог.