#VMware#linux#hadoop#master#NameNode

[ BigData Related Topics ]
1. Hadoop
   1-1. Hadoop Cluster
        1-1-1. Setting-up a Single Node Hadoop Cluster
        1-1-2. Setting-up a Multi-node Hadoop Cluster
        1-1-3. Setting-up a Fully Distributed Hadoop Cluster
   1-2. MapReduce
   1-3. Hive
   1-4. Pig
   1-5. Flume
   1-6. Spark

Оглавление

[1] Prepare for Hadoop Configuration
    [1-1] Set up a new virtual machine
    [1-2] Set up a network
    [1-3] Download & Install Java & Hadoop
    [1-4] Set up environment variables
[2] Configure Hadoop
    [2-1] File : hadoop-env.sh
    [2-2] File : core-site.xml
    [2-3] File : slaves
    [2-4] Generate a SSH key
    [2-5] Format the namecode
    [2-6] Start using Hadoop!
    [2-7] Stop using Hadoop!

Прежде чем начать этот процесс, проверьте редактор виртуальной сети (если вы используете версию Pro).

Для VMware Workstation 15 Player (только для некоммерческого использования) мне не удалось найти, где изменить IP-адрес подсети.

Итак, я набрал ipconfig/all в командной строке Windows. В результате найдите «VMware Network Adapter VMnet8», а затем найдите «IPv4-адрес». Мой 192.168.37.1. Итак, на последующих этапах мне нужно будет использовать «37» вместо «100».

Как использовать редактор Linux vi

  • i : вставить в текущееместоположение.
  • I : вставить в начало выбранной строки.
  • a : добавить в следующуюстроку.
  • A : добавить в конецвыбранной строки.
  • o : Открыть строку послевыбранной строки
  • O : открыть строку передвыбранной строкой.

[1] Подготовка к настройке Hadoop

[1–1] Настройка новой виртуальной машины

Чтобы выйти из режима vmware, в котором вы не можете использовать мышь за пределами экрана vmware, нажмите Ctrl + Alt.

[1–2] Настройка сети

Или вы можете получить доступ к «Конфигурации устройства», введя следующий код:

Необходимо перезагрузить.

Вернувшись на экран, не забудьте подключиться к сети.

[1–3] Загрузите и установите Java и Hadoop

Гуглите "оракул java".

Гуглите «апач хауп».

tar(tap archive) : создает архив и извлекает файлы из архива.

  • -x : извлечь архивный файл
  • -v: показать ход архивного файла
  • -f : создает архив с заданным именем файла

(Источник: TecMint, Geeks4Geeks)

[1–4] Настройка переменных среды

Чтобы включить режим «insert», нажмите «i».

Убедитесь, что вы указали правильные версии Java и Hadoop.

[2] Настройка Hadoop

[2–1] Файл: hadoop-env.sh

Убедитесь, что вы указали правильную версию Java.

[2–2] Файл: core-site.xml

[2–3] Файл: рабы

[2–4] Создание ключа Secure Shell (SSH)

[2–5] Узел имени формата

[2–6] Начните использовать Hadoop!

jps : job processing scaling
NameNode : master
SecondaryNameNode : backup
DataNode : slaves

Мы поработаем над этими папками в следующих постах блога.

[2–7] Прекратите использовать Hadoop!

Что дальше:

[1–1–2] Настройка многоузлового кластера Hadoop

Спасибо за чтение! 🎵 Если вам понравилась эта запись в блоге, похлопайте👏