#VMware#linux#hadoop#master#NameNode
[ BigData Related Topics ] 1. Hadoop 1-1. Hadoop Cluster 1-1-1. Setting-up a Single Node Hadoop Cluster 1-1-2. Setting-up a Multi-node Hadoop Cluster 1-1-3. Setting-up a Fully Distributed Hadoop Cluster 1-2. MapReduce 1-3. Hive 1-4. Pig 1-5. Flume 1-6. Spark
Оглавление
[1] Prepare for Hadoop Configuration [1-1] Set up a new virtual machine [1-2] Set up a network [1-3] Download & Install Java & Hadoop [1-4] Set up environment variables [2] Configure Hadoop [2-1] File : hadoop-env.sh [2-2] File : core-site.xml [2-3] File : slaves [2-4] Generate a SSH key [2-5] Format the namecode [2-6] Start using Hadoop! [2-7] Stop using Hadoop!
Прежде чем начать этот процесс, проверьте редактор виртуальной сети (если вы используете версию Pro).
Для VMware Workstation 15 Player (только для некоммерческого использования) мне не удалось найти, где изменить IP-адрес подсети.
Итак, я набрал ipconfig/all
в командной строке Windows. В результате найдите «VMware Network Adapter VMnet8», а затем найдите «IPv4-адрес». Мой 192.168.37.1
. Итак, на последующих этапах мне нужно будет использовать «37
» вместо «100
».
Как использовать редактор Linux vi
i
: вставить в текущееместоположение.I
: вставить в начало выбранной строки.a
: добавить в следующуюстроку.A
: добавить в конецвыбранной строки.o
: Открыть строку послевыбранной строкиO
: открыть строку передвыбранной строкой.
[1] Подготовка к настройке Hadoop
[1–1] Настройка новой виртуальной машины
Чтобы выйти из режима vmware, в котором вы не можете использовать мышь за пределами экрана vmware, нажмите Ctrl + Alt.
[1–2] Настройка сети
Или вы можете получить доступ к «Конфигурации устройства», введя следующий код:
Необходимо перезагрузить.
Вернувшись на экран, не забудьте подключиться к сети.
[1–3] Загрузите и установите Java и Hadoop
Гуглите "оракул java".
Гуглите «апач хауп».
tar(tap archive)
: создает архив и извлекает файлы из архива.
-x
: извлечь архивный файл-v
: показать ход архивного файла-f
: создает архив с заданным именем файла
(Источник: TecMint, Geeks4Geeks)
[1–4] Настройка переменных среды
Чтобы включить режим «insert», нажмите «i
».
Убедитесь, что вы указали правильные версии Java и Hadoop.
[2] Настройка Hadoop
[2–1] Файл: hadoop-env.sh
Убедитесь, что вы указали правильную версию Java.
[2–2] Файл: core-site.xml
[2–3] Файл: рабы
[2–4] Создание ключа Secure Shell (SSH)
[2–5] Узел имени формата
[2–6] Начните использовать Hadoop!
jps : job processing scaling NameNode : master SecondaryNameNode : backup DataNode : slaves
Мы поработаем над этими папками в следующих постах блога.
[2–7] Прекратите использовать Hadoop!
Что дальше:
Спасибо за чтение! 🎵 Если вам понравилась эта запись в блоге, похлопайте👏