Вопросы по теме 'mrunit'

Как протестировать редюсер, содержащий мутацию
Я пытаюсь использовать MRUnit, но ни один из примеров, которые я видел, не соответствует тому, что я пытаюсь сделать. Мой редуктор выводит ключ и мутацию, но я не могу сравнить мутацию с ожидаемой. Он показывает объекты как одинаковые, но с...
160 просмотров
schedule 25.11.2022

настройка конфигурации в mrunit
Я искал в документации mrunit, но пока не смог ее найти. Как мне передать параметры конфигурации в мой mrunit. Так, например, если я возьму пример с количеством слов. Допустим, в моем коде драйвера я устанавливаю этот параметр......
762 просмотров
schedule 30.05.2023

MRUnit передает значения в объект результата hbase
Я тестирую свой картограф с MRUnit. Я передаю ключ и список значений в качестве входных данных для картографа из тестового класса. Проблема в : String key=1234_abc; ArrayList<KeyValue> list = new ArrayList<KeyValue>(); KeyValue k1 =...
858 просмотров
schedule 16.12.2022

MRUnit в Windows без кластера Hadoop
Я ищу, есть ли способ запустить модульные тесты Hadoop Mapreduce в Windows без установки Hadoop. Работает ли MRUnit в Windows (без cygwin) в Eclipse как проект Java maven? Спасибо, Шриватсан Наллажагаппан.
897 просмотров
schedule 22.05.2023

Тест редуктора MRUnit: несоответствие класса стоимости
Мой модульный тест редуктора выдает исключение "Mismatch in value class" после перехода на MapReduce 2: Mismatch in value class: expected: class org.apache.hadoop.io.IntWritable actual: class com.company.MyWritable Само сообщение об ошибке...
160 просмотров
schedule 30.08.2022

Проблема с импортом проекта MRUnit Maven
Я изучаю Hadoop по книге O'Really «Hadoop, полное руководство, 4-е издание», и у меня возникла проблема с попыткой создать проект Maven для тестирования MRUnit. Я только что создал файл pom.xml, как показано в книге (просто изменив свою версию...
570 просмотров
schedule 08.07.2022

MR-Unit против JUnit для модульного тестирования
Может ли кто-нибудь объяснить, в чем преимущество использования MR-Unit для модульного тестирования заданий MR по сравнению с использованием JUnit и Mockito? Конкретно, какие вещи я могу сделать, чего я не могу сделать с помощью JUnit, или это...
521 просмотров
schedule 24.06.2023