Вопросы по теме 'dataimporthandler'

Отсутствует поле URL-адреса с использованием Solr DataImportHandler
Я новичок в Solr и испытываю трудности с DataImportHandler. Я получаю это сообщение при запуске сервера: 27 января 2010 г. 12:27:22 org.apache.solr.handler.dataimport.DataImportHandler processConfiguration ИНФОРМАЦИЯ: Обработка конфигурации из...
2486 просмотров
schedule 26.04.2023

Обработчик импорта данных в Solr
Я пытаюсь использовать обработчик импорта данных для базы данных MySQL. Я добавил DIhandler в solrconfig.xml, создал data-config.xml в соответствии со своей схемой базы данных, а также добавил другое поле в schema.xml. Я подключаюсь к базе данных...
1609 просмотров
schedule 12.10.2022

Какой тип данных SQL следует использовать для заполнения поля местоположения Solr (пространственного) при использовании DataImportHandler?
У меня есть схема Solr, которая содержит поле location (используя значение по умолчанию solr.LatLonType ): <field name="latlng" type="location" indexed="true" stored="true"/> И я пытаюсь заполнить его с помощью DataImportHandler. В...
2100 просмотров
schedule 18.06.2022

Solr: процессор файловых сущностей и дельта-импорт
Я использую solr 3.3 и хочу использовать дельта-импорт с процессором объектов файлов и процессором объектов tika. Полный импорт работает нормально, но параметр дельта-импорта не импортирует новые документы. Спасибо
635 просмотров

DataImportHandler не сообщает об ошибке, но не завершается
Я пытаюсь убедить solr выполнить массовый импорт базы данных sqlite. Я настроил DataImportHandler для успешного открытия этой базы данных через jdbc, и я могу начать импорт с помощью wget http://localhost:8080/solr/dataimport?command=full-import ,...
708 просмотров
schedule 24.03.2022

Полное обновление Solr не очищает индекс
У меня проблема, когда Solr не очищает индекс во время полного импорта. На всех серверах работает Solr 3.4, конфигурация настолько ванильна, насколько это возможно. Я попробовал это в нашей среде разработки и на своем собственном компьютере и...
1682 просмотров
schedule 05.08.2022

Почему Entity иногда нужен параметр URL, а иногда нет?
Я пытаюсь настроить DataImportHandler, и при попытке выполнить полный импорт я получаю эту ошибку: СЕРЬЕЗНЫЙ: полный импорт не выполнен: java.lang.RuntimeException: java.lang.RuntimeException:...
378 просмотров
schedule 13.06.2024

Более одного data-config.xml или разные обработчики импорта в Solr?
Мне нужно импортировать несколько баз данных и источников rss с помощью DIH. Есть ли возможность использовать более одного файла data-config.xml ? Или даже если используется только один, есть ли способ настроить разные обработчики импорта?...
1728 просмотров
schedule 07.09.2022

Конфигурация Solr DataImportHandler
Я хочу получить данные из базы данных mysql с помощью DataImportHandler, чтобы создать индексы. Теперь я настроил свой экземпляр Solr так, чтобы он работал на Tomcat (пример страницы администратора), но если я попытаюсь изменить файл sorlconfig.xml,...
7199 просмотров

Ускорить индексацию solr
Индексация Solr занимает слишком много времени. Я использую mysql с более чем 30 миллионами записей. Я использую двухуровневые подзапросы. Пожалуйста, предложите мне лучшие методы индексации данных, чтобы я мог ускорить процесс.
6736 просмотров
schedule 13.03.2023

не удалось настроить Tika1.2 с помощью solr4
Я пытаюсь использовать TikaEntityProcessor для индексации содержимого файла .html. Как-то я не могу понять это правильно. Я проверил журнал ошибок и получил следующую ошибку. SEVERE: Full Import...
1360 просмотров
schedule 26.04.2022

Solr: как сохранить относительный путь при использовании FileListEntityProcessor
Я использую FileListEntityProcessor для индексации локального каталога. Это решение работает, но я не хотите сохранить абсолютный путь. Вместо этого я хотел бы сохранить путь относительно baseDir. Это возможно?
554 просмотров
schedule 17.03.2023

Как импортировать правильную дату и время из mysql в solr?
Я не понимаю, как импортировать правильную дату и время из mysql в solr через DataImportHandler. После импорта значения даты и времени вычитаются через 2 часа. mysql "created_at 2013-04-05 15:04:21" попадает в solr для...
1800 просмотров

Solr, индексирующий мою временную метку SQL или поле даты и времени
Чтобы индексировать дату в Solr, дата должна быть в формате ISO. Можем ли мы индексировать MySQL Timestamp или Date Time без изменения инструкции SQL Select? я использовал <fieldType name="tdate" class="solr.TrieDateField" omitNorms="true"...
4457 просмотров
schedule 06.09.2022

импорт данных solr из mysql умирает, когда ограничение запроса mysq удаляется
У меня есть база данных mysql с более чем 400 000 000 записей в одной таблице. Импорт Solr работает нормально, когда я устанавливаю ограничение. Мой последний тест был 10 000 000, и он успешно прошел примерно через 5 минут. Требуется наличие...
2976 просмотров
schedule 16.03.2023

Поддерживает ли обработчик импорта данных Solr пользовательские переменные?
В настоящее время у меня есть проблема с моим обработчиком импорта данных, где ${dataimporter.last_index_time} недостаточно детализирован, чтобы зафиксировать два события, которые происходят в течение секунды друг от друга, что приводит к проблемам,...
4421 просмотров
schedule 26.02.2024

Автоматическое индексирование в Solr
Привет, я использую утилиту импорта данных Solr 4 для индексации базы данных Oracle 10g XE. Я использую полный импорт, а также дельта-импорт. Я хочу, чтобы эти процессы были автоматическими. (Например: процессы импорта могут быть рассчитаны по...
3035 просмотров
schedule 19.03.2023

Периодическое индексирование нескольких источников данных с помощью Apache Solr и обновление подмножества полей без обновления документа
У меня следующая ситуация: 2 источника данных должны быть проиндексированы Apache Solr. RDBM - постоянно в наличии CSV-файл, который можно время от времени отправлять в систему. Файл CSV просто обновляет 2 поля в уже существующих...
168 просмотров

Неравномерное распределение нагрузки после импорта данных в поисковый кластер DSE
Я экспериментирую с корпоративным поиском DataStax. У меня есть кластер из двух узлов, и я импортирую данные, используя функцию Dataimport консоли Solr. У меня отключены виртуальные узлы (num_tokens = 1 в cassandra.yaml) в соответствии с документом...
358 просмотров

Импорт из нескольких текстовых файлов в Solr
У меня есть два текстовых файла, назовите их A.txt и B.txt. И A.txt, и B.txt имеют 3 поля. Но семантика другая. Назовем эти поля следующим образом: A.txt : f1, f2, f3 B.txt : f1, f2, f4 A.txt и B.txt имеют одинаковые значения для f1 и f2,...
569 просмотров
schedule 13.06.2023