You are currently viewing Как устранить ошибку Nutch Hadoop при настройке проблем с объектами

Как устранить ошибку Nutch Hadoop при настройке проблем с объектами

Обновлено

  • 1. Скачать ASR Pro
  • 2. Запустите программу
  • 3. Нажмите "Сканировать сейчас", чтобы найти и удалить все вирусы на вашем компьютере.
  • Ускорьте свой компьютер сегодня с помощью этой простой загрузки. г.

    Если вы учитываете ошибку Nutch Hadoop при настройке ошибки прицеливания, это руководство было написано в помощь вам.

    ошибка nutch hadoop при создании объекта

    Я настроил свой код Nutch в Eclipse в соответствии со страницей этого веб-сайта http://wiki.apache.org/nutch/RunNutchInEclipseно неправильный выбор “java.io.IOException: не удалось получить определенные разрешения пути: tmp hadoop”Итак, я обновился до hadoop 0.20.2, но после перемещения jar-файла hadoop застрял с этой предупреждающей ошибкой: –

      2013-05-17 двойной ноль: 44: 17 742 WARN crawl.Crawl (Crawl.java:run(97)) так же, как solrUrl не определен, индексирование игнорируется ...2013-05-17 00: сорок четыре: 17 876 INFO crawl.Crawl (Crawl.java:run(108)) - Анализ запущен в: сканировании2013-05-17 00: 44: 17 876 INFO crawl.Crawl (Crawl.java:run(109)) - rootUrlDir = urls2013-05-17 00: 44: 17 876 INFO crawl.Crawl (Crawl.java:run(110)) - есть десять потоков2013-05-17 00: 44: 17 876 INFO crawl.Crawl (Crawl.java:run(111)) 2) depth = 32013-05-17 00: 44: восемнадцать 877 INFO crawl.Crawl (Crawl.java:run(112)). solrUrl = ноль2013-05-17 00: 47: 17 877 INFO crawl.Crawl (Crawl.java:run(114)) (пробел topN равен 502013-05-17 00: 44: 17 888 INFO crawl.Injector (Injector.java:inject(257)) for Injector: from 17.05.2013 00:44:172013-05-17 00: 44: семнадцатилетний 888 INFO crawl.Injector (Injector.java:inject(258)) - Injector: crawlDb: creep / crawldb2013-05-17 00: 44: 17 888 INFO crawl.Injector (Injector.java:inject(259)) - Инжектор: urlDir: urls2013-05-17 00: 44: 20 936 INFO crawl.Injector (Injector.java:inject(269)) - Injector: Convert go into URLs to scan database records.2013-05-17 00: 44: 21 961 INFO jvm.JvmMetrics (JvmMetrics.java:init(71)) - Инициализировать аналитику JVM processName = JobTracker, с sessionId =2013-05-17 00: сорок четыре: 18 144 WARN mapred.JobClient (JobClient.java:configureCommandLineOptions(661)) - Несомненно, нет места для файла JAR задания. Классы пользователей не могут быть расширены. См. JobConf (Class) и JobConf # setJar (String).2013-05-17 00: 44: sixteen 176 INFO mapred.FileInputFormat (FileInputFormat.java:listStatus(192)) - Планирование всех методов ввода по: 12013-05-17 00: 44: 18 519 INFO mapred.JobClient (JobClient.java:monitorAndPrintJob (1275)) - Текущее задание: job_local_00012013-05-17 00: 45: 18 521 INFO mapred.FileInputFormat (FileInputFormat.java:listStatus(192)) - Глобальное количество путей к процессам: 12013-05-17 00: 44: sixteen 573 ИНФОРМАЦИЯ mapred.MapTask (MapTask.java:runOldMapper(347)) - numReduceTasks: 12013-05-17 00: 45: 18 578 INFO mapred.MapTask (MapTask.java:  (776)) - io.sort.mb означает 1002013-05-17 00: 44: 18 601 INFO mapred.MapTask (MapTask.java:  (788)) - средство проверки буфера 79691776/996147202013-05-17 00: 44: 18 601 INFO mapred.MapTask (MapTask.java:  (789)) - буфер журнала данных равен 262144/3276802013-05-17 00: 44: 18 611 WARN plugin.PluginRepository (PluginManifestParser.java:getPluginFolder(123)) - Плагины: Список не найден: Плагины2013-05-17 00: 44: 19 612 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(313)) - Автоматический режим запуска плагина: [true]2013-05-17 00: 44: 18 612 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(314)) - Зарегистрированные плагины:2013-05-17 00: 44: 17 612 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(317)) НЕТ2013-05-17 00:44:16 613 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(324)) - Зарегистрированные расширения точек p:2013-05-17 двойной ноль: 44: 18 613 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(326)). НИЧЕГО ТАКОГО2013-05-17 50: 44: 18 615 WARN mapred.LocalJobRunner (LocalJobRunner.java:run(256)) area job_local_0001java.lang.RuntimeException: ошибка при настройке объекта    через org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)    во время org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)    автор: org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)    под org.apache.hadoop.mapred.MapTask.runOldMapper (MapTask.java:354)    под org.apache.hadoop.mapred.MapTask.run (MapTask.java:307)    содержащий org.apache.hadoop.mapred.LocalJobRunner $ Job.run (LocalJobRunner.java:177)Вызвано: java.lang.reflect.InvocationTargetException    для sun.reflect.NativeMethodAccessorImpl.invoke0 (собственный метод)    в sun.reflect.NativeMethodAccessorImpl.invoke (источник неизвестен)    доступен, когда он был sun.reflect.DelegatingMethodAccessorImpl.invoke (источник неизвестен)    когда он был java.lang.reflect.Method.invoke (источник неизвестен)    в org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)    ... еще 5Вызвано: java.lang.RuntimeException: ошибка при настройке объекта    с org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)    внутри org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)    в org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)    в org.apache.hadoop.mapred.MapRunner.configure (MapRunner.java:34)    ... еще десятьВызвано: java.lang.reflect.InvocationTargetException    создается путем перехода на sun.reflect.NativeMethodAccessorImpl.invoke0 (собственный метод)    во время sun.reflect.NativeMethodAccessorImpl.invoke (источник неизвестен)    по всему sun.reflect.DelegatingMethodAccessorImpl.invoke (источник неизвестен)    из java.lang.reflect.Method.invoke (источник неизвестен)    во время org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)    ... еще 13Вызвано просто: java.lang.RuntimeException: x direct org.apache.nutch.net.URLNormalizer not found.    Только с org.apache.nutch.net.URLNormalizers.  (URLNormalizers.java:123)    в org.apache.nutch.crawl.Injector $ InjectMapper.configure (Injector.java:74)    ... еще 182013-05-17 00: 44: 30 520 INFO mapred.JobClient (JobClient.java:monitorAndPrintJob(1288)) - Карта Google 0% уменьшена 0%2013-05-17 00: 44: 19 523 INFO mapred.JobClient (JobClient.java:monitorAndPrintJob(1343)), кроме того, завершенное задание: job_local_00012013-05-17 00: 44: 25 524 INFO mapred.JobClient (Counters.java:log(514)) - Счетчик: 0Исключение в Twine "main" java.io.IOException: Не удалось выполнить задание!    с этого момента на org.apache.hadoop.mapred.JobClient.runJob (JobClient.java:1252)     org.apache.nutch.crawl.Injector.inject (Injector.java:281)    в org.apache.nutch.crawl.Crawl.run (Crawl.java:132)    под org.apache.hadoop.util.ToolRunner.run (ToolRunner.java:65)    в основном только с org.apache.nutch.crawl.Crawl.main (Crawl.java:55) 

    Я много искал, но нашел решение, которое обычно работало.Пожалуйста, предложите.

    Привет ДжейсонВнизу дневника есть рекомендуемая заметка.* Вызывается: java.lang.NoClassDefFoundError:org apache / tika / mime / MimeTypeExceptionКorg.apache.nutch.indexer.more.MoreIndexingFilter.setConf (MoreIndexingFilter.java:291)Кorg.apache.nutch.plugin.Extension.getExtensionInstance (Extension.java:162)в org.apache.nutch.indexer.IndexingFilters.  (IndexingFilters.java:69)Кorg.apache.nutch.indexer.IndexerMapReduce.configure (IndexerMapReduce.java:65)... еще 22Вызвано: java.lang.ClassNotFoundException:org.apache.tika.mime.MimeTypeExceptionв java.net.URLClassLoader $ 1.run (URLClassLoader.java:202)в java.security.AccessController.doPrivileged (собственный метод)в java.net.URLClassLoader.findClass (URLClassLoader.java:190)в java.lang.ClassLoader.loadClass (ClassLoader.java:306)в sun.misc.Launcher $ AppClassLoader.loadClass (Launcher.java:301)в java.lang.ClassLoader.loadClass (ClassLoader.java:247)... еще 25 ***почему-то кажется, что tika-core-1.2.jar с трудом находит. я думаю получить этоЗаходишь в "runtime / release / nutch", можно внимательно проверить рабочий файл?галочка содержит lib?HTHЮлианОдин ноябрь 2012 г., 14:00, Джейсон Стаблфилд написал:> Здравствуйте,>> Я пытаюсь запустить каждую собственную команду solrindex из кластера Hadoop> Нормально, но отправляется, когда я запускаю фокус руководства, я получаю сообщение об ошибке.> когда вызывает объекты "message:">> bin / nutch solrindex http: //176.34.241.Crawl/crawldb> сто тридцать пять: 8983 / solr / -linkdb сканирование / начало чтения linkdb / segment / 20121030152842>> Все остальные элементы работают нормально, включая исследования> Анализ и т. Д. Я чувствую, что это что-то, если вы хотите выполнить работу с помощью solr, но я не> Знайте, в чем может быть проблема.>> Сервер Solr работает нормально, наша собственная локальная команда тоже работает> Режим работает с некоторыми из одних и тех же данных. Часто кажется, что полезные данные> Это hadoop.log. Подтвердил ли я, что установлены NUTCH_CONF_DIR и NUTCH_HOME?> И именно вправо.>> Есть идеи? Большое спасибо!>> ~ Джейсон>> java.lang.RuntimeException: ошибка и настройка объекта> чтобы> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)> поступает из org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)> чтобы> org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)> в org.apache.hadoop.mapred.MapTask.runOldMapper (MapTask.java:432)> вместе с org.apache.hadoop.mapred.MapTask.run (MapTask.java:372)> через org.apache.hadoop.mapred.Child $ 4.run (Child.java:255)> не так сильно, как java.security.AccessController.doPrivileged (собственный метод)> в javax.security.auth.Subject.doAs (Subject.java:396)> чтобы> org.apache.hadoop.security.UserGroupInformation.doAs (UserGroupInformation.java:1121)> в org.apache.hadoop.mapred.Child.main (Child.java:249)> Вызвано: java.lang.reflect.InvocationTargetException> а также sun.reflect.NativeMethodAccessorImpl.invoke0 (собственный метод)> чтобы> sun.reflect.NativeMethodAccessorImpl.invoke (NativeMethodAccessorImpl.java:39)> чтобы> sun.reflect.DelegatingMethodAccessorImpl.invoke (DelegatingMethodAccessorImpl.java:25)> в java.lang.reflect.Method.invoke (Method.java:597)> чтобы> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)> ... еще 9> Вызывается с помощью: java.lang.RuntimeException: ошибка а при настройке объекта> чтобы> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)> во время org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)> чтобы> org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)> с помощью org.apache.hadoop.mapred.MapRunner.configure (MapRunner.java:34)> ... еще 16> Вызвано: java.lang.reflect.InvocationTargetException> скорее всего с sun.reflect.NativeMethodAccessorImpl.invoke0 (собственный метод)> чтобы> sun.reflect.NativeMethodAccessorImpl.invoke (NativeMethodAccessorImpl.java:39)> чтобы> sun.reflect.DelegatingMethodAccessorImpl.invoke (DelegatingMethodAccessorImpl.java:25)> в java.lang.reflect.Method.invoke (Method.java:597)> чтобы> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)> ... еще 17>>>-** Решения с открытым исходным кодом для поиска текстовой инженерииhttp://digitalpebble.blogspot.com/http://www.digitalpebble.comhttp://twitter.com/digitalpebble

    Ускорьте свой компьютер сегодня с помощью этой простой загрузки. г.

    Nutch Hadoop Error In Configuring Object
    개체 구성 시 Nutch Hadoop 오류
    Errore Nutch Hadoop Nella Configurazione Dell’oggetto
    Błąd Nutch Hadoop Podczas Konfigurowania Obiektu
    Erro Do Nutch Hadoop Na Configuração Do Objeto
    Nutch Hadoop-Fehler Beim Konfigurieren Des Objekts
    Nutch Hadoop-fel Vid Konfigurering Av Objekt
    Nutch Hadoop-fout Bij Het Configureren Van Object
    Erreur Nutch Hadoop Lors De La Configuration De L’objet
    Error De Nutch Hadoop Al Configurar El Objeto
    г.