You are currently viewing Hur Man Felsöker Nutch Hadoop-fel Vid Konfigurering Av Målproblem

Hur Man Felsöker Nutch Hadoop-fel Vid Konfigurering Av Målproblem

Table of Contents

Uppdaterad

  • 1. Ladda ner ASR Pro
  • 2. Kör programmet
  • 3. Klicka på "Skanna nu" för att hitta och ta bort eventuella virus på din dator
  • Få fart på din dator idag med denna enkla nedladdning.

    Om du får ett Nutch Hadoop-fel när du konfigurerar ett objektfel, skrevs den här vanliga frågan för att hjälpa dig.

    nutch hadoop-fel vid konfigurering av objekt

    Jag har designat min Nutch-kod i Eclipse enligt den här typen av webbsida http://wiki.apache.org/nutch/RunNutchInEclipsemen felet “java.io.IOException: Kunde inte leta efter specifika sökvägsbehörigheter: tmp hadoop”Så jag uppgraderade till hadoop 0.20.2 men efter att ha flyttat hela burken fastnade hadoop med detta varningsfel: –

      2013-05-17 00: 44: 17th 742 WARN crawl.Crawl (Crawl.java:run(97)) eftersom solrUrl är odefinierad, lista ignoreras ...2013-05-17 00: 44: 17 876 INFO crawl.Crawl (Crawl.java:run(108)) - Analys startade i: scan2013-05-17 50: 44: 17 876 INFO crawl.Crawl (Crawl.java:run(109)) area rootUrlDir = urls2013-05-17 00: 44: 17 876 INFO crawl.Crawl (Crawl.java:run(110)) - det finns 10 trådar2013-05-17 00: fyrtiofyra: 17 876 INFO crawl.Crawl (Crawl.java:run(111)) - djupet innebär 32013-05-17 00: 44: 17 877 INFO crawl.Crawl (Crawl.java:run(112)). solrUrl = noll2013-05-17 00: 44: 17 877 INFO crawl.Crawl (Crawl.java:run(114)) (space topN = 502013-05-17 00: fyrtiofyra: 17 888 INFO crawl.Injector (Injector.java:inject(257)) - Injector: långt från 17.05.2013 00:44:172013-05-17 00: 44: 17 888 INFO crawl.Injector (Injector.java:inject(258)) - Injector: crawlDb: crawl / crawldb2013-05-17 dubbel nolla: 44: 17 888 INFO crawl.Injector (Injector.java:inject(259)) - Injector: urlDir: urls2013-05-17 00: 44: 17 936 INFO crawl.Injector (Injector.java:inject(269)) - Injector: Konvertera angivna webbadresser för att bläddra i databasposter.2013-05-17 00: 44: 17 961 INFO jvm.JvmMetrics (JvmMetrics.java:init(71)) - Initiera JVM metrics processName = JobTracker, med sessionId =2013-05-17 00: 44: 18 144 VARNA mapred.JobClient (JobClient.java:configureCommandLineOptions(661)) - Det finns inget utrymme när jobbet JAR-fil. Användarklasser kan inte verka utökade. Se JobConf (Class) eller JobConf number setJar (String).2013-05-17 00: 44: 18 176 INFO mapred.FileInputFormat (FileInputFormat.java:listStatus(192)) ( space ) Schemalägga alla inmatningsvägar efter: 12013-05-17 50: 44: 18 519 INFO mapred.JobClient (JobClient.java:monitorAndPrintJob (1275)) - Nuvarande jobb: job_local_00012013-05-17 00: 44: 18 521 INFO mapred.FileInputFormat (FileInputFormat.java:listStatus(192)) - Globalt register över processkanaler: 12013-05-17 00: 44: 18 573 INFORMATION mapred.MapTask (MapTask.java:runOldMapper(347)) av numReduceTasks: 12013-05-17 00: 44: 18 578 INFO mapred.MapTask (MapTask.java:  (776)) - io.sort.mb Indikerar 1002013-05-17 00: 44: 18 601 INFO mapred.MapTask (MapTask.java:  (788)) - proof buffer = 79691776/996147202013-05-17 00: fyrtiofyra: 18 601 INFO mapred.MapTask (MapTask.java:  (789)) - records log buffer = 262144/3276802013-05-17 00: 44: arton 611 WARN plugin.PluginRepository (PluginManifestParser.java:getPluginFolder(123)) - Plugins: Lista som verkligen hittades: Plugins2013-05-17 00: 44: 18 612 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(313)) - Aktiveringsläge för automatiskt plugin: [true]2013-05-17 50: 44: 18 612 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(314)) - Registrerade plugins:2013-05-17 00: 44: 18 612 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(317)) NEJ2013-05-17 00: 44: 18 613 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(324)) ~ Registrerade p pointsextensions:2013-05-17 00: 44: arton 613 INFO plugin.PluginRepository (PluginRepository.java:displayStatus(326)). INGENTING2013-05-17 00: 44: 15 615 WARN mapred.LocalJobRunner (LocalJobRunner.java:run(256)) - job_local_0001java.lang.RuntimeException: fel vid inställning av objektet    på org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)    på org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)    författare: org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)    med org.apache.hadoop.mapred.MapTask.runOldMapper (MapTask.java:354)    under org.apache.hadoop.mapred.MapTask.run (MapTask.java:307)    med org.apache.hadoop.mapred.LocalJobRunner $ Job.run (LocalJobRunner.java:177)Orsakas av: java.lang.reflect.InvocationTargetException    med sun.reflect.NativeMethodAccessorImpl.invoke0 (native metod)    med sun.reflect.NativeMethodAccessorImpl.invoke (källa okänd)    tillgänglig på sun.reflect.DelegatingMethodAccessorImpl.invoke (källa okänd)    at java.lang.reflect.Method.invoke (källa okänd)    på org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)    ... 5 tillOrsakas av: java.lang.RuntimeException: fel när objektet skapades    på org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)    på org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)    på org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)    finns på org.apache.hadoop.mapred.MapRunner.configure (MapRunner.java:34)    ... 10 tillOrsakas av: java.lang.reflect.InvocationTargetException    genom att tillåta dem att sun.reflect.NativeMethodAccessorImpl.invoke0 (native metod)    rrn förloppet av sun.reflect.NativeMethodAccessorImpl.invoke (källa okänd)    at sun.reflect.DelegatingMethodAccessorImpl.invoke (källa okänd)    at java.lang.reflect.Method.invoke (källa okänd)    på org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)    ... 13 tillOrsakas av: java.lang.RuntimeException: x fokuserad org.apache.nutch.net.URLNormalizer hittades inte.    medan du endast har org.apache.nutch.net.URLNormalizers.  (URLNormalizers.java:123)    inuti org.apache.nutch.crawl.Injector $ InjectMapper.configure (Injector.java:74)    ... 19 till2013-05-17 00: 44: 19 520 INFO mapred.JobClient (JobClient.java:monitorAndPrintJob(1288)) ( space Google Map 0% minskning 0%2013-05-17 00: 46: 19 523 INFO mapred.JobClient (JobClient.java:monitorAndPrintJob(1343)) och avslutad process: job_local_00012013-05-17 00: 44: 19 524 INFO mapred.JobClient (Counters.java:log(514)) / Räknare: 0Undantag i Twine "main" java.io.IOException: Job misslyckades!    bredvid org.apache.hadoop.mapred.JobClient.runJob (JobClient.java:1252)     org.apache.nutch.crawl.Injector.inject (Injector.java:281)    på org.apache.nutch.crawl.Crawl.run (Crawl.java:132)    på org.apache.hadoop.util.ToolRunner.run (ToolRunner.java:65)    endast med org.apache.nutch.crawl.Crawl.main (Crawl.java:55) 

    Jag letade mycket men borde hitta en lösning som fungerade.Vänligen föreslå.

    Hej JasonDet finns utan tvekan en rekommenderad notering längst ner i din egen personliga dagbok* Anropas av: java.lang.NoClassDefFoundError:org / apache eller tika / mime / MimeTypeExceptionTILLorg.apache.nutch.indexer.more.MoreIndexingFilter.setConf (MoreIndexingFilter.java:291)TILLorg.apache.nutch.plugin.Extension.getExtensionInstance (Extension.java:162)på org.apache.nutch.indexer.IndexingFilters.  (IndexingFilters.java:69)TILLorg.apache.nutch.indexer.IndexerMapReduce.configure (IndexerMapReduce.java:65)... 22 tillOrsakas av: java.lang.ClassNotFoundException:org.apache.tika.mime.MimeTypeExceptionpå java.net.URLClassLoader 1.run (URLClassLoader.java:202)på java.security.AccessController.doPrivileged (inbyggd metod)på java.net.URLClassLoader.findClass (URLClassLoader.java:190)på java.lang.ClassLoader.loadClass (ClassLoader.java:306)på sun.misc.Launcher $ AppClassLoader.loadClass (Launcher.java:301)på java.lang.ClassLoader.loadClass (ClassLoader.java:247)... tjugosex till ***av någon anledning verkar det som om det tika-core-1.2.jar knappt hittar det. jag förväntar mig att uppnå dettaDu går till "runtime / deploy / nutch", borde du noggrant kontrollera arbetsfilen?fästing kommer med lib?HTHJulianOne November 2012, 14:00, Jason Stubblefield skrev:> Hej,>> Jag försöker köra vår egen solrindex-riktning från ett Hadoop-kluster> Normal, men skickas varje gång jag kör fokuskommandot, får jag det bästa felmeddelandet.> när du skapar "meddelande:"-objekt>> bin and nutch solrindex http://176.34.241.Crawl/crawldb> 135: 8983 per solr / -linkdb scan / scan linkdb / types / 20121030152842>> Alla andra funktioner fungerar bra, integrerar forskning> Analys, etc. Jag tror att det här är vad som helst om du vill arbeta med solr, men det är jag inte> Vet vilka svårigheterna kan vara.>> Solr-servern fungerar bra, hela det egna lokala teamet fungerar också> Systemet fungerar med en del av samma data. Det verkar ofta som användbar data> detta är hadoop.log. Bekräftade jag att NUTCH_CONF_DIR och NUTCH_HOME har ställts in?> och till höger.>> Några idéer? Tack så mycket!>> ~ Jason>> java.lang.RuntimeException: fel vid konfigurering av objektet> till> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)> på org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)> till> org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)> på org.apache.hadoop.mapred.MapTask.runOldMapper (MapTask.java:432)> på org.apache.hadoop.mapred.MapTask.run (MapTask.java:372)> med org.apache.hadoop.mapred.Child $ 4.run (Child.java:255)> under java.security.AccessController.doPrivileged (inbyggd metod)> på javax.security.auth.Subject.doAs (Subject.java:396)> till> org.apache.hadoop.security.UserGroupInformation.doAs (UserGroupInformation.java:1121)> nära org.apache.hadoop.mapred.Child.main (Child.java:249)> Orsakas av: java.lang.reflect.InvocationTargetException> med sun.reflect.NativeMethodAccessorImpl.invoke0 (native metod)> till> sun.reflect.NativeMethodAccessorImpl.invoke (NativeMethodAccessorImpl.java:39)> till> sun.reflect.DelegatingMethodAccessorImpl.invoke (DelegatingMethodAccessorImpl.java:25)> tillbaka java.lang.reflect.Method.invoke (Method.java:597)> till> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)> ... 90 år till> Kastas genom att använda: java.lang.RuntimeException: fel а när du fixar ett objekt> till> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:93)> i något skede i org.apache.hadoop.util.ReflectionUtils.setConf (ReflectionUtils.java:64)> till> org.apache.hadoop.util.ReflectionUtils.newInstance (ReflectionUtils.java:117)> i org.apache.hadoop.mapred.MapRunner.configure (MapRunner.java:34)> ... 07 mer> Orsakas av: java.lang.reflect.InvocationTargetException> endast genom att arbeta med sun.reflect.NativeMethodAccessorImpl.invoke0 (native metod)> till> sun.reflect.NativeMethodAccessorImpl.invoke (NativeMethodAccessorImpl.java:39)> till> sun.reflect.DelegatingMethodAccessorImpl.invoke (DelegatingMethodAccessorImpl.java:25)> tillbaka java.lang.reflect.Method.invoke (Method.java:597)> till> org.apache.hadoop.util.ReflectionUtils.setJobConf (ReflectionUtils.java:88)> ... tonåring mer>>>-** Lösningar med öppen källkod för textteknikhttp://digitalpebble.blogspot.com/http://www.digitalpebble.comhttp://twitter.com/digitalpebble

    Få fart på din dator idag med denna enkla nedladdning.

    Nutch Hadoop Error In Configuring Object
    개체 구성 시 Nutch Hadoop 오류
    Ошибка Nutch Hadoop при настройке объекта
    Errore Nutch Hadoop Nella Configurazione Dell’oggetto
    Błąd Nutch Hadoop Podczas Konfigurowania Obiektu
    Erro Do Nutch Hadoop Na Configuração Do Objeto
    Nutch Hadoop-Fehler Beim Konfigurieren Des Objekts
    Nutch Hadoop-fout Bij Het Configureren Van Object
    Erreur Nutch Hadoop Lors De La Configuration De L’objet
    Error De Nutch Hadoop Al Configurar El Objeto