国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 學院 > 開發設計 > 正文

hadoop第三坑

2019-11-06 06:10:46
字體:
來源:轉載
供稿:網友

看書的進度比我預計的要慢一些。坑太多,需要慢慢爬。 依舊是MaxTemperature的聯系。添加了一些測試MRUnit的測試之類的。 遇到的問題如下: 1 MRUnit的依賴添加不進來。 在dependency導入是,1.1.0以及1.0.0版本均有問題。然后我換到0.8.0-incubating版本忽然就好了。由于還沒有去看源碼,所以沒有辦法確認是什么版本差異導致了這個原因。

2 遇到如下報錯: Exception in thread “main” java.lang.VerifyError: Bad type on Operand stack Exception Details: Location: org/apache/hadoop/maPRed/JobTrackerInstrumentation.create(Lorg/apache/hadoop/mapred/JobTracker;Lorg/apache/hadoop/mapred/JobConf;)Lorg/apache/hadoop/mapred/JobTrackerInstrumentation; @5: invokestatic Reason: Type ‘org/apache/hadoop/metrics2/lib/DefaultMetriCSSystem’ (current frame, stack[2]) is not assignable to ‘org/apache/hadoop/metrics2/MetricsSystem’ Current Frame: bci: @5 flags: { } locals: { ‘org/apache/hadoop/mapred/JobTracker’, ‘org/apache/hadoop/mapred/JobConf’ } stack: { ‘org/apache/hadoop/mapred/JobTracker’, ‘org/apache/hadoop/mapred/JobConf’, ‘org/apache/hadoop/metrics2/lib/DefaultMetricsSystem’ } Bytecode: 0000000: 2a2b b200 03b8 0004 b0 這個問題比較難找,stackOverFlow上有相同的報錯,當事的答主是由于jar包沖突導致,移除多余不要的包就好了。然而我的項目是maven項目,所以不可能是由于導入多余jar包導致的。但其實報錯中也說的很清楚了,DefaultMetricsSystem不能被分配為MetricsSystem。當時猜測是由于hadoop版本導致的,實驗了一下,確實是這樣,我使用的是3.0.0-alpha的版本,降至2.2-2.6的版本就好了。 當然還碰到一些其他的坑。比如reduce方法沒有重寫成功之類的,大多由于眼瞎導致。 有一些要注意的問題:大膽嘗試。感覺自己在hadoop這里還是有些太過于謹慎。


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 普宁市| 余干县| 阿图什市| 宝坻区| 襄垣县| 邳州市| 平顺县| 永吉县| 镇原县| 博乐市| 和静县| 洪江市| 南乐县| 龙山县| 福州市| 南召县| 贵州省| 车险| 凤山市| 延庆县| 苍山县| 余江县| 定襄县| 精河县| 桐乡市| 武义县| 巴青县| 宁陕县| 丁青县| 电白县| 乐至县| 堆龙德庆县| 襄垣县| 铁岭县| 莱州市| 嘉荫县| 郯城县| 华安县| 乌拉特中旗| 东丽区| 荣成市|