Hadoop常见错误总结

时间:2019-05-13 16:09:21下载本文作者:会员上传
简介:写写帮文库小编为你整理了多篇相关的《Hadoop常见错误总结》,但愿对你工作学习有帮助,当然你在写写帮文库还可以找到更多《Hadoop常见错误总结》。

第一篇:Hadoop常见错误总结

Hadoop常见错误总结 2010-12-30 13:55 错误1:bin/hadoop dfs 不能正常启动,持续提示:

INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000.Already tried 0 time(s).原因:由于 dfs 的部分文件默认保存在tmp文件夹,在系统重启时被删除。解决:修改core-site.xml 的 hadoop.tmp.dir配置文件路径:/home/hadoop/tmp。

错误2:hadoop出现了一些问题。用$ bin/hadoop dfsadmin-report 测试的时候,发现dfs没有加载。显示如下:

Configured Capacity: 0(0 KB)Present Capacity: 0(0 KB)DFS Remaining: 0(0 KB)DFS Used: 0(0 KB)DFS Used%: ?% Under replicated blocks: 0 Blocks with corrupt replicas: 0 Missing blocks: 0 查看日志:

ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible namespaceIDs in /home/hadoop/data: namenode namespaceID = 2033006627;datanode namespaceID = 1589898341 经分析,是由于namenode namespaceID = 2033006627;和datanode namespaceID = 1589898341 不一致造成原因。

修改了namenode namespaceID = 1589898341 可以使用,但是重启之后,又不可以用了。

最后解决方案:删除hadoop用户下的name文件夹,data文件夹,tmp文件夹,temp文件里的内容,然后重新执行namenode命令。重启电脑之后,正常。

错误3:File /home/hadoop/tmp/mapred/system/jobtracker.info could only be replicated to 0 nodes, instead of 1 出现此错误,一般发生在datanode与namenode还没有进行连接,就开始往hdfs系统上put数据了。稍等待一会,就可以了。

也可以使用:hadoop dfsadmin –report命令查看集群的状态。错误4:

每次启动总有部分datanade不能去全部启动,查看日志文件,显示为: ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.net.UnknownHostException: zgchen-ubutun: zgchen-ubutun at java.net.InetAddress.getLocalHost(InetAddress.java:1426)。分析:这是由于datanode 找不到服务host引起的。

解决:通过查找/etc/hostname 找到hostname;比如:ubuntu。然后找到/etc/hosts,添加:127.0.1.1 ubuntu 错误5:

java.lang.OutOfMemoryError: GC overhead limit exceeded 分析:这个是JDK6新添的错误类型。是发生在GC占用大量时间为释放很小空间的时候发生的,是一种保护机制。解决方案是,关闭该功能,可以添加JVM的启动参数来限制使用内存:-XX:-UseGCOverheadLimit 添加位置是:mapred-site.xml 里新增项:mapred.child.java.opts 内容:-XX:-UseGCOverheadLimit java.lang.OutOfMemoryError: Java heap space 出现这种异常,明显是jvm内存不够得原因,要修改所有的datanode的jvm内存大小。

Java-Xms1024m-Xmx4096m 一般jvm的最大内存使用应该为总内存大小的一半,我们使用的8G内存,所以设置为4096m,这一值可能依旧不是最优的值。(其实对于最好设置为真实物理内存大小的0.8)

错误6:Too many fetch-failures Answer: 出现这个问题主要是结点间的连通不够全面。1)检查、/etc/hosts 要求本机ip 对应 服务器名

要求要包含所有的服务器ip + 服务器名 2)检查.ssh/authorized_keys 要求包含所有服务器(包括其自身)的public key 错误7:处理速度特别的慢 出现map很快 但是reduce很慢 而且反复出现 reduce=0% Answer: 结合第二点,然后修改可用内存大小。

conf/hadoop-env.sh 中的export HADOOP_HEAPSIZE=4000 错误8:能够启动datanode,但无法访问,也无法结束的错误

在重新格式化一个新的分布式文件时,需要将你NameNode上所配置的dfs.name.dir这一namenode用来存放NameNode 持久存储名字空间及事务日志的本地文件系统路径删除,同时将各DataNode上的dfs.data.dir的路径 DataNode 存放块数据的本地文件系统路径的目录也删除。如本此配置就是在NameNode上删除/home/hadoop/NameData,在DataNode上删除/home/hadoop/DataNode1和/home/hadoop/DataNode2。这是因为Hadoop在格式化一个新的分布式文件系统时,每个存储的名字空间都对应了建立时间的那个版本(可以查看/home/hadoop /NameData/current目录下的VERSION文件,上面记录了版本信息),在重新格式化新的分布式系统文件时,最好先删除NameData 目录。必须删除各DataNode的dfs.data.dir。这样才可以使namedode和datanode记录的信息版本对应。

注意:删除是个很危险的动作,不能确认的情况下不能删除!做好删除的文件等通通备份!

错误9:java.io.IOException: Could not obtain block: blk_***469_1100 file=/user/hive/warehouse/src_20100924_log/src_20100924_log 出现这种情况大多是结点断了,没有连接上。或者

mapred.tasktracker.map.tasks.maximum 的设置 超过 cpu cores数目,导致出现获取不到文件。

错误10:Task Id : attempt_201010291615_0001_m_000234_0, Status : FAILED Error: java.io.IOException: No space left on device Task Id : attempt_201010291615_0001_m_000240_0, Status : FAILED java.io.IOException: Spill failed 磁盘空间不够,应该分析磁盘空间df-h 检查是否还存在磁盘空间。错误11:Task Id : attempt_201011011336_0007_m_000001_0, Status : FAILED org.apache.hadoop.hbase.client.RegionOfflineException: region offline: lm,1288597709144 网上说,将/hbase删除;重启hbase后,可以正常应用了。但是我找不到/hbase目录,只好自己重新删除掉一些hadoop文件,重新生成文件管理系统。

还有一个可能是,配置错了/hbase/conf/hbase-env.sh的HBASE_CLASSPATH,这个默认是不配置的,所以可以不配置。

错误12:org.apache.hadoop.hbase.TableNotFoundException: org.apache.hadoop.hbase.TableNotFoundException: lm 找不到表,hbase启动了,检查一下是否存在需要的Htable。

第二篇:钢筋常见错误总结(精选)

钢筋常见错误

一、基础常见错误

1、基础梁接头位置不对,按楼层框架梁接头位置设置,且没有错开(基础梁与框架梁的受力正好相反,接头亦然)。

2、筏板钢筋接头在施工缝处预留长度不够,且接头没错开。

3、基础马凳摆放错误,如果换一方向,每一排马凳可省一固定用通长钢筋。或者,马凳上通长钢筋利用筏板上部同方向纵筋。

4、筏板面积较大,却仍按50%接头百分率,未按25%百分率接头,导致钢筋接头浪费。

5、底板纵筋接头长度有的太长,超过一个搭接长度,有的则太短,不能满足规范所要求的长度。底板通长筋没绑扎成平行直线,导致同截面钢筋根数不同。

6、承台按规范是不缩减的,设计“优化”按独立基础构造搞成缩减,这属于设计的偷工减料。

7、筏板封边构造没按规范和设计,擅自设置筏板上下纵筋弯折长度。

8、筏板纵筋接头设置在后浇带内(纵筋接头不宜设置在后浇带位置)。

9、接桩钢筋并在一块。

二、柱常见错误

1、顶层边柱均未设置弯折,11G101规定是当采用柱外搭接时,柱外侧可不弯折,但柱内侧钢筋当梁高度小于锚固时均要求弯折。

2、顶层中柱弯折,顶层中柱纵筋如果在梁内满足直锚就不需要弯折。

3、柱梁节点箍筋未设置或间距太大。柱梁节点是核心节点,是抗震的关键节点,宁可少放梁纵筋也不能省掉梁柱节点内的箍筋。

4、柱纵筋没有长短交错,这是钢筋翻样问题,对柱上下钢筋根数发生变化时没在下层调整竖向钢筋长度,导致接头未能错开。

5、柱保护层未满足最小保护层厚度。

6、有的暗柱很长,暗箍筋采用U形,增加钢筋接头,应该是封闭式箍筋,可节约钢筋。

7、暗柱箍筋有内折角,这是不允许的。两个箍筋相交或锚固形成的角度不属于内折角。

8、无地下室柱加密从正负零以上H0/3,应该是从基础顶面开始算起。

三、墙常见错误

1、墙水平筋(外侧与内铡)在同一位置搭接,没有按接头百分率错开接头。

2、墙水平筋接头未设置在受力最小处。外墙外侧水平钢筋应位于跨中三分之一或墙高四分之一区域,外墙内侧应位于支座及支座附近。

3、地下室外墙竖向钢筋接头位置错误,根据规范外墙外侧竖向钢筋应位于墙高中间的三分之一区域,外墙内侧竖向纵筋应位于墙高根部的四分之一区域。

4、外墙外侧钢筋顶模,无保护层,外墙外侧钢筋露筋后果很严重,最终把整个外墙破坏掉。外墙外侧是直接接触泥土和水,保护层不少于40mm。

5、结构总说明未注明顶板是外墙的简支承还是弹性嵌固支承,施工也没按照其施工,外墙纵筋弯折按墙厚减保护层,不知施工依据什么,还是想当然。

6、墙纵向钢筋搭接长度过长,直接按墙高度。墙封顶时墙竖向钢筋应该是减去下面预留长度再加搭接长度。

7、墙拉筋绑扎不规范,要么间距不对,要么做法不对,如没拉住墙水平筋,要么拉筋长度不对,施工时不是垂直拉而是斜拉。

四、梁常见错误

1、梁支座钢筋包括第一排支座负筋伸入支座均为L0/4(设计问题)。

2、主次梁交接处,主梁两侧增加附加箍筋。主梁在次梁位置未布置正常箍筋,直接布三道附加箍筋。

3、梁底筋一般都未绑扎。工人的借口是绑不到,其实是完全可以绑到的,先把梁抬高,用钢管支架固定,待梁上下钢筋包括腰筋全部绑扎完成后再把梁落下去就是,这是简单的施工工艺。不绑属于偷工减料,不绑,梁钢筋纠结在一块,影响其受力。

4、梁拉钩施工按一端90度,一端135度,应该都为135度,当然拉钩两端都加工成135度不好放,可以先一端加工成90度,待绑扎完后再用扳手弯成135度。

5、非抗扭的非框架梁下部纵筋伸入支座为锚固长度,平法要求12d,这完全是无谓的浪费。

6、梁洞口周围未布置钢筋。规范严禁在梁上开洞,但也不可避免要在梁上开洞,补救措施就是对洞口进行加强。

7、梁接头没有设置在受力较小处(上部纵筋为跨中三分之一区域),而是设在受力最大处,有的把梁上部钢筋设在梁支座处或附近。

8、屋面梁上部纵筋弯曲内径不符合规范,规范要求>6d,8d,不过,这个一般是做不到。

9、吊筋按次梁高度施工,应该是按主梁高度施工。

10、梁垫块做法不对,垫块强度不够而粉碎,导致梁直接与模板接触,露筋无疑;有的用横筋直接支承在板上。

11、梁拉筋漏放或斜放,有的没绑扎,起不到拉筋作用。

12、梁二排钢筋位置不对,离梁顶距离过大,起不到受力作用。

13、梁上部钢筋采用绑扎接头却未在接头位置加密箍筋,按规范要求在接头位置设置横向箍筋,间距为min(5d,100),实际是很难做到,如果按规范做,几乎变成全加密。梁纵筋最好采用机械连接或焊接(非电渣压力焊),这样,就不需要对接头进行箍筋加密了。

14、梁上部钢筋间距过密,混凝土浇筑困难。

15、几个方向梁相交重叠,梁上部钢筋无保护层甚至超过梁高度,这种情况可以把次梁上部纵筋放在主梁上部纵筋之下解决之。

16、非框架梁是非抗震,其箍筋无需弯成135度,平直段也无需10d。如果非框架梁设计是按非抗震考虑,其箍筋的弯钩可做成90度,平直段长度为5d。

五、板常见错误

1、板筋的搭接长度过长。

2、板上部钢筋接头位置错误,板上部钢筋接头应在跨中,却设置在支座。

3、板接头百分率50%。未按25%施工。

4、板下部纵筋伸入支座长度未按规范,按全支座施工,规范为max(5d,b/2)

5、板上部纵筋伸入支座La,实际施工不管支座有多宽均按伸入支座对边弯折15 d,当支座宽度不能满足锚固长度时才需要弯折15d,如果满足且支座很宽,板上部钢筋可以弯折,但弯折长度加在支座内平直段长度等于锚固长度即可,没有必要一定但到支座外侧,因视情况而定。

第三篇:SAT常见错误总结

文都国际教育官方网站:http:// 文都国际教育官方网站:http://www.xiexiebang.com/

第四篇:雅思写作常见错误经典归纳总结

文都国际教育官方网站:http:// 文都国际教育官方网站:http://www.xiexiebang.com/

第五篇:背书常见错误总结介绍

背书常见错误总结介绍 《支付结算办法》(以下称《办法》)第二十九条规定:票据背书转让时,由背书人在票据背面签章、记载被背书人名称和背书日期。背书未记载日期的,视为在票据到期日前背书。从中可以看出,签章和背书人名称属绝对记载事项,日期为相对记载事项。但是在具体的业务经办中,时常出现背书人签章和记载错误的现象,造成背书不连续,影响票据的流通或持票人正常收款。主要体现在以下几个方面:

1.签章错误。

(1)首先是单位签章错误。《办法》第十一条规定:单位、银行在票据上的签章和单位在结算凭证上的签章,为该单位、银行的盖章加其法定代表或其授权的代理人的签名或盖章。银行在受理票据时,时常出现有的单位加盖“营业用章”、“工程专用章”甚至“发票专用章”的现象。

(2)其次是银行签章错误。《办法》第二十三条规定:银行承兑商业汇票、办理商业汇票转贴现、再贴现时的签章,应为经中国人民银行批准使用的该银行汇票专用章加其法定代表人或其授权经办人的签名或者签章。然而,有的误盖财务专用章,或者误盖单位公章,甚至业务公章。

(3)办理商业汇票贴现后,到期前贴现行通过寄委托收款函到承兑行收款,本应加盖结算专用章而误盖财务专用章或公章、业务公章的情况也时有发生。

2.被背书人记载错误。

《办法》第三十三条规定:已背书转让的票据,背书应当连续。背书连续,是指票据第一次背书转让的背书人是票据上记载的收款人,前次背书转让的被背书人是后一次背书转让的背书人,依次前后衔接,最后一次背书转让的被背书人是票据的最后持票人。背书记载错误有几种情况:

(1)一种是将被背书人名称写成了背书人名称,似乎是背书人自己对自己转让,另一种是被背书人简写过于简单。《办法》第十条明确规定:单位、个人和银行签发票据、填写结算凭证,应按照本办法和《正确填写票据和结算凭证的基本规定》记载,单位和银行的名称应当记载全称或者规范化简称。银行在受理票据时,原则上要求单位填写单位全称,尤其是在商业票据贴现时。而单位却按自身主观臆断,随意填写单位简称或者单位在本地的习惯性简称。这些都造成了票据背书不连续。

(2)背书日期错误。从《办法》第二十九条可以看出,背书日期为任意记载事项,即可以记载,也可以不记载。但是,一些单位在记载背书日期时,出现了不合逻辑的情况。如后手背书人记载的背书日期在前手背书人的背书日期之前,出现明显的逻辑错误,造成背书不连续。

(3)粘单使用错误。《办法》第二十八条规定:票据凭证不能满足背书人记载事项的需要,可以加附粘单,粘附于票据凭证上。粘单上的第一记载人,应当在汇票和粘单的粘接处签章。时常出现不是粘单上的第一记载人签章,而是粘单上第一记载人的前手在签章,造成票据背书不连续

下载Hadoop常见错误总结word格式文档
下载Hadoop常见错误总结.doc
将本文档下载到自己电脑,方便修改和收藏,请勿使用迅雷等下载。
点此处下载文档

文档为doc格式


声明:本文内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:645879355@qq.com 进行举报,并提供相关证据,工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。

相关范文推荐

    VFP上机操作常见错误总结

    一、输入命令时常见错误分析1、不能识别的命令谓词产生原因:(1)关键词拼写错误 (2)命令动词与短语、短语中各单词之间没有用空格隔开 (3)命令动词、短语中的英文单词、运算符号和......

    hadoop学习心得

    1.FileInputFormat splits only large files. Here “large” means larger than an HDFS block. The split size is normally the size of an HDFS block, which is approp......

    个人简历常见错误

    必读:6个简历里常见的错误 从头到尾我也做过一些招聘工作,从简历筛选、通知面试、面试都在进行。发现很多人在简历中犯了不少错误,也许对于求职者来说是很小的问题,但是其实往往......

    论文常见格式错误[本站推荐]

    各位指导老师: 首先,对大家在毕业设计中付出的劳动表示衷心的感谢!大家辛苦了! 在近几年的毕业设计中出现了一些问题,在此进行部分汇总,供大家参考,有则改之,无则加勉! 1、请各位老师......

    毕业论文常见错误

    毕业论文常见错误 1. 论文内容  第1章绪论应包括以下几方面内容:选题意义和背景;国内外研究现状;本文研究内容及各章安排。  第2章方案论证前,要先介绍设计要求。  系统硬件设计......

    网络管理员常见错误集锦

    协议分析器是网络管理员库中最强有力的工具之一。它能将难处理、耗时长、让CEO们感到恼火甚至不得不重启所有机器的问题转变为能短时处理、易于在每周例行状态报告中反映的......

    商务英语常见错误

    商务英语中常见错误Personal vs. Personnel 密切注意这些单词的拼写和重音!"Personnel"是个名词意思是公司的职员。例如"Our company has the best personnel in the industr......

    二级VF上机操作常见错误总结

    二级VF上机操作常见错误总结 1、出现如下提示框,提示:命令中含有不能识别的短语或关键字。 该提示表示所输入的命令的打错的关键字。 例如: (1)SQL查询语句中,将from 错打成 form......