這篇文章主要介紹“hadoop怎么向HDFS文件追加新內(nèi)容 ”,在日常操作中,相信很多人在hadoop怎么向HDFS文件追加新內(nèi)容 問題上存在疑惑,小編查閱了各式資料,整理出簡單好用的操作方法,希望對大家解答”hadoop怎么向HDFS文件追加新內(nèi)容 ”的疑惑有所幫助!接下來,請跟著小編一起來學習吧!
在懷化等地區(qū),都構建了全面的區(qū)域性戰(zhàn)略布局,加強發(fā)展的系統(tǒng)性、市場前瞻性、產(chǎn)品創(chuàng)新能力,以專注、極致的服務理念,為客戶提供成都網(wǎng)站建設、做網(wǎng)站 網(wǎng)站設計制作按需定制網(wǎng)站,公司網(wǎng)站建設,企業(yè)網(wǎng)站建設,品牌網(wǎng)站制作,全網(wǎng)整合營銷推廣,成都外貿(mào)網(wǎng)站建設,懷化網(wǎng)站建設費用合理。
在hadoop1.2.1中,網(wǎng)上有很多文章說這個版本不支持文件追加模式,設置了
<property> <name>dfs.support.append</name> <value>true</value> </property>
無效
由于我現(xiàn)在做的項目需要這個功能,而升級hadoop似乎不太可能,然后查看源碼發(fā)現(xiàn),其中allowBrokenAppend是用于判斷是否支持追加的標識符
this.allowBrokenAppend = conf.getBoolean("dfs.support.broken.append", false); if (conf.getBoolean("dfs.support.append", false)) { LOG.warn("The dfs.support.append option is in your configuration, " + "however append is not supported. This configuration option " + "is no longer required to enable sync"); }
<pre name="code" class="java"> LocatedBlock appendFile(String src, String holder, String clientMachine ) throws IOException { if (!allowBrokenAppend) { throw new IOException("Append is not supported. " + "Please see the dfs.support.append configuration parameter"); } startFileInternal(src, null, holder, clientMachine, false, true, false, (short)maxReplication, (long)0); getEditLog().logSync();
看到這里就很明白了吧,dfs.support.append屬性已經(jīng)作廢不起作用了,如果想支持追加模式需要以下設置
<property> <name>dfs.support.broken.append</name> <value>true</value> </property>
到此,關于“hadoop怎么向HDFS文件追加新內(nèi)容 ”的學習就結束了,希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學習,快去試試吧!若想繼續(xù)學習更多相關知識,請繼續(xù)關注創(chuàng)新互聯(lián)網(wǎng)站,小編會繼續(xù)努力為大家?guī)砀鄬嵱玫奈恼拢?/p>
文章名稱:hadoop怎么向HDFS文件追加新內(nèi)容
標題網(wǎng)址:http://sd-ha.com/article28/jsjojp.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供搜索引擎優(yōu)化、外貿(mào)建站、小程序開發(fā)、、ChatGPT、網(wǎng)站設計公司
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉載內(nèi)容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)