SparkでStringBuilderまたはStringBufferを使用する必要がありますか？

Question

私はspark-submitによって実行されるクラスのHDFSから通常のファイルを読み込もうとしています。

私はString操作を行い、この文字列出力からRDDを作成するメソッドを持っています。

RDDを作成する前に、以下の文字列操作を実行しています。

変数valueStringにStringBuilderまたはStringBufferを使用する必要がありますか？

 while ((line = bf.readLine()) != null) { 
     String trimmedLine=line.trim(); 
     if(trimmedLine.charAt((trimmedLine.length()-1))==';'){ 
      if(extractionInProgress){ 
       valueString=valueString.concat(trimmedLine.substring(0,trimmedLine.indexOf(";"))); 
       keyValues.put(searchKey, valueString); 
       extractionInProgress=false; 
       valueString=""; 
      } 
      else{ 
       int indexOfTab=trimmedLine.indexOf(" "); 
       if(indexOfTab > -1){ 
        String keyInLine=trimmedLine.substring(0,indexOfTab); 
        valueString=trimmedLine.substring(indexOfTab+1,trimmedLine.indexOf(";")); 
        keyValues.put(keyInLine, valueString); 
        valueString=""; 
       } 
      } 
     } 
     else{ 
      if(!extractionInProgress){ 
       searchKey=trimmedLine; 
       extractionInProgress=true; 
      } 
      else{ 
       valueString=valueString.concat(trimmedLine.concat("\n")); 
      } 
     } 
    } 

Answer 1

only difference between the twoはStringBufferは（あなたが必要とすることはほとんどないものです）​​メソッドを持っていることです。したがって、valueStringはローカル変数であり、StringBuilderとなります。

valueString = valueString.concat（trimmedLine.concat（ "\ n"）））;

この種のコードは、複数行の文字列を連結したいかどうか疑問に思います。たぶんあなたはラインのリストを使ってRDDを作り、現在の前処理のいくつかをSparkの仕事そのものに移すことができますか？