React-Native Speech to Text

Question

Watson Speech to Text APIを使用して、反応したネイティブのアプリケーションでオーディオを録音し、そのオーディオをテキストに変換しようとしています。

私はこれを理解することに問題があり、本当に感謝しています。

オーディオは録音できますが、ファイルをバックエンドに送信する方法や、フロントエンドのWatson APIに直接送信する方法がわかりません。

ノードのためのワトソンAPIクラウドライブラリは、このあります

 var SpeechToTextV1 = require('watson-developer-cloud/speech-to-text/v1'); 
     var fs = require('fs'); 

     var speech_to_text = new SpeechToTextV1({ 
     username: '<username>', 
     password: '<password>' 
     }); 

     var params = { 
     // From file 
     audio: fs.createReadStream('./resources/speech.wav'), 
     content_type: 'audio/l16; rate=44100' 
     }; 

     speech_to_text.recognize(params, function(err, res) { 
     if (err) 
     console.log(err); 
     else 
     console.log(JSON.stringify(res, null, 2)); 
     }); 

残念ながら、私はストリームを作成するために、フロントエンドに「FS」にアクセスすることはできませんが。ファイルはクライアントのフロントエンドの隠しフォルダに保存されます（私もパスがあります）

最終的には、何らかの形でストリームを作成して、自動的にテキストに変換されるように送信したいと思います速度を低下させる。録音した音声のパスでフロントエンド上のすべてのこれを行うにはどのように

fs.createReadStream('./resources/speech.wav') 
    .pipe(speech_to_text.createRecognizeStream({ content_type:  'audio/l16; rate=44100' })) 
    .pipe(fs.createWriteStream('./transcription.txt')); 

任意のアイデア：このように

。どのような回避策ですか？ありがとうございました！

Answer 1

は、ネイティブが箱の外WebSocketををサポートしていリアクト：https://facebook.github.io/react-native/docs/network.html

ワトソンAPIはAPIをテキストに自分のスピーチの一部として、WebSocketををサポートしています。https://www.ibm.com/watson/developercloud/doc/speech-to-text/websockets.shtml（セクションを参照してください「の音声を送信し、認識結果の受信」websocket.send(blob)

をこれがそうです合理的な解決策であることを。

Answer 2

私は一緒にワトソン - 開発者 - クラウド/ SWIFT-SDKを使用するネイティブモジュールを入れている、とテキストへのスピーチが実装されている。

https://github.com/pwcremin/react-native-watson

私のコードでは、実装方法の例を参照することも、モジュールを使用することもできます。

反応するネイティブ・ワトソンモジュールは、マイクを使用し、あなたのためのストリーミングハンドル：あなたの質問に関係のない

import {SpeechToText} from 'react-native-watson'; 

SpeechToText.initialize("username", "password") 

// will transcribe microphone audio 
SpeechToText.startStreaming((error, text) => 
     { 
      console.log(text) 
     }) 

SpeechToText.stopStreaming()