私は、HTMLUnitを使っていくつかのウェブサイトにアクセスしてデータをダウンロードするコードを書いています。「ウェブスクレイピングスクリプトビルダー」を探しています
私を助けるツールが存在するかどうかは、です。私は視覚的なツールであると思うかもしれません。あなたが視覚的にウェブサイトに従いたいパスを表現し、Javaコードを生成するものです。
私はHTMLUnitのために何かしたいですが、私は他のソリューションにもオープンしています。
書き込み画面-スクレイピングのコードは非常に反復的な取得:(
私はscreen-scraperで働いていました。それがあなたが探しているものなのかどうかは不明ですが、確かにWebスクレイピングスクリプトを構築するための強力なツールです。
ない正確に視覚的なツールが、多分あなたは、Webページのナビゲーション・スクリプトを記録するためのJMeterまたはThe Grinderのようなものを使用することができます。彼らは確かに、すべての書き込みよりも使いやすくなっていますHTMLUnitで手作業で入力要求を受け取ります
作成するアプリケーションから生成されたスクリプトを実行するためのAPIとして2つのツールを使用できるかどうかはわかりませんが、これは興味深いソリューションです – cdarwin
これはまさにこれを行うツールです - 非常にうまくいきますが、その技術は素晴らしいので、非常に高価です。あなたが試してみたい場合は、フリートレイルを手に入れることができます。http://kapowsoftware.com/
これは最も近い自由なものが存在することを望んでいたとしても、私が心に留めていたことへの事:-) – cdarwin
唯一のことは[Yahoo! Pipes]（http://pipes.yahoo.com/pipes/）、おそらく[ifttt]（http://ifttt.com/wtf） - どちらもスタンドアロンのプロプライエタリな製品であり、HTMLUnit用のツールではありません。 – millimoose
はより一般的なものに変更されました – cdarwin