mechanize

1熱

1答えて

私は、csvのURLを実行して画像をダウンロードするMechanizeでスクレーパーを作成しています。問題は、いくつかのイメージはもはや存在せず、404エラーが見つからないということです。私はRubyを初めて使っているので、例外を処理する方法がわからないので、誰かが私を助けてくれることを願っています。私は agent = Mechanize.new url = CSV.read("links

0熱

1答えて

機械化Pythonで 'FormNotFoundError'を取得

私は美しいスープを使用しており、銀行サイトを掻き集めるウェブ用に機械化しています。 import re import mechanize br = mechanize.Browser() br.set_handle_robots(False) br.set_handle_equiv(False) response = br.open("https://m.netbanking.hdf

0熱

1答えて

機械化：スプレッドシートをダウンロードするには

私は機械的にsparklemotion（https://github.com/sparklemotion/mechanize）を使用しています。 https://philjobs.org/というサイトがあります。そこでは、リンクをクリックしてスプレッドシートをダウンロードできます。私はスプレッドシートのダウンロードを自動化しようとしています。ここに私が今いるものは次のとおりです。 require

1熱

1答えて

無効なXMLを解析する方法

私は、サーバーからXML文書を要求し、そのデータをシステムにインポートするために解析するプロジェクトを行っています。私はRuby 2.4.3を使用しています。私の問題は、XMLが数字で始まる名前を持つ要素タグで来るということです。 Nokogiriはこれらのタグを以前のタグの内容の一部として表示し、残りの文書の解析を駄目にします。私はMechanizeを使用してデータを要求しています。どのよう

1熱

1答えて

リモートテスト：不正なURLでフォームの送信結果（404 =>ネット:: HTTPNotFound）テストされている

アプリケーション：ローカル（基本的には空白）：ベイグラントVM上でテストをやってアプリケーションを実行しているCakePHPのアプリレールcapybara-mechanize 10 examples, 1 failure 不全のアプリは次のとおりです。 404 => Net::HTTPNotFound するのは、私のVMが上で実行中のアプリを持っているとしましょう210 'www.dom

0熱

1答えて

tr/table/tdが存在するかどうかを確認する方法

機械化ブラウザを使用して情報を取得しています。何の結果を存在しない場合検索フォームでは、私のコードはここは私のコードは動作しません list_src =["keyword1","gdfgz", "keyword2"] i = 0 while (i < 2): br2 = mechanize.Browser() br2.set_cookiejar(cj)

1熱

1答えて

複数の値のスクラップ中にスクリプトがエラーをスローする

スクリプトがテキストファイルに格納されている80000個のIDのWebサイトをスクラップしようとしています。単一のo/pでコードを実行するとうまく動作しますが、すべての入力をループに入れるとエラーになります。マイコード： from bs4 import BeautifulSoup import mechanize br = mechanize.Browser() response = b

0熱

2答えて

Ruby Mechanize Gem名前のないフィールドを見つける

私は機械化された宝石を使って、ログインの後ろにあるページを掻き集めようとしています。しかし、私が使用しているサイトでは、htmlのユーザ名やパスワードフィールドに名前をつけません。私はMechanizeのドキュメントを検索しましたが、フィールド名を使用せずにフィールドにテキストを入力するコードはありません。ページ上の5番目の要素、または最初のテキストボックスを見つける方法はありますか？

0熱

1答えて

urllib2.URLErrorの取得：<urlopenエラーEOFがプロトコル（_ssl.c：661）に違反して発生した> Mechanizeのopenメソッドで

を私は urllib2.URLError取得しています：mechanize.browser.openの呼び出し中にエラー（ '私のHTTPSサイト'）。私はウェブを検索しましたが、何も私のために働いていませんでした。ここでは私のコードです： Traceback (most recent call last): File "C:/Users/Himanshu/Desktop/UIET

1熱

1答えて

Select by Selector Styleスクレイピング

私の大学では「スクレーパー」をやっているので、「背景色：#bebeff」を含むすべての「tbody」を選択する必要があります。私はw3schoolセレクタのいくつかを試してみましたが、私はそれをすることはできません。それを行う方法はありますか？ところで Image 、私は、RubyでMechanizeの宝石を使用します。これを試してみてください： require 'mechanize' req