PythonでGoogle App EngineのHTMLをBeautifulSoupで解析していますか？

Question

私はBeautifulSoupを使って、いくつかのサイトからHTMLを解析し、各サイトをGAEタスクキューに追加しています。しかし、タスクキューは2つのタスクを繰り返すようです。ApplicationError：5エラーがログに記録されるか、またはで失敗します。 'NoneType'オブジェクトには属性 'findAll'がありません。、美しいスープが私がそれを渡したページで何かを見つけられなかったとき。誰もが、私はそれを修正することができますので、間違っているものにと私にいくつかの提案を与えることができれば、私は思ったんだけど

productTable = soup.find('table') 

      if productTable == None: 
       logging.error('Could not find the product table') 
       break 

      if productTable.findAll('table') == None: 
       logging.error('Product table was empty') 
       break 

：私は、しかし、これは問題を解決するためには表示されません。下のコードを追加しました。

Answer 1

アプリケーションエラーは、おそらく、HTMLを取得するためのurlfetchが失敗したことを示しています。タスクキューは、タスクが成功するまで自動的にタスクを再試行します（デフォルト設定で使用されている場合）。私はこのエラーについてあまり心配することはありませんが、それはしばらくの間しか起こらず、再試行された後に消えてしまいます。特定のタスクが繰り返し失敗した場合、フェッチしようとしているリソースに問題があると思われます。

productTableが使用される前にNoneではないことを最初に確認すると、'NoneType' object has no attribute 'findAll'エラーが発生しません。あなたのチェックが失敗しても、productTable.findallコールはバイパスされません。