in the blue

Scrapy について

タグ: requests

  • Scrapy について

    “使ってみた” で申し訳ないのですが、軽く触った感想です。 フレームワークなので想定されているモデルに合致しない用途に適用するのは難しい。というか軽くはみ出ただけで途端に面倒になる気がする。 tw […]

  • requests の使い方

    レスポンスのフック リダイレクトされたときも呼び出されるので便利です。ここで HTML パーサーなどを呼び出して response オブジェクトの属性に設定したりします。大雑把ですが 50x なときなどに time.sl […]