スクレイピングでエラー発生:cURL error 1: Received HTTP/0.9 when not allowed (see https://curl.haxx.se/libcurl/c/libcurl-errors.html)

スクレイピングでエラー発生:cURL error 1: Received HTTP/0.9 when not allowed (see https://curl.haxx.se/libcurl/c/libcurl-errors.html)

スクレイピングでエラー発生:cURL error 1: Received HTTP/0.9 when not allowed (see https://curl.haxx.se/libcurl/c/libcurl-errors.html)

商品レビューのスクレイピング中にエラーが発生。

どうやら其々のアプリの依存性によるエラーの様子。

参考にしたサイト

Goutteの実行中にcURLが閉じられていない事が原因

参考サイトを読み取ると、エラーの原因がなんとなくわかってきました。

cURLを旧バージョンにするとエラーが起きないとか、2つのアプリの関係性に原因がある様です。

vendor/guzzlehttp/guzzle/src/Handler/CurlFactory.php書換えで回避可能

旧バージョンを再インストールなんて事は出来れば回避したいモノ。

その辺も参考サイトに記載がありました。

CurlFactory.phpを書き換えればOK

私も無事この方法で解決しました。

参考スクリプト

vendor/guzzlehttp/guzzle/src/Handler/CurlFactory.php 65行目~78行目辺り

これを下のようにします。

※ /* */で殺してもいいのですが、判り易く消去してみました。

まとめ

翻訳機が無かったら修正できなかったのは間違いない。

英語勉強しましょう。