楽天スーパーセールでランキング取得APIに起きた不具合
楽天スーパーセールでランキング取得APIに起きた不具合 楽天市場でスーパーセールが始まりました。 他社さんの動向が気になる所ではありますが、うちの店舗では4～5日が通常の3倍程度。 でも土日(6～7日)が非常に悪く通常の半分。 今日はどうかなぁという所です。 推測でしかないですが、土日は時間が有り余って価格調べに十分な時間を使えるのでセールに一切参加していないうちの店舗が購入先からはねられたのかな […]
Laravel
スクレイピングでエラー発生：cURL error 1: Received HTTP/0.9 when not allowed (see https://curl.haxx.se/libcurl/c/libcurl-errors.html)
スクレイピングでエラー発生：cURL error 1: Received HTTP/0.9 when not allowed (see https://curl.haxx.se/libcurl/c/libcurl-errors.html) 商品レビューのスクレイピング中にエラーが発生。 どうやら其々のアプリの依存性によるエラーの様子。 参考にしたサイト Goutteの実行中にcURLが閉じられてい […]
楽天市場の商品レビュー取得について問い合わせた内容と解答
- 2020.06.04
- API, ECシステム, Laravel, PHP, スクリプト備忘録, スクレイピング, ひとりごと, 仕様, 商品ページ, 商品レビュー自動取得, 失敗例, 情報収集, 楽天市場, 自作システム
楽天市場の商品レビュー取得について問合わせた内容と解答 楽天商品レビューの取得、簡単に考えていたのですが手こずってます。 その流れの中で最善策を探そうと楽天市場へ問い合わせを掛けました。 【質問事項】 商品レビューを取得するAPIはありますか？ レビューをスクレイピングで取得する事は楽天市場の規約上問題ありますか？ 商品レビューを社内DBに蓄積するための良い方法があれば教えてください。 【回答内容 […]
店舗管理自動化の懸念事項『在庫数更新』突破方法について
店舗管理自動化の懸念事項『在庫数更新』突破方法について ある程度思った通りに動くものが作れてきた中で「やっぱり自動化したいなぁ」という思いが強くなり現在様々なパーツを作っています。 その中で、別のシステムから情報を取り出して作業しなくてはいけない『在庫数の更新』というパーツがあります。 現状の業務フローはこんな感じ ※弊社親会社の販売管理システムに(弊社が扱える)現在在庫が記録されているので 親会 […]
楽天市場の商品レビューを取得して好きなように扱う方法を考えてみた 2
- 2020.06.01
- ECシステム, Laravel, PHP, スクレイピング, ネットショップ, 仕様, 備忘録, 商品レビュー, 情報収集, 更新, 楽天市場, 自作システム, 自動化, 自動収集, 自動記入
楽天市場の商品レビューを取得して好きなように扱う方法を考えてみた 2 前回記事はこちら『楽天市場の商品レビューを取得して好きなように扱う方法を考えてみた』 楽天市場対応機能として、Ranking表示機能が完了しました。 店舗ページ作成の自動化を目指す私としては、ページサポートツールとして欲しい機能は残り4つ。 レビュー取得＆新着レビューリスト 店長オススメ商品リスト PICKUP商品リスト 今注文 […]
Docker×Laravelでアクセス元のIPアドレスを取得する方法
Docker×Laravelでアクセス元のIPアドレスを取得する方法 久しぶりにアクセスログを確認してみたら想定と違う動きがありました。 アクセスしてきたIPがみんな同じ(1件だけ何故か違いますが…)。 このIP：172.22.0.1 はDockerコンテナのIPです。 AmazonのMWSではシステムに対してアクセスしてきたIPを取得して適正に処理(不正アクセスのログインを拒否)する […]
負担ポイント見える化ツールを実装しました
負担ポイント見える化ツールを実装しました DEMO版にはまだ上げていませんが、負担ポイント見える化ツールを実装しました。 切っ掛けは以前に書いたこの記事【ポイントアップで売上UP効果はあったが利益が減少していた】 実際にPTアップイベントの結果検証とかに役立てばなぁと思っています。 画面回りはこんな感じ 例のごとく、左側を変える事で右側の値が変動すると言うJavaScriptさんでの実装です。 ま […]
CronはRunningなのにCrontabに書いた定時実行が動かなかった理由
- 2020.05.22
- API, CRON, CRONTAB, Laravel, No scheduled commands are ready to run., PHP, Schedule:run, エラー修正, スクリプト備忘録, 実行されない理由, 自作システム, 自動化
CronはRunningなのにCrontabに書いた定時実行が動かなかった理由 こんな場面に遭遇してしまいました。 慣れてきたから起こるポカというか理解不足というか。 原因は超簡単な所だったので、次回の為の備忘録です。 DockerをリビルドしたらLaravelのSchedulerが動かなくなった 切っ掛けはDockerのリビルド。 昨日書いた記事の通り、サジェストを大量に取得するモードも用意した […]
検索サジェスト取得でNGNIX TimeOutエラー
- 2020.05.21
- Amazon, Docker, https-portal, Laravel, Ngnix, SEO対策, TimeOutエラー, Yahoo!ショッピング, サジェスト取得, 楽天市場
検索サジェスト取得でNGNIX TimeOutエラー発生。 今のバージョンがシングル(指示した値だけ)で動作にしているので、検索サジェストの充実を図ろうと仕組みを変更しました。 そうしたら ngnixのタイムアウトエラー が発生。 LaravelはApache で動かしているので原因として考えられるのは https-portal のコンテナです。 こいつの設定何も変えてなかったなぁ～と。 Dock […]
楽天市場の商品レビューを取得して好きなように扱う方法を考えてみた
楽天市場の商品レビューを取得して好きなように扱う方法を考えてみた 結論を先に書いてしまうと、結構めんどくさい。 課題となるパートは以下の通り。 レビューリストをどこから取得するか レビューの振分け(悪いレビューは隠したいけどやり過ぎは目につくので適度に隠す)の程度はどんなか 最適にリスト化が出来れば後は項目2のルールが悩むところ。 でも最初の最適なリスト化が結構な課題になってます。 取得方法は3候 […]