既存のスクレイピングツールの修正のお願い
締切済み

@mumu_san

担当者: mumu-san
登録: 2020-6-12
締切: 2020-6-26
募集地域: 北海道

サイト元仕様変更により、現在わたしが持っているスクレイピングツールの1カ所修正をお願いいたします。

経緯
・2ヶ月ちょっと前にupworkで外注をお願いして、スクレイピングツールを作ってもらいました。(正味2、3日でしていただいて、3000円で完成していただきました)
 でも、使い始めて1ヶ月が経つか経たないかの6月1日からサイト元仕様変更がありまして、1箇所だけ(出発地の)取得できなくなってしまいました。
 作成してくれたプログラマーの方がバングラデシュの方なのですが、返事はあったものの、、、のんびりというか、、、反応がとても遅くて、、、コロナやいろんな理由を言われて、、、もう10日が過ぎてしまいました。。。それで今回の依頼となった次第です。

内容
・一部分が取得できなくなった現在わたしが持っているスクレイピングツール(Seleniumで書かれていると思います)の一部修正
(もし、人の作成したものの修正が面倒or再作成したほうが早いというのでしたらそれでもOKです。現状と同程度でお任せ致します)
 & 
継続的にサイト元仕様変更がありそうです(別途お支払いいたします)ので、無理のない範囲で迅速にご対応いただける方、そして今後とも継続して修正をお願いできそうな方をお願い致します。

依頼金額
・現行ツールの修正を ¥5,000とさせてください。(ご希望があれば教えて下さい)
 今後もサイト元仕様変更がありますので、次回以降は軽微な修正は都度1回¥2,000(修正多い場合は要相談とさせてください)でどうぞよろしくお願いします。

大変申し訳ございませんが、複数サイトに同一のツール修正依頼を出していますので、ご選考までに多少お時間をいただくかもしれません。ご了承のほどどうぞよろしくお願いします。

・現状ツールの主要な仕様
①テキストファイル(複数URL)を読み込みCSV出力すること(入力、出力ファイル添付します(それぞれinputテキストファイル、出力ファイルはcsvファイル)
②遅延ファイル・・・URLと次のURLまでの遅延時間を可変できるようにすること(遅延ファイル添付します(delayテキストファイル)
③インターバルファイル・・・全てのURLを処理した後、インターバル時間後に再起動すること(インターバルファイル添付します(intervalテキストファイル)
④環境・・・Windows10 VPSの環境で動くこと
⑤スピード・・・URLと次のURL遅延時間を5000msとした場合、現状スピードは1000URLで3時間~4時間程度

・現状ツールが取得する場所と、項目
①取得する場所・・・添付資料のURLの左下側に出てくる項目
②①の中の取得箇所・・・添付資料の8項目です。ご参考ください。
出発地、目的地、日付、航空会社、経由、飛行時間、価格、ツール取得日となります。
※取得するものが無いときは、スキップ。
※途中でURLのリンクエラー等が発生した時も、スキップ。

URL例①(東京出発、関西方面)
https://www.google.com/travel/explore?curr=JPY&gl=jp&hl=ja&authuser=0&origin=https%3A%2F%2Fwww.google.com&mvb=ChIJ5h6_taHtQUARvU8s2UMIYUASEgmK73kSdAhBQBG9Tyz_xH9gQA&tfs=CBsQAxoOagwIAhIIL20vMDdkZmtwAoIBDQj___________8BEAJAAUgB