スレッド処理では最高まで高速化できていないためスレッドからAsyncioなどを使い最高まで高速化

予算
2千 円以下
納品希望日
2020年6月28日
募集期限
募集終了 締切日 2020年6月28日 /
掲載日 2020年6月25日
応募状況
応募人数 0
契約人数 0
閲覧数 44
用途・種類
ソフトウェア・業務システム開発、作業自動化・効率化、その他
対応範囲
用意してあるもの
開発言語
Python

募集内容

依頼の概要・目的・背景
【目的】Webスクレイピングの高速化 【背景】Webスクレイピングの高速化にスレッド処理を使用し高速化しているのですがふとそう言えばCPU使用率的に余裕があるなと思い調べたところ非同期処理を行いどんどんリクエストを投げることができるというのを目にしましてAsyncioを行い実行しようと思いましたがいまいち実装方法がよくわからずじまいです。 【依頼詳細】 サービス内容:高速Webスクレイピング スレッド処理から非同期処理に変更しなおかつほかに最適化などが見込めそうなところの最適化やほかの高速化などがあればそちらをお願いしたいです。 あと、できれば出いいのですがtqdmなどのプログレスバーも欲しいです。 【提案方法】
添付ファイル
参考URL
求めるスキル
特記事項
スピード重視

応募者一覧

応募はまだありません

募集内容についての質問

募集者情報

5.0 (6)
発注実績
4
発注件数
25%
発注率
100%
取引完了率
認証状況
本人確認
機密保持契約(NDA)

この募集内容に似ている仕事