minami8620

Webデータの自動取得・整理から、毎日自動で動く仕組みづくりまで丁寧に対応します

はじめまして、みなみと申します。 Pythonを中心に、Webデータの自動取得（スクレイピング）、データの整理・加工、定期実行の仕組みづくりを得意としています。 【できること】 ・Webサイトからのデータ自動取得（ログインが必要なサイト、JavaScriptで表示されるサイトにも対応） ・取得データのCSV／Excel／Googleスプレッドシートへの出力 ・毎日・毎週の自動実行（PCを起動していなくても動く構成のご提案） ・データの整形、重複除去、表記ゆれの統一などのクレンジング ・Webダッシュボードでのデータ可視化 ・ブラウザ操作の自動化による定型作業の効率化 【制作物】 ・東京都の人口統計データを自動取得し、品質チェック後にデータベースへ格納、Webダッシュボードで公開するデータパイプライン（GitHub Actionsで毎週自動更新） ・大学院の研究者を検索できるWebサイトの開発 ・画像からカードの状態を判定するPython＋Androidアプリの試作 【使用技術】 Python（pandas、Playwright）、JavaScript／TypeScript（Node.js）、SQL（DuckDB）、GitHub Actions、Streamlit、Kotlin 【対応方針】 ・サイトの利用規約を確認し、規約に反する取得や認証の回避は行いません ・納品前に実データで動作確認を行います ・専門用語をなるべく使わず、仕組みや使い方をわかりやすくご説明します 「この作業、自動化できる？」という段階のご相談も歓迎です。お気軽にご連絡ください。