データの前処理、駆逐してやる!
上場企業でデータ解析コンサルを担当して早5年。。。(学生時代は早稲田大学で統計学・AIを扱う研究室に所属していたのでそれを含めると約10年。。。)
様々なデータと向き合い思ったこと、それは「世の中のデータは泥臭すぎてすぐに使えない!!(某CM風)」
「前処理、駆逐してやる...!(某漫画風)」をモットーに、Excelの空欄を埋めるしょぼい処理から有効な特徴量を抽出する比較的ヘビーなものまで様々な”前処理”をこなしてきました。
その経験を活かし少しでも皆様のお役に立てればとおもいます。
<<データの前処理に関する、こんなお悩みありませんか?>>
・複数のファイルを一括で変換したいけど、手作業でやってると時間が溶けていく。。。ましてやマクロを組んだりプログラミングをするスキルや余裕なんてない!
・AIやデータ解析ツールを使って分析をやりたいけど、持ってるデータのクセが強すぎて無...