クローリング

wget&grepで簡単クローリング・スクレイピング

モノづくり部の山岸です。 本日はクローリング・スクレイピングのネタをご紹介。 複雑なデータをWebから取ってきたい時は 素直にScrapy等の強力な道具を使ったほうがいいと思いますが、 簡単な処理であればUnixコマンドのみでも十分可能です。 というわけで…