こんにちは。 渡邊です。 さっそく余談を。 ちょっと前に、Twitterで「Twitterのユーザー名に、今の天気と連動した天気アイコンを入れる」というのが流行りました。 あれ、実装してみると、ちょっと感動ですよ。 「あ、たしかにこうやるとできるな。」って。…

どうも、初心者からたったの7年でエンジニアになった三井です！ システムチームでテックリードやってます！よろしくお願いいたします！！！ 最近この「初心者からたったの〇ヵ月でエンジニアになった」的な謳い文句流行ってますね。ノってみました。 さて今…

Scrapy でバグっぽい挙動にぶつかったので状況と解決策の記録です。 クローラーの実行に失敗する いつものように Scrapy でクローラーを走らせようとしたらエラーでコケました。 エラーのログはこんな感じ。 2018-01-27 14:36:06 [scrapy.utils.log] INFO: S…

Web スクレイピングはイレギュラーとの戦いです。特にそれが Web 定点観測のためのスクレイピングであれば難易度はさらに高まります。 スクレイピングしようとしたタイミングでサーバーが死んでいるかもしれない クローラーを書いていたときには気づけなかっ…

乾・岡崎研究室が公開している 言語処理100本ノック 2015 に取り組んで行きます。 使用する言語は Python3 です。 第3章です。一部の方が大好きな 正規表現 の章です。 私は...、あんまり好きじゃないですね。 第3章: 正規表現 Wikipediaの記事を以下のフォ…