はじめに こんにちは、データ分析部の久保 (@beatinaniwa) です。 今日は義務教育で教えても良いんじゃないかとよく思うWebクロールとスクレイピングの話です。 私自身、日頃は社内に蓄積されるニュース記事データや行動ログをSQLやPythonを使って取得・分析することが多いですが、Web上にある外部データを使って分析に役立てたいというシーンはままあります。 単独のページをガリガリスクレイピングしたいときなどは、下の1年半ぐらい前の会社アドベントカレンダーに書いたような方法でやっていけば良いんですが、いくつもの階層にわかれたニュースポータルサイトやグルメポータルサイトを効率よくクロール+スクレイピングするためには、それに適したツールを使うのがすごく便利です。 qiita.com そこでPython用スクレイピングフレームワークScrapyの登場です。 Scrapy | A Fast
先日、会社のチームリーダーと面談を行った。 リーダーから「この会社で働いていて楽しい？ 困ったことはない？」と尋ねられ、 僕は即座に「すごく楽しいですよ。日本で働いていた会社とは大違いです」と答えた。 「日本では毎日2時間から3時間残業するのが当たり前でした。 ときには週末を潰したり、徹夜でバグ修正を行ったりすることもありました。 それに比べてこの会社では残業が全然ないし、毎日適度な作業量を与えられて集中して仕事ができるから最高ですよ」 彼女はこれを聞いて、驚いたような呆れたような表情を見せこう語った。 「その日本の会社、マネジメントがひどい。 いくら長時間仕事をしたところで仕事が終わるなんてありえないのに」 いくら働いても問題は無くならない 「それは生産性が落ちるからってことですか？」と尋ねる僕に、彼女はこう続けた。 「例えば、いま未解決のバグが10個ある。 すべて直すのに80時間かかる
こんにちは、アートディレクターのもりたです。 最近肩書がアートディレクターに変わりました。 私の好きなものと好きなものを合わせたフォントとイラストのシリーズ、和文・欧文と描いて、ネタがなかったので前回でおしまいにしようと思っていたんですが、なぜか周りの人に「また描いてよ」と言われる率が高かったので第3回です。 今回は、欧文・和文合わせて定番なサンセリフ体縛りで描いてみました。 ではどうぞ！ 游ゴシック Win8.1以降、MacOSX Mavericks以降からOSにプリインストールされるようになって、より身近な存在になった游ゴシック。 長い文章でも読みやすく、自然な優しさのある文字ですよね。文字を大きくすると角が丸く処理されているのがわかります。 うっかりするとちょっと落ち着きすぎて物足りなく感じてしまうんですが、それもまたデザイナーの使い方次第。今回はジブリのような絵柄で「地味そうに見え
サラリーマンではあるものの、かなり自由度が高く、全ての補助が出る環境。 東京まで通勤するんだけど、無謀かな。 電車でもいけるのだけど、ちょっと色々飽きてきて、気分転換に車に変えようかなと。 一つ難点はオフィスが青山で駐車難民になりそうな所。
海外女性コスプレイヤーBaty Alquawen氏より、『The Witcher 3: Wild Hunt』の主人公“ゲラルト”に扮した凛々しさ満点のコスプレイメージ集が公開されています。 昨年にも“女性版ゲラルト”のコスプレフォトをRedditで公開し話題となっていた彼女の新たなアルバムはFacebookからチェック可能。ゲーム本編の人気が海外コスプレシーンにも飛び移り、女性ウィッチャー“シリ”やセクシー過ぎる“サキュバス”などハイクオリティーな写真作品が大きな注目を集めていましたが、渋さが光る主人公“ゲラルト”の雰囲気をガラリと変えたAlquawen氏のイメージはなかなか斬新に感じられるのではないでしょうか。 公開されているイメージの中には一部グロテスクな表現を含むものもあるので、苦手な方は注意してください。彼女のFacebookでは『Fallout 4』をテーマにしたアルバムも投稿さ
2016 - 08 - 18 どんどん二度寝しようぜ！朝の二度寝は健康に良いらしいよ メンタル 睡眠 シェアする Bookmark! Facebook Twitter Google+ Pocket 朝が起きるのがつらくて、ついつい「あと5分だけ」と 二度寝 をしてしまう人もいるかと思います。誰だって、朝目覚めた時、もう少しだけ寝ていたいと思うものです。 ただ、最近は 二度寝 は決して身体に悪い影響があるわけではなく、むしろ健康にいいという考えられています。 少しでも眠っていたいと 二度寝 の常習犯だった方にとって、これまでの 二度寝 は悪いことではなく、健康的な活動していたと周りに自慢できるのではないでしょうか？^^ ただし、 二度寝 には 良い 二度寝 と 悪い 二度寝 があります。これは間違えていけません。その辺も踏まえて、今回は 二度寝 の身体への影響について書きたいと思います。 も
幼稚な妻を持つ男の愚痴を聞いてくれ。 妻はもともと見た目も中身もガキっぽかったが妊娠してから、それがますますひどい。 1.俺がゲームをしているのに、かまってらしい欲しくしょっちゅうまとわりついてくる。集中出来ないし邪魔なので静かにして欲しい。仕事から帰ってきて、唯一楽しみにしている俺の自由時間だ。好きにさせて欲しい。 2.果物とパンしか食べない。つわりが辛いらしく、偏食が酷い。 3.これが一番イヤなのだが、添い寝を要求してくる。ガキじゃないんだから1人で寝てくれ。俺はゲームをしたい。そのくせ寝つきが悪く、いつまでもアイフォンを弄っているのにも腹がたつ。 4.飲み会を制限する。飲み会の多い会社で、帰りはだいたい3時4時。12時までに帰って来いとうるさい。飲み会ぐらい好きにさせてくれよ、浮気してる訳じゃないんだから.... 子供が生まれるともっと大変だと周囲に言われるが、すでに結構大変だ。 と
AI & MLLearn about artificial intelligence and machine learning across the GitHub ecosystem and the wider industry. Generative AILearn how to build with generative AI. GitHub CopilotChange how you work with GitHub Copilot. LLMsEverything developers need to know about LLMs. Machine learningMachine learning tips, tricks, and best practices. How AI code generation worksExplore the capabilities and be
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
