RubyでTwitterのtweetを収集して、簡単な分析をしてみます。 ここでは以下を点を分析することにします。 ・tweetでは、どれくらいの割合でHashタグが付けられているのか？ ・tweetでは、どれくらいの割合でリンクが付けられているのか？ ・tweetでは、どれくらいの割合でmentionが付けられているのか？ ・どのクライアントアプリでよく使われているのか？ tweetの収集まずtweetの収集ですが、 Twitterには「REST API」と「Streaming API」の二種類があり、 分析するために大量のtweetを取得する用途には、 「Streaming API」が向いてそうなのでそちらを使います。 RESTAPIとStreamingAPIの違いはこのスライドがわかりやすいです。 TwitterのStreamingAPIについて 概要と簡単な実演 http://ww
タイトルの通り基本Mac限定です。 なぜかというと、メモリ使用率の取得に vm_stat (vmstatじゃないよ)というコマンドを使用しているからです。 vmstatはLinux系では有名なコマンドですが、残念ながらMacにはないんですよね。 Macのvm_statは名前は似ているけど表示される内容は随分違います。 あとメモリ使用率を調べるコマンドといえば free ですが、これもMacにはないですしね。 では前置きはこれくらいにして、どんな感じになるのかをどうぞ 一応説明すると、左から、LANG、起動時間、ロードアベレージ、メモリ使用率、現在時刻が表示されています。 起動時間が1日以上になるとこんな感じになります。 っで肝心の方法ですが、tmuxのステータスラインから自分で作成したスクリプトを実行するという方法です。 ですので以下の3つのスクリプトをPATHの通った場所に置いて、実行権
その昔TwitterAPIを使ってBOTを作ろうとしたことはあったが、Twitter4Rを利用するところまでやってBOTのコンセプトが決まらなかったのでやめた。 で、今回また何かしようと思って調べた所、最近のTwitterはStreaming APIを利用すればこちらからPullしなくてもTwitter側から自動的にPushされるらしい。 The Streaming APIs | Twitter Developers そんなわけで今回はTwitterのStreaming APIを使ってみた。 とりあえず手始めに使ったのはEM-TwitterというGemライブラリ。 tweetstream/em-twitter · GitHub Twitter Streaming APIからのイベント（Push）が来ると自動的に動作するClientを実装できるらしい。 そこのサンプルに載っていたコードを元に
twitter botの基本構成ができるまでの作成手順をざざっと書きました。 1. レンタルサーバ 【VPS】 ServersMan » ServersMan@VPS 【プラン】Entryプラン （¥490/月） 【OS】 Cent OS 【パッケージ】 ディスクパッケージ（標準パッケージ） 2. サーバ環境構築 リモートサーバログイン OS Xのターミナルで下記を実行 ssh -l <ログイン名> <ホスト名（IPアドレス）> -p <ポート番号> gccのインストール サーバ上で下記のコマンドを実行 yum install -y gcc Rubyのインストール サーバ上で下記のコマンドを実行 $ mkdir ~/sources $ cd ~/sources $ wget ftp://ftp.ruby-lang.org/pub/ruby/1.8/ruby-1.8.7-p330.zip $
Mitsumasa Kubo (@beatinaniwa) interests: football, natural language processing 先週GumchartというGumroadの人気アイテムをTwitterからランキングするウェブサービスを作りました。 おかげさまでアクセスはほとんどないんですが、Tweetを収集して保存して運用しようというときに参考になるようなまとまった日本語記事があまりなかったのでそれについて書きたいと思います。英語の記事では次の記事が一番参考になりました。 Twitter Streaming with EventMachine and DynamoDB まずはどこにどういう形式でTweetを保存するか決めます。もちろんローカルのMySQLにでもいいんですが、MongoDBを個人的に使ってみたかったのと、MongoDBのホスティングサービスであるM
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
