atomが楽そうだったのでatomにした。LDRがクロールできれば何でも良いし。railsでrssフィードを作る - うんたらかんたらRuby - Rubyisthttp://rubyist.g.hatena.ne.jp/rochefort/20090120参考になりますね。ついでに、RailsでRSSフィードを配信するのは超簡単！ - 医者を志す妻を応援する夫の日記http://d.hatena.ne.jp/shunsuk/20071203/1196680466を参考にheadにRSS Auto-discoveryだかなんだかを組み込んだ。atomだけど。 ちなみに何を作っているのかというと、個人用のフィードを吐ける画像アップローダーです。経緯としては、 某画像SNSの検索結果やお気に入りなどを自前でスクレイピングとかしてフィードにしていた。画像はTumblrに投げていたTumblrの連
タグ
- すべて
- css (6)
- *google (4)
- *javascript (7)
- *photoshop (3)
- *webservice (3)
- *webデザイン (11)
- *web制作 (9)
- *wordpress (3)
- *ネタ (6)
- .htaccess (4)
- 2ch (13)
- 3d (3)
- AVI (3)
- ActionScript3 (3)
- Amazon (40)
- Amazon Webサービス (5)
- Apollo (8)
- AuthComponent (3)
- Automator (4)
- Benchmark (5)
- CSSTips (4)
- Chrome (14)
- Chrome OS (12)
- DeNA (4)
- DesignWalker (3)
- Devel-NYTProf (4)
- ESXi (22)
- Emacs (21)
- FAQ (3)
- Flipboard (4)
- GAE (8)
- GIGAZINE (6)
- GoogleMap (13)
- HDD (3)
- HTML5 (15)
- Help (3)
- IPv6 (6)
- ITmedia (3)
- JavaScript (6)
- MacBook (7)
- MacOSX (141)
- NPO (3)
- NoSQL (3)
- OAuth (6)
- PSGI (23)
- RDS (4)
- Remedie (14)
- ReverseProxy (3)
- TV (6)
- Titanium (3)
- UI (10)
- Weather Hacks (4)
- Webカメラ (4)
- Webサービス (13)
- XML-Simple (4)
- acotie (3)
- actionscript (30)
- addon (7)
- adobe (13)
- affiliate (4)
- air (5)
- ajax (92)
- algorithm (23)
- amachang (16)
- amazon ec2 (6)
- amazon s3 (5)
- android (17)
- animation (3)
- anyevent (35)
- apache (40)
- api (103)
- app (27)
- appengine (11)
- apple (48)
- appstore (4)
- arduino (29)
- ark (7)
- as3 (3)
- auth (6)
- authentication (7)
- backup (7)
- bicycle (3)
- bit.ly (3)
- blog (51)
- book (80)
- bookmark (62)
- bookmarklet (11)
- bot (19)
- bouldering (11)
- browser (12)
- business (34)
- c (3)
- c++ (11)
- cafe (3)
- cakephp (43)
- calendar (16)
- camera (4)
- canvas (6)
- capistrano (4)
- cassandra (4)
- catalyst (82)
- centos (52)
- cgi (11)
- chained (6)
- chart (3)
- cheatsheet (8)
- china (3)
- climbers (15)
- climbing (99)
- cloan (3)
- cloudforecast (3)
- cms (7)
- code (9)
- coderepos (5)
- coding (4)
- color (7)
- command (11)
- communication (10)
- community (17)
- cooking (3)
- copyright (5)
- coro (12)
- cpan (85)
- cron (4)
- css (59)
- daemontools (5)
- dankogai (57)
- database (15)
- datamining (3)
- datetime (4)
- db (4)
- dbix-class (14)
- dbix-skinny (5)
- debug (3)
- delegate (9)
- denali (7)
- design (66)
- developer (10)
- development (29)
- dictionary (4)
- digg (4)
- dns (3)
- docomo (3)
- document (4)
- domain (11)
- download (13)
- dq9 (5)
- dropbox (5)
- dropdb (5)
- dvd (5)
- ec2 (12)
- eclipse (7)
- editor (3)
- education (5)
- encode (4)
- engineer (3)
- english (14)
- epub (3)
- erogeek (7)
- etolabo (3)
- event (12)
- evernote (11)
- excel (5)
- extension (8)
- eye-fi (4)
- facebook (26)
- favicon (6)
- ffmpeg (12)
- ficia (5)
- file-find (3)
- finder (3)
- firebug (10)
- firefox (44)
- firefox拡張 (3)
- fireworks (4)
- flash (44)
- flex (5)
- flickr (18)
- flv (5)
- font (14)
- form (5)
- framework (23)
- free (11)
- game (11)
- geek (10)
- generator (18)
- git (48)
- github (17)
- gmail (7)
- go (9)
- google (159)
- google analytics (5)
- google app engine (15)
- google buzz (3)
- google maps (11)
- google reader (3)
- googlemaps (5)
- googlewave (3)
- graphicsmagick (3)
- greasemonkey (15)
- gree (8)
- growl (3)
- gtd (7)
- guide (3)
- hack (6)
- hacker (6)
- hadoop (11)
- hardware (6)
- hatena (202)
- hikari_load (7)
- hosting (3)
- hotaka (12)
- htaccess (3)
- html (12)
- http (6)
- http-engine (6)
- httpd (9)
- iOS (18)
- iOS4 (6)
- icon (15)
- idea (6)
- ie (3)
- im (3)
- image (27)
- imager (5)
- install (17)
- intel (3)
- interface (4)
- intern2009 (8)
- interview (44)
- ipad (53)
- iphone (256)
- iphone sdk (3)
- ipod (6)
- ipod touch (15)
- irc (15)
- iscsi (4)
- itkz (9)
- itunes (11)
- japan (3)
- java (6)
- jkondo (12)
- jpa (7)
- jquery (84)
- js (144)
- json (9)
- kaikoma (3)
- kansai.pm (4)
- kayac (4)
- kazeburo (4)
- kindle (3)
- lan (4)
- layout (3)
- ldr (6)
- leopard (3)
- lestrrat (3)
- librahack (3)
- library (47)
- life (17)
- lifehack (38)
- lifehacks (10)
- lightbox (5)
- lighttpd (4)
- linux (46)
- lisp (3)
- livedoor (28)
- livedoor reader (4)
- log (3)
- logo (3)
- logwatch (3)
- m2a (13)
- mac (4)
- macworld 2009 (6)
- mail (16)
- makotoworld (14)
- mala (14)
- manual (5)
- map (7)
- mashup (30)
- mecab (4)
- memcached (18)
- microformats (10)
- midwinter (8)
- mixi (15)
- miyagawa (16)
- ml (4)
- mobile (37)
- module (12)
- moose (11)
- mountain (79)
- movabletype (18)
- movie (18)
- mysql (56)
- nanapi (6)
- naoya (17)
- nekokak (4)
- nepal (5)
- net-twitter (6)
- neta (13)
- network (14)
- nginx (9)
- niconico (8)
- nintendo (24)
- node.js (5)
- objective-c (11)
- openframeworks (6)
- openid (29)
- opensocial (7)
- opensource (11)
- osx (8)
- p2p (5)
- paperboy&co. (7)
- parallels (4)
- pathtraq (4)
- pdf (12)
- pear (18)
- performance (22)
- perl (382)
- perl-life (8)
- perlcasual (5)
- pfi (4)
- photo (24)
- photoshop (39)
- php (179)
- php5 (5)
- picasa (4)
- plack (42)
- plagger (22)
- plugin (29)
- plus (4)
- postfix (7)
- pound (5)
- presentation (11)
- programmer (6)
- programming (255)
- pubsubhubbub (7)
- python (31)
- rails (9)
- ranking (4)
- reference (4)
- rss (7)
- ruby (44)
- ruby on rails (21)
- s3 (6)
- sakura (6)
- sample (9)
- sawanobori (11)
- scala (5)
- scalability (4)
- search (30)
- security (38)
- seo (10)
- server (80)
- service (5)
- session (6)
- shi3z (5)
- shibuya.pm (10)
- shuwaemon (4)
- skype (6)
- slide (5)
- snow leopard (4)
- sns (6)
- softbank (8)
- software (55)
- sqlite (8)
- squid (7)
- ssd (5)
- ssh (10)
- storage (6)
- streaming (4)
- study (6)
- subversion (35)
- symfony (11)
- takesako (4)
- tatsumaki (4)
- technology (9)
- template (18)
- terminal (7)
- test (7)
- testing (5)
- tips (110)
- todo (6)
- tokuhirom (8)
- tokyotyrant (5)
- tool (25)
- tools (6)
- trac (22)
- tumblr (7)
- tuning (4)
- tutorial (37)
- twitter (188)
- ubuntu (4)
- ugomemo (16)
- umedamochio (10)
- unicode (4)
- usability (9)
- ustream (4)
- vbl (5)
- video (18)
- vim (47)
- vista (6)
- vmware (23)
- wave (31)
- web (23)
- web 2.0 (8)
- web creative (40)
- web service (7)
- web2.0 (42)
- webapi (18)
- webdesign (144)
- webhook (18)
- webscraper (9)
- webservice (239)
- webservices (19)
- web開発 (8)
- wii (8)
- wiki (4)
- windows (13)
- wordpress (45)
- work (7)
- xml (7)
- xoops (4)
- xpath (5)
- yahoo! (12)
- yapcasia2009 (22)
- yapcasia2010 (23)
- yappo (5)
- yokohama.pm (5)
- youtube (41)
- yusukebe (9)
- zsh (5)
- あとで読む (15)
- これはすごい (6)
- さくらインターネット (4)
- さくらレンタルサーバ (10)
- しゅわえもん (12)
- はてな (6)
- はてなブックマーク (6)
- まとめ (12)
- まとめサイト (6)
- アクセス解析 (4)
- インターン (5)
- ウェブデザイン (5)
- ケータイ (7)
- スクリーンショット (4)
- スクレイピング (4)
- セキュリティ (5)
- ソースコード (4)
- ダウンロード (5)
- チュートリアル (6)
- ツール (16)
- テンプレート (5)
- ニコニコ動画 (4)
- ネタ (9)
- フレームワーク (4)
- プラグイン (4)
- プログラミング (21)
- ホリエモン (4)
- マッシュアップ (13)
- モバイル (4)
- ライブラリ (4)
- リクルート (5)
- リファレンス (8)
- 仕事術 (10)
- 便利 (4)
- 便利ツール (4)
- 写真 (6)
- 勉強 (5)
- 動画 (12)
- 形態素解析 (7)
- 梅田望夫 (10)
- 検索 (13)
- 正規表現 (6)
- 社会 (4)
- 素材 (9)
- 自宅サーバ (7)
- 自然言語処理 (6)
- 記事 (5)
- 認証 (4)
- 資料 (4)
- 開発 (6)
- perl (382)
- iphone (256)
- programming (255)
- webservice (239)
- hatena (202)
- twitter (188)
- php (179)
- google (159)
- js (144)
- webdesign (144)
scrapingに関するmakotoworldのブックマーク (3)
-
makotoworld 2009/10/17
- rails
- scraping
リンク -
PHPでのスクレイピングに役立つライブラリ - (DxD)∞
APIが提供されていないサービスから欲しい情報だけを取得するには、HTMLなどから自前でスクレイピングを行うしかありません。PHPでのスクレイピングに役立つライブラリなどをまとめてみました。 PerlやRubyには色々と便利そうなものが見つかるのですが、PHPにはなかなかこれといったものがないですね。 Webスクレイピングライブラリ HTMLScraping HTMLをXML化してDOMやXPathで操作できるクラス。主にHTTP_Request+HTMLParser(XML_HTMLSax3を含む)/Tidy+Cache_Liteという構成で、スクレイピングに必要なものが一通り揃っている。ライセンスはLGPL他。 WebScraper シンプルな汎用スクレイピングクラス。HTTP_Client+HTMLParser(XML_HTMLSax3を含む)という構成で、XPathで要素を抽出でき
-
Web::Scraper - naoyaのはてなダイアリー
Today I've been thinking about what to talk in YAPC::EU (and OSCON if they're short of Perl talks, I'm not sure), and came up with a few hours of hacking with web-content scraping module using Domain Specific Languages. 使ってみたよ! #!/usr/local/bin/perl use strict; use warnings; use FindBin::libs; use URI; use Web::Scraper; use Encode; use List::MoreUtils qw/uniq/; my $links = scraper { process 'a.key
-
1
公式Twitter
- @HatenaBookmark
リリース、障害情報などのサービスのお知らせ
- @hatebu
最新の人気エントリーの配信
処理を実行中です
キーボードショートカット一覧
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
設定を変更しましたx