下記の表は gzip の標準状態を 1 とした相対的な数値を示しています。 Software 欄の -1 や -9 は、コマンドに指定できる圧縮率です。 -1 が最低、 -9 が最高になっているコマンドが多いです。 並列に実行できるものに関してはすべて 8 スレッドで実行しています。 ベンチマーク結果 time real 実際の経過時間 time user CPU user 時間 compression ratio 圧縮率の比。大きいほどファイルが大きい。 compression ratio (single/parallel) 並列版について、シングルスレッドに対する圧縮率の比 parallel overhead シングルスレッド版と比較した CPU user時間の比
前回はAmazon Redshiftの基本的な機能の説明を行いました。今回は一歩踏み込んで、具体的にAmazon Redshiftはどのように利用することができるのか、また他のデータウェアハウスやHadoopなどのビッグデータ処理ミドルウェアと比べて、どのような点が優れているのかを説明します。 Amazon Redshift の得意な点・不得意な点 前回の説明のように、Amazon Redshiftはクラウド上に構築されたデータウェアハウスサービスです。そのため、蓄積された大量データの集計処理に特化されています。 たとえば、過去半年分の全データに対する日付ごと・属性ごとのアクセスユーザの件数を一覧で出力する、などです。これに対して、通常の（行指向）データベースの利用方法である、ある特定のユーザの、特定のデータを取得する、などの処理は、たとえ1件を取得するだけでも数秒かかることがあります。つ
この画像を大きなサイズで見る 地球の周りを回っている月。あの大きさであの位置だから風流だったり、ウサギさんが住んでいるようにも見えるわけだが、もしあの位置に太陽系の他の惑星があったらどうなるんだろう？地球からはどう見えるんだろう？その疑問を視覚化した映像が公開されていた。 たまにローテーション組んで、他の惑星も遊びに来てほしい雰囲気だぞ。 こちらが月 この画像を大きなサイズで見る 水星だった場合 この画像を大きなサイズで見る 火星だった場合。赤いな この画像を大きなサイズで見る 金星。明るい星なだけに夜も明るくなりそうだ。 この画像を大きなサイズで見る 海王星は月よりも14倍大きいからこんな感じに。 この画像を大きなサイズで見る 天王星 この画像を大きなサイズで見る 土星は月の35倍。まいりました土星さん、お引き取りください この画像を大きなサイズで見る 木星は月の40倍。もうしませんごめ
11/26 の『Hadoopソースコードリーディング 第13回』でCloudera Impalaの発表をしてきました。 きっかけはTwitter上で、ビールの化身 も◯す の外道父を呼べば？から始まって、１分かからず依頼ツィートが飛んできて引き受けた感じで、Twitterで数分で全てが完結する非常にフットワークの軽い業界になります。 それでは、発表資料や補足などを書いていきます。 リンク Eventbrite : Hadoopソースコードリーディング 第13回 Twitter #hadoopreading togetter : Hadoopソースコードリーディング 第13回 まとめ Inside Impala Coordinator at HSCR 13th – Go ahead! by @repeatedly Inside Impala -Query Exec Engine- by @o
Hive & Pig Two ways of doing one thing Or One way of doing two things Ashutosh Chauhan Who am I? • Pig Committer & PMC Member • Hive Committer & PMC Member • Hcatalog Committer & PPMC Member • ASF Member • Software Engineer at HortonWorks Two ways of doing same thing • Both generate map-reduce jobs from a query written in higher level language. • Both frees users from knowing all the little secret
Hello, I’m Kristof, a human being like you, and an easy to work with, friendly guy. I've been a programmer, a consultant, CIO in startups, head of software development in government, and built two software companies. Some days I’m coding Golang in the guts of a system and other days I'm wearing a suit to help clients with their DevOps practices. While SQL databases are insanely useful tools, their
平素よりQA＠ITをご利用いただき、誠にありがとうございます。 QA＠ITは「質問や回答を『共有』し『編集』していくことでベストなQAを蓄積できる、ITエンジニアのための問題解決コミュニティー」として約7年間運営をしてきました。これまでサービスを続けることができたのは、QA＠ITのコンセプトに共感をいただき、適切な質問や回答をお寄せいただいた皆さまのご支援があったからこそと考えております。重ねて御礼申し上げます。 しかしながら、エンジニアの情報入手方法の多様化やQAサービス市場の状況、＠ITの今後のメディア運営方針などを検討した結果、2020年2月28日（金）15:00をもちましてQA＠ITのサービスを終了することにしました。 これまでご利用をいただきました皆さまには残念なお知らせとなり、誠に心苦しく思っております。何とぞ、ご理解をいただけますと幸いです。 QA＠ITの7年間で皆さまの知識
「クラウド基盤ソフトウェア」の基本機能とは まずは比較を行う前に、「クラウド基盤ソフトウェア」が提供する共通の機能について見てみよう。クラウド基盤ソフトウェアは以下のような機能を備えている。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
