データを取り込む・格納するための方法を理解する：ITエンジニアのためのデータサイエンティスト養成講座（3）（1/4 ページ） データ分析を行う際の対象となるデータにはさまざまな形式が存在します。データ分析を行うには、まず、データを取り込む方法や、結果セットを書き出したり、データベースに格納したりする手続きが必要です。今回はデータの取得、格納といった分析のための下処理の手続きを紹介します。 連載バックナンバー 前回（本連載第2回）は、データ分析に必要な機能と、その機能を実装したPython環境や必要なライブラリのセットアップ方法を説明しました。今回は、分析に必要なデータを、CSV（カンマ区切り）形式のファイルやリレーショナルデータベース、Webサイトなどから取り込む方法について解説します。さらに、結果セットをCSV形式で書き出したり、リレーショナルデータベースに格納する方法も紹介します。 デ
概要 Chromeの 拡張(Extension)数 タブ数 メモリ使用量 について、それぞれの関係性を調べるために種々の測定を行いました。 とりあえず今回測定したデータが以下になります。 ※「--renderer-process-limit」については 前回の記事「Chromeプロセス数を減らしてメモリを節約する」を参照のほど。 以下、分析。 検証環境について Windows7 64bit / Chrome 27.0.1453.116 m 拡張については以下の9つを普段使っていますが、これらをひとつひとつ減らしながらデータをとりました。 Allow Right-Click HTTP Headers JP nengo replacer JSONView Proxy SwitchySharp RSS Subscription Extension (by Google) Taberareloo
AppBank の主任です。 AOL が、Google リーダーと同じような RSS リーダー機能を備えたサービス「AOL Reader」を発表しました。 AOL アカウントを持つユーザーのみならず、Facebook・Google・Twitter アカウントでのログインも OK です。 現時点ではブラウザ版のみの提供ですが、近いうちに iPhone/iPad 向けの専用アプリを提供する予定もあるとしています。 また、API を開発者向けに開放するので、AOL Reader と連携するサードパーティ製アプリの登場も期待されます。 ただし、現在は AOL Reader を使うには事前登録を行い、アクセス可能になるまで待つ必要があります。AOL はユーザー過多が原因としています。 （この順番待ちは、AOL を新たに使い始めるユーザーに限った話かもしれません。） というわけで、今回は AOL Re
By ｍｅｒａ asm.jsによる最適化を利用することで、JavaScriptコードの実行速度が向上した「Firefox 22」の正式版がダウンロード可能になりました。他にもHTML5でムービー・音声ファイルを再生する際にプレイバックレートを変更可能になり、Mac OS Xのドックアプリケーションアイコンではダウンロードの進行状況が表示されるようになります。 次世代ブラウザ Firefox 高速・安全・カスタマイズ自在な無料ブラウザ http://www.mozilla.jp/firefox/ Firefox 22 ベータ版リリースノート http://www.mozilla.jp/firefox/22.0beta/releasenotes/ Android ブラウザなら Firefox あの人気ブラウザに Android 版が登場 http://www.mozilla.jp/firefo
昨日のエントリ「SQLインジェクションゴルフ - 認証回避の攻撃文字列はどこまで短くできるか?」にて、認証回避の攻撃文字列が5文字にできる（「'OR'1」）ことを示しましたが、@masa141421356さんと、やまざきさん（お二人とも拙著のレビュアーです）から、idとpwdにまたがった攻撃例を示していただきました。やまざきさんの例は、MySQL限定ながら、なんと3文字です。これはすごい。 @masa141421356さんの攻撃例 @masa141421356さんのツイートを引用します。 @ockeghem 大抵のDBでid=''OR' AND pwd='>' ' が通ると思います（id側に「'OR」, pwd側に「>' 」で6文字）。長さ0の文字列がNULL扱いされないDBなら最後のスペースを消して5文字です。 — masa141421356 (@masa141421356) June
斎藤です。こんにちは。 今日は、デーモンの起動・終了に際してはserviceコマンドを使った方がいいよ、というお話です。 ※CentOS 6.4 (x86_64) でテストしています。尚、特記がある所を除きます。 デーモンの起動・終了には大きく2手 Linux、特にRedHat, CentOS, Fedora, Ubuntu[1]などでは、デーモンの起動・終了の制御の際に、大きく分けて次の2つの方法を用いる事ができます。 "/etc/init.d/"配下のスクリプト(以下、スクリプト)を直接実行する "service"コマンドを実行する 一見、同じ事をやっているように思えるのですが、実は違う部分があります。それは、起動スクリプトが扱う環境変数が違うのです。次の節で、検証してみます。 扱う環境変数が違う スクリプトを直接実行する場合は、実行時の際の環境変数をそのまま利用します。一方、serv
自民党教育再生実行本部の「教科書検定の在り方特別部会」は２５日、学校の教科書検定で近隣アジア諸国への配慮を求めた「近隣諸国条項」の見直しなどを要望する「議論の中間まとめ」を安倍首相（自民党総裁）に提出した。 教科書の検定、採択などを一括して扱う「教科書法」（仮称）の制定検討も要望した。 中間まとめでは、「多くの教科書に、いまだに自虐史観に立つなど問題となる記述が存在する」と指摘。▽確定的な見解や学説がない事項は確定的に記述しない▽諸説ある事項は多数説と少数説をバランスよく扱う――などの検定基準の改善を求めた。 部会で座長役を務める萩生田光一衆院議員は同日、記者会見し、「教科書の執筆者の在り方や検定・採択のルールなどを包括する教科書法の制定が、正しい教科書作りにつながる」と述べ、同法の検討を進める考えを示した。
6月23日に投開票が行われた東京都議選で、自民党は立候補者59人全員、公明党も立候補者23人全員が当選し…共産党躍進し「日本が共産主義になる可能性」の議論に 6月24日14時13分 提供：アメーバニュース/政治・社会 26 5 ツイート 6月23日に投開票が行われた東京都議選で、自民党は立候補者59人全員、公明党も立候補者23人全員が当選し、自公が圧勝。一方、共産党も17議席と前回の9議席から躍進。第3党に躍進したことを受け、Twitterでは「日本が共産主義になるのでは」と議論されている。 議席が倍増したことを受け、共産党の志位和夫委員長（58）はTwitterで、「都議選では、議席倍増の17議席を得て、議案提案権を獲得しました。たいへん嬉しい結果です。ご期待にこたえて公約実現のために元気一杯頑張ります」と喜びを報告。 一方、Twitterでは「アベノミクスは今まで共産党が主張して
近藤弘孝 @hirotaka1126 しかし、共産党がアベノミクス批判とは自己否定も甚だしい。しかも、その自己否定・自己矛盾を繰り返す共産党に投票するって、どんだけ政治知識、経済知識がないんだよ。アベノミクスは今まで共産党が主張していた経済政策にこれまで以上に近いのに。 #都議選 2013-06-23 21:43:51 うちやま @uchiyama0706 @hirotaka1126 確かに共産党は大きな政府を目指しているから、財政出動という点では共通しているんだろうけど、どう出動するかでアベノミクスとは一線を画すよ。アベノミクスは元ネタ（つまりレーガノミクス）と同じように、トリクルダウンが基本にあるから、企業・財界の優遇を優先。 2013-06-23 21:52:49
パソコン（ＰＣ）遠隔操作事件で、「真犯人」と名乗る人物が報道機関や弁護士へ送り付けた犯行声明メールのアカウント（以下：当該メールアカウント）への当社記者のアクセス（以下：当該アクセス）についての当社の見解は以下の通りです。 ◇ 当社は、顧問弁護士とともに詳細に事実関係を調べ、検討した結果、当該アクセスについて「不正アクセス禁止違反の犯罪は成立しないことが明らか」と判断しています。 以下、その理由をご説明します。 【１】「不正アクセス禁止法」違反罪の構成要件に該当しない ■「当該識別符号の利用権者」がアクセスを承諾していた 「不正アクセス行為」の構成要件を定めた不正アクセス禁止法第２条４項は「当該アクセス管理者又は当該識別符号に係る利用権者の承諾を得てするものを除く」と明記しています。 当該メールアカウントを使用した犯行声明メールは昨年１０月９日、報道機関や弁護士に送信されまし
擬似科学ニュースが「統計的有意性がないという理由で、疑似科学を否定するのは間違っている」と主張している。 主張されるモデルの説得力が重要だと言いたいようだが、統計的有意性が重視されるのが現代科学なので、この主張に納得する科学者は少ないと思われる。 基本的な科学的事実の認定方法を確認して、疑似科学に騙されない心構えを鍛えよう。 1. 理屈ではなく事象を重視するのが科学 メカニズムが説明されていないけれども、現象が確認されている事は少なくなく、理論モデルで説明できる事象だけを科学とすると、疑似科学でないものまで排除されてしまう。薬は生理作用が不明な事も多い。19世紀末に商品化されたアスピリンは70年間も生理作用が不明だったが、効果は認定されていた。インフルエンザ・ウイルスの体内での活動はまだ研究されているが、病原としては認定されている。重力も理屈は未確定*1だが存在を疑う人はいない。 2. 先
2024年9月30日をもちまして「秒刊SUNDAY」はサービスを終了いたしました。 長い間、ご愛顧いただき誠にありがとうございました。
1938年、一人の天才物理学者が謎の失踪を遂げた。まだ31歳の若さながらすでに国際的に名の知れた優秀な核物理学者が、イタリア・シチリア島のパレルモからナポリ行きの船に乗り、それっきり消息を絶ったのだ。遺書らしきものは残されていたが、遺体は収容されなかったうえに、以後数十年にわたってあちこちから目撃証言が出続けており、その消息は未だ謎である。もし本当に生きていることが分かればノーベル物理賞が授与されてもおかしくない人物だ。 彼の名はエットーレ・マヨラナ。粒子がそれ自身の反粒子でもあるという奇妙な粒子の存在を考案し（彼の名をとってマヨラナ粒子と呼ばれる）、当時未知の粒子だったニュートリノのモデルとして提唱した理論物理学者である。マヨラナ粒子は、彼が考案して以来70年以上自然界に存在することは確認されてこなかったが、2012年、遂にその存在が発見・確認され、彼の理論の正しさは立証された。次はニュ
スーパーコンピューター「京」開発の立役者、井上愛一郎氏（理化学研究所計算科学研究機構統括役）にインタビューする機会を得た。井上氏は気さくな話し好きで、２時間近くに及んだ取材の最後に最も聞きたかった質問を投げた。「そう遠くない将来、コンピューターが知性で人類を追い抜くことがあるのか」と。 井上氏は「人間には到底達成しえないような冷静、的確な判断は、コンピューターのほうがはるかに上になる」と答えた。ちょうど２年前、京が世界一を達成した際にノーベル賞学者の野依良治博士と並んで記者会見したスパコン界の第一人者は、インタビューで、「弁護士や医者など専門職といわれている分野で、コンピューターのほうが人間に勝っていく」と断言した。 「テクノロジーの進化が指数関数的な速度で拡大し、２０４５年にはコンピューターを基盤とした人工知能（ＡＩ）が人類全体の知能を追い抜く。それにより人間の生活が後戻りできないほどに
日本の国際競争力が低下しつつある現状を踏まえ、「科学技術力で成長と豊かさを追求する国を目指す」と明記。科学技術の実用化によるイノベーション（技術革新）創出に力を入れていく姿勢を、前面に打ち出した。 白書は、日本発の研究論文の世界的な位置づけが、「質量ともにも低下している」と指摘した。２００９～１１年の論文数は、１０年前の２位から５位に低下。特に、他の論文に引用された回数が上位１０％に入る「影響力の大きい論文」の数は、４位から７位に下がっている。このため、科学研究を原動力としたイノベーションの創出に向け、若手が研究しやすい環境作りや国際共同研究の戦略的な推進とともに、研究成果を事業化につなげる支援策が必要だと訴えている。
2013/10/24：より簡単に構築したい方は、こちらの記事も参照ください。 最短手順でRDO(Grizzly)のデモ環境を構築 こちらにRDOのデモ環境を構築した際の手順メモがありますが、なかなか一筋縄ではいきません。そこで、できるだけ手順をシンプルするためのツール「demostack」を用意しました。 2013/07/03 セキュリティグループにルールを追加する際、ICMPのType/Code指定でのルールが追加できないバグがあります。 Bug 978354 - port range validation is wrong for icmp security group rule 一時的な回避策としては、次の手順でパッチを適用して、サーバを再起動してください。 # yum install -y patch # wget https://bugzilla.redhat.com/attac
お客様の融資支援実績は、累計6,000件以上（2023年2月末現在） 自身も株式会社SoLaboで創業6年目までに3億円以上の融資を受けることに成功 【運営サイト】 SoLabo公式サイト 創業融資ガイド 資金調達ノート 経営支援ガイド スタートアップや週末起業という言葉が頻繁に使われるようになった昨今、「自分も将来は会社を…」と考えている方は多いのではないでしょうか。 実際に会社の設立する時には、資本金や設立費用の他にも用意しておくべきものがあります。 以下の図をご覧になって下さい。これは、会社設立の大まかな流れをあらわしたものです。※合同会社の場合は「定款の認証手続」のステップが不要で、登記書類も少ないため、比較的簡単に設立することができます。 このように見てみると、会社設立の手続きは意外とシンプルであることがお分かりだと思います。 そして、実際に会社を設立する時に、事前の準備をしっか
Ubuntu 12.04になってからログインサウンドが無くなりました。 しかし、ログインした時に音が欲しいという方がいるかもしれないので、ログインサウンドを有効にする方法を記述しておきます。 < やり方 > 1. Unityバーの一番右の歯車のアイコンを押して、「自動起動するアプリケーション」を選びます。 2. 「自動起動するアプリケーションの設定」というウィンドウが開くので、右側の「追加」を押します。 3. 「自動起動押して開いた画面に各欄に下記に示した通り入力します。（本記事からコピー＆ペーストでOKのはず） 「名前」 : GNOME Login sound 「コマンド」 : /usr/bin/canberra-gtk-play --id="desktop-login" --description="GNOME Login" 「説明」 : Plays a sound whenever
流行に乗り遅れつつ，Debian squeezeをノートパソコンに導入しました。 メインで使用しているデスクトップパソコンは，まだArchLinuxのままですが，これもそのうちsqueezeにする予定です。 今回は導入方法について書きます。 とはいえ，lennyとほとんど一緒ですので，今回も「にゃんぽこりんのメモ」様の「FIVA 102 に Debian(lenny)+fluxboxをインストールしてみた」を参考にさせて頂きました。 ■基本システム（CUI）のインストール はじめに，Debianの公式サイトから，ライブCDをダウンロードしてCDに焼きます。 下記のサイトのいずれかからダウンロードしてください。 Debian JP Project Debian ユニバーサルオペレーティングシステム Debianをインストールする予定のパソコンに，CDをいれて，再起動。 インストーラが起動する
もう2ヶ月以上前になると思いますが、Arch linux でinitscripts からsystemd への移行がオフィシャルになりました。これにより/etc/rc.conf の記述内容に大幅な変更が必要となり、必要な設定ファイル、処置もありました。まとめとかないと再インストール時に死にそうなので、そろそろまとめておくことにします。 ちなみに自分は時間が取れなくて1ヶ月程旧rc.conf そのままで動かしていたのですが、10秒程度だった起動時間が1分近くになってました。もっともほとんどスリーブしかしないため、気にならなかったから放置していたのですが。 自分は完全にsystemd に移行はさせず、initscripts 系も一応残しました。rc.local の記述変えるのが面倒だったからですが、それ以外は移行できている（はず）なので、そのうち完全にsystemd のみにするかもしれません。
プロジェクトウェブページ より: systemd は Linux 環境の基本構成スイートであり、SysV や LSB init スクリプトと互換性のある、Linux 用のシステム・サービスマネージャです。systemd はサービスの起動を積極的に並行化します。また、ソケットや D-Bus のアクティベーションを使用してサービスを起動し、必要なデーモンの開始を行うことができ、Linux の cgroups によるプロセス管理ができます。システム状態のスナップショット作成と復元、(自動) マウントポイントの管理、煩雑な依存関係に基づいたサービスのコントロールを処理します。systemd は sysvinit の代替として SysV や LSB init スクリプトをサポートしています。init としての機能以外にも、ログデーモンやホストネーム・時刻・ロケールなどシステムの基本設定を制御するユー
Filesystem Hierarchy StandardFilesystem Hierarchy Standard GroupEdited byRusty RussellDaniel QuinlanChristopher YeohCopyright © 1994-2004 Daniel Quinlan Copyright © 2001-2004 Paul 'Rusty' Russell Copyright © 2003-2004 Christopher Yeoh This standard consists of a set of requirements and guidelines for file and directory placement under UNIX-like operating systems. The guidelines are intended to sup
喜捨を指す語としてはザカートとサダカがあり、現代においてはザカートを制度喜捨、サダカを自由喜捨として区別している。 コーラン（詩：9：60）で、全能のアッラーは言います、 「施しは、フカラ（貧しい人々）、アル・マサキン（貧しい人々）、そして集めるために雇われた人々（資金）のためだけのものです。そして（イスラム教に向かって）傾倒している人々の心を引き付けること。そして捕虜を解放するために;そして借金をしている人たちのために。アッラーの道のために、そして旅人（すべてから切り離された旅行者）のために。アッラーによって課せられた義務。アッラーは全知にして全知であられる。[1] ただしクルアーンにおいては両者とも自由な喜捨を意味した。預言者ムハンマドは「サダカ」という名で、神に仕える者の徳目として自由な喜捨を推奨していたが、義務ではなかった。のちに（630年以後）新たに従った部族に対する喜捨の義務化
パソコン（ＰＣ）の遠隔操作事件で、警視庁は２４日、片山祐輔被告（３１）＝ハイジャック防止法違反の罪などで起訴＝が弁護士らに犯行声明を送るために使ったとされるメールのサーバーに侵入したとして、朝日新聞社と共同通信社の複数の記者を不正アクセス禁止法違反容疑で書類送検する方針を固めた。 捜査関係者によると、記者は昨年１０〜１１月ごろ、片山被告が使っていたとみられるＩＤやパスワードを入力して、メールのサーバーに複数回にわたり、無断でアクセスしたとしている。パスワードなどは犯行声明の内容をヒントにアクセスしたという。 両社の記者はサーバーに侵入した後、取材目的でメールの内容や送受信記録などを確認していたとみられる。
■いちばん近道なLinuxマスター術 Linuxを使い始めて実感する難解さの1つに，ディストリビューションやRPMパッケージ，tarボールなどからのインストールそれぞれでディレクトリ構成が異なる，解説書に書かれているはずの設定ファイルが該当するディレクトリに存在しないなどが挙げられる。これらの設定ファイルが保存されているディレクトリは，ある程度どのディレクトリに保存されているのかが規定されている。 多くのUnix系のOSでは，どのディレクトリにどのようなファイルを置くかが決まっているものの，OSによってファイルを保存すべきディレクトリの場所が異なったり，ディレクトリ構成が違っているのも事実だ。これは，異なるOSに限らず前述したように同じLinuxでありながらもディストリビューションによって差違があることも珍しくない。 そこで，このようなディレクトリ構成の違いを吸収すべく規格化されたのが「F
Filesystem Hierarchy Standard（ファイルシステム・ハイアラーキー・スタンダード、FHS、ファイルシステム階層標準）は、Linuxを含むUnix系オペレーティングシステム (OS) での主なディレクトリとその内容を定めたものである。大部分において、BSD系のディレクトリ階層を基にして拡張し定式化している。 主要ソフトウェアおよびハードウェアベンダーからなる非営利組織Linux Foundationが保守管理しており、HP、レッドハット、IBM、デルといったベンダーが参加している。 2020年11月)現在の最新版は3.0で、2015年6月3日に発表された[1]。 多くのLinuxディストリビューションはFHS準拠を方針として宣言し、FHSにしたがっている[2][3][4][5]。 もともと、UNIXやUnix系OSには、/etcや/binや/usrなどごく基本的な部
rpmをtarボールから作成する場合は、specファイルを作成する必要があります。 最近のtarボールには、specファイルが含まれる物もありますが、ディストリビューションに依存する所もあるため、そのままではなかなか使えません。 そういうときは、specファイルを修正します。 1.rpm作成の環境整備 rpmの作成は、ディストリビューションにもよりますが、/usr/src/rpmや/var/src/rpmなどの場所で作成できます。が、ここは rootでの作業になるため、自分のhomeに環境を作成するのがいいでしょう。 で、まずはrpm作成用のディレクトリを作成します。 rpmの作成には、以下のディレクトリ構成が必要です。(ユーザー=builduserの場合) /home/builduser |------rpm |---BUILD |---RPMS | |-
PDP-11と聞いて懐かしさを覚えるエンジニアも多いだろう。PDP-11は1970年代から80年代にかけて活躍した16ビットのミニコンピュータ。UNIXの黎明期に存在したコンピュータで、UNIXを学んだエンジニアであれば、実物は見たことがなくても、その名前はどこかで読んだことがあるだろう。PDP-11は多くのエンジニアに活用され、現在のコンピュータやオペレーティングシステムに影響を与えている。 このPDP-11が、今でも現役で動いており、さらに2050年まで稼働し続ける計画になっていると言われると、さすがに耳を疑ってしまうが、どうやら事実らしい。The Registerに掲載された記事「Nuke plants to rely on PDP-11 code UNTIL 2050!」によれば、GEの原子力発電所ではPDP-11が今でも発電所内のロボットの制御に活用されており、さらに向こう37年
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
