11-2 ChatGPTによる分析の基礎：データ標準化の重要性を学ぶ 正規化が変数の値の範囲を統一するのに対し、標準化は変数のばらつき（標準偏差）の範囲を統一し、比較しやすくします。また、これにより、機械学習モデルが変数間のばらつき（標準偏差）の差を適切に扱えるようになり、予測モデルの精度向上も期待できます。 標準化とは標準化とは、データの平均を0、標準偏差を1に揃えることで、スケールを統一する手法です。これにより、データの分布を均等にし、異なる単位で記録されたデータを同じ基準で比較できるようになります。 また、特定の状況では、平均ではなく

指定した音声ファイルを、楽器ごとのパートに分解してくれるソフトです。 音声ファイルをドラッグ＆ドロップで放り込むと、該当のファイルを ボーカル ベース ドラム その他（キーボード、ギター 等） ボーカル以外のインストゥルメンタル といった 5 つのファイルに分解してくれます。 処理を GPU（CUDA）で実行することもできます。

毎年恒例、Pythonの本と学び方のまとめ・2019年バージョンとなります. ※2021/1/11更新：2021年版あります ※2020/1/9更新：2020年版もあります, こちらもよろしくおねがいします！ ※ちなみに昨年版はこちら 改めましてこんにちは、Pythonと野球を仕事にしています、@shinyorke（Python歴おおよそ8年）ともうします. なお、Python その2 Advent Calendar 2018 12/24記事でもあります. このエントリーはそこそこ長いので、「最初の方をサクッと読んで、残りはつまみ読み」してもらえると良いかもです！*1 ※もちろん全部読んでも構いません！（それはそれで嬉しい） サクッとまとめると 入り口としての「独学プログラマー」は万人が読んだほうが良い名著 データ分析・解析やりたい人も、Webからやっておくと良いかも（特に前処理） Web

家で使ってるパソコンは何ですかと聞かれることがあるのですが、マウスのゲーミングパソコンです。 一時期デスクトップを使っていたのですが、ファンがうるさいしスペースの容量を食うのでノートパソコンに戻しました。 なんでゲーミングパソコンかというと、私が単純に外部ディスプレイを二つまたは三つ繋ぎたいからです、グラフィックボードを増設するのが面倒くさいので。 基本的には外部ディスプレイと外部キーボードを繋ぎっぱなしなので、ノートパソコンスタンドに立てかけて、ノートパソコンのフタはほとんど開けません。 マウスはちょっとしたトラブル時に電話が割と繋がりやすく、パッと教えてくれるので、そこが楽です。コールセンターに電話しても延々と繋がらないのが一番困るので。 買ってもうすぐ2年ぐらいになりますが、今の所まだまだ順調に動いています。

雑談力がつくニュースアプリ

Armの福利厚生プログラム FlexPot 私が所属しているトレジャーデータは今年Armに買収され、福利厚生周りがArmのものに刷新された。 その中にFlexPotというものがあり、自己啓発にお金をつかってその領収書を会社に出すと、1年間の合計で上限XX万円まで会社が負担してくれるというもの。具体的な額の公開情報が見当らなかった*1のでふせておくが、割とがんばって使わないと損だなと感じる程度にはもらえる。 何に使うか考えたところ、私は主に家庭と自分の経済的な理由で大学院に行かず働き始めたものの、だんだん会社に給与的な意味で認めてもらえるようになり今は経済的に余裕ができたので、FlexPotも活用しつつちょっと大学院の授業受けてみようかなという気持ちになった。 スタンフォードの Non Degree Option アメリカに移住を考えている都合、日本ではなくアメリカの大学院に行った方がアメリ

はじめに 当社にアルバイトに来ていた人（来春に新卒入社の予定）に「pandasを高速化するための情報は無いですか？」と尋ねられました。 このパッケージの使い方は多数の書籍やWebで体系立った記事で書かれています。 しかし、高速化に関しては体系的な情報源が思いつかなかったので、「実際に書いてみて、1つ1つチューニングするしかないです」としか答えられませんでした。 そこで、この方を始め、来春（2019年4月）にデータアナリストまたはデータサイエンティストになる新卒へ向けて、pandasの高速化に関する私の経験をTips集にしてお伝えしたいと思います。 この記事は今後も内容を充実させるために、Tipsを追加していきます。 この記事を読んだ後にできるようになること pandasでレコード数1000万件のデータでも1分以内で完了する前処理が書けるようになります。 その結果、1日中実行し続けなければな

新卒採用は「売り手市場」と呼ばれる活況を呈しています。とりわけデータサイエンティストの素養がある学生は、各社で争奪戦となります。 私も取引先の大手製造業に採用の相談を受けると、「世界に名だたる御社でも大変なんですか!?　むしろ弊社が教わりたいくらいですよ！」と、社会性とコミュ力を発揮しています。 ともあれ業種業界を問わず、データサイエンティストの採用には苦戦します。弊社の採用でも、一般的な求人サイト、インターン、他社員からの紹介など、さまざまな方法を駆使しています。 メンバー集めが大変なのは、会社に限った話ではありません。データ関連人材が不足している現状を見ているうちに、思わず社会現象を巻き起こす映画「ボヘミアン・ラプソディ」を思い浮かべました。 ボヘミアン・ラプソディは、世界的なロックバンド「クイーン」を題材にした作品で、故フレディ・マーキュリーの半生を中心に、名曲が誕生した瞬間などを描

無線LAN規格「IEEE 802.11ah（以下、802.11ah）」の関連団体である802.11ah推進協議会が2018年11月、国内での活動を開始した。同協議会には通信事業者や通信機器メーカー、商社、学術団体など56社（者）が参加。日本国内ではまだ使用できない802.11ahという規格を利用可能にするための取り組みを進めるという。 突如現れた感もあるが、802.11ahはIEEE（米電気電子学会）で標準化済みの規格で、業界団体のWi-Fi Allianceでは「Wi-Fi Halow（ヘイロー）」と呼ばれている。れっきとした無線LAN技術の一種だが、その知名度は低い。またカバーエリアが広いことから、IoT向け通信技術「LPWA（ローパワーワイドエリア）」の方式にも数えられており、なおさらその位置付けが分かりにくい。そこで新団体が立ち上がり、新たな無線LAN技術として推進することになった

あ、退職エントリとかではないです。雑多な駄文をお許しください。 2018年を振り返る 3月にカリフォルニア州パロアルトのラボに異動になって早くも3/4年が経ちました。 自分としてはまだ1年経ってないのかという感じです。もっと長く居るような気もするが、来たばかりのような感じもある。 生活には完全に慣れました。結局の所、生きていくだけなら "You need a bag?" に "No" だけ言えれば何とかなります。 家族のこと、子供のこと 家族が適応に苦しんでいます。特に子供は、8月からTKという公立小学校の下部組織に通っていますが、予想を遥かに超えて心を閉ざしたままです。 娘はとてもシャイで、思ったことが口にできません。非常に端的に言うと、生きる力が強くありません。象徴的なできごとが幾つかありました。 ある日、先生が陪審員の義務で代わりの先生が来た日、普段とは違う教室に預けられた。 お昼に

Nintendo Switch 2: Everything we know about the coming release

News&Analysis 刻々と動く、国内外の経済動向・業界情報・政治や時事など、注目のテーマを徹底取材し、独自に分析。内外のネットワークを駆使し、「今」を伝えるニュース＆解説コーナー。 バックナンバー一覧 日本企業にはびこってきた「残業」。近年、世間を賑わせている「働き方改革」を背景に、残業削減の動きは高まってきたが、そもそも残業は私たちの心と体にどのような影響を与えてきたのか。立教大学経営学部の中原淳教授は最新刊『残業学～明日からどう働くか、働いてもらうのか？』の中で、パーソル総合研究所と行った「残業学」という長時間労働をめぐるさまざまな学問を横断した研究について、一般のビジネスパーソン向けに、講義形式でわかりやすく解説している。今回はその中から、長時間労働が健康などのリスクをおびやかしているにもかかわらず、個人の幸福感を高めてしまう現象「残業麻痺」の驚くべき実態を紹介する。 「月8

Perlで始めるeBPF: 自作Loaderの作り方 / Getting started with eBPF in Perl_How to create your own Loader

リンク Colossal Traditional and Contemporary Japanese Culture Collides in Striking Photographs by RK Tokyo-based photographer RK explores the far reaches of Japan, as well as neighboring Asian countries, shooting images that capture both timeless and of-the-moment scenes. RK often includes signs of life in his landscape images, whether a fisherman castin 2 users 1769

画像の加工を行っている時、「画像に映っている人物だけを抜き出して、背景を全て消し去った透過画像を簡単に作りたい」と思った経験がある人もいるはず。「remove.bg」はそんな人にピッタリな、AIを使ってわずか数秒で背景と人物を分離してくれる登録不要＆無料のウェブサービスです。 Remove Background from Image – remove.bg https://www.remove.bg/ 「remove.bg」を使うには公式ページへアクセスし、「Select a photo」をクリック。 すると、コンピューターのフォルダから写真を選択できるので、加工したい画像を選択して「開く」をクリック。 ほんの数秒間処理が行われ…… オリジナルの画像から人物だけを抜き出し、背景を除去した画像が表示されました。remove.bgでは学習済みのAIが人を「前面」として検出し、それ以外の要素が「

一つ前の記事で、Windowsのキーボードを取り外してAndroidタブレットのリモートマウスを使って色々な入力を全て行うということを書きましたが、これ半日ぐらい試してみたんですけれども、かなり本気で快適です。 まず最近の音声入力はほとんど誤入力がないため、キーボードで直すことが少ないため、音声入力をしやすい方が、キーボードを打ちやすいよりも大事でした、そしてこのタブレットを机にぺったりとつけて入力ができるというのはタブレットスタンドに中に浮いてるもので入力するよりもずっと早くて安定します。 また、修正の時に親指シフトも十分早いと思っていましたが、最近は日常的にフリックを使うことの方が多いので、下手したら私フリック入力の方が、修正のように少ない文字数の場合には多分早いです。 さらに、リモートマウスのキーボードを日本語入力の時と英語入力のときと数字入力の時に全て切り替えられるので、画面がとて

いい歳なのにWebプログラマなんていう仕事をしている。 正確に言えばWeb屋だ。今や絶滅危惧種になったこの職業は、デザインをPhotoshopやIllustratorでちょっと修正するところから、サーバーのファイアウォールの設定をちょっと変更するところまで、Webに関する何でもをこなす便利屋みたいなものだ。 一時は、Web屋みたいな人をフルスタックエンジニアなんて呼んでいた時期もあって、私も格好をつけたい時に便利に使わせてもらっていたけど、ただの銀玉鉄砲をシルバーバレット・オートマチック・モデルガンと呼んでるみたいで、口にする度に気恥ずかしくなってしまい、すぐに言わなくなってしまった。 これは言葉が悪いのではなくて、きっと私がWeb屋で、フルスタックエンジニアではなかったからだと思う。 銀玉鉄砲が、軽いアルミ缶すら撃ち抜けないように、Web屋もまた、ネットワークやサーバー運用の深淵を知らな

食事がおいしく、貸切風呂に何度でも無料で入れてかつ、お湯も良い宿を1泊1万5千円以下で探せ！ 普段は一人旅が多い私ですが、たまには彼氏と一緒に温泉旅を楽しむこともあります。 宿の候補を選ぶのは私なのですが、彼との旅行のときに重視するのは「貸切風呂に何度でも無料で入れる」ことと「食事がおいしい」宿であることです。 1万円ちょいのプランでも仙台牛のステーキが！ 食事がおいしいことと、お湯が良いことは一人旅であっても重要なのですが、せっかくの恋人同士の旅行ですので、一緒にお風呂に入れたほうがよりいいかなと思うのです。それも、追加料金を払って入るのではなく、できれば基本の宿泊料金のみで、空いていれば何度でも貸切利用できるお風呂があるところがいいな、と。時間指定で1回だけだとちょっと、慌ただしくなってしまいますからね……。 そんなわけで今回は、これまで私が実際に泊まった宿の中から ・値段相応以上に食

高村宗一 @takamurx78 フェンシングの太田さんが、ワイドショーで面白い事を言っているな。 フェンシングの大会を体育館で入場料1000円で全く集客できなかったけど、入場料を5000円にして劇場で開催したら満席になった。 普段演劇を見ている客層相手に、色々演出を工夫して興行する、という発想の転換。 高村宗一 @takamurx78 人は、お金の価格に対して絶対評価を持っている訳じゃない。 体育館で見る1000円より、劇場で見る5000円を安く感じる場合があるんだ。 これって、スポーツだけでなく色々な事に通用する話だよね。 ただ値段を下げるだけでなく、値段は上げても価値を付加する事でより普及する物がある。

はてなのチーム横断のエンジニアメンター制度 - Hatena Developer Blog で紹介していますが、はてなにはチーム横断のエンジニアメンター制度があります。僕も最近までメンターとして5~6人ほどのメンティーを持っていました(今は事情があってメンターをやっていないのですが)。 メンターとして1on1をする時には1on1ミーティングに備えるアンケート - しるろぐを参考にし、事前にメンティーに面談シートを書いてきてもらうという工夫をしていました。その面談シートは改善を少しずつ加えながら運用していたのですが、一度知見共有も兼ねて最近使っていた面談シートテンプレートを公開してみようと思います。 面談シートテンプレート 以下のようなフォーマットで書いてもらっています。1on1の前にメンティーに1on1用Google Docsに追記していってもらっています。1on1用Google Docs