お客様に「ハーミットのブログはいったい何ページ書いたの？」と聞かれたので調べてみると、このお話で618話目になりました。このブログ以前は旧ツイッター（X）に呟いていたので、始めた当初から考えると良くもまぁ続いているもんだなぁと自分でも感心します。さらにホームページのお話になると、さらにその前身の『世捨て人倶楽部』のホームページを1998年初頭からスタートしているので（それ以前はそもそもHTTPがほぼないですしね）、ハーミットの歴史はインターネットと共にあると言っても過言ではないでしょう。 そのHTML上で私が一番書いたネタといえばダントツ本栖湖の話が多く、今でも冬ともなれば年に6〜8回ほど通っている訳でアリマス。中学生の頃から行き始めてざっと45年以上も通い続けているけれど、観光地化が進む訳でも無く今も昔も何も変わらないので、そこへ行けば実家へ帰ってきたような気持ちで安心できる場所なんです

2014年から先端テクノロジーの研究を論文単位で記事にして紹介しているWebメディアのSeamless（シームレス）を運営し、執筆しています。 1週間の気になる生成AI技術・研究をいくつかピックアップして解説する連載「生成AIウィークリー」から、特に興味深いAI技術や研究にスポットライトを当てる生成AIクローズアップ。 今回は、大規模言語モデル（LLM）の数十億のパラメータの中でたった1つのパラメータを削除するだけで、モデルのテキスト生成能力が完全に崩壊することを発見した論文「The Super Weight in Large Language Models」に注目します。 研究チームは、このパラメータを「スーパーウェイト」と名付けました。70億のパラメータを持つMetaのLlama-7Bモデルでは、このスーパーウェイトをゼロにするだけで、モデルのテキスト生成能力が完全に失われ、ゼロショッ

なぜ途中で離脱してしまうのか？お笑い芸人のポッドキャストが好きで、移動中などによく聴いています。さすがにトークのプロだけあって、あるていど名の知られた芸人のポッドキャストはだいたいおもしろい。さっそくお気に入りに登録するのですが、気がつくと聴かなくなっている場合があります。ある芸人のポッドキャストは何年も聴き続けているのに、別の芸人は途中で止めてしまう。この差はいったい何なのだろうか？　私は長らく不思議に思っていました。当初は同じように「おもしろい」と感じていたはずのに、何かしらの理由で、一部の芸人のポッドキャストは聴かなくなってしまうのです。聴き手の私が気づいていないだけで、おそらく何かが決定的に違っている。ちなみにこれは、女性芸人の場合にはあまり起こらない現象で、男性でのみ発生するものでした。 そこで私は、途中で止めることなくずっと聴き続けているポッドキャストや、長らく見続けているYo