読んだ
PC watch "KADOKAWA、攻撃による情報漏えいを確認。ドワンゴ全従業員の個人情報が流出"
「全」ってどうやって確認したんだろう。Tor 上にサンプルデータが流れたらしいが、犯人も身代金取れなくなるから全員分は(まだ)出さないよね?CNN "Opinion: I’m a champion debate coach. Here’s how they scored"
どちらも不合格点なのは認めざるを得ないが、CNN がきちんと moderation してトランプの嘘や関係ない話を指摘していれば印象が変わったのではと思う。CNN "What would happen if Biden decided to leave the race?"
アメリカの大統領選の仕組みが非直感的すぎて分かりにくい。CNN "Biden acknowledges weak debate performance as Democratic questions swirl over whether he’ll stay in the presidential race"
実際、どうするんだろうね。しばらくしたら方針転換して辞退しそうだが、最終的には Trump に負けそう。CNN "See Biden's transformation from debate to campaign rally"
翌日には復活してる。いったい木曜日のあれは何だったんだ!?情報処理 "1bit LLM の時代は来るのか,来ないのか,どっちなんだい?"
パラメータが低精度のほうがモデルの精度が出るというのが本当に起こるのか不思議。起きるとしたらなぜだろう。データが少なくてパラメータ数が大きいときのみに生じるというなら、自由度が下がることで、overfit を避けられるということかしら。あと、「学習時には,fp16 もしくは fp32 でパラメーターを保持していて」というのに混乱した。今回のは、学習後に量子化するんじゃなくて、最初から低精度でやってるんじゃないの?Nature "Exclusive: How NASA astronauts are training to walk on the Moon in 2026"
アリゾナの荒野で練習しているらしい。- manure: 肥料・堆肥 (ここではウシの糞のこと)
- cinder cone: 噴石丘
Nature "AI and Euro 2024: VAR is shaking up football - and it's not going away"
天井にある 10 個のカメラから、一人一人の選手の姿勢を 29 箇所 50 fps でトラッキングしているらしい。下手な motion capture における full body tracking 以上だ。(ボール以外は)マーカレスであることを考えるとすごい。でも、オフサイドの判定に前バージョンで 70 秒、今回のでも 1 分弱かかるというのは意外。そんなに latency があるのか。Nature "The AI revolution is coming to robots: how will it change them?"
ロボット分野にも LLM のような基盤モデルを作ろうという話。生物の固有感覚にあたるものを含んだデータセットがないというのは意外。画像情報だけでどこまでいけるんだろうか。身体性というか、自分の action が世界に反映されるということを学習させるには、動画という受け身のデータだけでは厳しいと思う。シミュレーションの利用にももちろん言及されているが、その時は強化学習のようなフレームワークになるのかしら。単なる予測をすればいい LLM と違って学習が難しそう。Nature "How cutting-edge computer chips are speeding up the AI revolution"
なんか今更感。GPT4 のパラメータ数が 1.8 T って、公になってたの? AlexNet が、開発者 Alex Krizhevsky の名前に由来するというのは知らなかった。
なお、Web では Neuralink についての報道が related page として紹介されているが、PDF 版だと、それが囲いもなく、本文の中に紛れ込んでいる。- bevy of O: 一群れの O
Science "The visa maze"
同じ研究をするのに出身国によってビザを取る難易度が違うというのは大変だね。Nature "What causes long COVID? Case builds for rogue antibodies"
まだ抗原も特定されていないし、マウスにヒトの抗体入れる実験だから、ヒトには存在しない抗原に cross-react して phenotype を出している可能性もあるから、なんとも言えないなあ。Nature Reviews Physics ["On roads less travelled between AI and computational science"])https://www.nature.com/articles/s42254-024-00726-z) ReadCube
抽象的で分かりにくかった。気象予報とか、従来は微分方程式を時間発展して解いていた問題が深層学習で大幅に加速といったバラ色の話をよく聞くけど、この総説を信じるなら、長期間の予測とかレイノルズ数が大きい系の計算にはまだまだ問題があるようだ。Nature Reviews Physics "Current numbers of qubits and their uses" ReadCube
数百 qbits を喧伝する装置もあるけど、ノイズが多いので、実質的に使えるのは相変わらず 10 前後なのね……。Quantum volume という単語を知った。Science "The perfect pesticide?"
昆虫に dsRNA を食べさせると腸管から吸収され細胞内に移行して RNAi を起こすので、必須遺伝子を潰せば殺虫剤になるという話。ジャガイモの害虫に対する Calantha という農薬が承認されたらしい。どういうメカニズムで細胞内にまで移行するのか分からないが、鱗翅目では機能しないらしいし、そんな移行システムが生存に必須だとは思えないから、いずれ dsRNA を受け付けない耐性変異が生じるだろうな。- lacewing: クサバカゲロウ
- psyllid: キジラミ
- stalwart: 長い間熱心に貢献する人
Nature "Cheaper versions of blockbuster obesity drugs are being created in India and China"
GLP-1 agonist の特許が切れ始めるらしい。どうして generic じゃなくて biosimilar なんだろう。Liraglutide も semaglutide もペプチドで中分子だからかな。Nature "How the ‘mind’s eye’ calls up visual memories from the brain"
特にコメントなし。Nature "How to keep the lights on: the mission to make more photostable fluorophores"
色素の自由度を下げると、発光を伴わない緩和経路が減って量子収率は上がるが、退色も起こしやすくなるらしい。また、細胞透過性が悪くなるという。退色した状態の単離が難しく、具体的にどうなっているのか、あまりよく分かっていないとは驚いた。てっきり、酸化とかを受けて壊れた分子が検出されているんだと思っていた。Science "Small, nimble weather satellites join traditional behemoths"
静止軌道よりも低いところに小型の気象衛星をたくさん置くというアプローチ。距離が短くなるので、小型の観測装置でいけるらしい。GPS 信号の地球からの反射を元に、温度や湿度を測定できるというのはどういう仕組みなんだろう。