CLT_2 (@CLT_2) header
CLT_2 (@CLT_2) profile picture

しろいおきつね Bsky: https://teapawt.org/t.co/G4WRzPNf9Q Nostr: https://teapawt.org/t.co/4iAXUTI3Tz Pawoo: https://teapawt.org/t.co/JnA4qZU6pE

Joined August 2012
Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)Photo by CLT_2 (@CLT_2)
MITのRikiyaTakehi氏らによるヤバ研究。Qwen3.5-0.8Bに数学問題を解かせると同じ思考を延々とループして一向に答えが出ないバグ的な挙動があった。そこで研究者はAstraに「Qwenを修正してくれない?」って丸投げしてみた。するとAstraはウエイトの中身を見ながら「あー、多分この辺が故障してますね~」つって微調整とか学習とかじゃなくて生のウエイトを直接弄りだした!Astraがアタリをつけてウエイト操作を試行錯誤した結果、Qwenの思考ループが修正されてMATH-500スコアは7.9→48.1に6倍に爆上がり!IFEvalも21→62.3に!研究者は「え…?Astraってウエイトの中身理解できるの!?」と驚愕してさらなる実験を試みる。Astraにゲームプレイを学習させたモデルをいくつか見せたら「これはブロック崩しをプレイするモデルでしょ。これはPong、これはパックマン…」と全部言い当てた!やはりモデルの中身が読めている!次はジャンプ台を乗り越えるのに失敗しちゃう車のモデルを渡したらこれも見事に修正してくれた!その次はブロック崩しのソースコードを渡したらなんとそれをプレイするAIモデルを直接出してくれた!!この結果から、やはりAstraレベルの最先端フロンティアモデルはAIモデルの中身のウエイトを読んで理解する能力があるらしいと分かった!今まで人間はモデルウエイトの中身サーパリ理解できなくて「AIの中身はブラックボックス!」とか言ってたのにいつの間にかAIはAIの中身読めるようになってた!あまつさえウエイトを直接編集、修正、生成する事さえできる!!研究者はこれはWeight-Space Programmingと名付けた
We asked GPT-6 Astra to edit Qwen3.5-0.8B weights to improve math. It directly changed only 0.016% of weights, fixing 0.8B's reasoning loops & improving math up to 6x and even instruction following 3x, without gradients or training. We call this Weight-Space Programming: frontier LLMs can now natively read/write neural network weights! 🧵 Blog: rikiyat.github.io/blog/weigh…
Readers added context they thought people might want to know
LLM was given weights explicitly as text in prompt and used code/forward passes (per authors' logs) to ablate Qwen looping direction, a known thinking-mode issue per model card. Primarily fixed repetition in that mode, not general 'natively' improving weights/math. rikiyat.github.io/blog/weight-sp… github.com/RikiyaT/lm_und… huggingface.co/Qwen/Qwen3.5-0… huggingface.co/RikiyaT/Qwen3.…
10
1,077
258
4,950
454,061
CLT_2 retweeted
どうにかなった
1,638
21
9,116
157,243
CLT_2 retweeted
Webオタクかつ音楽オタクにしか通じないあるある: CloudflareとSoundCloud、アイコンが同じすぎ
7
431
58
2,822
156,760
CLT_2 retweeted
butter
101
4,084
107
23,359
418,380
6
278
9
3,527
36,747
巣ごもりキツネとお団子キツネ
7
986
23
6,986
94,356
イエヴァン・ポルカ #絵まる
14
827
5
5,401
75,810
#絵まる 【ホロ鯖ARK/ついに恐竜の地におりたつッッッッッッッッッ】より
2
143
1,142
9,208
今日のキタキツネの「なる」(AB) #旭山動物園 #旭山動物園東門 #旭川 #キタキツネ #なる
6
60
1
731
6,726
CLT_2 retweeted
道央、札幌石狩あたりだけの特有の文化としては「グーとチーで別れる」というのがある。全国的にグーとパーで分かれる文化圏が大多数なので特異点 あとより奇妙なのが「グッチーグッチーアッタッチ」とかいう意味不明の掛け声。「グッパージャス」どころの騒ぎではない
北海道の子どもたちは鬼ごっこで「えった」というのよね。この前スペースでその話をしたらめちゃくちゃ物議を醸して、文化の違いを感じた。
54
727
800
3,628
300,317
ふくの娘 #ふぅ ♀と くぅの娘 #きゅう ♀随分と体格差があるように見えますが、ただの遠近法です😅 #北きつね牧場 #キタキツネ #こぎつねハウス
15
139
4
1,307
14,522
鼻から目元にかけての模様はまっすぐではなく逆三角形の模様があります 知ってたかな?
2
312
5
2,473
30,490
ここエイム良すぎて笑った #つづり配達中
60
4,376
113
39,264
1,931,357
おはようございます🌤️ 現在気温は8.9℃、天候は曇りです 日中も最高気温14℃前後となっています 朝晩も1桁台の気温になってきました、、 暖かい服装でお出かけください😊 今日も一日よろしくおねがいします!「KR] #旭山動物園東門 #旭川市 #キタキツネ
14
44
2
532
5,067
what did he know ..... 4️⃣
12
296
2
6,070
46,857
-----BEGIN RSA PRIVATE KEY----- 4 -----END RSA PRIVATE KEY-----
244
3,999
330
42,281
1,105,740
CLT_2 retweeted
BeamNG.earthとかいう現実世界をどこでも走れるヤバいmod出てきた これで仮想空間でも23号で珍できる
5
209
18
2,755
123,370
バケツのフチ狐さん
3
432
14
3,920
43,816
CLT_2 retweeted
Tesla’s new Roadster clears entire fleet of Teslas.
49
129
67
1,451
244,526
キツネに見下ろされるとこんな感じ
2
363
8
3,339
30,450