Tag: Neuron ablation

Nagroda w LLM mieści się w 1% neuronów. Bez nich model się sypie

Sonda na stanach ukrytych znajduje „neurony wartości". Wyzerowanie 1% z nich zbija Qwen-2.5-7B na MATH500 z 75,2% do 20,3%.