Ciao, non penso sia questo il caso, ma nel caso...
E' essenziale avere sempre utensili di qualità, tenuti bene e saperli usare.
ES. E' inutile avere un cricchetto della Belzer se poi si usano bussole o inserti dei cinesi e magari usare il sistema in pollici al posto del decimale perchè "tanto ci entra".
E' vero che il perno passante sia più tenero assai, ma di solito non si spana da solo.
Detto questo, i consigli che ti hanno dato son validi (tipo piantare un torx sacrificabile o fare una tacca (io ne farei una sola con il dremel e poi userei un cacciavite piatto bello grosso).
In ogni caso, passa prima a prendere un perno passante nuovo, che questo è da buttare.