Mh, wenn er in anderen Situationen eher garnicht reagiert, würde ich wirklich auf Futter verteidigen tippen.
Es könnte aber ebenso gut einfach eine Störung sein, die er durch das einsame Dasein als Einzelhase entwickelt hat.
Vielleicht kannst du versuchen ihm Dinge, die er besonders mag, aus der Hand zu füttern?
Dass dich sein Verhalten erschreckt verstehe ich aber gut.