In Alu geht das vermutlich mit jedem Stahl, auch ungehärtetem, wenn auch nicht beliebig oft.

Vielleicht versuchst Du mal, den Schaft eines 2 mm Bohrers passend anzuschleifen und dann in einen Halter einzukleben.
Stabiler wäre ein dickerer Bohrer, etwa 10 mm, der nur ganz vorne angeschliffen wird.