Ernst Holzhäuser, Steinbrecher