Willy Holtmann, Im Hamburger Hafen