Hermann Graf, Der Bücherfreund