Het herenhuis is centraal gelegen aan de Ulm Munster.
De New Yorkse architect Richard Meier heeft het moderne gebouw ontworpen in de jaren negentig.
In het herenhuis Ulm vinden er verschillende evenementen plaats en er is een permanente tentoonstelling over de geschiedenis van Ulm en de kathedraal te vinden in de kelder van het huis.