De binnenstad van Vianen is omringd door een rechte buitenmuur, waarop nog een oud kanon met kogels staat. Binnen deze muren lag, bij het huidige Hofplein, kasteel Batestein, ooit één van de mooiste kastelen van Nederland, dat tamelijk groot was. Het werd gesticht door Gijsbert van Beusichem, heer van Vianen. In 1414 trouwde zijn kleindochter Johanna van Vianen met heer Walraven l van Brederode. Daarna ging het kasteel over in de handen van de Brederodes.