Le bourg se situe au confluent du Lot et de La Truyère. Deux ponts permettent de franchir les deux rivières auxquelles on doit l’éthymologie de la ville : le pont de Truyère de la fin du XIIIe siècle et le pont Notre Dame sur le Lot. Fortifié en 1357, il ne reste aujourd’hui que deux tours carrés à mâchicoulis des 213 tours reliées par des remparts et entourées de fossés ainsi qu’un corps de logis restauré au XVIIe siècle, de même que des ruelles à caractère médiéval : passages couverts, maisons des XVe et XVIIe siècles.