Historycznie podczas ostatniej wojny Rzesza została niemal całkowicie spalona przez hitlerowców i znacznie się rozbudowała już w latach 60. Na terenie gminy nie brakuje zabytkowych miejscowości, na przykład, wieś Pikieliszki (Pikeliškės), gdzie znajduje się zabytkowy dworek, który był posiadłością Marszałka Józefa Piłsudskiego i jego małżonki. Teraz dworek jest posiadłością samorządu i mieści się w nim biblioteka.
Innym obiektem zabytkowym jest Czerwony Dwór – była posiadłość rodziny Sienkiewiczów.