Vous pouvez employer la préposition "de" après le verbe "se rappeler" lorsque suit un infinitif :
Il se rappelle d'avoir visité une fois cette ville.
Vous pouvez employer le pronom "en" avant le verbe "se rappeler" si ce pronom est complément d'un nom (et non complément du verbe) :
J'ai visité le principal monument de cette ville. Je m'en rappelle parfaitement les détails. (= Je me rappelle parfaitement les détails de ce monument.)