Do Karwi przyjeżdżał, zanim jeszcze został biskupem i kardynałem. Początkowo zatrzymywał się w prywatnych kwaterach. Od 1978 roku podczas spędzanych nad morzem wakacji mieszkał jednak już tylko na plebanii. – W pamięci mieszkańców Karwi zapisała się postać przechadzającego się kardynała. Na głowie kapelusz sombrero, flanelowa koszula i dżinsy. Wysoki, szczupły, zawsze wyprostowany. Parafianie z tego powodu mówili o nim „Długopis” – mówi ks. Nowak.