Po śmierci męża Lucy Muir (Gene Tierney) postanawia opuścić mieszkanie teściowej i szwagierki, mimo stanowczego sprzeciwu obu kobiet. Wdowa wraz z córką Anną (Natalie Wood) oraz służącą Marthą Huggins (Edna Best) osiedlają się w nadmorskiej miejscowości Whitecliff. Lucy przypada do gustu Dom pod rybitwą, jednak pośrednik nieruchomości ostrzega bohaterkę przed zamieszkaniem w posiadłości, w której straszy. Zawzięta wdowa jest zachwycona osobliwymi czterema ścianami i decyduje się na wynajem. Wkrótce duch kapitana Daniela Gregga (Rex Harrison), dawnego właściciela domu, próbuje pozbyć się niechcianych lokatorów.