灣仔船街一帶被拆卸的唐樓舊址，在日治時期曾用作慰安婦樓，不少婦女在該處慘遭殺害，所以流傳出不少鬼故事。當中又以有八十五年歷史，曾是著名豪宅的古屋南固臺最為著名。
南固臺建於一九一八年，當年屋主乃富商杜仲文。南固臺為一幢糅合中西建築風格兩層高別墅大屋，佔地二百平方公尺，是當時灣仔區內的著名豪宅，大屋外牆部分飾以紅磚，故又有紅屋之稱。
據老街坊稱，船街一帶的舊樓在日治時期曾淪為慰安區，被日軍充當軍娼的婦女，港島區的集中住在大道東近船街一帶的唐樓中，而九龍區則住在尖沙咀金巴利道。由於不少慰安婦是被強迫當娼，故不時有人因反抗而遭日軍凌辱虐殺，戰後該處一帶唐樓便有過關於慰安婦鬧鬼的傳說。
街坊鄧女士表示，曾聽聞有一批印巴籍男青年，深夜在南固臺遊玩期間，看見石樓梯上有黑影向他們招手，嚇得該批青年飛奔而逃。另一女街坊鄧女士亦聞說，過去曾有人在南固臺過夜時，發現屋內有怪聲及鬼影，嚇得拔足離開。
另外，亦有傳南固臺每逢夜深，屋內常有一團團綠色的怪火及怪光飄浮，有時怪火更會飄出屋外。不少街坊更常聽到大宅內傳出一陣陣女人的慘叫聲。據街坊稱，紅屋的主人已到外國，以前由一些女傭長住看屋，工人不時將屋前種植的水果贈予街坊，但自該些女傭人離去後，大屋荒廢無人打理，屋外野草叢生。
至於南固臺毗鄰的聖璐琦中學舊校舍，亦盛傳有鬼魅出現。
據聞，曾有居民路經舊校舍時，目睹內的燈光忽暗忽明。至於同濟中學舊址地台俗稱山洞（平台底的去水涵洞）地方，過去曾有一名老婦上吊身亡，自此便常有人見到她的幽靈出現。
而街口洪聖古廟後的舊宅遺址，亦曾流傳不少人遇過鬼。
