到了1941年，修建物不再作员工宿舍之用。第二次天下大战后，大楼改作精力病院。一九六一年，青山精力病院完工，院舍遂改作白天精力科门诊部。一九七一年今后，修建物被闲置，直至九十年代，当局决定保存其外墙，修建物则改建成社区中间。
而厥后，有自称是温莎大厦的卡拉ok员工打电话向电台的灵异节目爆料，说某天因贪玩曾到大厦顶层逛逛，但不幸被保安困在顶层的露台，他由此发明了大厦顶层竟然有一个埋没的儿童游乐场。过后他问保安主任，保安主任解释称，这个在露台顶层的游乐场并不是给“人”玩的，是给那些死去的小孩玩的(狐仙事件死去的)。因为温莎大厦的位置是四周的修建物中最高的，以是大厦露台上建有游乐场这奥妙，一向未被人所报导和揭露，直至这名听众打电话到电台分享大众才得知。俗话说“猫通灵，狗通人”，人间传播有很多关于猫咪的灵异事件，下边摘录2个网友分享的关于猫的灵异事件：
传闻，这窝狐仙是因为大厦室内接收不到日月精华，以是它们便改成接收人的精气神来代替接收日月精华持续修练，因为婴孩的明台较为洁白，以是在这间酒楼办满月酒的初生婴孩便成为了狐妖修练的对像，厥后温莎大厦方面找来了当时全港最着名的法师在温莎大厦现场做了场法事，但法师表示这窝狐妖只能填压而不能收伏，因而这法师便写了些符咒贴在大理石墙外的狐狸头上，所今厥后温莎大厦方面在墙外盖上墙纸加以粉饰。
不过，当时该阛阓夜间几次产生灵异事件，有伴计早上上班时，瞥见百货公司童装部满地散落的货色，觉得是闹鬼。厥后经法师判定，实在一只玩皮的小狐仙在夜间潜入大厦的百货公司童装部，穿上童装、童鞋到处玩耍而至。
太太梦见本身在床上，但身材不能动，俄然，她看到一只很大，模样相称可骇，眼睛发红，满口尖牙的狐狸在床边走来走去，一向看着本身，她惶恐地大呼:“你是谁?你要做甚么?”她看到这狐狸快速跑到她孩子身边，用口咬住太太的小孩，一下子就把小孩咬死，狐狸更是满口鲜血!
1981年一天早晨，有两佳耦包下该酒楼全场来办儿子“满月酒”，统统亲朋戚友都相称欢畅。但是就在当天早晨，儿子的母亲便做恶梦。
当中其最为多人传播的是，在七十年代，很多驾车人士，当颠末这里时，都会听到内里传出一些惨叫声，但是七十年代，这修建物已经是空置的，那麽他们听到的声音就成了人们「讲鬼故」的题材了。