该“鬼楼”大约修建于十九世纪末至二十世纪初，据说这幢楼是1900年，由皇帝赐给英国人建的教堂（另有夫妻开的医院，荷兰人修建的教堂，英国夫妇留下的房产，军阀的宅院等不同说法），当时和它一起建的还有王府井教堂，但是由于工期比王府井那座慢，后来又爆发了战争，所以这里的建设就停工了。