据称，林建岳对王祖贤发起了猛攻的追求，由于王祖贤是一个比较高傲的人，所以还一度地当众表示很讨厌林建岳，并称不想介入别人的家庭，不考虑与已婚男士谈恋爱。林建岳不生气，反而追得更加激烈。林建岳追了3年，为了向美人表达自己是真心的，正式宣布要与妻子离婚。
一九九三年王祖贤公开与林建岳的恋情，受到强大的压力，林母的一句话非常恶毒：“我当我儿子去叫鸡。”饱经考验的感情到底没能开花结果，一九九五年九月，王祖贤卖掉林送给她的半山香闺，只身赴温哥华疗伤，提及这段感情，她当众泪流满面：“不管对错，我尝试了，不管是不是我应该得到的，我也接受。”
二人分手后，林建岳对王祖贤仍旧情绵绵的承认：“我们仍然是朋友，每次我去加拿大，都会通电话，我觉得永远都是朋友，做不成夫妻，做不成男女朋友，都是好朋友，要不然，不会一起这么多年。”
