刘禅被移出武侯祠的原因是因为他投降了魏国，作为臣虏，为人所不齿。最初武侯祠中是有刘禅塑像的，但在北宋年间，刘禅因为举国投降被当时的人以不忠不孝的名义移走了，现在馆内在原刘禅像的位置放了一座大树根，以此讽刺他。这一举动反映了人们对他投降行为的强烈不满和鄙视。

此外，刘禅在历史上和民间的形象一直存在争议。《三国志》和《三国演义》对同一人物有不同的评判，例如刘备是否爱哭鬼，刘禅是否真的只是一个扶不起的阿斗。这些争议也可能影响了人们对他是否应该被供奉在武侯祠中的看法。

综上所述，刘禅被移出武侯祠主要是因为他投降魏国，作为臣虏，为人所不齿，同时也反映了人们对他历史评价的分歧和争议。