在《西游记》中，孙悟空一共返回花果山三次，具体如下：
第一次：
孙悟空刚拜唐僧为师不久，因杀死六个强盗而被唐僧责怪，他离开唐僧前往东海龙宫，后被东海龙王劝回，但这次并未真正回到花果山，而是被唐僧戴上紧箍咒。
第二次：
孙悟空在取经路上三打白骨精，被唐僧认为滥杀无辜，因此被逐回花果山。后来唐僧在宝象国遇难，猪八戒用激将法将孙悟空请回。
第三次：
在“真假美猴王”那一回，孙悟空为救唐僧打死几个强盗，被唐僧逐走。后来六耳猕猴假扮孙悟空攻击唐僧，最后被如来佛祖识破。孙悟空在得知真相后，愤怒地回到花果山抓六耳猕猴，最终在如来佛祖的帮助下识破并打死假悟空，重回取经队伍。
综上所述，孙悟空在《西游记》中一共返回花果山三次，分别是因为杀死强盗、三打白骨精和真假美猴王事件。
