孙悟空在《西游记》中被赶走的三次分别是：第一次因杀幻化为强盗的妖怪被赶；第二次因三打白骨精被赶；第三次因打死抢劫强盗再次被赶。
第一次被赶走：孙悟空护送唐僧西行取经时，遇到六个半路抢劫的强盗。这些强盗威胁唐僧留下马匹和行李，孙悟空与其理论后，认出他们是妖怪所化，便用金箍棒将他们全部打死。唐僧认为孙悟空杀生犯戒，责骂了他一番。孙悟空不愿听这些话，便离开了唐僧，回到了花果山。
第二次被赶走：在“三打白骨精”一难中，白骨精为了吃唐僧肉，先后幻化成一个小女孩、两个老人来迷惑唐僧。孙悟空识破了白骨精的伪装，将其打死。但白骨精的真身每次都能逃走，唐僧因此认为孙悟空胡乱杀生，念了紧箍咒惩罚他。最终，唐僧将孙悟空赶走。
第三次被赶走：唐僧师徒四人在路上遇到一伙强盗，强盗向唐僧索要盘缠。孙悟空打死了其中两个强盗，唐僧让猪八戒将尸体埋葬后继续前行。他们到一处庄园借宿，庄园老头的儿子正是强盗之一。老头从后门放走了唐僧师徒，但孙悟空追来后将强盗打得死的死、伤的伤。唐僧因此发怒，再次驱赶了孙悟空。此时，六耳猕猴假扮的孙悟空也出现了。
