应该是3次吧，一是孙悟空打死强盗，被唐僧多说了几句，于是一气之下回了花果山；后来为什么回到唐僧身边，就不清楚。二是三打白骨精，唐僧埋怨他滥杀无辜，孙悟空一气之下回了花果山；后来宝象国唐僧遇难，猪八戒用激将法将其请出；三是真假孙悟空，这个不清楚。
这个我记得不是很清楚了，还有你的题目应该是唐僧几次赶走孙悟空，不然孙悟空走过n次。应该是两次，分别是真假孙悟空和杀强盗。
