从此，悉达多以云游之身，到处参学。他曾经见过跋伽仙人的修行场所，看到许多离尘绝俗苦行修行的人，有的穿草衣，有的著树皮。他们都吃些花果充饥，或日食一顿，或二日一食，或三日一餐，企苦行成道。

他们崇奉庶物，或拜水或拜火，或敬祠日月，或卧尘污土中，或睡荆棘丛上，或长年居于水火之侧，备受蒸炙之苦。

类似这些印度文化传统中的宗教生活和修道方式，无论婆罗门、瑜伽术，乃至印度教等，在悉达多出家的前后，显然普遍地盛行着，流传不衰……

当时，悉达多看到这些情形，他与跋伽仙人曾经交换意见，作过严谨的讨论。

他问跋伽仙人，“那些形形色色的苦行者，究竟目的何在？”跋伽仙人答曰，“刻苦自身，可以赢得升天的福报。”

悉达多却认为：“苦乐对立，罪福相乘，仍然还在轮回往复的藩篱中，并不能解脱生死，苦行固然可以洁清心志，离绝牵累，但是未必就能真正了生脱死，成无道。”因此，他留此一宿，便立即辞去。

后来，悉达多又去学习当时印度著名的禅定功夫，修习“无想定”。