Tất Đạt đa ngồi thiền quán ở gốc cây Tất-bát-la và Ngài thề rằng: “Nếu không thành Phật thì ta không bao giờ rời khỏi chổ nầy.” Trong lúc các cõi trời đều vui mừng, ca ngợi, chúc phúc, trông mong Thái tử mau thành công thì ngượci lại, ma vương đang hốt hoảng, vì chúng lo sợ mọi người đều tin Phật làm lành lánh dữ thì còn ai theo tà thuyết của chúng nữa.! Vị vậy, chúng kéo nhau đến trước mặt Tất Đạt Đa lớn tiếng mắng nhiếc, đòi Thái tử phải lập tức rời khỏi chổ ngồi. Chưa đủ, chúng còn cho ma nữ tới ca múa, tỏ vẻ lả lơi mời mọc. Nhưng tất cả chỉ như gió thổi núi đá, Tất Đạ Đa vẫn an nhiên tĩnh tọa.

Tất Đạt đa đi tham phỏng các nơi và cùng với nhiều đạo sĩ nỗi tiếng luận bàn, song tất cả đều không làm cho Thái tử mãn ý. Do đó, Tất Đạt Đa quyết định một mình tu tập Thiền Định dưới chân núi Già Da. Tại đây, Ngài được mục nữ dâng cúng sữa tươi và một nam đồng (thiếu niên) làm nghề cắt cỏ đem loại cỏ mềm lót trên đá cho Ngài ngồi. Tất Đạt Đa tiếp nhận sữa và cỏ của hai thí chủ trẻ tuổi, Ngài nói: “Vì đồng tình, vì muốn giúp đỡ người khác mà bố thí thì tương lai vị thí chủ ấy sẽ được nhiều phước báo.” Năm vị quan viên trước kia xin ở lại tu với Ngài nay đều bỏ đi, vì họ hiểu lầm rằng Tất Đạt Đa đã không chịu đựng nổi lối tu khổ hạnh ép xác…

Thời Đức Phật, ở Ấn Độ có một vị phú ông rất giàu lòng nhân từ, Ông thường chăm sóc giúp đỡ cho những người nghèo khổ, cô độc, nên mọi người đều xưng hô là trưởng giả Cấp Cô Độc. Vị trưởng giả ấy muốn mua đất, cất một tòa nhà lớn để cúng dường đức Phật và chúng Tăng. Ông rất thích mua vườn hoa của Thái tử Kỳ-Đà, nhưng Thái tử không bán. Thế rồi, vị phú ông nghĩ ra một cách khá hay: Ông cho người đem vàng tới trải khắp mặt đất của sở vườn, trừ các gốc cây và xin đem giá trị của số vàng đó làm tiền mua vườn. Thái tử Kỳ-Đà vì quá cảm động tấm lòng thành kính của ông đối với đức Phật và chúng Tăng nên không những bằng lòng bán đất mà còn tặng luôn tất cả cây trong vườn của ông. Vì thế, cái tên “Kỳ Thọ Cấp Cô Độc Viên” là để kỷ niệm công ơn hai đại thí chủ có liên hệ mật thiết với sự hình thành ngôi giảng đường tại nước Xá Vệ thời ấy.

Sau khi Tất Đạt Đa vắng bóng trong vương cung, vua Tịnh Phạn rất thương nhớ, liền sai quan viên cho nhiều xe áo quần, thực vật đi tìm kiếm Thái tử và khuyên Thái tử nên trở về. Nhưng, Tất Đạt Đa nhẹ nhàng từ chối lời thỉnh cầu của quan viên và nói: “Ta đã quyết chí tìm đạo. Với ta, hễ làm một việc có ý nghĩa, lợi mình lợi người thì cần phải tận tâm tận lực (hết lòng hết sức) mà làm, không thể bỏ dở nữa chừng, cũng đừng bao giờ bị mắc vào cạm bẫy, quyến rũ của vật chất. Ta quyết đạt được kết quả hoàn toàn mới trở lại hoàng cung.” Nghe thế, năm vị quan viên trong đoàn người đi tìm Thái thử tự nguyện ở lại cùng tu với Ngài, còn những vị khác thì quay xe trở về cung.