มีคนกล่าวหาว่า ท่านพุทธทาสไม่เชื่อเรื่องนรกสวรรค์ และมองว่าการสอนเรื่องเล่านี้มากเกินจะมีโทษมากกว่าคุณ ถึงกะบางคนกล่าวตู่ท่านว่า ตายไปต้องไปเกิดในโลกันตร์นรกเพราะไม่สอนให้เชื่อเรื่องเวรกรรม