唐代丰干禅师，住在天台山国清寺，一天，在松林漫步，山道旁忽然传来小孩啼哭声音，他寻声一看，原来是一个稚龄的小孩，衣服虽不整，但相貌奇伟，问了附近村庄人家，没有人知道这是谁家的孩子，丰干禅师不得已，只好把这男孩带回国清寺，等待人家来认领。因他是丰干禅师捡回来的，所以大家都叫他“拾得”。
拾得在国清寺安住下来，渐渐长大以后，上座就让他在寺中掌理食堂、香灯的事宜。时间久后，拾得也交了不少道友，尤其其中一个名叫寒山的贫子，相交最为莫逆，因为寒山贫困，拾得就将斋堂里吃剩的渣滓用一个竹筒装起来，给寒山背回去用。 一日，两人在寺中扫地，寺院住持问道：“你姓什么，住在何处？”拾得放下扫帚，叉手而立。住持茫然。寒山槌胸说道：“苍天，苍天”。拾得却问道：“你干什么？”寒山笑答：“岂不见东家人死，西家人助哀。”二人哭笑而出。
有谓寒山拾得乃文殊、普贤二大士化身。台州牧闾丘胤问丰干禅师，何方有真身菩萨？告以寒山、拾得，胤至礼拜，二人大笑曰：“丰干饶舌，弥陀不识。”意指丰干乃弥陀化身，惜世人不识。说后，二人隐身岩中，人不复见。胤遣人录其二人散题石壁间诗偈，今行于世。