广德二年(760)春，严武再镇蜀，杜甫才又回到草堂，此前漂泊在外将近两年。严武表荐杜甫为检校工部员外郎，做了严武的参谋，后人又称杜甫为杜工部。不久杜甫又辞了职。这五、六年间，杜甫寄人篱下，生活依然很苦，他说：“厚禄故人书断绝，恒饥稚子色凄凉”(《狂夫》)“痴儿不知父子礼，叫怒索饭啼东门。”他用一些生活细节来表现自己生活的困苦，他说他的孩子那种还没有懂事的孩子不知道对父亲很尊重，不知夫子礼，饿了的时候不管是不是爸爸，是不是要遵循父子之礼，饿了就吵着要饭吃，在东门外号哭，到了秋风暴雨之中，杜甫的茅屋破败，饥儿老妻，彻夜难眠，他写了《茅屋为秋风所破歌》。