1181年，辛弃疾还在江西安抚使任上。已深感宦海险恶，壮志难酬。于是这年春，他在江西上饶选定了一处山水俱佳、宜于种树种稻的处所营造新居，以做随时退隐的准备。辛弃疾吩咐负责修建的家人，新居内要多种花草树木。
辛弃疾的预感没错，1181年底，他即被免职，而带湖新居也正好初具规模。从此，辛弃疾在带湖居所一住十多年，“买山自种云树，山下烟莱”，便成了他归隐生活的主题。每日“并竹寻采，和云种树”，累了饮酒，醉了就高卧云树之间，与大自然浑然一体。有时生病不能亲自种树，他便及时请人代种。辛弃疾忘情地劳作，让带湖一域遍是松竹，在为山水增绿的过程中，他也逐渐摆脱了受侮罢官的郁闷，寻得了新的快乐。在辛弃疾眼中，平戎报国，完我金瓯，确是志士之大乐;而种树满坡，绿我河山，又何尝不是志士又一大乐呢！
1196年夏，辛弃疾的带湖居所毁于大火，遂移居铅山县的瓢泉，他的种树活动也由带湖移至瓢泉。几年前，辛弃疾已看中瓢泉，萌生了结庐种树之意。移居瓢泉后，他已有英雄老去、时不我待之感，急于种树有成，而一再感慨。“多方为渴泉寻遍，何日成荫松种满！”他为一处所种松竹成活率不高而焦急，乞求这些松竹能因他的挚爱活下来;他为一处种竹成功而欣喜不已，特填词以记之。
辛弃疾自22岁起兵抗金到68岁去世的四十多年间，从政报国不足二十年，近三十年都被当政者排斥。但辛弃疾并未消极闲居，而是移从政之热诚，为种树之执着，所到之处种得绿荫遍地，并在长期的种树实践中，逐渐积累起丰富的种树经验，他在一阕词里，不无自豪地写道：“种树真成郭橐驼。”
他这位“郭橐驼”不但自己种树种得好，还热情地向人宣传种树的美好与重要。西晋著名诗人潘岳任河阳县令时，勤于为政，发动百姓在全县遍种桃树李树，美化了县域环境，增加了百姓收入，深受好评，河阳也被人们赞为“花县”。辛弃疾在写给正任江陵县令的好友赵奇的词里，鼓励赵奇向潘岳学习，在县域多种树，而且要抓紧。辛弃疾的“平戎策”写得十分杰出，“种树书”也读得特别优秀。晚年，他将家务全都交付儿子们，唯独放心不下对松竹的管护，要亲自操劳，告诉儿子们：“乃翁依旧管些儿，管竹管山管水。”
