嵇康的好友向秀见到《养生论》，就作《难养生论》来与嵇康辩论，认为“节哀乐，和喜怒，适饮食，调寒暑”，以此为养生之道， 他是同意的:“至于绝五谷，去滋味，寡情欲，抑富贵，则未之敢许。”(向秀《难养生论》嵇康在《答难养生论》中，为了进一步阐释自己的论点，而有如下的说法:
是以古之人知酒色为甘鸩，弃之如遗；识名位为香饵，
逝而不顾。使动足资生，不滥于物，知正其身，不于外，
背其所凶，守其所吉，此所以用智遂生之道也。
他以为既然“欲以逐物害性”，甚至可以采用老子的“不见可欲使心不乱”的方式来抑制欲的萌芽；如果欲已经萌芽，即“滋味当染于口，声色已开于心”了，可以“以至理遣之，多算胜之”的。他还认为“故以荣华为生具，谓济万世不足以喜耳。此皆无主于内，借外物以乐之，外物虽丰，哀亦备矣。有主于中，以内乐外， 虽无钟鼓，乐已具矣”。大意是说，如果一个人追求荣华富贵，认为什么东西都不比它重要，这是由于他内心缺乏修养，不得不依靠外部物质来刺激自己的缘故。物质条件满足了，内心却也饱尝甜酸苦辣的滋味。如果内心修养很好，知足常乐，借以弥补外界之不足，这样，即使自己听不到钟鼓之声，也好像在欣赏音乐一样。这种知足常乐的人生观，反映了嵇康在酷烈的政治斗争中，假借老庄的放达，来颐神养性的消极避世态度。