御采芝创始于清同治年间。相传山东一余氏夫妇以卖炒货为生，年近三十才怀孕。人说十月怀胎瓜熟蒂落，但这都超一个多月还不见动静。接生婆大夫请了不少，因产龄偏大，怕出现万一，让余氏夫妇多买些参之类的备用。

药店人参贵且少，余家男人决定自己上山找找看。人参没找到，倒摔了一大跤，无意中发现一颗灵芝。刚采出来，家里人就寻到山上来了，说家中妇人生了个大胖小子。一高兴，将自家店铺名称改为“采芝铺”。后来几番搬迁，从山东辗转到江浙一带，从炒货店发展到药材、茶叶买卖，并在浙西南山区进行药材的种植。而“采芝铺”也改为了“御采芝”并一直延用至今。