本师号曰河上丈人，不知其所出。河上丈人教安期生，安期生教毛翕公，毛翕公教乐瑕公，乐瑕公教乐臣公……”同书《孝武本纪》记载，著名的方士李少君也曾经向汉武帝吹嘘说：“臣尝游海上，见安期生。”
因为东汉盛行谶纬，方士渐息而儒玄初兴，所以对于这类史书上明文有载的仙人，各地的民间传说很多。据说安期生本是琅邪人，曾经在东海边卖过药，秦始皇东游至海，召他前来，恳谈了三日三夜，赏赐下无数金银绢帛。但是安期生把那些宝物全都抛下了，留书一封，要始皇“后数年求我于蓬莱山”——后来始皇派徐巿率五百童男、童女出海，据说就是去寻找安期生的。
当然啦，正经史书上说徐巿是奉命去找蓬莱仙山，去访不死仙药，可架不住民间传说有本事硬拗啊：安期生原本就是卖药的，他手里有不死药很正常啊，要不然秦始皇没事儿干嘛赏他金帛？那都是药费！而且安期生自打离开大陆，去向无踪，不用问，必然是登了蓬莱仙岛啦。所以找蓬莱，那就是找安期生。
根据张禄后来对安期生的探问，才知道民间传说不老靠谱的，但也是空穴来风，未为无因。安期生凡间修行，不足千年，“千岁翁”云云都是讹传，他确实曾在东海边炼过丹，烧过药，可是轻易不