娄山关是安徽阜阳人，祖上三代都是开面粉厂的，家业虽不大，但日子过得十分殷实。他父亲那个时代，正好赶上□□，闹了饥荒，家业便开始中落，等到他出生时，祖业殆尽，他们一家只能被迫跑到金陵做起了买卖，过日子。
至于为什么是金陵，那便和他母亲有关，他母亲是地道南京人，识书知画，克本达理，是位十分典型本分的妇道人家。那时不同今日，阜阳与金陵还是相距甚远的，至于他的父母为什么会认识而携手？其实也没有什么特别浪漫的理由，那个年代都是父母之命。
两家是生意上的伙伴，一家是面粉厂，一家是商铺，来往合作好几十年了，建立了深厚的信任与友情。所以当子女到了婚配嫁娶之年时，自然都想起了对方。娄山关的父亲是家中独子，这一点，娄山关和娄天都获得了相同的遗传。而娄山关的母亲则是家中老幺，比他父亲小三岁，虽出身富家，但不嗔不娇，一直恪守本分，相夫教子。即使娄家家道败落也是不怨不哀，甘心陪他父亲过清贫的日子。他们一家投奔娘家后自然也是寄人篱下，日子也不好受，但比待在阜阳好多了。
后来，娄山关也把家安置在了金陵，当然这不是为了迎合他的母亲，因为他母亲在他发家之前就过世他界了。