胡广的祖父胡善（46-113），字南甫，曾任华阴令，死后葬在华容县城以北石山矶（古名石矶山）。胡广的父亲胡宠（73-150），又名胡贡，曾任交趾督尉，死后葬华容县城荷花市场东南部，其葬地与郦道元《水经注》所载“夏水以迳交趾太守胡宠墓北，历范西戎墓南”的地理位置是相符的。对胡广的评价，东汉末年史学家赵晔在《东观汉记·胡广传》中写道：“达练事体，明解朝章。虽无謇直之风，屡有补裨之益。”南朝宋宣城太守范晔在《后汉书·胡广传》里用两句话作了概括，显得颇为精到。一句话是引京师谚语：“万事不理问伯始，天下中庸有胡公。”另一句话是“汉兴以来，人臣之盛，未尝有也。”这说明，胡广在历史上确实是一个了不起的人物。他不但受到几代皇帝的器重，受到当朝文武百官的尊敬，而且还受到天下百姓的拥戴，真是难能可贵。