牛佛镇，迄今已有千余年历史，历史上系自贡井盐外运的要津。原属富顺县，后划归自贡市大安区。早在北宋年间，牛佛就是沱江流域有名的水陆大码头了。明末清初，因湖广填四川，来自湖北、江西、福建、广东等地的商人纷纷在牛佛建宫造庙。贺乐堂正是牛佛古镇上遗留的诸多古建筑之一。

贺乐堂的砖砌牌楼公馆式大门威武大气，具备正殿、戏台、厢房等主体设施布局，四周还有高高围合的马头墙及墙头的数十只檐角。

据记载，贺乐堂为当年一户姓贺的大户人家所建。1931年，在贺乐堂这处清代老建筑中开设中国银行牛佛渡分行，是当时富顺县的第一家现代银行机构。后来，又作为中国农业银行富顺县牛佛镇支行营业场所，直到20世纪90年代中期，这里才停止了银行业经营活动。2012年，贺乐堂被列为四川省文物保护单位。经保护整修后，2020年6月，作为古建筑景点对公众开放。