韦家贵的妻子潘水爱，是马尾绣刺绣能手，现已获马尾绣省级传承人的称号。两人共生育了三个孩子。早在20世纪八九十年代，韦家贵一家子就开始收集水族及周边少数民族的传统物品和古董。当被问到为什么他要收集古董时，寨子里的人都说是因为他们家的人聪明，所以很早就会买古董了，那些古董现在可值钱了。然而，韦家贵的回答却是：“在那个时候，我曾看到一些从外地前来交易售货的商贩，甚至有的是外国人，自己只上到小学二年级，没什么文化，也没出到外面见过世面，但是一想，外地人都来我们这里收购物品，那肯定是有收购的道理，也许还可以赚钱，我作为本地的人，近水楼台，为什么不试试呢？”于是便开始了自己的收获生涯。结果一收就收了20多年。由于收集的货品越来越多，基于各种考虑，就于2007年正式成立了水族家庭博物馆。