家人伸手借钱却不还的,该怎么面对?

家中弟弟一直当伸手牌

我是他姐,但是我不好明问花去哪,每月开口借一次,3-6千不等

他不常跟其他成员开口借,因为怕各自的老婆大人生气(女人比较会生气吧)

可是一直也没还钱

该当作算了,还是要问?问题是这要怎么问,自家人要这样去计算清楚好吗