我的婚姻一直被一个已婚男人骚扰，而且多年

我的婚姻一直被一个已婚男人骚扰，而且多年。现在事情被家人知道对方反而说是我勾搭他。把所有事情说成是我。我能通过法律讨回说法。还清事情真相让对方受罚么。