誰が言ったかではなく、その発言の

「根拠」

の部分に着目しましょう
反論をするのであれば、その根拠に対して反論しましょう
語られている根拠に対して反論したいが返す言葉が見つからない…だけど何か一言言ってやりたい
そんな時にひとは

「人身攻撃」

を行うのです