高速逆向行驶是一项非常危险的违法行为，不仅可能导致自身伤亡，还可能给其他车辆和行人带来生命危险。然而，只扣三分的原因是因为根据现行法律规定，违反交通信号灯指示或者标志标线等交通规则，扣分一般为三分，而高速逆向行驶的罚款金额很高，应该作为一项严重的违法行为加以打击，以保障交通安全。

因此，应该尽快完善立法，加大对高速逆向行驶的处罚力度，以达到预防和制止这种行为的目的。