予期せぬボールスピードとか言っても目の前に人がいた、眩しかった、とか色々と条件も変わるし主審の基準になってしまうと思う

だったら手に当たったらハンドで統一しても良いんじゃないかと。