見てられないは慣用句で「みっともない」なんだよ。
だから「見るな」はバカっぽい返し、「俺はみっともなくない」なら分かるど、ごめんね。