一般的には揶揄するニュアンスを含んだ表現でしょ
目くじら立てて怒るほどの悪口とは思わんけど