これってセクハラですか？

被害者がセクハラと思えばセクハラという理屈、たしかによく聞きますが自由度ありすぎません？難しいなーと思います。
たしかに、普段からめっちゃフランクな別の男性上司がたまに人前で「かわいいね！」「もっと君と喋りたいよ！」と言ってくれるのは、言い方の爽やかさや普段のキャラからキモいとは感じないです。
この先輩は、毎日何かしらかわいいとか癒されるとかなんやら言われて、しかも二人きりにならないといけない仕事中に言われるので、陰湿さみたいのを感じてキモいのかもしれません。
最近ストレスなのか胃と頭が痛いです。これからどうしよう…