誰かが「あの人は細かい」と言ったとき、それは細かさ自体に非難が向いているわけじゃなくて、「優先度をまちがえている」と言いたいんだと思います。

大して重要じゃない(=細かい)ことを、重要であるかのように扱っていると。

ささいだけれど重要なことに気がつく「きめ細やかで行き届いている」という人まで「細かい」とひとくくりにされてしまうケースがたまに見受けられるけれど、それはちょっとちがうんじゃないかなと思っています。