夫が時々小さな声で怒るのが怖い…

夫と結婚して10年たつけれど、いまだに夫の性格がつかめていません。

普段は穏やかで、上品で、いかにも文系男子って感じなのですが、年に一回ぐらい私にたいして、覚えてろよ、とか、むしりとってやる、など大した事でもない事に腹をたてて小さな声で暴言をはくのです。

そんな事を言われたら、私も気になってしまうので、覚えてろよって何をするつもり?としつこく聞いてしまうのですが、夫は答えてくれません。
今の所、特に仕返しはされていないのですが、本当に忘れた頃に何か痛い目にあわされるのかと気になります。
これってモラハラじゃないのかと、インターネットで調べたりしても証拠がないとどうにもならないようです。
普段はいつも穏やかな分、心に秘める何かがあるのではないかと気になります。