サ変はす、おはす のみと習ったかと思いますが その す の複合動詞というものです。
これは、ケースバイケースでさまざまな言語で暗記では到底叶いません。。。
おそらく、そちらの 加物せ という語の前後の単語や助動詞が重要になってくるかと思います。
例えば、加物せらる と助動詞がついていたとします。助動詞 らるは 未然形にくっつきます。ということは、この せ は未然形です。
動詞を考えると未然形が せ(e)になるのはサ変だけです
よって、加物せはサ変動詞 と解釈できるかと思います
わからなければ聞いてください
また、その際は逆に動詞以外だとなにだと思ったのかなども教えていただけたら幸いです
がんばってください!