うちの会社の場合は、急に決まることが多いので、断ることもできないわけではないですね。
会社の人間関係はどうなのでしょうか。上司なり、同僚がこうした宴席をどう捉えているかで判断した方がよいように思えます。つきあいが悪い奴ということで仕事の手助けがもらえなくなったりするようなら、無理をしてでも参加するべきでしょうし、別の機会でフォローが効くようなら、出席しなくてもよいかもしれません。
セレモニー的な改まった宴席であれば、冠婚葬祭でなければ断りにくいでしょうし、年に何回も宴会があって、その一つであればそこまで考えなくてもよいかもしれません。
会社の電話番として、留守を守るような形でみんなを送り出したり、仕事のアポイントを入れて、そちらを優先させてもらうといった形なら角がたたないと思います。
ちなみにドタキャンは、幹事の人に悪印象を残すのでやめたほうがよいでしょう。
交際費と狭く捉えるのではなく、他のところで削った方がよいかもしれませんね。