返事・返信が遅くなったことをお詫びする表現には次のようなものがあります。
(1) I'm sorry for my late reply.
(2) I'm sorry for not getting back to you sooner.
(3) I'm sorry for replying so late.
基本的にはこのような言い方になるでしょう。
もっと丁寧に言いたいのでしたら、
(4) Please accept my sincere apology for my late reply.
と表せば、かなり丁寧なお詫びになります。
参考にしていただければ幸いです。