The idea of becoming a writer had come to me off and on sinc

这里牵涉到两个句型：1.含有since 的句型；2.含有not until 的句型.分别解释如下：
1.一般来说,句子中出现了标志性单词since 时,主句中的谓语动词应该使用现在完成时,如：
I have made a lot of good friends since I came to No.1 Middle School.自从我来到第一中学
（到今天截止）我已经交了许多好朋友.
你所给的句子之所以用了过去完成时,是因为从后面的句子可以看出,这是一件过去的
情,不是“到今天截止",而是：“到当时的某个时间段截止”,因此,就需要将现在完成时
改成过去完成时.
2.It was not until...that 是一个强调句的固定句型,其中的that不可以换成which.这个句型的
思是“直到...我才...".如：
It was not until yesterday that I finished the book.直到昨天我才写完了这本书.

首先这个句子是过去式 所以 不能用has而用had
its not until ....that是个固定句式 是倒装句 not…until…的强调形式，其基本结构为it was not until….that…形式。
which误代强调结构中的that:
根据英语强调结构的基本格式it is (was)…that (who)…可知，不管被强调成分为指时间或地点，还是指原因...

had come to me 是过去完成时，表示那个想法是在过去的某个时间之前就产生的。
not until 是“直到……才……” 如 I didn't come back home until 11. 我直到11点才回家。
that 是一个强调句型It is ……that 不能用which替换