後，在唐招提寺內的一段生活過的並不十分理想。
　　
　　日本女作家永井路子便指出，鑒真和尚之被解除大僧都職權，可能是由另一日本人大僧都良弁所發動的一種權利鬥爭的結果。那時侯，日本和尚中曾有一種「自誓受戒」之說，其目的似乎便是為了反對中國和尚的專權授戒。而良弁很有可能便是這個說法的幕後支持人。
　　
　　另外，唐招提寺這塊地方，原是一位道祖王的王府。道祖王曾被指名為孝謙女皇的太子，後來因為他參與了一個謀叛行動，竟被天皇下令杖死府中。府中可能尚有其他家屬同時被殺。所以，這個道祖王府實是一個凶宅。一幫中國和尚被安置在這樣一間凶宅之內，可見待遇已不是什麽優遇了。
　　
　　而唐招提寺正式的著手建造，大約在日本天平神護元年（七六五年）以後，即孝謙女皇廢了淳仁天皇重新即位以後的時候。這時權利上的鬥爭又對中國和尚有利了，所以，後世著名的金堂大佛殿或大講堂都是這以後逐步興工建造的。有些資料指證，寺內的大講堂都是以後由日本權要大臣所捐贈的。所以，名為私立，實際上也是依靠了官方經濟上的資助的。
　　
　　但是，做為問題中心的鑒真和尚則是在日本天平寶字七年（七六三年）以七十六歲圓寂而終。可以說，鑒真和尚在世時，唐招提寺尚未有其現在光采的面貌，招提寺勿寧是他的一批中國徒弟在他死後的逆境中所創造的，據說，鑒真和尚當時所有的只不過是一間小僧舍、一間小佛堂而已。那間小僧舍的遺跡，就是今天他的墓地所在。
　　
　　一位不畏艱巨信心堅強的人，經過狂風大浪，經過千錘百煉的奮鬥，而在他能夠感覺到的收穫上面，不過如此而已。
　　
　　（2000年）