虽名为小岛，却是位于原野上狩野川流域的低湿地，放逐地就在原野稍高之处，附近有很多水蛭。由于水流湍急，所以不能种田，长满了茂密的芦苇。
赖朝自十四岁就被放逐到此，无以维生，本来早该饿死、冻死，可是仍有人同情他，为他送来寝具或饭食。
那是个叫比企尼的女人。
她住在武藏比企，是比企扫部允的妻子，从前是赖朝的乳母。这个尼姑可怜赖朝的遭遇，远从武藏送米来给他，支撑着赖朝度过了二十年。
住在伊豆的人们窃窃私语谈论着这个流放者：
“举世无双的源氏！”
世上再也不会出现像他这样的人了吧！人们虽然不关心他，但还是有不少重情义的人，前来照顾这位放逐者的日常生活。如比企尼的女儿与女婿安达藤九郎盛长夫妇，甚至还专诚住到放逐处附近，帮赖朝洗衣煮饭。
赖朝的幸福源于他的容貌。他肤色白皙，眼神清澈，京都恐怕也很少人有他那种贵族气的脸孔吧！
“果然跟这附近的人不同，比不过他的血统。”
人们非常尊敬地瞻仰着他，见过他的人都因他的容貌而感动。他说话不急不缓，声音深沉，平常很文静，只有在读经时才张开嘴。他读经的声音，清新得连僧侣也不及。
此外，这年轻放逐者读经的份量也为人所不及——每天心经十九卷、观音经一卷、寿命经一卷、毘沙门经三卷、药师咒二十一反、尊胜陀罗尼七反、毘沙门咒八反，还有南无阿弥陀佛佛号一千一百遍。
别人若问他，他就回答：
“我是为亡父念的。”
念佛千遍是为了要替亡父超度，另外的一百遍则是为了跟义朝一起死去的鎌田正清。为父亲念经理所当然，可是，为死去的臣子念了持续十几年的百遍南无阿弥陀佛，可就不寻常了。
“不愧是武家首领的孩子，对人这么好。”
大家议论纷纷，推崇这位放逐者。即使同为贵族，公卿贵族对旁人很冷淡，尤其目中无人；武家贵族则相反，对人情深义重。也就因为这份情意，才会使各地武士慕名投靠，因而势力扩大到成为武士的首领。重情义与心地善良，正是成为武家贵族的最大资格。而这位放逐者没有经过学习，就具备了这些特质。对武家有好感的人不禁认为：
“不愧是具有武家血统的人。”
（有朝一日要起义时，帮鎌田正清读经的效果就会出现了。）
届时人们会认为赖朝是个值得信赖的人，而聚集在他麾下吧？由于诵经受到很高的评价，很自然的，赖朝必定也发现了这种效果。
他还有一点很吸引地方上的有心人士，亦即他的教养，不过，应该说是“对教养的憧憬”更为适当。
这位放逐者很好问，非常尊敬当地有教养的人，而且很谦虚的向他们请教。他常常去拜访伊豆的权现僧人专光房长暹，或箱根权现别当
赖朝继续过着这种生活。
“那个放逐者不会有甚么隐情吧！”
在京都六波罗的平家役所里，众人这么想着。这个年轻人每天过着诵经的生活，简直就已经变成僧侣了，根本不可能叛乱。
可是，六波罗被骗了。赖朝自放逐伊豆以来，片刻不忘复仇，证据就是这十几年来，他每个月都会收到三次从京都送来的秘密书简，也可称之为“平家情报”。
发信人是宫廷里的官差三善康信，隶属于中宫大夫的下级官吏。
中宫目前是清盛的女儿德子，她是高仓帝的