都に来てからも、彼は多くに日を、洛外（らくがい） に送っていた。
ある日は嵯峨（さが） に、ある日は高尾に。
そして秋の一日、小倉山（おぐらやま） のふもとに居ると聞いた、昔の歌の友を、訪ねなどした。
むかし賢門院の女房であった中納言（ちゅうなごん） ノ局（つぼね） は、女院の亡（な） き後、尼になって、ただ一人小倉山の草庵（そうあん） に住んでいた。

彼自身の筆になる “撰集抄（せんじゅうしょう） ” のうちにもこう見えるほど、そこは人里を離れた淋（さび） しい所で 「よくも女人ひとりで、こんな山に」 と、彼すら驚くほどであった。
それだけに、彼女は、西行の訪れを喜んで、ともども、なつかしさに眼をうるませた。
来（こ） し方の思い出、世の変遷、かの友、かの君の消息など、語り尽きない夜であった。
そして、話の果ては、
「ともあれ、わたくしたちは、御仏の道を歩いておるお蔭で、貧しくても、こころ静かに、今宵もこうして無事を見合うておられます。無数の苦患（くげん） のたましいをちまたに見るにつけ、ありがたいことではありまする」
と、なおなお道心を誓うことに尽きていた。
局の言葉によれば、当時、待賢門院のうちに、妍（けん） を競うていた美しい人びとも、今はほとんど、その行方すら知れないとある。
わずかに、堀川ノ局、兵衛（ひょうえ） ノ局、師（そつ） ノ局などの消息が分かっているだけで、その中では、師ノ局が、時めく六波羅の義弟（おとと） 、時忠というお人に嫁いでいるのが、まれな御出世であるぐらいなものですとも言う。
讃岐へ流された新院の君のことやら、近ごろでは、源氏の為義につづいて、義朝一族の悲惨なる末路だの、また信西入道や信頼（のぶより） の最期（さいご） だの、つい話が、きのうの戦乱にわたると、二人の胸が痛み、夜風に肌（はだ） もそそけ立って来て、
「もう、やめましょう。嘆いても、わたくしたちには、なんの力もない・・・・。ただ一念御仏に願いをかけるしかありません」
と、廂（ひさし） の月を仰いで、いい合わせたように合掌した。そして、八重葎（やえむぐら） に宿る露よりも儚（はかな） い人間の命を ── 自分もその一粒にすぎない身を ── そっと掻（か） い抱くように、愛しみ合った。
中納言ノ局に会ってから数日の後である。
彼は、ゆくりもなく、二十年前に、自分だ住んでいた町の小路（こうじ） を、何気なく通りかけた。
「おお、このあたりよ。・・・・我が家の跡は」
彼は、憮然（ぶぜん） として、灯も見えない辺りの宵を見まわした。
保元の時か、つい去年の兵火に焼き払われたものか、彼の居た家ばかりでなく、付近の屋敷も、跡形はなく、秋草の乱れあっている中に、瓦礫（がれき） と、小溝（こみぞ） の流れが、残っているだけであった。