否、袈裟のとった死と、貞操の守り方は、かんばしいことではない。女性通有な、心のせまさから、思慮にまどって、つい、あんな行き過ぎへ、自己を、突き落としてしまったものと思われる。──そう世論して、うわさを、片づけてしまう堂上人もないではない。
こうした一部の公卿たちは、
「したが、ゆゆしいことであはある。一布衣（ほい） の妻が、良人の身代わりに、邪恋の男の刃（やいば） で死んだ ── というだけなら、市井（しせい） の一些事（さじ） 。何も院をあげて、騒（そう） めくにもおよばないが・・・・・問題は、武者所にある。武者所の紊（みだ） れに」
と、まったく、批判の焦点を、べつに指摘した。
「かしこくも、院の御警衛に任じ、事あれば、洛内の騒擾（そうじょう） にも馳（は） せむかい、ときには、伝奏（でんそう） をも仕（つかまつ） る北面の輩（ともがら） が、近ごろの、放埓（ほうらつ） なる素行（そこう） は、何事ぞや、遠藤盛遠に似たるは、ひとりやふたりとも思えぬ」
「されば、このたびの曲事（ひがごと） など、今どきの若い北面どもが、いかにも、やりそうなことではあるよ」
「すでに、袈裟の葬儀もすみ、事件以後、はや数日を費やしながら、いまだに、下手人盛遠を、捕え得ぬなど、言語道断。ひとりの痴漢（ちかん） をからめ捕（と） るにすら、かくも能なき武者所に、なんで非常のときを、恃（たの） めようか」
ここには、堂上心理の動きがうかがえる。ヒソヒソ、コソコソ、眼顔（めがお） の集まりが、やがては、声を大にして言う。
「この責（せ） めは。忠盛にこそあるなれ。忠盛が、なお、おめおめと伺候（しこう） するなど、いかがあろうか」
「かれや、武者所の所司（しょし） 」
「なかんずく、この春、諸国の牧（まき） の馬献上（うまのぼせ） に際し、院の御（み） けしきに、へつろうて、不吉なる四白（よつじろ） の凶馬を入れ、袈裟の良人源ノ渡へ飼わせたるこそ、忠盛が科（とが） というも、はばからぬ」
「それよ、かりそめにも、禁忌（きんき） を冒（おか） すまじきは、法令にまさる、堂上の大則でみあるのに」
ついに衆判（しゅうはん） にかけて、議は、上皇のまえにまで、持ち出された。
上皇は、お困りのようであった。ややもすると、眼のかたきに、すぐ忠盛を衆判にかけるような堂上たちの執（しつ） こい反目は、遠い、昇殿問題に起因している。名誉に似た禍（わざわ） いを、求めもせぬ忠盛に担（にな） わせたのは、余人でもない、御自分である。
けれど、誠実な人間へ、愛とと信頼とを感じてゆくのは、どうしても、しかたがない。君主の道でもある。上皇は、そう信じておられる。
ことには、近ごろのように、どことなく、世上の安からぬとき、忠盛を恃（たの） みに思し召しておられたにはちがいない。忠盛が院庭（いんてい） に見えぬ日は心さびしいと、仰っしゃったことすらある。
「そうそう、仁和寺（にんなじ） へ行く日は、もう幾日（いくにち） もないのであろうな・・・・」 上皇は、ふと、公卿たちのいかめしげな物議（ぶつぎ） を、あらぬ方へ交（かわ） されて──
「盛遠の追捕も、後日の詮議（せんぎ） として、ほどほどに、ひとまず、止めさせては、どうか。凶相の馬を、渡に手飼（てが） わせたるは、忠盛の罪と申すが、ゆるしたのは、朕（ちん） であった。お卿（こと） らが、山科道理（やましなどうり） をいいたてては、おかしいぞ。そうことをあららげるな、余には」
と、苦笑いのうちに、人びとを、なだめられた。
“ 山科道理” とは、当時の、はやり言葉の一つだった。山科興福寺の衆僧が、まいど、何千という大衆の示威をもって、柄（え） のない所にムリな理屈をつけ、禁門や院へ強訴（ごうそ） に押し寄せてくる。これには、さきの上皇白河も手をやいて 「朕（ちん） が意ににもままならぬもの、加茂川の水、すごろくの賽（さい） 、叡山の荒法師（あらほうし） 」 と嘆じられたこともある通り、ひとり叡山だけでなく、山科道理は公卿たちの最もおそれる横車なのである。
上皇の、この御一言に、うるさ方（がた） の公卿沙汰（ざた） も、一応は、退き下がったが、しかし陰性は、即（そく） 公卿性である。決して、熄（や） んだわけではない。
ただし、盛遠詮議の辻立（つじだ） ちは、あすかぎで止めよ、という院宣（いんぜん） は、ただちに洛中各所の、武者の屯（たむろ） へ、つたえられた。
七日のあいだも、むなしく、道々の口に手勢を張って、盛遠追捕に、腐心していた武者所の面々は、この令に、恐懼（きょうく） もしたが、みな、がっかりした顔つきで、嘆じあった。
「そも、あの悪盛遠めは、袈裟の首を、抱いたまま、いったい、どこへ姿をくらまし去ったものぞ。地へでも潜（もぐ） ったか、どこかで、自害でもしてしまったのか」 ──と。