原本，神保长职还打算争取到辔田家的支持后，再前去攻打盘踞在天神山一带的越后上杉军。可没曾想，东新川郡重镇要地之一的鱼津城却被板屋家的笔头家老铃木国重献给越后上杉军。
此时，神保长职心里非常清楚，椎名家已经与越后上杉家再度恢复了联系，之后越后上杉军必然会以椎名势作为先导役，向越中一国的腹地进发。眼下已经失去了攻打松仓城的时机，若是继续顿兵于此，说不准还会招致旗下国人领主的背叛，不如早些率军返回富山城，依靠富山城周边的地势，说不准还能以此来拖垮越后上杉军。
就这样，神保长职选择了主动撤离。
面对士气如虹、声势浩大的越后上杉军，感到恐惧和茫然的绝不只是神保长职一个人。他本人固然可以选择对抗到底，但大多数越中的国人领主们却不愿陪着他一块玩完。
继鱼津城开城投降之后，大村城城主辔田雅正（越中五大将之一）、小出城城主唐人兵库正（武部兵库正）二人见势不妙，当即遣使向上杉清定献上誓书，并经海路给越后上杉军送去了五千石粮草。
与此同时，越后上杉军的各路军势也在行动着。
很快，作为越后上杉军三阵的市河赖房、北条高定两部就抵达了天神山，与先阵、次阵的柿崎景家、山本寺定长、桃井义孝、安田景元、村山直义等将合流；平田宗定、须田村定二人率越后水军众突袭了放生津，并讨取了守将之一的神保八郎左卫门；上杉清定率本队以及其余军势经宫崎城、南保城、馆城等地后进入若栗城，并在若栗城之中设置本阵。
至于辔田雅正、铃木国重、唐人兵库正等人的开城投降，清定也不对他们进行过多的追究，就当即向他们下发了本领安堵状，让他们得以保有目前的领地范围。
在清定看来，眼下最为重要的是先将神保家击败，只有重创了神保家，并让神保家再无复兴的可能，越后上杉家才能在越中一国站位脚跟。
眼见越后上杉军大军压境，神保家旗下的国人领主们很快就做出了他们人生之中最重大的一次抉择——献出城池兵砦，向越后上杉军投降。
天文九年，八月五日。
堀江城城主土肥政忠、佛生寺城城主细川兵部大辅入道、城生城城主斋藤利忠等东越中的有力国人领主见主动倒向越后上杉家的辔田雅正、铃木国重、唐人兵库正等人都获得了本领安堵后，他们也不再感到迷茫，纷纷也纷纷举城而降。
这一连串大规模的叛降行动对神保长职来说无疑是一个致命的打击。
因为它不但极大地削弱了神保家的势力，而且将神保家的势力范围肢解得七零八落，致使富山城东南方的池田城、南面的上熊野城和剩下来的其他城池兵砦皆被越后上杉军一块一块地分割包围，彼此道路阻断，消息隔绝，只能各自为战。
在这样的形势下，神保长职预感那些尚未向越后上杉军开城投降的城池兵砦很可能也会叛降，只是时间问题罢了。
可神保长职对此无能为力。
由于有着椎名常长、辔田雅正、土肥政忠、铃木国重、唐人兵库正等东越中诸将的引路，使得越后上杉军异常顺利的就抵达了常愿寺川东岸，并将常愿寺川东岸的莺野城团团包围起来。
正所谓树倒猢狲散，墙倒众人推。
就在神保长职看着不断传来的败报，他几乎崩溃。就算是连续多个昼夜思考，也没能想出解决眼下困局的办法来。
曾经，越中一国的大部分国人领主和万千子民都诚惶诚恐地匍匐在神保长职的脚下，向他拜伏并宣誓效忠；曾经，神保长职也一度焕发出开创属于越中守护代神保家霸业的壮志与豪情。
可如今这一切都到哪里去了呢？为什么越中的国人领主们叛神保长职而去的脚步会跟当初他们蜂拥而来的脚步一样迅捷，一样争先恐后呢？
在万般无奈之下，神保长职只能派遣神保氏纯与同族的能登神保家家督神保总诚进行接触，希望能经他斡旋后能让时任能登守护畠山义总能够出面进行调停。毕竟，他眼下已经无法指望越中、加贺两国的一向一揆众能对神保家伸出援手了。
也就在越后上杉军向莺野城发起围攻的同时，神保氏纯经神保总诚的引荐下，见到了畠山义总。
畠山义总原本就担心自己若是出兵南下越中射水郡之际，是否会遭到加贺一向一揆众的趁虚而入。现如今，神保长职的使者倒是主动前来了。他猜到神保长职眼下快到了穷途末路了，不然的话也就不会派遣使者前来能登七尾城求见自己了。
“这位便是我主能州太守畠山从四位下修理大夫殿。”神保总诚随即向神保氏纯进行介绍道。
“外臣神保安艺守氏纯见过畠山修理大夫殿，承蒙召见，荣幸之至。”神保氏纯在见到头戴立乌帽子，身着二重织纹绫直垂的畠山义总后当即拜伏下去。
“起来吧，不知那位神保右卫门尉派遣神保安艺守你前来能州有何要事？”畠山义总坐在主位之上，右肘撑在扶几之上，缓缓说道。
“我主神保右卫门尉殿想请求畠山修理大夫殿能出面进行斡旋越中守护代神保家与越后上杉家之间的战事。”神保氏纯倒也不拐弯抹角，随即开门见山的将自己的来意说出。
“哦？可是本家受到新任越中太守上杉越后守的邀请，出兵越中射水郡啊，此事有些······”畠山义总随即做出一副非常为难的样子来，并不断的打量着神保氏纯的神色。
“畠山修理大夫殿明鉴，我主神保右卫门尉殿愿意将匠作畠山家的旧领如数归还，还望畠山修理大夫殿能从中进行斡旋一番，今后越中守护代神保家将会成为匠作畠山家的有力藩屏。您可能也获知了越后上杉军的战绩了吧？上杉越后守麾下之兵皆拳勇之士，莫不所向披靡，霆骇星散，未尝挫衄。若是有朝一日，上杉越后守觊觎您治下的能州了该如何是好？”神保氏纯当即表示越中守护代神保家愿意归还匠作畠山家的旧领后，还不忘借越后上杉家来威胁一番畠山义总。
“这样吧，贵使先在城外暂住几天吧，此事本家需要与家中重臣进行商议，还不能立即回复贵使。”畠山义总并不能反驳神保氏纯的话，因为七年之前自己悉心培养的继承人、嫡长子畠山义繁早逝，导致自己提前让出家督之位的计划也因此受阻，而且次男畠山义续并没有统治一国的器量，更没有制衡家中重臣的能力。
经神保氏纯这么一说，畠山义总不得不为匠作畠山家的未来所考虑。他虽然是想不费一兵一卒获得越中射水郡的旧领，但万一上杉清定拒绝了自己又该如何？
于是，畠山义总在神保氏纯离开后陷入了沉思。