俗话说：进退维谷，左右为难。
这正是幕府当时狼狈不堪的真实写照。
4日清晨，一个名叫佐久间象山的人从江户启程匆匆赶往浦贺。佐久间是吉田松阴的恩师，正是他日后鼓励吉田冒险前往海外，去学习西方文明的本质，从而救国家于危难之中。
佐久间象山为信州松代藩的藩士，在当时是与高岛秋帆齐名的倡导振兴防务的急先锋。他早年学习荷兰文化，研究西洋火炮枪弹，于嘉永3年（1850年）在江户深川小松町的藩邸开设枪炮制造所，自行铸造大炮。
佐久间还同时教习炮术，幕臣胜麟太郎（海舟）也是他当时的门生之一。嘉永4年的5月，佐久间在木挽町重新赁屋开设私塾，教授兵法和炮术。
在佐久间将私塾搬至木挽町之后，来自毛利藩的吉田松阴投奔到他的门下学习。听说佩里突然到来的消息，师徒俩踏上了前往浦贺的旅程。
象山于4日清晨赶到新桥的藩邸，见到了江户定府家老望月主水，他用近乎命令的口吻说道：
“……美国人大兵压境，不日便要登陆上岸。此事非同小可，必须立即赶往实地一探究竟，商讨对策。我等先去浦贺，待回来之后再如实禀报。本藩亦须严加防范，以便应对紧急事态。”
象山的某些性格和水户齐昭倒是颇为相似。齐昭出身名门，是水户德川家族后裔，位居天下副将军之尊，他那刚毅不屈的性格倒也并不奇怪。相反，象山不过是松代藩的一介学者，其性格之刚烈和倔强，并不在齐昭之下，他愤世嫉俗的气质在某些人眼中就是狷介。
“……先生所言甚是。带上两名小卒一同前往，路上也好有个照应。”
得了望月主水的首肯，佐久间离开了江户。到达浦贺之后的所见所闻令他满腔愤懑，痛感日本的无能和卑屈。
6日，象山回到江户，向望月主水报告了当时的情形。
“……美国人扬言，如日本拒绝在浦贺接受国书，便使用武力强行登陆，并发射6发大炮炮弹。世间传闻，浦贺奉行户田氏荣认为按照当前之形势，一场恶战在所难免，与其被美国人活捉，还不如切腹自杀，所以已经命令家人清扫墓地。在下倒是以为，与其消极切腹自杀，不如拼个鱼死网破，放火烧了奉行的官衙再自杀不迟。”
“浦贺的商铺已经收拾家中财物，准备外出逃难。美国人威胁说，还将有4艘军舰前来增援，看来他们此次绝不会善罢甘休的。”
“倘若委曲求全，答应美国人的要求，其他西洋诸国势必也会效仿美国，以武力威胁我国。显然，如此一来我国必将难逃四分五裂的命运。因此，绝对不能接受美国人的要求。不过，美国军舰是4艘也好，是8艘也罢，船上都载有火炮，还不时放言‘不惜动用武力’想要妥善处理，恐怕实为不易。”
“事态发展到今天这般难以收拾的局面，完全因为日本缺乏强大的武装防御力量。近年来，江户近海新设了海防炮台，然而这些炮台设计缺乏章法，哪能抵御洋人的入侵？我们的实力在内行人面前已经一览无余。美国人就是因为看准了日本既没有大船，也没有足够的枪炮知识，才胆敢来到日本耀武扬威，甚至还会真的动用武力。在浦贺附近交战影响有限，可是一旦进入江户内海，在天子脚下动起武来，就非同小可了。”
“因此，是采取权宜之计，暂时接受美国人的无理要求，留下后患，还是严词拒绝，哪怕决一死战也在所不惜，恐怕还要由朝廷定夺，非我等能够做主。不过，无论日后形势如何发展变化，本藩应提前做好派兵作战的准备。如有不测，还须做好主公家人撤退的准备。”
雄谋大略的一代先驱尚且难以纡衡决断，幕府虽屡次召集布衣以上武士登城商议，也鲜有妙计。
三奉行及负责海防的官员认为：
“……此次作为特例，权且接受美国人的国书，将他们打发回去。”
作为直接负责海防的官员，他们心里害怕吃败仗，嘴里却顾左右而言他。而那些不负责海防的大小监察官员只顾着空发不切实际的议论：
“……违反国法万万不可。或令其前往长崎，或严词拒绝。”
这些“纸老虎”似的强硬态度显然根本于事无补。
商议的结果是，鉴于大清国鸦片战争的前车之鉴，决定以日本防务空虚为由，暂且收下国书，以后再从长计议。
这些听起来冠冕堂皇的理由，其实只是幕府身处困境下的无奈之举。一言以蔽之，就是决定在浦贺接受美国的国书。6月6日10时，住在江户的浦贺奉行井户石见守弘道接到幕府的指示后，吩咐在此等候结果的同心福西源兵卫将指示传达给浦贺当地的奉行伊豆守户田。
当然，弘道并没忘记附上阿部正弘的指示：
“……触怒洋人势必招致麻烦，应稳妥行事。即便洋人上岸骚扰民宅，若无过分之举，暂且听之任之。切不可派船包围其舰船，令其不快。务必坚守陆地防线……”