大许使节在平安京等地逗留一月，返回抵达海州（连云港），下船回京。其中过程曲折，但他们回国时，立刻被大许朝野认为是一次失败的邦交尝试。
曰本国国书以摄关大臣的名义书写，答应择吉年月日到大许朝贡；但是他们没有马上派出使节朝贡，这个择日却不知是十年后还是二十年后！加上使节赵洪等人回朝后说起曰本国称帝不恭，一时间朝廷诸臣愤怒，李处耘等功臣上书对曰本国开战，先以武力威慑，再谈邦交。
不过也有大臣认为蛟龙军海船很少，大船未成，海路遥远，兴师动众不能急成。他们建议，可以民间通商的形式，与地方官结交，再缓图之。
高丽使者听到了大许对曰本国不满，大喜，上书进言皇帝先占对马岛，再伐曰本国。不知为何，只要中原想征讨曰本国，从来都是高丽喜闻乐见的事。
大许文武异常愤怒，这是十分微妙的心态……如果是辽国拒绝称臣叫爹，大伙儿不会有啥反应；但一个他们看不起的弱国小邦不恭敬，就是不能原谅的事！
但郭绍没有表现出任何态度。他先在西殿召见了正副使，亲自听正使赵洪的陈述。
赵洪躬身道：“禀奏陛下，曰本国内有人认为全然不必理会我朝，有人敬畏我朝武功国势，表面恭敬却欲在尊卑礼法上敷衍过关，不愿激怒我朝。”
副使张寅也在后面趁机拜道：“微臣附议。曰本国君臣如此姿态，应有两个缘由。其一，他们不知我朝是为矿山实利，以为我们只是为了炫耀威势，中原若为虚名远征曰本，以千百年的经验看来可能不大。其二，曰本国君臣自持海阔路远，朝廷鞭长莫及，有恃无恐，与中原来往与否、孤悬海外与否，他们可以从容度之。”
“咦。”郭绍听到张寅的一番言辞，顿时留意了他，开口第一句话是：“哦！朕想起来了，你在平夏时，帮朕算术过。”
张寅忙道：“微臣鞍前马后乃分内之事。”
赵洪听到这里，面有不悦地悄悄转头看了张寅一眼。
这个细微的动作连郭绍也看在眼里，张寅却不自知，他面带红光一脸激动，迫不及待当着赵洪的面双手捧上一叠卷宗，将东西举在头顶，道：“微臣此番出使曰本，沿途见闻感悟诸事，皆记于此册，请陛下过目！”
郭绍轻轻递了个眼色，宦官曹泰上前接过卷宗呈上来。
郭绍随手一翻，见里面以蝇头小楷写满了字，还有图画，洋洋洒洒好几十页之多。他当即说道：“尔等出使，并不虚此行。
…。。