在老中们的要求下，目付所重新回溯了与咸亨洋行打交道的过往：
嘉永二年（1849年）八月，旗本崛直秀从海外归来，除了自购的一艘西洋木船，随行的还有一艘米人帆船——这是咸亨洋行第一次正式出现在扶桑，当时名义上替崛直秀送货，并没有和幕府发生什么直接关联。
但嘉永三年（1850年），咸亨洋行的船只又出现在长崎，在新任长崎目付小栗忠顺的操作下，又玩了一回蛮人献宝，这算是开始与幕府打交道——但当时还谈不上交易，当时幕府只是收下了礼物，给咸亨洋行的回报仅仅是燃煤、淡水和其它一些补给。
所谓的“又一回蛮人献宝”，是指以前发生过一次。
在嘉永元年（1848年），曾经有米船来长崎，据说是什么米人首富范德比尔特的船只，当时船头摩根和时任长崎目付役助的小栗忠顺“一见如故”，而且摩根接触了扶桑文化后发现其“博大精深”，所以献上大量南蛮物。