但是，日本正是拿着这个失言稻草，当了他们出兵台湾的法理令箭。当柳原带回这个令箭，并被福岛单方面解释为日本可以在台湾自由行动时，桦山资纪对此大加赞赏，认为是“柳原公使的英断，是福岛大使的面子”，并称即将展开的行动是“自丰公（丰臣秀吉）征韩以来的一大快事”。并大呼机不可失，所谓觐见清帝的问题已不重要，重要的是尽快展开对台湾的军事行动——其得意忘形的姿态可见一斑。

6月23日，桦山与高屋（海军少佐）、儿玉利国（海军大尉）、成富、水野五人离开北京，7月3日抵达上海，因等船而滞留两周，继而于17日离开上海。其中高屋、水野回国，桦山、儿玉、成富以及在上海加入的诚岛四人则赶往台湾。

因为要在福州换船，一行人于20日进入马尾港，并在这里再次因等船而滞留三十多天，桦山一行不愿浪费时间空等，便化装成商人或雅士，四处搜集情报、测绘精密地图。当地清朝官员已有人意识到山雨欲来，可惜未能识破桦山一行的真实身份，其中一名叫陈锡的通商官员还特来向这些日本“商人”探寻口风，问日本是否要对台湾采取军事行动，桦山则狡猾地顺水推舟道：“这不是我辈商人所能知道的。”而在日记中，桦山则作出如下总结：

福建省与台湾一衣带水，隔水相望。福州和厦门是最重要之地，与台湾是唇齿相辅之关系，可以说，有福建才有台湾，有台湾才有福建。福建是重要之地，需要注意。由于台湾没有安全的停泊地，将厦门作为台湾物产的集散港，无论从贸易上还是从国防上，将来都是大有作为之港。

古人说“得陇望蜀”，现在桦山还没有看到“陇”，就已经开始先“望蜀”了。