上海投资做点什么，不过，唐宁以“政权不稳定”为由，没兴趣现在就折腾投资，等以后拿下大清的江山再说吧，根据原计划，他离开上海，奔赴日本江户。
唐宁在上海找到了当时最好的日语翻译，一个传奇的日本人山本音吉。
1832年日本渔船宝顺丸离开江户，出海捕鱼，遇上风暴，在太平洋上一共被飘了14个月，大部分船员都死了，被吹到美国华盛顿州的阿拉瓦角时，就剩下29岁的岩吉、16岁的久吉和14岁的山本音吉。
阿拉瓦角住的是印第安人，马上将“授予”这三位奴隶绿卡，北美的第一批日本移民就这样失去自由。此事就被英国哈德森湾公司的约翰?麦克拉克林知道了，找到奴隶主，用货物从印第安人那里把他们换过来，发现果真是日本人后喜出望外，因为幕府闭关锁国，外界不了解日本的情况，他马上找顺道的船把他们送到伦敦，希望政府通过他们打开日本市场。这仨吉在海上转个半个地球，于1835年到了伦敦。英国外交部接到麦克拉克林的信，心说现在连中国市场都没有打开，哪有精力琢磨日本？
大英帝国还是很有大国的气概，由政府出钱把他们送到了澳门。于是这三位吉又绕了半个地球到了澳门，下船后英国政府就不管了，让他们自己想办法回日本。
这三位下船后被德国人卡尔?郭士立接走，郭士立是个牧师，因为懂中文，给英国人当翻译，伦敦那边认为中国人和日本人都讲中文，所以交给他。郭士立一问，才发现日本人不懂中文。好在大家能用英文交流，郭士立很兴奋，让这三人教他日语，同时把约翰福音翻译成日文。不久菲律宾那边又送过来四位船只失事的熊本人，一起翻译圣经。
1837年，美国商人查尔斯?金打着义务送这几位回家的旗号，驾着莫礼逊号抵达东京湾边上的浦贺港，被炮轰走了，又去日本最南的鹿儿岛，岸上一样开炮，只好返回广东，把几个日本人放在澳门，继续帮英国人和教会翻译东西。
山本音吉年轻好动，先去上海，后来跑到一艘美国船上打工。娶了个英国女子，自己也入了英国籍。1849年作为翻译，随皇家海军水手号来到浦贺进行地形测量，第二次返回日本。
日本有法律，日本人如果流落到海外，再回来要被斩首。所以他自称中国人，人家问为什么日语如此流利，他解释说是和他爸学的，他爸一直和长崎做生意，时间长了就会说日语。
佩里打开日本国门之后，英国远东舰队来到了日本长崎，双方签订了《日英和亲条约》，这时山本音吉作为最好的日语翻译第三次返回日本。这一次他不再装中国人，日本也急需他这种人才，希望他留下，被他拒绝了，又回到上海，那里有他和英国媳妇儿的家。
可巧，山本音吉