袁方在李元庆和李元功的簇拥下，来到了香山澳码头，袁方看到有一条挂着白底三角旗的葡萄牙大帆船停在码头远处的海面上，几个葡萄牙人正在码头上与广州府海防同知刘德山交涉，希望能够让海面上的大帆船靠岸。
刘德山看到袁方来了，脸上发出了光彩，他对其中一个葡萄牙人道：“大明的钦差大人来了，有什么问题你们可以找他申诉。”
袁方迈着方步走到这些葡萄牙人面前，问：“你们都聚集在码头上作甚？”
那个看上去像是头目的葡萄牙人连忙向袁方行礼，并用汉语说道：“香山澳民政长佩德罗拜见钦差大人阁下！”
“你叫佩德罗？”袁方问。
“正是在下。”
袁方又问：“你们在码头干什么？”
佩德罗道：“回禀尊敬的钦差大人，我们是来接我们的总督的。我们葡萄牙来了一位总督，这位总督是我们国王亲自任命的马士加路也总督。你看，就在那艘船上，现在，你们的人不让我们的船靠岸，还请钦差大人您下个命令，让你们的人行个方便。”
袁方冷笑道：“行个方便？让你们的总督上岸？”
佩德罗再次行礼：“正是。”
袁方道：“香山澳是我大明的领土，我们这里不需要什么总督，你去告诉你的马什么总督，让他回葡萄牙去，这里不欢迎他。”
其实，这个佩罗德也不欢迎总督的到来，之前葡萄牙派过一个叫做卡洛告的人来当总督，就是这个佩罗德的阻扰，才使得卡洛告没有成行，现在这个叫马士加路也的总督就在那艘船上，佩罗德当然是不希望他能够登上码头，所以，大明的官员禁止马士加路也上岸，这个佩罗德心里是很高兴的。
他接受了袁方的提议，派人去船上通知马士加路也，大明不欢迎他来香山澳，要他别上岸了，如果上岸的话，他也保证不了马士加路也的生命安全。
这个马士加路也得到了佩罗德的报告，生怕自己的小命丢在了这里，连忙调转船头溜之大吉。
袁方看着那艘大帆船离开后，也离开了码头。李元庆安排袁方一行在他的府衙里面住了下来。
住下之后，袁方就着手准备购买红夷大炮的事情，他让李元庆去佩罗德那边去打听红夷大炮的价格，不多时李元庆就回来了。
“怎么样？”袁方见李元庆这么快就回来了，高兴地问，“红夷大炮多少钱一门？”
李元庆苦着脸道：“佩罗德不肯把红夷大炮卖给我们。”
“不肯卖？”袁方疑惑地问，“为何？”
李元庆道：“佩罗德说，我们不同意他们的总督上岸，所以不考虑把红夷大炮卖给我们。”
袁方道：“葡萄牙人想拿红夷大炮来与我们做交易，我们不能答应。就是不买红夷大炮，也决不能让他们的总督上岸！”
李元庆道：“袁大人，你来的目的就是购买红夷大炮，现在佩罗德不肯卖，您如何回京城交差呀？”
袁方道：“总会有办法的，你把这件事情向同僚们都说一说，让大家集思广益，想想办法让葡萄牙人把红夷大炮卖给我们。”
第二天，就有个人来找袁方。
他刚用完早膳，张从就进来禀报。
“少爷，外面有个人求见。”
袁方问：“什么人？”
张从答道：“肇庆府推官邓士亮。”
袁方并不认识这个邓士亮，所以他问：“他为何事而来？”
张从答：“他说是为了红夷大炮的事。”
“马上请他进来！”一听说是为了红夷大炮的事，袁方立即来了精神，他让张从去把邓士亮请进来。
邓士亮一进来就向袁方行礼：“肇庆府推官拜见袁大人！”
袁方回礼让座。
二人坐下后，邓士亮道：“听说袁大人为了抗击鞑子来香山澳购买红夷大炮。”
“是的。可是葡萄牙人不愿意把红夷大炮卖给我们。”袁方端起茶杯喝了一小口，问，“你有什么良策吗？”
邓士亮也端起茶杯喝了一小口茶，道：“上个月我奉命在阳江视察海防，听那里的渔民说，两年前，英国东印度公司有一艘船，因为台风而沉在了阳江附近的海里面。”
“一艘船？”
“是的。是一艘叫做‘独角兽’的战船。”
袁方立即明白了邓士亮的意思，既然是战船，那么船上就一定会有大炮，他问邓士亮：“你有办法打捞吗？”
邓士亮道：“办法倒是有，就是缺少银两，如果有钱我能够组织人力去打捞。”
袁方问：“你需要多少银子？”
邓士亮伸出两根手指：“最少要二万两白银。”
袁方当即拍板道：“我给你二万两白银，你负责把‘独角兽’打捞上来。”
邓士亮道：“有袁大人的这句话，我立马回去组织人马。”
袁方立即把卢象升叫过来，他是负责管钱的，袁方让他跟着邓士亮一起去阳江，后来他又把兵部车驾司的高世宁和太监刘荣也派去了阳江，监管打捞‘独角兽’的事情。
袁方在香山澳也没有闲着，他带着宋献策、徐骥和李若山在香山澳的贸易市场转悠了好几天，准备为自己在京城的正德隆商行进些货。
他们先是看了各种珍宝、香料、胡椒和药材市场，主要是了解市场行情和货源，对有意向采购的几个重要的商家进行了备案，以便之后继续交往。
然后又走了棉花和棉织品以及毛织品