陈炯明在处于后方的广州发动叛乱，使得正在江西前线作战的北伐军一下子处于腹背受敌的困境。7月下旬，北伐军被迫分路向江西、湖南边境撤退，并企图回援广州。但是回师的北伐军第1师竟然投靠了陈炯明，海军中的三大巡洋舰也背叛了孙中山。至此，败局已经无法挽回。孙中山原来打算留在广州，以维持人心和军心，伺机打败叛军，现在，他看到没有什么结果，继续留在广州反而会有很多危险，于是在蒋介石的劝说下，他决定暂时离开广州，以便等待新的时机。1922 年8月9日，孙中山在凄风苦雨中乘坐英国军舰去了香港，8月10日，他又换乘俄国的轮船返回上海，在这个过程中，蒋介石始终护卫在孙中山的左右。
对于这次事件，宋庆龄后来有详细的回忆：
6月16日凌晨2时左右，孙先生把我从甜蜜的睡梦中叫醒，让我赶快穿上衣服，并告诉我说。我们正处在危险中，一定要想办法冲出去。他已经接到一个电话，大意是陈炯明的部队即将向我们进攻；我们必须立即动身去一艘炮舰，可以在舰上指挥我们的人抵抗叛乱分子。
我想他带着一位妇女在身边很不方便，于是便催促他暂时把我留在后面。我说，对我这个普通眷属来说不致有多大危险。他最后才同意我的主张。但是，他当时定要留下我们所有的50个卫兵保护这所房子，然后只身离去。
他走后半小时，凌晨2时半左右，附近枪声响了。我们的房子在半山腰，由一条约一里路长的小道与观音庵的总统府连接起来，这条小道凌空穿过街道和房屋，像一座小桥。敌人居高临下，从左右向我们开火，并大声喊着：“杀死孙文，杀死孙文！”在漆黑的夜里，完全看不见敌人。我们的小卫队只好保持寂静。在黑暗中，我只能辨出我们的卫兵蹲伏在地上。
拂晓，敌人用野炮射击，我们的卫兵开始用步枪和机关枪还击。我的浴室被击毁。我们这支小卫队伤亡已有1/3，但剩下的卫兵抵抗的意志更加坚决。一名勤务兵爬到高处，杀死了一大批敌人。到8时，我们手头的弹药越来越少了，于是我们决定停止射击，把剩下的弹药尽可能留到最后的时刻使用。
现在留在那里似乎也没有用了。队长建议我离开，卫兵们同意他的建议，答应他们这部分人留在这里，以便阻止敌人可能发动的追击……后来，据报道，50名卫兵全部牺牲。
为了躲避敌人，我们4个人，孙先生的外国随员鲍上校，两个卫兵和我自己，只携带着最必需的日常用品，沿着那桥梁式的小道匍匐爬行。敌人立即把火力集中到这条小道上来，飞来的子弹从我们耳边呼啸而过。尽管我们当时由于桥