土井定七大佐 12 月 10 日凌晨向師團長佐野忠義發出電報,表示第 228 聯隊已攻佔 255 高地,只剩下一個 (401B) 機槍堡及觀測站仍在抵抗。
由於通訊問題,電文並未完整送達佐野手中,零碎的內容令佐野以為土井因擅自行動而身陷險境,兩次勒令所有部隊中止行動,向城門河以北撤退。
土井一時無法理解上級命令,決定暫不理會,待電話通訊恢復,才直接向佐野解釋。師團參謀長阿部芳光大佐於日出時分趕赴城門碉堡視察,發現土井部隊僅兩人陣亡,數人負傷,卻俘虜了二十多名英軍,並奪去四挺機槍和數十挺步槍。土井其後致電佐野解釋,佐野終於承認 255 高地被完全控制的戰果。
土井的出其不意、隨機應變,成功突襲城門碉堡,雖獲軍第 23 軍參謀長栗林忠道讚揚,但得罪了軍長酒井隆。酒井隆堅持攻港計劃該由中央統制,第 1 炮兵隊司令北島驥子雄中將又是他在陸軍士官學校的同學,因土井的獨斷,攻港計劃被打亂,北島亦失去領功的機會,酒井隆於是直斥土井僭越權力,必須受軍法審判。同時解除栗林協助指揮的職務,栗林自此再沒有參與香港作戰。
在北島出面解圍下,土井避過軍法審判,當晚飛往大埔的師團指揮部。攻佔城門碉堡的戰功,被記在攻破觀測站的若林東一身上,若林竟成為「軍神」。
城門碉堡失陷近十五小時 (12 月 10 日傍晚 6 時),蘇格蘭營撤離醉酒灣防線,在金山附近負隅頑抗。A 連第 7 排退入九龍水塘地區 (位於金山郊野公園之內),第 8 排殘部及第 9 排加入拉吉普營。D 連移駐金山山脊北端。B、C 連在撤退中混在一起,其中 C 連左側部署在青山道西南 194 高地 (今浩景臺),其餘則部署在青山道另一側 256 高地 (今華景山莊)。B 連部署在 C 連後方,左側為青山道,防線與 C 連平行。
蘇格蘭營 C 連、B 連及 A 連殘部守青山道,蘇格蘭營 D 連及拉吉普營 D 連守金山。由於調動突然,B、C 連與營部的通訊到 11 日凌晨仍未接通,青山道與金山之間也有一段防線缺口。
第 230 聯隊第 2 大隊的若松滿則少佐見英軍防線薄弱,在未得第 23 軍司令部同意下,派出第 7 中隊沿青山道南下,從下葵涌轉向攻往 256 高地,第 5 中隊則自西南面進攻金山,在 11 日日出前逐步迫近金山山腰。
第 5 中隊於金山遇到蘇格蘭營 D 連頑強抵抗,雙方爆發肉搏戰,中隊長更被英軍擊斃,但仍慢慢迫近金山西南的 361 高地 (大連排一帶)。第 230 聯隊第 3 大隊長野口捷三少佐 (位於和宜合一帶) 見第 5 中隊陷入苦戰,下令獨立速射炮第 5 大隊第 3 中隊在城門碉堡後方的 341 高地架設一門速射砲,8 時 30 分炮擊金山,D 連終於被擊退,20 分鐘後,日軍佔領 361 高地。
至於第 7 中隊,正面攻擊 C 連右翼時,同樣遭遇頑抗。直至第 38 山炮兵聯隊第 3 大隊於梨木樹以西架設火炮,炮擊 C 連,B、C連才潰散,B、C連連長相繼陣亡。