1944年3月30日,美軍轟炸機空襲位於内南洋据点帛琉群島,当时联合舰队司令部移驻在帕勞,次日司令部預定4月1日後撤至菲律賓棉兰老岛的达沃。3月31日,古賀峰一司令長官預料美軍將接近登陸,將後撤計劃提前,从塞班岛调来川西二式大艇水上飞机(飞机由塞班起飞时没有加足燃油),緊急欲將司令部後撤。当天晚间古賀峰一司令長官與福留參謀長等司令部的工作人员分別乘坐两架二式飛行艇離開帛琉前往達沃。途中遭遇热带低气压,暴风雨的天气中,两架水上飛機在空中失散。古賀峰一乘坐的水上飛機失踪下落不明,古贺峰一司令长官以下7名“殉职”。福留繁所乘之水上飛機偏離航道,因燃料不足於宿霧島迫降墜毀,遭游擊隊俘虜。而後福留繁参谋长以下9名,由驻当地日军独立步兵第173大队与游击队交涉和解而獲救。福留繁后来接受海军省次官澤本賴雄中将查问时否认失落了随身携带的防水公事包,实际上美军發現了他的公事包內有1944年3月制定的“Z号作战计划(英语:Operation Z (1944))”、日本海軍密码等机密文件,美军鄭重其事,將其由潜艇运到澳洲後複製了机密文件,再把公事包放到失事地點附近,由當地人發現後送回到日方來躲避。[1]