백제 담로, 잃어버린 해상 제국의 흔적