Secondo me la situazione è troppo complessa e dovremmo limitarci a sapere di non sapere.
Comunque il protovangelo di Giacomo afferma che Giuseppe aveva già dei figli prima del matrimonio con Maria. Ciò porterebbe a considerare i fratelli di Gesù di cui parlano i vangeli canonici come fratellastri di Gesù.