Borel definitely wasn’t first. Besides the de Saussure precedent unearthed in J.M. Selig’s answer, he could have learned it from (the apparently independent) van der Waerden ([1936](//zbmath.org/?q=an:62.0072.10), pp. 15, 30):

>... die projektiven Invarianten von drei „Flaggen“ zu finden. Eine Flagge besteht aus einem Punkt, einer Geraden durch diesen Punkt, einer Ebene durch diese Gerade usw.

>... Nennen wir die Figur, die aus einem Punkt $x$, einer mit $x$ inzidenten Geraden $p$ und aus einer mit $p$ inzidenten Ebene $u$ besteht, eine ***Flagge*** $\{x,p,u\}$, so erhalten wir ...