¿Qué es la sintaxis de JSX? HTML o Javascript

Cómo lo indica en la propia documentación de ReactJS, JSX no es más que una extensión de la sintaxis de Javascript, con palabras más claras, con JSX podemos escribir cualquier código "puro" de Javascript y utilizar en el mismo código etiquetas similares al lenguaje HTML.

Aprendizaje extra:
Es recomendable utilizar JSX para la interfaz de usuario (UI) y no para el código backend.

Respuesta corta:
JSX es Javascript.