also ich muss sagen, mein mathe lk hat mich im studium (informatik und mathe) weitergebracht.
aber das nur so minimal, dass du wirklich das wählen solltest, was dir die leichtesten noten einbringt und das sind weder mathe, noch physik

[ich hatte auch beides als LKs].
wenn du unbedingt zwischen beiden wählen willst kann man eigentlich einfach sagen, dass mathematik sehr theorielastig bleibt und physik eben angewandte mathematik ist.
ich fand es zwar anspruchsvoller, jedoch faszinierender und daher ists auch meine empfehlung an dich, belege physik, da passiert wenigstens was und es ist meist ne schöne männerrunde