Ich bin auch knie-vorbelastet (allerdings durch jahrelange Patellaluxationen und vier Knie-OPs) und kann daher deine Schwierigkeit beim Finden einer geeigneten Sportart gut nachvollziehen.
Positiv ist ja schon einmal, dass dein Arzt dir das Schwimmen und Fahrradfahren wieder erlaubt hat. Dem würde ich auch nachgehen.
Vielleicht nicht gleich 45min hardcoreschwimmen, wobei du dich schon glücklich schätzen kannst, dass du das mit dem Knie geschafft hast

, aber eine langsame, gesunde Steigerung nach deiner langen Sportabstinenz.
D.h. nicht gleich das Fahrrad stundenlang gegen den höchsten Gang maltretieren, sondern bewusst erstmal auf "leichte" Ausdauer fixieren.
Zumal die Muskeln sich seit deiner judoaktiven Zeit sicher stark zurückgebildet haben werden?
Ansonsten sind natürlich die normalen Fitnessübungen für Zuhause (Situps/Crunches, Liegestützte (wobei man das natürlich probieren müsste [in deinem Fall auch nur die "Männerliegestütz"], die Knie sind ja auch da ziemlich angespannt), vielleicht Hantelübungen?) für das allgemeine in-Form-bringen des Körpers nicht schlecht.
Im Fitnesscenter, falls sowas für dich in Frage kommt, läuft die Fitnessschiene nochmal um einiges intensiver. Mit sehr gering eingestelltem Widerstand könntest du dort vielleicht auch an die Beinpressen (bei wirklich kleinem Gewicht ist das nicht zu kniebelastend), aber wenn der Arzt keine spezielle Muskelaufbauarbeit für notwendig hält, ist das nicht unbedingt ein Muss.