Именно огромные знания математики?

А Питона действительно вполне хватает. Особенно если делать реализацию именно игровых моделей, а не уходить глубоко в графику, то все отлично. Простая 2Д графика на Pygame и вперед.