Если в основной массе используют алгоритмы и в основном как я начал по немногу врубаться, программирование, очень сильно смахивает на математические уравнения, когда из небольшой задачки, делаешь расчет.
И больше, как мне сейчас как новичку кажется тут скорее математика нужна.
Чтобы принцип аналогий сработал для понимания. А не физика.
Смотря каким программистом вы хотите быть) Некоторым и математика не нужна. А вообще, что математика, что физика изучать совсем не обязательно, но полезно для мозга =)