数论上的东西跟物理学基本上可以看成是八竿子打不着。但是在计算机出现后，仍然找到了用武之地，那就是密码学。把一个巨大的数字分解成质数的乘积，在现阶段是相当困难的，银行系统就用这件事，用两个巨大的质数当做密钥保存，把它的乘积作为公钥公布，原理就是这样。你如果掌握了大数分解质因数的方法，想想所有银行里的钱…嘿嘿！分分钟秒杀所有的世界首富啊！
应该说脱离了数学的物理
1、数学可以作为工具，为物理学、化学、生物学、医学、建筑学、金融学、CS等各个领域服务，应用范围广着呢。脱离物理，数学顶多就是少了一个大客户罢了，虽然发展会受到一定阻碍，但破不了产（因为还有其他客户）。
2、数学不仅仅是工具，也不仅仅是为别的学科服务的，它本身是一门学科，自然有它自己的价值与尊严。有个东西叫纯数学不知道你听过没有，数学历史上很多发明与创造原本都属于纯数学研究，比如矩阵、偏微分方程、黎曼几何，数学家们起初研究他们并不是为了解决什么其他领域的问题，而是为了满足数学学科内部的需要。换句话说，不管后来你爱因斯坦有没有用到黎曼几何去构建广义相对论，黎曼几何都有它自身的价值。就像山里的野花一样，有没有人采它都在那儿，都是一株生命。
所以，别说脱离了物理数学会怎样，没有物理，数学照样过。反倒是没有数学，物理可能过不下去，至少广义相对论、万有引力定律、麦克斯韦方程组你弄不出来。没有微积分，很多物理上的问题你也根本没法解决。更别提最基础的计算，加减乘除。
数学作为一切科学的基础，为其他学科提供服务，让你站得更高看的更远，这是多好的一件事，为什么要提分手呢？
数学是学科之王，任何学科的发展都需要数学进行支撑。
一个伟大的物理学家一定是个数学家，牛顿是这样，爱因斯坦更是这样。牛顿先发明的微积分，然后才发现的万有引力，三大定律。爱因斯坦在14岁的时候就自学完了微积分，在相对论方程建立的时候，更是进行很多的数学运算，最后才有了相对论方程的建立。
洛伦兹是爱因斯坦同时期的数学家，他的数学方程推导已经跟接近相对论方程，，但他不懂物理学，所以错过相对论的发明。
没有数学支撑的物理学，就如同没有根系的树，注定不会走远。