1、不会因为捡到手机不还就给予行政处罚或追究刑事责任，因为捡到手机不还纯粹是民事纠纷，即不涉及《刑法》也不涉及《治安管理处罚法》，对于这种民事纠纷，公安机关只能调解处理，调解不成的告知当事人依法起诉维权。
2、根据《民法典》第二百三十三条
物权受到侵害的，权利人可以通过和解、调解、仲裁、诉讼等途径解决。
3、根据《民事诉讼法》第一百一十九条
起诉必须符合下列条件：
（一）原告是与本案有直接利害关系的公民、法人和其他组织；
（二）有明确的被告；
（三）有具体的诉讼请求和事实、理由；
（四）属于人民法院受理民事诉讼的范围和受诉人民法院管辖。
