1、行为人以短信方式不停地辱骂不构成诽谤罪。诽谤罪是指故意捏造并散布虚构的事实，足以贬损他人人格，破坏他人名誉，情节严重的行为。短信不停地辱骂还没有到情节严重的地步。依据刑法规定，犯诽谤罪的，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。
2、法律依据：
《中华人民共和国刑法》第二百四十六条 以暴力或者其他方法公然侮辱他人或者捏造事实诽谤他人，情节严重的，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。前款罪，告诉的才处理，但是严重危害社会秩序和国家利益的除外。通过信息网络实施第一款规定的行为，被害人向人民法院告诉，但提供证据确有困难的，人民法院可以要求公安机关提供协助。