小女孩不停地想小便不痛不痒可能是尿路感染、膀胱过度活跃或心理因素等原因引起的，建议及时就医，根据原因做针对性的改善。
1. 尿路感染：尿路感染是导致频繁小便的常见原因，可能是由于细菌进入尿道引起的。治疗方法包括抗生素治疗，如头孢克肟颗粒和阿莫西林等，应在医生指导下用药。
2. 膀胱过度活跃：膀胱过度活跃可能导致尿频，与膀胱肌肉不自主收缩有关。常用药物有托洛特罗、奥昔布宁和索利那新等，需遵医嘱用药。
3. 心理因素：焦虑、紧张等心理因素也可能导致频繁小便。建议进行心理咨询，必要时可使用抗焦虑药物如地西泮、阿普唑仑和劳拉西泮等，应在医生指导下使用。
除以上原因外，还可能与糖尿病等因素有关。建议保持良好的生活习惯，多饮水，及时就医检查和治疗。