小孩子老想上厕所小便，而且每次都尿不多，提示存在尿频的症状，尿液比较黄，考虑是尿液浓缩或者存在上火的症状，根据上述症状的综合表现，不排除孩子存在上火或者是尿道炎的可能。建议最好给孩子多喝水，鼓励孩子多排尿，必要时也可以带孩子去医院泌尿科进行检查，如果确诊是泌尿系感染，可以服用抗生素类药物治疗。