Lille stråtæge har – som det er også tilfældet hos lang stråtæge – et meget atypisk udseende for en kanttæge. Hannen, som er smal og langstrakt med parallelle bagkropskanter, er som regel lysebrun, men kan også være grønlig. På bagkroppen ses en mørk midterstribe. Hunnen, som har en mere bred og oval bagkrop, er lysegrøn med rødlige eller sorte tegninger på vinger og bagkrop. Både hanner og hunner er normalt kortvingede, men der findes af og til eksemplarer med lange vinger. Antenner og ben er grønne eller brune. Nymfen er grønlig eller gråbrun og kraftigt behåret. Hannen måler 6-8 mm, hunnen 8,5-10 mm.