Нужно, в первую очередь, запомнить те наречия, которые не могут употребляться без частицы "НЕ" - такие слова всегда пишутся слитно.
Например, НЕБРЕЖНО выполненное домашнее задание,
на улице было всё НЕВЗРАЧНО.
Также, если наречие имеет слово-синоним, которое можно использовать в предложении вместо данного наречия, то оно также пишется слитно.
Например, Осталось немного подождать = Осталось мало подождать.
Если в предложении есть противопоставление, то наречие в таком случае с "НЕ" будет писаться раздельно.
Например, Осталось времени не много, а очень мало.