Название "Niburta" происходит от имени двуликого божества скифской мифологии. Нибурта был богом войны, придавая воинам ярость, смелость и мужество в бою, и богом земледелия, отвечая за хороший и обильный урожай. Эта биполярность также отразилась и на группе: в своей музыке она сочетала тяжелые звуки метала с мистическими мелодиями традиционных инструментов, таких как волынка, скрипка, флейта, кобза.

Первоначально группа Niburta была сформирована в конце 2009 года, но тогда она носила название Tardos. В её составе были Anna Németh (скрипка, волынка), János Krieser (гитара) и Balázs "Busó" Hormai (бас-гитара, вокал, варган, кобза, флейта). После длительных репетиций и проб группа меняет название на Niburta и запирается в студии для записи своего первого демо "Eredet".

"Eredet" вышел в августе 2010 года. Скопировано с Dark-World.ru. Работа была встречена тепло среди поклонников группы, а также в ходе концертов в соседней Словакии и Чешской Республике.

В середине 2011 года Niburta записывают свой первый миньон, получивший название "Awakening". Выход этой работы дал группе ещё большую известность на музыкальной сцене. В поддержку нового материала было дано несколько концертов, в том числе на таких фестивалях, как Folk-Rock Marathon, проходившем в Будапеште, и Rockmaraton.

В 2012 году Niburta были приглашены на ряд зарубежных концертов, в том числе на международный фестиваль Beltine Fest Tour 2012, проходивший в Словакии, Словении и Венгрии. Весной 2012 года происходят некоторые изменения в составе группы. Уходят Márton Szilágyi, Lili Träger и Bálint Kemény. Новым гитаристом становится Gergő Hajba, флейтистом и волынщиком - Richard Patkós, а исполнение партий женского вокала взяла на себя Martina Veronika Horváth.

В октябре того же года группа наконец-то записывает свой первый полноформатник "Scream From The East", выпущенный на лейбле Nail Records.