Оскільки, фраза виявляє звертання, а в українській мові при звертанні потрібно використовувати кличний відмінок, то правильно писати - "Привіт, світе". Кома використовується для виділення звертання.
Іменники – власні та загальні назви – можуть мати в кличному відмінку однини закінчення -о, -е, -є, -у, -ю. Вибір одного із цих закінчень залежить від роду іменника та його закінчення в називному відмінку, а за умови спільного нульового закінчення – від кінцевого приголосного основи або ж характеру іменникового суфікса.
Форму із закінченням -е мають:
- Іменники – власні та загальні назви чоловічого роду з твердим кінцевим приголосним основи (зокрема й основи на -р твердої та мішаної групи), що виступає перед нульовим закінченням або закінченням -о: адвокате, програмісте і т.д.
Кома в реченнях:
В сучасній українській мові кома вживається на письмі для відокремлення однорідних членів речення, звертань, вставних слів, виділення порівнянь і зворотів, відокремлення частин складних речень.
- Слався, мій народе, мій гордий, чесний, добрий, молодий
—Микола Вінграновський
Також декому може бути корисним наступне відео про розділові знаки при звертаннях.