Największym problemem technologi VoIP, jest jakość połączenia. Obecna technologia Internetowa uniemożliwia często zapewnienie stałego i równomiernego przesyłu danych(QoS), wymaganego dla uzyskania bardzo dobrej jakości rozmowy. W razie zbyt wolnego łącza pojawiają się zniekształcenia, a słowa są urywane. Dodatkowym utrudnieniem są większe opóźnienia, które w skrajnych sytuacjach uniemożliwiają płynną konwersację. W większości przypadków udaje się jednak obejść ten problem poprzez użycie zaawansowanych metod kompresji dźwięku.