Care este avantajul IP-ului dedicat ? Ca site-ul tau e singur pe un IP?

Am auzit o chestie in care nu prea cred. Ca daca esti cu "n" site-uri pe un IP si un site de pe IP-ul tau face nu'sh ce, Google poate penaliza tot IP-ul.
Mi se pare o aberatie. Din cate stiu eu se penalizeaza doar site-ul.