Come si deriva legge di Zipf (222)

In questo video introduco la legge di Zipf, una sorprendente regolarità statistica che emerge nei testi in linguaggio naturale: se ordiniamo le parole dalla più frequente alla meno frequente, la loro frequenza decresce approssimativamente come l’inverso del rango. Il punto centrale del video è capire perché, quando scriviamo o parliamo, non scegliamo le parole in modo completamente libero: il contesto già costruito attiva certi significati e rende alcune parole più probabili di altre. A partire da questa idea, introduco il processo di Yule-Simon, un semplice modello matematico basato sul principio “chi ha di più riceve di più”, e mostro alla lavagna come da questo processo possa emergere una distribuzione di tipo Zipf.