Če je kraj izvora panetona jasen, pa tega ne moremo trditi za njegov nastanek. Okoli te tipične božične sladice, ki izvira iz Milana, kroži več legend – od tiste, da so ga prve pripravljale nune, do najbolj znane zgodbe o pomivalcu posode Toniju. Ta naj bi na gradu milanskega vojvode v 15. stoletju na božični večer priskočil na pomoč kuharju, ki se mu je ponesrečila sladica. Uporabil naj bi sestavine, ki jih je našel v kuhinji – moko, jajca, maslo, sladkor in suho sadje – ter pripravil mehak in dišeč kolač, ki je goste navdušil. Po legendi so ga poimenovali pane di Toni, Tonijev kruh.