Joseph Blatter é o oitavo filho de uma humilde família de Rajshahi, Bangladesh. O seu pai era um hábil tecelão que ao cabo de muitos anos de ofício conseguiu tecer fios da água no velho tear que herdara do seu pai. Vinham pessoas do locais longínquos como o Botão Butão ou Myanmar para comprar os seus belíssimos tecidos e urdiduras de água. A sua mãe chamava-se গৃহিনী que em bengali significa Doméstica. Quando Joseph fez um ano, Doméstica resolveu consultar um adivinho para saber qual seria o destino do seu filho. O adivinho era um homem de muitas posses e tinha a seu cargo um jardineiro que, no dia anterior, lançou linhas de cal sobre o jardim que era gabado e cobiçado por todos na cidade. O jardineiro já tinha alertado o seu patrão que se este não pagasse aquilo que lhe devia, iria fazer algo ruim ao seu jardim. Na verdade, o jardineiro era um homem estóico e estava a ficar cego, mas não teve coragem de confessar isto ao seu patrão com receio de perder o emprego. Quando Doméstica se sentou com o bebé Joseph Blatter à frente do adivinho, a cabeça do vidente estava pantanosa e o seu coração estava muito pesaroso, e profetizou que aquela criança iria ter uma vida longa mas cheia de dor e canseiras, com muita gente a desejar-lhe mal, como um longo rio barrento cheio de entulho e troncos rachados. O adivinho aconselhou ainda que Joseph deveria dormir sempre em beliches de pinho e, de preferência, na cama de cima.