Tales of Xillia sleduje príbeh Judea Mathisa, mladého študenta medicíny, a Milly Maxwellovej, záhadnej ženy, ktorú sprevádzajú tri neviditeľné postavy. Na začiatku ich dobrodružstva si hráči vyberú jedného z hrdinov. Hra sa odohráva vo svete RIEZ MAXI, kde ľudia a duchovia žijú spolu v harmónii. Kráľovstvo Rašugal experimentuje s mocným zariadením, ktoré zo sveta odčerpáva potrebnú manu. Milla a Jude si uvedomujú hrozbu, ktorú toto mocné, ničivé zariadenie predstavuje pre svet, a vydávajú sa na neľahkú úlohu zničiť zariadenie a vrátiť manu do sveta, kam patrí. Na svojej výprave za záchranou sveta sa Milla a Jude stretávajú s množstvom postáv zo sveta RIEZ MAXI, ktoré im pomáhajú v ich neľahkej úlohe.