В центре сюжета - 16-летний главный герой, переведенный в среднюю школу Сюдзин в Токио (Япония). Остановившись у друзей родителей, он знакомится с проблемным ребенком Рюдзи Сакамото, замкнутой Энн Такамаки, студентом-художником Юсуке Китагавой и говорящим существом, напоминающим кошку, по имени Моргана.
Во время пребывания в этом месте, чувствуя себя подавленными своим окружением, все пятеро объединяются в группу, известную как "Призрачные воры сердец", и вместе исследуют "Дворец" - замок, созданный из сердец людей, и похищают злые намерения из сердец других людей, чтобы помочь им: в ходе этого поиска они сталкиваются с противостоящими им взрослыми авторитетами, а также с большим врагом, выявленным в результате их деятельности.