Аниме "Без семьи" основано на классической детской повести "Sans famille" французского писателя Гектора Мало, опубликованной в 1878 году. Сюжет разворачивается в маленькой французской деревне, где живет небольшая семья - восьмилетний Реми и его мать. Они каждый день тяжело трудятся, чтобы прокормиться, в то время как отец Реми уже восемь лет работает в Париже, редко видя своих близких и присылая им деньги раз в год.
Однако жизнь семьи резко меняется, когда отцу Реми происходит несчастный случай на стройке, и он получает серьезную травму, из-за которой с трудом может передвигаться. Он проигрывает судебное дело против своих работодателей и возвращается домой без денег. Когда отец возвращается, Реми узнает, что его родители - не настоящие, и что он был брошен на крыльце чужого дома, но по счастливой случайности и доброте его приемных родителей попал в их семью. Теперь, когда отец стал инвалидом и не может работать, он решает отправить Реми в детский дом, но мать настоятельно против этой идеи. Вместо этого отец продаёт мальчика бродячему артисту, чтобы тот взял его с собой в свою труппу. Теперь Реми вынужден приспособиться к новой и непривычной жизни, чтобы выжить.