根據《三立新聞》報導，吳憶樺的巴西籍母親在他兩歲時因病過世，之後他由外婆照顧。五歲時，父親將他接回台灣，但父親不久後也離世，改由叔叔和嬸嬸扶養。當年叔叔曾問他：「你想留在哪裡？」年幼的吳憶樺什麼都不懂，只能難過地趴在桌上哭泣，並用注音符號寫下：「我希望留在台灣！」這段往事讓許多台灣民眾感到不捨。圖片來源：東森新聞
監護權最後判給巴西的外婆，吳家親友情緒激動落淚陳情。吳憶樺被從高雄家中強制帶離，面對鏡頭哭喊：「我不要！」但仍然必須展開全新的生活。2004年，吳憶樺在一篇巴西專訪中回想：「我只記得當時很害怕，一直哭不停，不懂為什麼大家要我離開家，到世界另一端生活。」圖片來源：中時新聞