V 'Residuals' Chris Brown zkoumá emocionální složitost, která vzniká po skončení vztahu. Texty odhalují stav zmatku a bolesti, kdy se umělec ocitá mezi minulostí a přítomností. Zmiňuje, jak se jeho noci zkomplikovaly a rána zmatená, což naznačuje neustálý boj, jak se vypořádat s přetrvávajícími pocity ztracené lásky („Nevím, kdy se moje noci tak zkomplikovaly / Nemohu si vzpomenout, že moje rána kdy byla tak vybledlá“ ').
Píseň také pojednává o Brownově snaze ovládat své emoce, osciluje mezi chvílemi klidu a záchvaty smutku ('One minute I'm cool and then next I't trippin', no'). Přemýšlí, zda veškeré úsilí vložené do vztahu nebylo marné, reflektuje budování a následné ničení lásky. Opakování otázky 'Kdo dostává všechnu mou lásku?' zdůrazňuje svůj zájem o to, kdo nyní dostává to, co kdysi z celého srdce nabízel. Toto opakování vytváří pocit zoufalství a frustrace a zdůrazňuje obtížnost jít dál, když člověk stále uvízl v minulosti.
Brown navíc vyjadřuje pocit zrady a žárlivosti, zvláště když zmiňuje, že si nerad myslí, že by jeho bývalá partnerka mohla sdílet intimní chvíle a přezdívky s někým jiným. Píseň je zamyšlením nad bolestí a obtížností přijetí toho, že někdo tak důležitý ve vašem životě nyní pokračuje s někým jiným.
Slovo „zbytky“ v názvu písně odkazuje na stopy pocitů, které zůstávají po skončení vztahu. Brown se ptá, kdo nyní získává lásku a čas, který dříve věnoval své bývalé partnerce. Tato bývalá přítelkyně, stejně jako samotný vypravěč, se možná tomuto vztahu také nevěnovala, jak vidíme ve verších „Dal jasně najevo, že jsi nechtěl vidět pokračování / lhal jsem“, když jsem řekl, že ten pocit byl vzájemný, oh / Chvíli trvalo, než jsme si uvědomili, že jsme různí lidé / A láska je slepá, vidím, že láska je slepá, což dělá konec ještě složitějším.