Choli az első két általános iskolai osztályt még román nyelvű iskolában járta, majd ’48-tól magyar nyelvű osztályba került. Nagy hatással volt rá általános iskolai tanára, Sóvágó Gizella, aki nemcsak tanára volt, hanem példaképe is.Szülőfaluját tizenévesen nővérével együtt elhagyta, az útkeresés időszaka következett. Erről Choli így vall: „Attól kezdve egy csomó véletlenen múlott az egész, hogy én most nem alkoholista utcaseprő vagyok…” Az ötvenes években a fiatalok zöme nagyobb városokban vállalt munkát. Főleg építkezéseken és a vasútnál foglalkoztatták őket. Choli így került a 25. számú Állami Építőipari Vállalatba segédmunkásnak. A faji megkülönböztetéssel először a munkásszállón találkozott.
Dolgozott a Tatabányai Bányászati Tröszt munkásaként is, itt az egyik bányásztársa a jobb és könnyebb élet reményét vázolta fel neki, ajánlata a disszidálás volt. Szombathely mellett kísérelték meg a szökést, aminek az lett az eredménye, hogy társa aknára lépett és megsebesült, Cholit is elkapták, letartóztatták. 10 hónapos börtönbüntetést kapott. A politikai foglyok közé rakták, Antall József volt miniszterelnökkel került egy cellába. A hatvanas évek elejére családja felköltözött Budapestre. Szabadulása után követte őket.
Segédmunkás lett a Csepel Vas- és Fémművekben. Choli esti tagozaton hamar elvégezte a nyolc osztályt. Így emlékszik erre az időszakra: „… hatodikban-hetedikben-nyolcadikban megtanultam tanulni, és sok mindent megtanultam, de azt nem, hogy mi is az a kvantummechanika. Továbbra is hallgatnom kellett, mint a kuka, ha a szó erre terelődött.” A Kossuth Lajos Gépipari Technikum öntőipari szakán megtudta, hogy a kvantummechanika mit is jelent pontosan, ezirányú érdeklődése meg is szűnt: „Fizika és kémia összekapcsolva, persze végül megtudtam mi az a kvantummechanika, akkor már rögtön nem is érdekelt.” Átjelentkezett a Jedlik Ányos Gimnáziumba, ahol nyomban második osztályban kezdhetett.
Élete következő sorsfordító eseménye egy irodalmi röpdolgozat írásakor történt. József Attila anyaversei volt a téma. Ekkor Choli már nagy érdeklődést mutatott az irodalom iránt, különösen nagy hatással volt rá József Attila, akinek verseskötete mindig a táskájában lapult. A dolgozat nem jelentett problémát számára, amikor befejezte, elővette József Attila kötetét és elkezdte papírra vetni élete első műfordítását. Ezután folyamatosan publikált a Nagyvilág, Világosság című lapokban. Első önálló szerkesztésű kötete 1979-ben jelent meg Uzhe Jilesa, Tiszta szívvel címmel, majd a Fekete korall, ami cigány költők antológiáját tartalmazza.
Choli Daróczi József 1975 óta tagja a Magyar Írószövetségnek és a Magyar Újságírók Országos Szövetségének, szerkesztette a Romano Nyevipe, az Amaro Drom és a Rom Som nevű lapokat. Számos publikációja, verse jelent meg cigány és magyar nyelven egyaránt. A Cigány-magyar kisszótár, a lovári nyelvkönyv – Zhanes romanes? - megjelenésükkor egyedülállónak számítottak. Elsőként fordította le a Biblia Újszövetségi részét cigány nyelvre.
Palkó Magda, a Világosság című folyóirat főszerkesztője megkérdezte Cholitól, hogy akar-e cigánygyerekeket tanítani. Így indult el a pedagógusi pályán. 1972-ben az újpalotai „Lila” iskola tanítója. Mivel képesítés nélküli tanítóként csak három évet lehetett dolgozni, ezért célszerűnek látott elvégezni egy pedagógusképző főiskolát. A diploma megszerzése után népművelőnek hívták, amely állás betöltéséhez egy újabb képesítést kellett megszereznie. A Csavargyár utcai munkásszálló kulturális igazgatója lett, mintegy 2500 fő művelődéséért vált felelőssé.
1985-86-ban a Pozsgay-féle Hazafias Népfront felügyelete alatt működő Országos Cigánytanács vezetője lett Choli Daróczi. 1987-88 a Magyarországi Cigányok Kulturális Szövetségének ügyvezető titkára, majd a Hátrányos Helyzetű Fiatalok Életmód és Szabadidő Szövetség elnöke. Majd a X. kerületi Cigány Koordinációs Bizottság titkára lett, rendszerváltás után a X. kerületi Cigány Önkormányzat elnöke. A pedagógus pályára 1994-ben tért vissza, a Zsámbéki Apor Vilmos Főiskola adjunktusaként dolgozott, romológiát, cigány nyelvet, történelmet tanított. Innen vonult nyugdíjba.