Футболом начал заниматься в клубе «Пфорцхайм». Летом 2012 года стал игроком «Хоффенхайма». Дебютировал за взрослую команду 19 октября 2012 года в 8-м туре Бундеслиги против «Гройтера». Всего в сезоне 2012/13 сыграл 12 матчей в чемпионате. В январе-июне 2014 года был в аренде «Динамо» (Дрезден). Сыграл 13 матчей и забил 1 гол во Второй Бундеслиге. В сезоне 2014/15 был в аренде во «Франкфурте». Сыграл 33 матча и забил 7 голов во Второй Бундеслиге. Летом 2015 года перешёл во «Фрайбург». В сезоне 2015/16 сыграл 31 матч и забил 14 голов во Второй Бундеслиге. Клуб стал чемпионом и напрямую вышел в Бундеслигу. В сезоне 2016/17 сыграл 30 матчей и забил 6 голов в чемпионате. 28 мая 2017 года Грифо подписал контракт с «Боруссией» (Мёнхенгладбах), рассчитанный до июня 2021 года. В сезоне 2017/2018 сыграл 17 матчей в чемпионате. Летом 2018 года вернулся в «Хоффенхайм». 6 января 2019 года был арендован «Фрайбургом». 9 февраля забил первый гол в матче против «Вольфсбурга». 2 сентября 2019 года «Фрайбург» выкупил Грифо у «Хоффенхайма».