Murrayfield sidan är sjunde i bordet och möta en svår inkörning när de söker en topp-fyra finish.
"Vi har fem stora spel som kommer upp och jag tror att vi måste vinna alla av dem om vi vill ha ett rop av play-offs eller ens de sex bästa," sade Dickinson, 32.
"Det är riktigt trångt i mitten av bordet."
Dickinson, med Willem Nel och Ross Ford en del av en all-Edinburgh första valet Skottland front rad, har återvänt från internationell tjänst för inkörning.
Det omedelbara målet är en seger i Wales på söndag mot Newport Gwent Dragons innan en hemmamatch mot andra-botten Zebre fem dagar senare.
Bort spel mot Leinster och Munster följa innan en Murrayfield datum mot Cardiff Blues.
"Vi måste tänka på att vinna varje spel, det är vad vi måste rikta, börjar med Dragons bort som alltid är ett brutalt möte," fortsatte den tidigare Gloucester prop.
"Det är en riktig tuff match. Vi måste bara ta varje match som den kommer. Vi har en tuff omsvängning söndag till fredag."
Han bad att få reda på vad som har lett till att Alan Solomons män har förlorat fem av sina sex senaste matcher i alla tävlingar och svarade: " Det är svårt att veta exakt vad som har gått fel.
"Vi har svikit oss själva med fel, ett par mjuka försök ibland, som har dödat oss.
"Ibland dessa pauser mellan Six Nations (spel) inte hjälper, du förlorar lite fart, men i morse vi hade en bra session så vi tittar på saker som vi behöver förbättra på, bara små saker.
"De som inte har varit borta med den nationella truppen är tillräckligt bra för att vinna dessa spel.
"Det är bara att ta upp vår detalj och vara klinisk och avsluta de möjligheter som vi får och i de senaste spelen har vi bara inte lyckats göra det."
Edinburgh kommer förmodligen att behöva vinna alla fem av sina återstående Pro12 matcher för att säkra en play-off plats, hävdar löshårig prop Alasdair Dickinson.