Ach ok.
Soweit ich weiß musst du das einfach mit Photoshop oder GIMP machen, danach kansnt du das entweder mithilfe eines Plugins als .ico speicerhn oder du speicherst als .jp0g oder was auch immer und nimst einen Converter(mittels Google findet man genug) um es in .ico zu verwanden.
Dann findest du das ding hier:
Rechtsklick auf den Ordner, Eigenschaften- Anpassen oben in den Tabs auswählen und dann in der Mitte: Eigenes Bild, oder Bild ändern nehmen, müsste auch gehen.
MFG