Como acessar o armazenamento interno do meu telefone via WiFi como uma unidade/pasta de rede no windows

Existem soluções SEVERAIS disponíveis ... é só uma questão de encontrar a que melhor se adapte às suas necessidades/preferências :

No meu telefone Android, tenho um ótimo pequeno aplicativo chamado Samba Filesharing (Samba Filesharing para Android - Android Apps no Google Play) ... ele me permite configurar tanto o armazenamento interno como o cartão SD como compartilhamento CIFS. Então no meu computador (Linux no meu caso) eu tenho duas entradas na fstab que fornecem os pontos de montagem automaticamente. Não tenho certeza qual SO você está usando, mas também fiz isso no Windows entrando no Windows Explorer e mapeando uma unidade de rede.

No caso do Linux, aqui estão minhas entradas na fstab:
//192.168.1.20/sdcard /home/michael/Internal cifs user,noauto,username=android,password=pa55w0rd,iocharset=utf8,dir_mode=0775,uid=1000 0 0

//192.168.1.20/share2 /home/michael/SanDisk32Gb cifs user,noauto,username=android,password=pa55w0rd,iocharset=utf8,dir_mode=0775,uid=1000 0 0

Para Windows, use \\server\ssharename como endereço de rede ao mapear uma unidade de rede.

BTW: note que eu mudei o nome de usuário padrão no aplicativo Samba Filesharing (android na fstab acima)

Editar 1: Eu acabei de reler a sua pergunta, e agora vejo que você está de fato usando Windows. Apenas desconsidere todas essas coisas sobre o Linux, mas vou deixar a informação lá no caso de alguém achar útil =)

Edit 2: Esqueci de mencionar que meu telefone também tem um endereço IP estático (do meu roteador). Isso facilita muito, porque você sabe que o telefone sempre terá o endereço SAME!