Hi,
also wenn der DB-MySql-Server läuft kannst du da auch drauf zugreifen über die gute alte Shell (Eingabeaufforderung heißt die glaube ich unter Windoof), ist aber sehr mühsam, deshalb nutzen die meisten phpmyadmin, da kann man sich einfach durch die DB klicken und muß nicht jeden Befehl eingeben. Aber wie du richitg erkannt hast, brauchst du einen Webserver dafür. Das dauert aber nicht 100h, sondern es gibt komplett fertig Installationspackete (apache, MySQL und phpmyadmin vorkonfiguriert), die mußt du einfach nur in c:/ entpacken oder manche haben für Windoof sogar ein richitg Installationsdatei, die man nur doppeltklciken muß (so wie die meisten es gerne haben)
Geh einfach mal googlen oder schau direkt bei apache.org bzw. php.net bzw. mysql.org