На различните Windows наистина е малко по-различно, но като цяло това което търсиш трябва да се намира долу в дясно до часовника - при другите иконки.
За Windows 7 (мрежите с удивителен знак са без парола, Ad-hoc са мрежи създадени например от друг лаптоп... така може да се прави мрежа за мултиплеър на игри)

За Vista (цъка се на Connect to a network):

За XP иконката пак е едни синички компютърчета, и като се цъкнат излиза такова:


Ако имаш инсталирани драйвери+специален софтуер за wireless-а, този софтуер заменя този на windows, но нещата са аналогични - пак търсиш долу в дясно иконката за Wireless и цъкаш на нея за да видиш списъка с мрежите.
Възможно е обаче и да не виждаш такава иконка, ако компа ти не разполага с Wireless или той не е включен.