Hoe haal ik data van een pagina op een site die beveiligd is met een username en password?

de enige manier om informatie van andere websites af te halen zonder inbreuk te maken op het intellectuele eigendom van de ontwikkelaar van die website is gebruik te maken van webservices van diverse websites.
zo kan je de API van twitter, facebook en google+ gebruiken.
andere manieren zijn een soort van diefstal tenzij je die website in een soort van iFrame opent en dus duidelijk laat zien dat je ergens anders zit in te loggen (vanwege phishing).
voorbeeld van gebruik van een api

$gebruikersNaam     =  naamvanhettwitteraccount’;
  $aantalTweetsTonen     =  5;
  $twitterFeed   =    ‘http://api.twitter.com/1/statuses/user_timeline/’.$gebruikersNaam.’.xml?count=’.$aantalTweetsTonen;

$twitterCurl =    curl_init();
              curl_setopt($twitterCurl, CURLOPT_URL, $twitterFeed);
              curl_setopt($twitterCurl, CURLOPT_RETURNTRANSFER, TRUE);
  $twitter   =  curl_exec($twitterCurl);
  $tweets   =  new SimpleXMLElement($twitter);

dit is een gedeelte van wat ik een keer in php heb gemaakt om tweets te tonen op een website van bepaalde gebruikersaccounts (een twitter/nieuwsfeed van de beheerder van die website).

Als de site waar je de data vanaf wilt halen deze data niet via een webservice aanbiedt, en de authenticatie niet via basic authentication loopt, moet je de login nabootsen via je script. Dat betekent dat je zelf een post moet doen naar de login URL, waarop je waarschijnlijk een cookie terugkrijgt. Dit cookie is het bewijs dat je ingelogd bent, en dat moet je dan weer meesturen bij de vervolgaktie, waar je de data ophaalt.

Als je zelf ook de eigenaar bent van de site waar de informatie op staat, moet je het eigenlijk netter oplossen met een webservice met basic authentication. Uit je verhaal neem ik aan dat dat niet zo is. Ik ga er vanuit dat je wel recht hebt op de informatie, omdat je anders de gebruikersnaam en wachtwoord niet zou hebben.