Gracias, estoy echándole un vistazo a cURL y depende de cómo lo vea me quedaré con él o tiraré por otras cosas que comentáis.
Tambien existe en python mechanize q te ayuda segun q situaciones para interactuar con la web en cuestion y junto con BeautifulSoup lo hace un pack bastante potente (tambien esta para ruby)
#29 nunca he usado scrapy xd le echare un ojo