vicoliveres / ElPuntAvui
Article's authors
Scrapes www.elpuntavui.cat and www.elperiodico.com
El Punt Avui neix el 31 de juliol del 2011 de la fusió de dues capçaleres històriques: l'Avui (nascut el 1976) i El Punt (el 1979). El diari és líder de la premsa editada només en català.
Contributors
Last run failed
with status code 1.
Console output of last run
Injecting configuration and compiling...
Injecting scraper and running...
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372389-operacio-contra-els-cdrs-per-les-mobilitzacions-de-setmana-santa.html', 'Ref': 1, 'Title': u'Operaci\xc3\xb3 contra els CDRs'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372500-sanchez-demana-permis-al-jutge-llarena-per-assistir-al-ple-del-parlament-aquest-divendres.html', 'Ref': 2, 'Title': u'S\xc3\xa0nchez demana perm\xc3\xads al jutge Llarena per assistir al ple del Parlament aquest divendres'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372478-l-alemanya-ska-keller-al-govern-espanyol-una-solucio-politica-no-es-possible-amb-gent-a-la-preso.html', 'Ref': 3, 'Title': u'Ska Keller, al govern espanyol: \xe2\x80\x9cUna soluci\xc3\xb3 pol\xc3\xadtica no \xc3\xa9s possible amb gent a la pres\xc3\xb3\xe2\x80\x9d'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372664-la-cup-es-reuneix-amb-puigdemont-a-berlin.html', 'Ref': 4, 'Title': u'La CUP es reuneix amb Puigdemont a Berl\xc3\xadn'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372491-la-mesa-posposa-el-debat-sobre-revocar-la-delegacio-de-vot-de-puigdemont.html', 'Ref': 5, 'Title': u'La Mesa posposa el debat sobre revocar la delegaci\xc3\xb3 de vot de Puigdemont'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372532-el-tribunal-constitucional-admet-a-tramit-el-recurs-d-empara-de-forcadell-i-simo.html', 'Ref': 6, 'Title': u'El TC admet a tr\xc3\xa0mit el recurs d\xe2\x80\x99empara de Forcadell i Sim\xc3\xb3'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372613-lamela-rebutja-assumir-la-causa-contra-els-mossos-de-lleida-per-l-1-o.html', 'Ref': 7, 'Title': u'Lamela rebutja assumir la causa contra els Mossos de Lleida per l\xe2\x80\x991-O'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372467-l-alcalde-de-molins-de-rei-es-nega-a-declarar-pel-seu-suport-a-l-1-o.html', 'Ref': 8, 'Title': u'L\xe2\x80\x99alcalde de Molins de Rei es nega a declarar pel seu suport a l\xe2\x80\x991-O'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372799-puigdemont-denuncia-davant-la-fiscalia-d-odi-l-home-que-va-desitjar-la-seva-violacio-a-preso.html', 'Ref': 9, 'Title': u'Puigdemont denuncia davant la Fiscalia d\xe2\x80\x99Odi l\xe2\x80\x99home que va desitjar la seva violaci\xc3\xb3 a pres\xc3\xb3'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372397-un-jutge-del-vendrell-insta-un-advocat-a-treure-s-el-llac-groc-per-poder-prendre-declaracio-al-seu-client.html', 'Ref': 10, 'Title': u'Un jutge del Vendrell insta un advocat a treure\xe2\x80\x99s el lla\xc3\xa7 groc'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372436-ignacio-gonzalez-nega-pressions-del-pp-en-les-adjudicacions-de-madrid.html', 'Ref': 11, 'Title': u'Ignacio Gonz\xc3\xa1lez nega pressions del PP en les adjudicacions'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372484-casado-es-defensa-i-mostra-la-documentacio-del-master.html', 'Ref': 12, 'Title': u'Casado mostra la documentaci\xc3\xb3 del m\xc3\xa0ster'} ------------
{'Media': 'ElPuntAvui', 'Link': '/comunicacio/article/20-comunicacio/1372646-el-nou-president-de-l-ami-josep-maria-cervera-avui-dimarts-a-l-illa.html', 'Ref': 13, 'Title': u'El nou president de l\xe2\x80\x99AMI, Josep Maria Cervera, avui dimarts a \xe2\x80\x98L\xe2\x80\x99illa\xe2\x80\x99'} ------------
{'Media': 'ElPuntAvui', 'Link': '/territori/article/11-mediambient/1372674-dimecres-passat-per-aigua-segons-la-previsio-per-al-dimecres.html', 'Ref': 14, 'Title': u'Dimecres passat per aigua, segons la previsi\xc3\xb3 per al dimecres'} ------------
{'Media': 'ElPuntAvui', 'Link': '/punt-divers/article/4-divers/1372536-condemnen-a-penes-de-8-i-12-anys-de-preso-deu-gihadistes-que-planejaven-atemptar-contra-el-parlament.html', 'Ref': 15, 'Title': u'Condemnen a penes de 8 i 12 anys de pres\xc3\xb3 deu gihadistes que planejaven atemptar contra el Parlament'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372464-el-ple-de-barcelona-tomba-la-connexio-del-tramvia-per-la-diagonal.html', 'Ref': 16, 'Title': u'El ple de Barcelona tomba la connexi\xc3\xb3 del tramvia per la Diagonal'} ------------
{'Media': 'ElPuntAvui', 'Link': '/societat/article/5-societat/1372461-denunciat-a-tarragona-per-circular-amb-el-cotxe-de-manera-erratica-i-gairebe-triplicar-la-taxa-d-alcoholemia.html', 'Ref': 17, 'Title': u'Denunciat a Tarragona per circular amb el cotxe de manera err\xc3\xa0tica i gaireb\xc3\xa9 triplicar la taxa d\xe2\x80\x99alcohol\xc3\xa8mia'} ------------
{'Media': 'ElPuntAvui', 'Link': '/societat/article/5-societat/1372485-destapen-un-frau-de-mes-de-15-milions-d-euros-a-la-seguretat-social.html', 'Ref': 18, 'Title': 'Destapen un frau de '} ------------
{'Media': 'ElPuntAvui', 'Link': '/societat/article/5-societat/1372388-mes-de-deu-detinguts-en-una-operacio-de-la-guardia-civil-contra-el-trafic-de-drogues-i-el-blanqueig-de-capitals.html', 'Ref': 19, 'Title': u'M\xc3\xa9s de deu detinguts en una operaci\xc3\xb3 de la Gu\xc3\xa0rdia Civil contra el tr\xc3\xa0fic de drogues i el blanqueig de capitals'} ------------
{'Media': 'ElPuntAvui', 'Link': '/politica/article/17-politica/1372386-foment-nomes-executa-un-10-de-les-inversions-urgents-promeses-a-rodalies-per-2014-2016.html', 'Ref': 20, 'Title': u'Foment nom\xc3\xa9s executa un 10% de les inversions urgents promeses a Rodalies per 2014-2016'} ------------
{'Media': 'ElPuntAvui', 'Link': '/punt-divers/article/4-divers/1372005-diuen-que-no-sabien-que-cultivaven-droga-a-casa.html', 'Ref': 21, 'Title': 'Diuen que no sabien que cultivaven droga a casa'} ------------
Traceback (most recent call last):
File "scraper.py", line 66, in <module>
scrape_and_look_for_next_link(starting_url)
File "scraper.py", line 64, in scrape_and_look_for_next_link
scrape_mainpage(root)
File "scraper.py", line 38, in scrape_mainpage
articlehtml = requests.get(urllink, verify=False)
File "/app/.heroku/python/lib/python2.7/site-packages/requests/api.py", line 72, in get
return request('get', url, params=params, **kwargs)
File "/app/.heroku/python/lib/python2.7/site-packages/requests/api.py", line 58, in request
return session.request(method=method, url=url, **kwargs)
File "/app/.heroku/python/lib/python2.7/site-packages/requests/sessions.py", line 508, in request
resp = self.send(prep, **send_kwargs)
File "/app/.heroku/python/lib/python2.7/site-packages/requests/sessions.py", line 618, in send
r = adapter.send(request, **kwargs)
File "/app/.heroku/python/lib/python2.7/site-packages/requests/adapters.py", line 508, in send
raise ConnectionError(e, request=request)
requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.elperiodico.comhttp', port=443): Max retries exceeded with url: //www.lesportiudecatalunya.cat/barca/article/1372314-que-no-hi-hagi-cap-ensurt.html (Caused by NewConnectionError('<urllib3.connection.VerifiedHTTPSConnection object at 0x7fbda90c5890>: Failed to establish a new connection: [Errno -2] Name or service not known',))
Data
Downloaded 0 times
To download data sign in with GitHub
rows 10 / 38
| Link | Media | Title | Ref |
|---|---|---|---|
|
/politica/article/17-politica/1361937-el-ple-d-investidura-de-turull-a-les-5-de-la-tarda.html
|
ElPuntAvui
|
El ple dâinvestidura de Turull, a les 5 de la tarda
|
1
|
|
/politica/article/17-politica/1361379-el-govern-espanyol-amenaca-turull-que-segons-que-faci-tornara-a-la-garjola.html
|
ElPuntAvui
|
El govern espanyol amenaça Turull que segons què faci tornarà a la garjola
|
2
|
|
/politica/article/17-politica/1361483-joan-tarda-es-pot-temer-tot.html
|
ElPuntAvui
|
Joan Tardà : âEs pot témer totâ
|
3
|
|
/politica/article/17-politica/1361463-puigdemont-increpat-a-ginebra-esta-prohibit-votar-d-acord-es-per-aixo-que-volem-marxar-i-fer-una-republica.html
|
ElPuntAvui
|
Puigdemont increpat a Ginebra: âEstà prohibit votar? Dâacord, és per això que volem marxar i fer una República!â
|
4
|
|
/politica/article/17-politica/1361955-sarkozy-inculpat-per-financament-il-legal-i-en-llibertat-provisional.html
|
ElPuntAvui
|
Sarkozy inculpat per finançament il·legal i en llibertat provisional
|
5
|
|
/comunicacio/article/20-comunicacio/1361963-les-turbolencies-del-suprem-obre-el-debat-a-l-illa.html
|
ElPuntAvui
|
Les turbolencies del Suprem obre el debat a âLâillaâ
|
6
|
|
/politica/article/17-politica/1361355-intenten-entrar-a-la-casa-de-la-republica-de-waterloo-vestits-de-guardies-civils.html
|
ElPuntAvui
|
Intenten entrar a la Casa de la República de Waterloo vestits de guà rdies civils
|
7
|
|
/politica/article/17-politica/1361360-santamaria-es-vanta-d-haver-fet-260-cessaments-amb-el-155-per-demolir-les-estructures-d-estat.html
|
ElPuntAvui
|
SantamarÃa es vanta dâhaver fet 260 cessaments amb el 155 per âdemolir les estructures dâestatâ
|
8
|
|
/societat/article/5-societat/1361480-la-fiscal-del-cas-noos-retreu-als-governs-balear-i-valencia-arbitrarietat-per-adjudicar-projectes-a-urdangarin.html
|
ElPuntAvui
|
La fiscal del âcas Nóosâ retreu als governs balear i valencià âarbitrarietatâ per adjudicar projectes a Urdangarin
|
9
|
|
/societat/article/5-societat/1361646-psc-units-vol-que-el-parlament-insti-el-govern-espanyol-a-intervenir-a-favor-de-proactiva-open-arms.html
|
ElPuntAvui
|
PSC-Units vol que el Parlament insti el govern espanyol a intervenir a favor de Proactiva Open Arms
|
10
|
Statistics
Total run time: 1 minute
Total cpu time used: less than 10 seconds
Total disk space used: 43.4 KB
History
-
Manually
ran
revision
2b682d22
and
failed
.
21 records added in the database43 pages scraped
-
Manually
ran
revision
2b682d22
and
failed
.
17 records added, 17 records removed in the database35 pages scraped
-
Manually
ran
revision
8a1a2d56
and
failed
.
17 records added in the database35 pages scraped
- Created on morph.io