urllib.request.urlopen() URLError

Question

Ich versuchte http://www.crummy.com/software/BeautifulSoup/

## all imports 
from IPython.display import HTML 
import numpy as np 
import urllib.request, urllib.error 
import bs4 #this is beautiful soup 
import time 
import operator 
import socket 
import pickle 
import re # regular expressions 

from pandas import Series 
import pandas as pd 
from pandas import DataFrame 

import matplotlib 
import matplotlib.pyplot as plt 
%matplotlib inline 

import seaborn as sns 
sns.set_context("talk") 
sns.set_style("white") 

from secret import *  
url = 'http://www.crummy.com/software/BeautifulSoup/' 
source = urllib.request.urlopen(url).read() 
print(source) 

zu öffnen, aber es einen Fehler zurückgegeben, ich habe um gesucht, aber konnte keine Lösung finden. Es funktionierte für andere Seiten.

SSLEOFError        Traceback (most recent call last) 
/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/urllib/request.py in do_open(self, http_class, req, **http_conn_args) 
    1253    try: 
-> 1254     h.request(req.get_method(), req.selector, req.data, headers) 
    1255    except OSError as err: # timeout error 

/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/urllib/request.py in do_open(self, http_class, req, **http_conn_args) 
    1254     h.request(req.get_method(), req.selector, req.data, headers) 
    1255    except OSError as err: # timeout error 
-> 1256     raise URLError(err) 
    1257    r = h.getresponse() 
    1258   except: 

URLError: <urlopen error EOF occurred in violation of protocol (_ssl.c:645)> 

Danke,

Answer 1

Die Tatsache, dass die Website http://www.crummy.com/software/BeautifulSoup/ auf https umgeleitet SSL auf Besuch erklärt, warum mit SSL etwas falsch gibt. Die SSLEOFError bedeutet, dass die zugrunde liegende SSL-Verbindung abrupt beendet wurde. Aufgrund der Tatsache, dass es in der Tat funktioniert für mich, sind Sie sicher, dass Ihr Netzwerk wie vorgesehen funktioniert? Sie befinden sich möglicherweise hinter einer Art Proxy, der Probleme mit SSL verursacht oder keine SSL-Verbindungen zulässt (z. B. aufgrund eines fehlenden Stammzertifikats, das es dem Proxy ermöglicht, die Verbindungen abzufangen).

Sie könnten auch versuchen, Zertifikate zu ignorieren, indem Sie eine benutzerdefinierte SSL-Kontext hinzugefügt (Python> = 2.7.9/3.4.3):

import ssl 

context = ssl.create_default_context() 
context.check_hostname = False 
context.verify_mode = ssl.CERT_NONE 

urllib.requests.urlopen("https://the.url/path", context=context).read() # ... 

Aber ich bin nicht sicher, ob das Ihr Problem löst weil der Fehler möglicherweise schon vor der Überprüfung von Zertifikaten auftritt (z. B. wenn ein potenzieller Proxy nur SSL-Verbindungen abbricht).

Seitennotiz/Empfehlung: Es gibt auch ein nettes anderes Python-Modul namens requests, das HTTP-Anfragen noch einfacher macht.