python爬虫笔记--编码问题

 
 
 
 import urllib2
import urllib
import requests
from bs4 import BeautifulSoup
url = "https://sh.fang.lianjia.com/loupan/"
respones = requests.get(url).text
soup = BeautifulSoup(respones, 'html.parser')
info = soup.findAll('div', {'class':'resblock-location'}) #info----ResultSet object
for i in info:
# print i.text #'unicode' object 
# print i.text.encode('utf-8')#---- (转为utf-8编码
# c = i.text.split("/") #-----split()方法使用以后,变成list
    print i.text
    

       上为其中一项

    print  i.text.replace('\n', '').replace('/','') #也可使用re.sub 利用正则

 #但是print i.text.split("/"),控制台汉字显示为unicode编码,如下:

    print i.text.split("/")#-----list        split()方法使用以后,str变成 list


原因未知,先记下,下次解决再更新

原因:Python2.7中调用print打印变量X时,操作系统会对变量X做一定的字符处理:如果X是str类型的变量,则直接将X变量交付给终端进行显示;如果X变量是unicode类型,则操作系统首先将X编码成str类型的对象(编码格式取决于stdout的编码格式),然后再交由终端进行显示。在终端显示时,如果str类型的变量的编码方式和终端设置的编码方式不一致,很可能会出现乱码问题。在上面 print i.text 和 print  i.text.replace('\n''').replace('/','') 中,print将i.text等交给操作系统进行转码,编码成str类型,所以可以正常显示中文。而i.text.split()为一个列表,所以print会直接将结果输出,不会交给操作系统编码。

参考:https://www.cnblogs.com/litaozijin/p/6416133.html


 
 
 
 

猜你喜欢

转载自blog.csdn.net/qq_24568487/article/details/80368907