艺海无涯,学无止境。欢迎一起探讨技术和人生,了解我

Python

Python

Python Scrapy随机选用user_agent爬取数据

   将以下代码加入到settings.py文件中 import random user_agent_list = [ "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.1 (KHTML, like Gecko) Chrome/22.0.1207.1 Safari/537.1", "Mozilla/5…

Python

scrapy抓取的中文显示Unicode的问题

   使用scrapy抓取的结果,中文默认是Unicode,无法显示中文。 中文默认是Unicode,如: \u5317\u4eac\u5927\u5b66 在setting文件中设置: FEED_EXPORT_ENCODING = 'utf-8'

Python

Python使用MongoDB写入数据

   先通过pip安装MongoDB,然后才能使用MongoDB数据库 from pymongo import MongoClient client=MongoClient('localhost',27017) #获取数据库名 db=client.NLog #获取Collection collection=db.Test #写入一条数据 collection.in…