python爬虫保存文件的路径(python爬虫数据存储)
python爬虫怎么把csv文件保存到指定路径
用控制台还真没试过，如果是用脚本来保存的话就是在open那里给定银改文件的绝对路径就可以了。如果是没用with的话，要记得把文件close掉孝搏粗，不然会占用系统资源的。
with open（" xxx/xxx/xxx. csv","w"）:
要输入的内巧镇容
4.python爬虫之新建 scrapy 爬虫项目(抓取和保存)
1.win10 下 win + r 打开cmd 切换新项目的目录
2.新建scrapy项目的命令:
可以利用pycharm 打开项目文件夹编辑项目
3.items.py
声明爬取的字段
4.新建scrapy 爬虫
用命令 scrapy genspider doubanmovie "movie.douban.com" 创建爬虫。
5.运行爬虫
5.1 创建运行脚本
(一)、在埋梁 scrapy.cfg 同级目录下创建 pycharm 调试脚本 run.py，避免每次运行爬虫输入密码,内容如下：
6.修改robottxt协议
修改 settings 中的 ROBOTSTXT_OBEY = True 参数为 False,因为默认为 True，就是要遵守 robots.txt 的规则， robots.txt 是遵循 Robot协议 的一个文件，它保存在网站的服务器中，它的作用是，告诉搜索引擎爬虫，本网站哪些目录下的网页不希望你进行爬取收录。在 Scrapy 启动后，会在第一时间访问网站的 robots.txt 文件，然后决定该网站的爬取范围。查看 robots.txt 可以直接网址后接 robots.txt 即可。
一般腔液尺构建爬虫系统，建议自己编写Item Pipeline,就可以在open(path)选择自己的保存路径
参考: # scrapy爬虫事件以及数据保存为txt,json,mysql
7.1保存为json格式时出现乱码的解决方式:
scrapy抓取豆瓣书籍保存json文件乱码问题
中文默认是Unicode,如:
\u5317\u4eac\u5927\u5b66
在setting文件settings.py中设置：
就伍高可以解决了
第二种解决办法
或在cmd中传入 -s FEED_EXPORT_ENCODING='utf-8'
参考:
Python爬虫
open是一个对象，这个对象以写入的方式打开
“/Users/michael/test.txt ”这个文件
with...as... 就是把open这个对象命名为f
再调用对象的write函数，轮渣顷并且写入Hello World这个梁巧字腊陆符串
修改储存地址的话直接修改“/Users/michael/test.txt”就好了
if 问题解决了：
采纳；
else：
追问；
python爬虫：如何爬网页数据并将其放在文本
用requests库
r=r.requests.get(url)
r.concent
保存到文件里就行了