2025年2024年Python 爬取任意指定城市的天气预报,腾讯面试编程题

2024年Python 爬取任意指定城市的天气预报,腾讯面试编程题一 Python 所有方向的学习路线 Python 所有方向路线就是把 Python 常用的技术点做整理 形成各个领域的知识点汇总 它的用处就在于 你可以按照上面的知识点去找对应的学习资源 保证自己学得较为全面 二 学习软件 工欲善其事必先利其器 学习 Python 常用的开发软件都在这里了 给大家节省了很多时间

大家好,我是讯享网,很高兴认识大家。

一、Python所有方向的学习路线

Python所有方向路线就是把Python常用的技术点做整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。


讯享网

二、学习软件

工欲善其事必先利其器。学习Python常用的开发软件都在这里了,给大家节省了很多时间。

三、入门学习视频

我们在看视频学习的时候,不能光动眼动脑不动手,比较科学的学习方法是在理解之后运用它们,这时候练手项目就很适合了。

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友,可以戳这里获取

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

先来爬取我们大苏州的,来瞅瞅大昆山的天气预报吧

from bs4 import BeautifulSoup as bs
from requests import get

Agent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36'

def weather(url):
    res = []
    try:
        data = get(url,headers = {'User-Agent':Agent})
        data.encoding='uft-8'
        soup = bs(data.text,'html.parser')
        city = soup.find('div',class_='crumbs fl').get_text().strip()
        List = soup.select("ul[class='t clearfix'] li")
        for li in List:
            try:
                data = li.select('h1')[0].text
                text = li.select("p[class='wea']")[0].text
                temp = li.findAll('span')[0].text + '/' + li.findAll('i')[0].text
                res.append((city.split()[-1],data,text,temp))
            except Exception as err: print(err)
    except Exception as err: print(err)
    return res


url = 'http://www.*.com.cn/weather/'
ext = '.shtml'

city = {'苏州':'101190401','昆山':'101190404','太仓':'101190408','常熟':'101190402','张家港':'101190403'}

#方法一:遍历已知的城市代码
suzhou = 101190401
for i in range(suzhou,suzhou+12):
    print(i,'\n',weather(url+str(i)+ext),'\n')

print('='*80)

#方法二:遍历事先做好的城市代码字典
for i in city:
    print(i,'\n',weather(url+city[i]+ext),'\n')


讯享网

返回的爬取结果:

‘NoneType’ object has no attribute ‘get_text’
   不存在的城市代码当然会报错
 []

‘NoneType’ object has no attribute ‘get_text’
 
 []

================================================================================
苏州 
 [(‘城区’, ‘1日(今天)’, ‘多云’, ‘/22℃’), (‘城区’, ‘2日(明天)’, ‘多云转晴’, ‘33℃/22℃’), (‘城区’, ‘3日(后天)’, ‘晴’, ‘33℃/23℃’), (‘城区’, ‘4日(周一)’, ‘晴’, ‘34℃/25℃’), (‘城区’, ‘5日(周二)’, ‘晴转多云’, ‘34℃/24℃’), (‘城区’, ‘6日(周三)’, ‘多云’, ‘30℃/23℃’), (‘城区’, ‘7日(周四)’, ‘多云转雷阵雨’, ‘31℃/24℃’)]

数据是有了,怎样更美化地输出需要另外的模块,先放一放。更为重要的问题是:怎样找到各城市的代码?比如,苏州对应的是  ,它之后的几个连续数字对应的是苏州辖内的各区和县级市。

网上很多文章都是爬取各省份的文字版网页( www..com.cn/textFC/jiangsu.shtml 等)中的城市代码,这样还不是很方便。

经过摸查了很多个网页,终于发现了一个网页中可查到城市代码:

其返回内容为:

讯享网{"status":"success","errmsg":"","timestamp":,"location":{"lng":120.,"lat":31.},"data":{"station":{"areaid":"","category":"city","namecn":"苏州","nameen":"suzhou","disticten":"suzhou","distictcn":"苏州","provinceen":"jiangsu","provincecn":"江苏"}}} 

参数字典中,lng:120.,lat:31. 两个参数正是苏州的经纬度。

解决的关键

先要查询到“任意指定”的城市或地址的经纬度,然后交由上述地址求得其中的 “areaid”,最后就能够从网页 www.*.com.cn/areaid+'.shtml’中爬取天气信息。

问题关键在于城市经纬度,这个可以提交给百度地图的免费api接口来获得:

http://api.map.baidu.com/lbsapi/cloud/geocoding-api.htm

api免费,但要注册才能有key,就看这个公开的好不好使了

任意指定城市

来尝试一把,浏览器地址输入以下地址获取城市的经纬度:

http://api.map.baidu.com/geocoder?address=南京市江宁区&output=json&key=37492c0ee6f924cb5e934fa08c6b1676

bingo! 百度地图这个公开的key居然还能用,返回的数据:

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友,可以戳这里获取

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

小讯
上一篇 2025-02-23 18:03
下一篇 2025-03-03 12:39

相关推荐

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/13737.html