Python 爬虫-爬取阿里旅行特价机票信息(2)

2023-11-06 03:10

本文主要是介绍Python 爬虫-爬取阿里旅行特价机票信息(2),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

上接之前的(1)


数据分析

这里我查询的是 8月2号到 8月16号的特价机票信息,后面的那一串callback等可以不用改。网址在这里

从数据中可以看出来,需要的数据主要集中在 Key值为‘flights’的字典里,接下来要做的事情就简单了。

这里写图片描述

网页数据获取

首先留出填入起始时间和结束时间的接口,然后就要去打开相应的网址。通过urllib的urlopen函数,我们就获得了这个网址的json数据。
因为数据里包含了‘json1815’的数据。

虽然在写的时候发现好像是不用去处理的,但是出于懒惰就不去改代码了,顺便在这里小秀一下正则。

之后便通过json.loads,把字符串(str)转化成为 字典(dict)格式。然后直接去获取key为‘flights’的数据集即可。

def getdate(startdate, enddate):url = 'https://sjipiao.alitrip.com/search/cheapFlight.htm?startDate=%s&endDate=%s&' \'routes=BJS-&_ksTS=1469412627640_2361&callback=jsonp1815&ruleId=99&flag=1' % (startdate, enddate)price_html = urllib.urlopen(url).read().strip()pattern = r'jsonp1815\(\s+(.+)\)'re_rule = re.compile(pattern)json_data = re.findall(pattern, price_html)[0]price_json = json.loads(json_data)flights = price_json['data']['flights']  # flights Inforeturn flights

特价机票信息输出

按照字典里数据排列的方式,把数据按顺序打印出来即可。

# 输出所有航班信息
def print_all_trip(flights):for province in flights:print_trip(flights[province], province)# 输出目的地航班信息
def print_trip(flight, province):print '===============Province:%s===============' % provincefor f in flight:source = '从:%s-' % f['depName']dest = '到:%s\t' % f['arrName']price = '\t价格:%s%s(折扣:%s)\t' % ((f['price']), f['priceDesc'], f['discount'])depart_date = '\t日期:%s' % f['depDate']print source + dest + price + depart_date

整体代码调用

# -*- coding: utf-8 -*-
import datetime
import json
import urllib
import re
import sysdefault_encoding = 'utf-8'
reload(sys)
sys.setdefaultencoding(default_encoding)# 填上上面写的3个函数
# ...
# ...
# ...delay = int(raw_input('Enter the Day after: '))
today = datetime.date.today()
enddate = today + datetime.timedelta(delay)
endstr = str(enddate)
print str(today) + ' To ' + endstrflights = getdate(today, enddate=endstr)
print_all_trip(flights)

待加功能:
因为目的地不一定有特价机票,然而对应附近的城市可能会有。于是根据自己选定的目的地,来查询对应省份里其他城市的航班信息,支持多个省份一起查询。

这篇关于Python 爬虫-爬取阿里旅行特价机票信息(2)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:https://blog.csdn.net/VVBBBBB/article/details/52094985
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/354138

相关文章

Python调用Orator ORM进行数据库操作

《Python调用OratorORM进行数据库操作》OratorORM是一个功能丰富且灵活的PythonORM库,旨在简化数据库操作,它支持多种数据库并提供了简洁且直观的API,下面我们就... 目录Orator ORM 主要特点安装使用示例总结Orator ORM 是一个功能丰富且灵活的 python O

Python使用国内镜像加速pip安装的方法讲解

《Python使用国内镜像加速pip安装的方法讲解》在Python开发中,pip是一个非常重要的工具,用于安装和管理Python的第三方库,然而,在国内使用pip安装依赖时,往往会因为网络问题而导致速... 目录一、pip 工具简介1. 什么是 pip?2. 什么是 -i 参数?二、国内镜像源的选择三、如何

python使用fastapi实现多语言国际化的操作指南

《python使用fastapi实现多语言国际化的操作指南》本文介绍了使用Python和FastAPI实现多语言国际化的操作指南,包括多语言架构技术栈、翻译管理、前端本地化、语言切换机制以及常见陷阱和... 目录多语言国际化实现指南项目多语言架构技术栈目录结构翻译工作流1. 翻译数据存储2. 翻译生成脚本

如何通过Python实现一个消息队列

《如何通过Python实现一个消息队列》这篇文章主要为大家详细介绍了如何通过Python实现一个简单的消息队列,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录如何通过 python 实现消息队列如何把 http 请求放在队列中执行1. 使用 queue.Queue 和 reque

Python如何实现PDF隐私信息检测

《Python如何实现PDF隐私信息检测》随着越来越多的个人信息以电子形式存储和传输,确保这些信息的安全至关重要,本文将介绍如何使用Python检测PDF文件中的隐私信息,需要的可以参考下... 目录项目背景技术栈代码解析功能说明运行结php果在当今,数据隐私保护变得尤为重要。随着越来越多的个人信息以电子形

使用Python快速实现链接转word文档

《使用Python快速实现链接转word文档》这篇文章主要为大家详细介绍了如何使用Python快速实现链接转word文档功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 演示代码展示from newspaper import Articlefrom docx import

Python Jupyter Notebook导包报错问题及解决

《PythonJupyterNotebook导包报错问题及解决》在conda环境中安装包后,JupyterNotebook导入时出现ImportError,可能是由于包版本不对应或版本太高,解决方... 目录问题解决方法重新安装Jupyter NoteBook 更改Kernel总结问题在conda上安装了

Python如何计算两个不同类型列表的相似度

《Python如何计算两个不同类型列表的相似度》在编程中,经常需要比较两个列表的相似度,尤其是当这两个列表包含不同类型的元素时,下面小编就来讲讲如何使用Python计算两个不同类型列表的相似度吧... 目录摘要引言数字类型相似度欧几里得距离曼哈顿距离字符串类型相似度Levenshtein距离Jaccard相

Python安装时常见报错以及解决方案

《Python安装时常见报错以及解决方案》:本文主要介绍在安装Python、配置环境变量、使用pip以及运行Python脚本时常见的错误及其解决方案,文中介绍的非常详细,需要的朋友可以参考下... 目录一、安装 python 时常见报错及解决方案(一)安装包下载失败(二)权限不足二、配置环境变量时常见报错及

Python中顺序结构和循环结构示例代码

《Python中顺序结构和循环结构示例代码》:本文主要介绍Python中的条件语句和循环语句,条件语句用于根据条件执行不同的代码块,循环语句用于重复执行一段代码,文章还详细说明了range函数的使... 目录一、条件语句(1)条件语句的定义(2)条件语句的语法(a)单分支 if(b)双分支 if-else(