“航空企业与爬虫的战争：特价票的真相与内幕”

本篇文章3247字，读完约8分钟

冬天要来了

01票代野蛮生长的年代

改革开放初期，坐飞机对普通市民来说还是很少见的，坐飞机出行的人非常少，提高航班的乘坐人数是当时航空空企业的首要目标。 除了宣传活动以外，还出现了各种各样的代理奖励机制。 例如2002年左右，机票代理店享受3+x%的票价优惠模式。 业内人士表示，当时各大航空空企业为争夺旅客，远远超过代理公司官方规定的手续费，x部分最高可达17%以上。 此外，航空空企业很快将发放动态奖励、年终大奖等以激励门票费。

02是由于什么原因导致3-2-1-0%

乘其势，必将带来泰极生与否。 网上门票费的兴起，为顾客的移动提供了便利，也促进了灰产、黑产的泛滥。 没有资格的票借机会倒茶牟取非法利益，有资格的票则铤而走险，将客人的利益视为鱼肉。

各航空公司非常敏锐地发现了票价内在的违规现象，马克思说，人们奋斗赢得的一切都与他们的利益相关。 解铃必须系铃人。 于是，在年的各航空公司相继发生了同样的事件。 降低雇佣兵，禁止停业。

国航自年3月1日(销售日)起，不允许国内代理销售的bsp / b2b国际、国内门票作废，门票变更、提现、退票将根据购票条件进行，这将大幅增加机票代理的退票价格。

03明天的黄花

现在，航空公司早就把提升直航一代放在了最重要的点上。 在这样的需求下，去年2月4日，国有资产监督管理委员会将直销比率提高到50%，代理费按年降低50%等通知对航空公司来说如同甘露。

事实上，对于机票领域灰产黑产的现象，ota也深恶痛绝。 例如，阻止九航企业去哪里，李璠投诉假机票这两件事，违规操作给企业在网络上的形象带来了很大的负面影响。

为此，座位航程于年发布了《关于航班销售的重要通知》，并公布了供应商，也就是暂停销售机票代理商的年9月1日以后的指定航空空企业的国内机票。 这些航空空企业包括中国四大航空。 此后，许多代理商开始退出机票营销市场。

04返回到之前&rarr； 黑暗按钮&红色； 佣金和工资； 后向和后向； &hellip； &hellip；

至此，航空空企业重新控制了销售渠道，机票代理商走向没落。

从2002年开始，门票钱的黄金期逐渐成为过去。 以前带着暗扣就很滋润的票价们，虽然被航空公司严格控制，但现在只能靠越来越少的佣金维持。 今年，以为回头也是一条路的门票钱们，又遭受了巨大的损失，不得不自己探索新的道路。

为什么航空公司的网站爬虫呈逐年上升的趋势

遭遇几次倒霉事，之前流传的票价领域将逐渐冷却。 但是，对于和机票打交道的人来说，长时间处于的战场会后悔到放弃吗？

不能再用继续挖掘佣金的方法盈利了。 那么，那些环节能有机可乘吗？

01急剧增加的漏失现象

一家报纸采访国航旅客市场部发现了以下现象。

国航坐控中心的工作人员指着电脑屏幕，在北京飞往哈尔滨的某次航班的机票上，清楚地填写了上面的旅客姓名、机票号码、联系电话等。 但是机票号码的前三位不是国航的代码，也不是国内任何航空公司。 显然这位乘客不存在。 复印是胡说八道。

四川航空(/k0 )企业成都售票处主任表示，虚占席位，旺季越旺，航班越紧，虚占席位相对越多，虚占席位最后未售出，航空(/k0 )企业也未察觉，则

02耦合技术手段的虚占

世上没有无缘无故的爱和恨。

如果没有佣金，代理人和机票工作者每天都在考虑新的可持续快速发展的好处获得途径。 终于有了新的积分。 虚占席。

他们大量切割:①长时间热门路线的各舱位②座位数少的舱位③特价舱位④黄金周这样黄金时期的各舱位。

目的: 利用随时间推移的舱位价格变化盈利，或在自有平台上自主加价转售。

虚占席是在机票代理一词出现之后。 因为初期是为了确保一点团队机票的冗余，所以当时的现象也没有那么多。 但是，现在的首要目标和囤积后等待销售以实现利润最大化的现象是一样的，但体量和目的完全不同。

这些大量的操作不能用人工来诉求了。 因为网络爬虫技术对那些虚占座位的人来说就像宝藏一样。 因为爬行动物代替了95%的人工操作。

03人气爬虫类

要想通过虚占盈利，至少需要知道这些目标机票在哪里？ 什么时候出现？ 最晚的支付时间是？ 要避免收回扣留座位的机票吗？ 要解决这些问题，需要以下过程。

1 )活用各种爬行动物工具

浏览:恶意爬虫就这样偷看、爬、威胁你们公司的网站

2 )大量订购，在规定的时间内(各航线不同)不支付，将拦截的舱位放在ota、机票b2b上销售；

3 )在规定的时间内卖不出去，订单被取消之前，订单到期之前马上追赶另一个订单，继续占位置

4 )如果销售成功，可以取消原占位符的机票，通过顾客的身份新闻订票。

从虚构到变卖的过程不多也不复杂，但要形成暴利，就需要多次重复这样的过程。 这个批量操作需要大量的交互窗口和大量的跟踪工具的操作，导致人力物力上升，最后赔钱赚不到吆喝。

怎么办？ 幸运的是，所有人都是产品经理。 他们有高度自动化的工具，专门比较压位、追位。

这是我们在网上发现的与某航空空企业进行比较的自动爬虫工具，它实现了以下目的:

多线程自动登录

实时获取特价机票新闻

匹配后自动下单

人气，特价机票追踪

其实，航空公司的风力控制技术部门很快就会抓住采用工具的人们。 他们的特点是ip来源单一，频率太高，爬虫被识破的同时会被禁止。

所谓道高一尺魔高一丈，只要有一点希望，产品经理就不会放弃。 他们利用各种资源，如购买或租赁的云室、idc的ip资源、甚至路由器进行改造，成为买家购买房子后直接向他们服务的爬虫物种等。

目的: 将单个ip的访问行为稀释为千万个IP 。

科技风险信息专家笑着分析了有年的三个月爬虫源的分布图，也解释了这些。 他们分布非常广泛，呼叫顺序也可以不规则。

如上所述，对于完整的风控系统来说，仅从访问频率、用户代理观测的立场来看，无疑不是最全面的风控维度。

/ S2/]拉丝剥茧看爬行动物

反爬虫的技术层出不穷，反爬虫的技术也日新月异，风险黑名单可能是很多风俗管理部门使用的方法，但有这样的局限性，从行为轨迹和顾客画像的角度来看，无疑是风俗管理的大趋势。

与航空公司爬虫相比，目前最紧迫的是，黑代理将ip分散到世界各地，以避免绕过访问频率的监控，我们将通过越来越多的路径实时访问流量，从而获得越来越多的价值 (前提: APP，绝对不允许在web上添加代码。 大型企业非常重视这些)。

01访问要素的丰富性

的客户在打开网页时会访问比较丰富的地址，但自动爬虫一般只访问少数固定页面，如航空公司的活动特别版、舱位价格页、航线动态等。

照片是乔安科技风控产品的监控接口

02访问轨迹的一致性

客户访问页面时，一般会有合理的访问轨迹，如从首页跳转到机票搜索等，但爬虫自动获取数据时，大多会逐一访问页面地址，没有一致的轨迹。 例如，第一次访问是登录页面，通常需要从搜索页面或广告页面跳转。

03访问静态资源的比例

爬虫通常只关注特定的副本和数据来获取数据，但不浏览图像或浏览页面上的css或js新闻。 这为风控平台提供了较大的评价因素。 关于这个不需要太多说明。

04点击间隔

爬虫获取页面新闻时，连续两个click的间隔过短，不符合合理人肉点击间隔，这是典型的人类评价机制。

由于篇幅有限，我只列举这些航空公司常见的风险特征。

总结。总结

入场券深如大海，从此节操行人。

对各航空空企业来说，爬虫只是风险的开始。 齐安科技安全专家james和bogomil通过调查表明，航空公司中存在新闻泄露、邮件轰炸、虚假登记、羊毛党、扫荡冲突库、密码回收等诸多风险问题。

对比航空公司的领域优势，乔安科技开发了warden (看门人)产品，通过大数据观察、风控专家梳理开发了航空旅行版业务风险决策系统，在各航空公司、ota相继被采用，并得到了非常好的反馈。

作者简介[/s2/]

(/S2 ) )岉安信息产品经理浩源，)/S2 ) ) 10多年的人机识别、风险信息拆解、黑产调查相关实务经验，主张在风险管理方面创新，主张互联网金融、支付、航空/(/K0/ )