个人利用Python爬虫技术怎么挣钱-10万被动收入

Python爬虫 2018-12-02 1:36:20 阅读(203108) 评论(32)

我利用Python爬虫技术年挣10万被动收入的方式,在正式聊Python爬虫技术之前,先来说说挣钱的事,说说作为一个自由职业或兼职者怎么利用爬虫来挣钱。

个人利用python爬虫如何挣钱

个人爬虫挣钱方法大致如下

爬虫技术挣钱方法1:接外包爬虫项目

这是网络爬虫最通常的的挣钱方式,通过外包网站,熟人关系接一个个中小规模的爬虫项目,一般向甲方提供数据抓取,数据结构化,数据清洗等服务。

各位新入行的猿人看官大多都会先尝试这个方向,直接靠技术手段挣钱,这是我们技术人最擅长的方式,但是竞争也是最激烈的,外包接单网站上的爬虫项目已经被砍到了白菜价,因为项目竞价的人太多。接外包的地方在国内有猪八戒网,a5外包等,国外有freelancer,freelancer上挣的是美刀,看官要接外包可以试试,不过要跟印度阿三竞争。美国学生也懒,老猿09年接触freelancer时,上面还有美国学生python作业没完成,在freelancer上花60美刀找人帮忙做作业。

做外包越来越难,做的人太多,网上能接爬虫外包的人从在校大学生、两鬓白发的老猿,到几个人团队作战都在抢几千元一个的项目,交付时间又很紧,你如果没有客户资源,现成的解决方案,和稳定,高效率的爬虫技术来支撑,是抢不到好单的。

不过有一个方向从老猿10年前知道开始,到现在的观察来看都还有钱途,就是写发贴机。老猿对发贴机一直记忆犹新的原因是刚工作那会在freelancer上了解到一个老外靠写发贴机,一年挣了50万。

什么是发贴机?就是自动往论坛,社交媒体自动发帖子,发评论等,甲方通常使用发贴机在大量的网站上使用大量的账号灌水,去达到甲方的商业目的。这是一个体力活,你要研究大量网站的登陆流程,发帖流程,网站一改版,你就又要重写流程,现在发贴机任然有市场,不过现在对登陆限制,发帖限制等反爬措施都比以前先进很多, 写一个好的稳定的发帖机很难。

 

爬虫技术挣钱方法2:整合信息、整合数据做产品

简单说就是抓取分散在各个角落的信息,整合后用网站或微信或APP呈现出来,以通过网盟广告,电商佣金,直接售卖电商产品或知识付费来变现。

别被产品这个词吓到,一个技术人员通过自学开发一个简单的网站,APP,小程序,直接使用wordpress,或者接入别人的电商系统不是难事。关键是需要一些运营技巧,这方面个人站长是做得最好的,自己摸索运营方法,自己还学习技术开发。咱们技术人员也要了解运营和产品知识。

有句话叫着:流氓不可怕,就怕流氓有文化。 我想说的是:技术不可怕,就怕技术懂运营。(哎,不押韵啊!)

在当下互联网和移动互联网盛行的时代,作为技术人也要去了解和明白运营技巧,在公司里你能更好跟产品和运营沟通,也会有更多的晋升空间;作为自由职业者和创业者就更加需要。(跑题了)

关于信息整合,数据整合老猿在《爬虫是如何成就了这些商业公司的》中提到的去哪儿和天眼查这两家公司是比较典型的,去哪儿是整合各家航空公司的机票价格,方便用户比对哪个航班的价格便宜;天眼查是整合各个省市的企业工商信息,提供多纬度的企业信息,股东信息查询,节省了用户不少时间。

机票信息和工商信息在没有这两家公司之前也都是存在的,但是都散落在不同的网站上,用户查询时就比较费劲,这两家就是把这些信息抓取,处理,聚合到一块来提供查询服务。
你整合后的信息要能提高用户的使用效率才有价值。

类似的还有商标查询,专利查询这些,现有的都很难用,你可以从商标局中把几千万个商标抓取出来,提供一个更好的查询网站或者小程序,每天都会有不错的流量。

别以为这些没有机会了,告诉你,老猿在17年还抓了几千万家企业工商信息做成一个网站薅SEO流量,每个月还能带来小几千元的网盟收入。
当然这些你要去了解一些流量技巧,社群运营技巧等,我相信猿们周末少花些时间去研究片子,研究妹子,用点时间在学习上肯定手到擒来。

提醒:抓取的数据如果要商业化,要小心知识产权问题噢。
还要提醒一点:抓取和处理这些数据的代价要小于人工处理的代价,使用爬虫代替人工才有价值。

 

爬虫技术挣钱方法3:做自媒体,做知识社群

这是随着微信兴起,移动支付兴起后的一个方向。当你具备了扎实的编程功底和实战经验后,无论是想塑造个人品牌还是做自媒体谋生,对外输出技术文章,这是当下一个不错的选择,比如老猿就在尝试做猿人学,呵呵。做自媒体写文章贵在坚持,不要担心笔杆子功夫不行,老猿这篇文章写到这里花了两天8小时,见笑了。做自媒体不敢写得太多,因为鄙人也是在学习中,但是我相信做永远比不做好。

 

爬虫挣钱方法4:做决策的数据依据,比如买卖股票

首先,买卖股票有风险,这里不提倡噢。老猿在17年买美股,用8万本金,半年后翻到24万,操作太激进后来在2周内本金只剩3万,哭到在厕所。

针对C端用户的互联网公司的产品在社交媒体上大都会被热烈讨论,这些产品卖的好还是不好,可以通过抓取社交媒体上的用户讨论来分析。
比如苹果最近发布的iPhone XS,iPhone XR(写这篇文章的时间点是2018年10月30日),可以通过抓取微博上最近发微博的用户设备情况来观察新款iPhone在中国的销售情况,还可以跟iPhone以前每款新品上市时,那时的用户发微博设备情况来对比,是比以前卖的好还是差。
一点浅见,不要轻易入市,风险较大。

本来写了第5点,但是有些灰产,跟正能量不相符,还是删掉。

 

我的更多Python爬虫挣钱文章:

利用爬虫挣钱系列2-细说数据整合

爬虫挣钱系列:数据整合之–结构化人名的机会

再续利用爬虫技术结构化人名的机会

(完结篇)结构化人名挣钱第三篇

挣钱系列-写独立技术博客挣被动收入

挣钱系列:做网站挣网盟广告的偏门

个人博客如何获取SEO流量

说下我用Python分析美股财报的事

做百度联盟也能年挣10万被动收入

 

用爬虫挣钱就先说这么多吧,我们进入正题,下一篇讲:
什么是网络爬虫

猿人学banner宣传图

我的公众号:猿人学 Python 上会分享更多心得体会,敬请关注。

***版权申明:若没有特殊说明,文章皆是猿人学 yuanrenxue.con 原创,没有猿人学授权,请勿以任何形式转载。***

说点什么吧...

  1. 1楼
    nike 5年前 (2018-12-05)

    想知道第5点~~

    • 回复
      王平 5年前 (2018-12-05)
      回复 @nike :不敢说。。。。
  2. 2楼
    优酷 5年前 (2018-12-19)

    “抓了几千万家企业”,能不能少吹点,全中国有多少企业希望你有点数

    • 回复
      王平 5年前 (2018-12-19)
      回复 @优酷 :那你真是你不识数
      • 匿名 2年前 (2022-03-21)
        回复 @王平 :17年中国企业数在22万左右
      • 王平 2年前 (2022-03-24)
        回复 @ :你这个完全错误
  3. 3楼
    小燃燃 5年前 (2019-02-27)

    去哪里找项目赚钱,找不到给钱给我的人呀

    • 回复
      王平 5年前 (2019-03-01)
      回复 @小燃燃 :我也同求。。。
  4. 4楼
    匿名 5年前 (2019-03-04)

    唯独对第五点感兴趣

    • 回复
      王平 5年前 (2019-03-05)
      回复 @ :唯独第五点不能说
  5. 5楼
    赚不到钱 5年前 (2019-03-12)

    会简单爬虫,以帮一个公司写xpath, 现在没事做了

    • 回复
      王平 5年前 (2019-03-13)
      回复 @赚不到钱 :那还需要继续精进噢
  6. 6楼
    懒虫 5年前 (2019-03-20)

    灰色的获利才大——当然风险高,一不小心就可能越界进去蹲了

    • 回复
      王平 5年前 (2019-03-20)
      回复 @懒虫 :是的,毕竟挣钱的路子都写在刑法里面了。哈哈
  7. 7楼
    spider 5年前 (2019-05-01)

    博客用什么搭的?wordpress

    • 回复
      王平 5年前 (2019-05-02)
      回复 @spider :想节省时间的话,wordpress确实方便不少,你的精力主要放在做内容和运营上
  8. 8楼
    bob 5年前 (2019-05-07)

    技术变现真的很重要,感谢楼主提供一些思路,最近也在想这方面的问题

    • 回复
      王平 5年前 (2019-05-07)
      回复 @bob :是呀,做技术的能写代码,能做出东西,主要缺一个思路和运营技巧
  9. 9楼
    V 5年前 (2019-06-27)

    想知道第五点,用二进制写出来吧,哈哈

    • 回复
      王平 5年前 (2019-06-28)
      回复 @V :前面的四点不吸引人么,哈哈
  10. 10楼
    来自兵库北的盛世美颜 5年前 (2019-07-13)

    最近准备花精力学爬虫,支持一下老猿

  11. 11楼
    好吃懒做的小伙 4年前 (2019-10-30)

    支持下平叔:D ,一直以来都觉得自己还在学习,不敢写文章分享知识,也不太敢接触技术变现的事情。在平叔得到了点勇气

    • 回复
      王平 4年前 (2019-11-01)
      回复 @好吃懒做的小伙 :看来你藏了很多变现的事没去实施啊
  12. 12楼
    一粒盐 4年前 (2020-01-08)

    王老师,开发爬虫做整合信息的参考资料哪里能找到?

    • 回复
      王平 4年前 (2020-01-17)
      回复 @一粒盐 :我写了好几篇文章,你找找
  13. 13楼
    ddd 4年前 (2020-02-23)

    你总结的蛮好的,但很奇怪你的网站里好像并没有网盟的广告啊?

    • 回复
      王平 4年前 (2020-02-25)
      回复 @ddd :这个网站不是用来做网盟的
  14. 14楼
    4年前 (2020-08-13)

    国内的外包网站好像没啥爬虫项目了啊。

    • 回复
      王平 4年前 (2020-08-13)
      回复 @我 :国内的白菜价
  15. 15楼
    匿名 3年前 (2021-09-14)

    向王平老师,爬虫先贤致敬,我是白小爬。

    • 回复
      王平 3年前 (2021-09-15)
      回复 @ :一起加油
  16. 16楼
    争取上岸 1年前 (2022-10-14)

    猿哥牛逼