微信号:cgbigdata

介绍:在这个大数据的时代,大数据互联网大牛们将每日推送大数据相关资料,最新技术和资讯,层层干货喂饱你!

个人用大数据可以做哪些有趣的事情?

2019-04-08 13:38 达内java大数据培训

 Tips:Java大数据免费课程报名中,点击文末阅读原文抢!


初级版    

搜集数据  

1注册大量账号来抽奖


2011年,李德还在学校读书,微博抽奖活动多如牛毛。于是他写了个软件注册了几十万个新浪微博账号。(那时候还不要求实名制)。


然后他写了几个爬虫软件从搜狐微博上爬昵称用来更新新浪微博上的昵称,从大V的粉丝中爬他们的头像用来更新自己的微博头像,从笑话微博中爬微博内容来发到自己微博中。


然后用这几十万个微博账号去参与抽奖,一年获利了七万多元。读书那几年他承包了他们宿舍所有的水电费和他们班男生宵夜费用。


2自己写程序招聘


创业公司对于招聘总是很头疼的。技术牛人熊节另辟蹊径。


他在为ThoughtWorks组建成都分公司团队的时候,发愁正统招聘方法太慢了。熊节觉得一个好的程序员应该读过那20本好书 ——《重构》《精益创业》《敏捷软件开发》《测试驱动开发》等等。


于是,他花了几个晚上用自己高中自学的水货代码水平写了一个程序,去抓取豆瓣上读过这些技术书籍的人。然后不断递归,再抓到这些人都读过其它什么书,再继续抓读过那些书的人。


抓了几万人之后,他再用Hadoop来分析,筛选出了几十个技术大牛。把这些大牛的豆瓣账号扔给了公司女HR,让HR去一个个发豆邮勾搭。



进阶版

计算分析  


3用大数据技术找到爱情


美国波士顿数学家克里斯·麦金利注册一个婚恋网站后,认为他们的配对模式不合适,于是他自己写程序,只花了不到90天时间就在茫茫人海中找到了心仪的对象。


这位数学家开设了12个账户,利用计算机程序随意作答网站的配对问卷,从2万名用户中收集到600万条问题的答案,然后利用演算程序筛选出5000名住在美国的活跃用户,从中按性格分类又选出最符合择偶条件的两组女子。


之后麦克金雷又创建了两个账号,诚实地回答这两类姑娘们最关注的500个问题。回答完问题后,他发现和自己匹配度在90%以上的超过10000人,最高匹配度达到了99%。


为了获得这些姑娘们的关注。麦克金雷编了一个新程序,自动访问与他匹配度高的对象,对方回访他的页面时,就会给他留言。然后再约出来见面,他最终成功在这些人中找到了另一半,这个姑娘和他的匹配度是91%。


高级版

改变社会


4找到纽约最差的停车位


在纽约,停车难众所周知,而且纽约违章停车罚款很严格,纽约市的金融部门每年从罚单中收款约为6亿美元。


为了发现为什么有这么多的罚款,美国数据分析师本▪威零顿利用纽约市消防笼头的地图和政府公开的停车违规的罚单信息找出了纽约最容易吃到违章停车罚单的停车位。


他做出了一张前250个迟到最多违章停车罚单的消防栓位置图。



得出的结论是1、别在上东区停车,千万别停,因为不论在哪儿都会吃罚单。2、他找出了全纽约市最容易迟到违章停车罚单的两个消防栓的位置。都在上东区,每年能在罚单上创收5万5千多美金!


他认为这是很奇怪的一件事,5万5千多美金!为什么别人都会在那里犯错!所以他深入挖掘了一下原因,因为每一个消防栓有一个叫做扩展区域的地方可以用来走路,然后是一个停车位。所以司机开到这里来的时候认为“还有一段距离,这里没问题”,何况地上还有一个停车位。但纽约警察局不认可这个停车位,还是会给他们罚单。


他把这个情况反馈到自己的博客上,收到了交通部门很官方的回复,但是几周后,他发现这个停车位真的被重新画了。因为这个发现,将为很多市民们省下罚金。


大数据是现在最高薪、最热门的技术,你还不赶快学起来?

如果你想学习Java大数据,欢迎来达内学习。我们的课程从Java入门,一直到大数据实战项目,让你快速掌握企业所需大数据前沿技术,帮你在5个月内高薪入职名企。

💗

  • 学大数据好找工作吗?

  • 大数据工程师能赚多少钱?

  • 0基础能学大数据吗?

Java大数据免费试听课4月13-16日开课!一线名师授课、全国45个城市200个校区就近试听,也可在线试听。长按二维码或点击页面底部「阅读原文」报名,更多问题加QQ2105684008咨询。

▼ 推荐阅读

↓点击阅读原文预约Java或Java大数据免费试听课程

 
达内java大数据培训 更多文章 分享图片 分享图片 分享图片 大数据工程师的工作内容有哪些?都需要学什么技术? 达内Java大数据1903期开班:转行学技术、拿高薪改变人生!
猜您喜欢 Falcon 存储优化: 高性能内存 TSDB 的诞生 类加载器与类的热替换(Hotswap) 不要怀疑,你遇到bug时肯定也这样 如何为 Python 添加远程调试能力而不修改系统代码 Facebook 2015年的开源成绩单