楼主: lovely_wolf
1068 1

[数据挖掘新闻] 《黑客新闻》数据分析:刷新我的认识 [推广有奖]

  • 0关注
  • 0粉丝

硕士生

55%

还不是VIP/贵宾

-

威望
0
论坛币
10 个
通用积分
0
学术水平
3 点
热心指数
3 点
信用等级
0 点
经验
1050 点
帖子
85
精华
0
在线时间
26 小时
注册时间
2015-5-5
最后登录
2015-6-28

楼主
lovely_wolf 发表于 2015-5-12 11:47:12 |AI写论文

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币

Robert. J. Moore

我是一家名为RJMetrics公司的创始人之一,我们公司主要开发那种能帮助互联网公司利用数据决策的软件,我本人也用RJMetrics的软件做各种各样的分析,但对这种工具也只懂些皮毛。如果你想了解我们的产品能帮你的公司做些什么的话,注册一下,可以免费试用30天。好了,废话不多说,言归正传。

几天前,我跟公司的另一位创始人Jake发了一顿牢骚:我的博文怎么都上不了《黑客新闻》(Hacker News)首页了。而通常情况下,尽管我发的东西套话连篇,但是因为我总是把一些从来没有见过的数据放进那个软件里分析,最后总能排到前面。

但最近我真是快无语了。我在TechCrunch上发了一篇关于新兴公司如何获取专利的文章,石沉大海。我写的关于Pinterest数据的文章,也没了消息。还有一篇风险投资协议共享内幕数据的文章……哎呀,说多了都是泪啊。

当然了,我有自己的一套理论来解释这背后的原因: Hacker News在走下坡路,越来越屈从于排名了,或者说,向主流靠拢了。而Jake像往常一样,给出了他自己不一样的解释:你写的东西太垃圾。

他说,现在内容质量的竞争越来越激烈,而我写的东西明显已经跟不上了。最后,我们选择了和往常一样来解决争议的方式:让数字说话。我用RJMetrics Dashboard里,回答了几个有关Hacker News演化、内容还有竞争的问题。

看看下面的数据:

Hacker News的新用户注册率在2010年呈现爆炸式增长,2011年该比率与2010年基本持平,2012年有所下降。

HN(Hacker News简写)的活跃用户总量持续增长,这是因为很多曾经的用户在注册后在HN上依然很活跃。

虽然该网站的用户数量不断增长,但是他们每周上传的稿件自2011年以来一直保持稳定。

如果你想得到好评,尽管使用污言秽语,而且要讨论新兴企业,远离大公司和那些耸人听闻的标题。

注册用户

HN的注册用户数量近年来增长迅速。但是,2011年每季度新用户注册量似乎波动不大,一直保持在一万左右,而且到2012年似乎有小幅下降。

看到新注册用户增长率的下降我颇感惊讶,这似乎与我之前“HN越来越主流”的认识有些矛盾。在我看来,这种趋势似乎暗示着市场已经饱和了。如果HN的用户基础一直都局限于每年新注册的那些“新兴企业技术怪咖”们的话,这个用户基础估计也不会有什么变化的指望了。

活跃用户

我们都明白,只看注册用户数量是很片面的,活跃用户才是一个网络社区的中坚力量。我搜集了一下每季度至少在社区中活动一次的用户(这里的活动统计仅仅包括上传的文章或者评论,因为我得不到具体的用户投票数据)。

目前大约有3万用户每个季度都会提交文章或者评论,是2008年末的7倍。就好比上一个季度,尽管这个社区有7700名新的注册用户,上传文章或者发评论的只有600个。

这表明,可能存在着大量潜水的新注册用户,他们只阅读帖子或者投票,所以用户活跃度才有所下降。也许断代分析能够在这方面给我们提供更多的信息。

HN断代分析

我用RJMetrics大概花了30秒的时间弄出了一张图表。它描述了自2008年以来,“Q1”这一群体中每年所发的文章和发的评论数量。

一下几个趋势值得我们注意:

1.           用户中大约有75%的人会在他们注册成为社区成员的第一个季度内就上传一篇文章或者发表一次评论。

2.           上述比例会在第二个季度降至30%-40%。

3.           在随后的几个月中,参与度会稳定在20%-30%,但是也可以明显看出,不同年份注册的人之间有显著区别。后一年的参与度往往回比前一年低3%-5%。

我之所以觉得这张表意义非比寻常,主要是基于以下原因。尽管新用户的参与度每年都在降低,但让我感到惊讶的是,每一个季度又会有不少用户重返社区,即使这时往往已经距离他们注册有好几年了。

如果你们有人认为保守派早已放弃了HN这个社区,那么这张图表足可以证明他们大错特错了。2008、2009、2010这几年的那些老用户的数量几乎没什么变化。

高度活跃的的用户

按季度来做这些分析,只能让我们获得一些低活跃度用户的信息,却顾及不到那些高度活跃的用户。我们很容易想象,一个用户是很有可能同时在社区中进行多项活动的。

为了进一步了解,随着一代一代的新用户的进入,那些高度活跃的用户是否在减少,我们研究了每一个季度中,在注册之后90天里至少进行过30次活动的用户所占的比重。

2009年以来,满足上述要求的新用户比重从4%-5%降低到了2%左右。再结合之前的断代分析,我们可以看出,一般而言,每一代的用户都要比上一代更加活跃,但参与却越来越不深入。

看到这里,我越来越担心,Jake的看法很可能是对的。但是,这些趋势虽然令人担忧,但却没有你想象得那么糟糕。为了得到更加准确的答案,我把自己的研究重点转移到了那些把我从首页踢走的文章内容上。

上传文章和投票的数量

HN首页上只显示30篇文章,从统计的意义上,新上传的文章是很难赶上那30篇的。但出人意料的是,在过去两年中,上传到HN的稿件数量基本稳定。

尽管用户数量在不断增长,在过去一段时间里,真正竞争首页那几个席位的文章数量却是相对稳定的。我想,这再一次说明,市场已经快要饱和了,因为真正跟这个网络社区相关的文章就那么多了(那些专发垃圾贴得网友已逐渐意识到,往社区里发一些不相干的链接根本无法提高浏览量)。还很有趣的一点是,你可以仔细观察一下每天的投票数量,趋势也大体相似。在过去的两年里,数量大体相同的文章在为总数相同的投票竞争着。至此,我认为Jake所谓的“竞争者数量在增加”的观点是错误的。那么,现在只剩下唯一的一个问题了:到底是我的文章质量下降了,还是整个社区的品味变差了?

分类绩效

接下来,我决定把数据库里地文章根据题目中的关键词分类。我根据这些文章所得积分来判断它们到底受不受欢迎。

我是根据以下几类名词划分的:大公司名称(比如Amazon、Google)、热门新兴企业(比如Pinterest、Instagram)、追求轰动效应的词汇(例如最好、最差、第一等)还有污言秽语(这些词往往很有爆点)。对了,并不是所有HN上的内容都能分在这几类中,而且上面文章的平均得分为11.

很显然,要想文章得到大家的喜爱,就要避免使用污言秽语,而且文章标题要显得坚决、有力度。很不幸的是,HN社区的整体品位在过去四年当中相对稳定。很难说人们越来越喜欢那些追求轰动效应的文章,也不能说人们越来越远离有干货的技术文章了。

文章网名称绩效

我看了一下2012年至少发了20篇文章的网域,并且分局每篇文章的得分进行了排名。

我也很好奇,那些很受欢迎的新闻网域名称到底绩效如何。

如图所示,来自主流技术博客,像TechCrunch和PandoDaily这样的,表现优于平均水平。像Mashable和 BusinessInsider这样的表现极差。更有趣的是,《纽约时报》位居榜首,而《华尔街日报》却屈居末流。这张图表至少能够说明,在HN社区里的人们看来,各家媒体的文章内容质量如何。

我到底了解了什么?

这次小小的探究可以总结为以下几点:

1.            从各方面的数字看来,HN并无太大变化。新的成员会填补离开老成员的位置,那些最活跃、最有热情的用户并未离开,每天都有数量大体相同的文章上传和投票。

2.            个别公司来来又去去。但是这个网络社区更在意的是那些编程行业、新兴企业和具有争议性的话题。

3.            一旦你进了这个圈子,差不多可以说你就无法彻底离开这个圈子了。在成为社区成员6个月后还会在逛逛这个社区的,差不多几年之后依然会回来逛逛。

既然如此,为什么我的文章要重返首页就这么艰难呢?是因为我文章的内容没有满足读者的需求(好吧我承认Jake是对的)。

我该怎样才能做得更好?

还记得我上面提到的那三篇烂成屎的文章吗?一篇是关于软件产权的,一篇是关于Pinterest数据的,还有一篇是关于风险投资协议的。

1.            HN并不关注Pinterest,标题中含有“Pinterest”的文章平均得分只有6分,是我所调研的诸多大公司中得分最低的之一。

2.            去年才是断代分析的巅峰。2011年含有这个词的文章平均得分为13,2012年只有5.

3.            尽管包含“收购”这样的关键词的文章一直都很赚分,“风险”二字已经不想它以前那么赚人眼球了,平均得分只有7分。

    事实证明,按照我的套路来目前是举步维艰了。我选错了主体。我需要一点灵感、一点创新,但是成功的关键并未改变。

想用自己的数据试试这些分析,或者别的?RJMetrics可以免费试用30天哦
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:数据分析 Dashboard interest Business metrics false Style 黑客

沙发
xuxinpeng45 学生认证  发表于 2015-5-12 12:00:15
remark

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群
GMT+8, 2026-1-8 11:51