面试必读：一起参与，福利放送：数据科学家的product sense哪里来Case Studies

考虑了一下作为新人，product sense, business acumen 从哪里来，这个纯属个人体验，没有绝对对错，大家讨论评价吧。

数科的product sense

1 先是大面上：你需要理解这个产品，你最好经常用这个产品，知道大体上它是做什么的，有什么功能，谁会去用它，大体的business model什么样，产品最需要取悦谁？怎么做到的？什么因素会影响用户的满意度，回头率或者retention rate/churn?
其实大部分常见产品可能google一下都能有答案。关键是你要想到去这么“想”

大家一起来做题训练：举例：MITBBS这个网站，怎么回答上述这些问题？

用户有：
潜水的大多数（提问：大约什么比例的用户会发帖？how would you measure it?）
发帖的小小部分
广告商（提问，你估计一下大概广告费用是多少？他们的费用是怎么决定的？）
jiaoyou8用户（这些人跟MIT注册用户是同一批人吗？什么比例在交友有账号？什么比例有收费账号？他们里面转化率如何？他们一般缴费多久？life time value如何计算？etc）

2 你认为网站可以收集什么数据？应该收集什么数据？收集了然后怎么用来回答类似这样的问题：

您好！
本帖隐藏的内容需要积分高于 155 才可浏览
您当前积分为 0。
使用VIP即刻解锁阅读权限或查看其他获取积分的方式

游客，您好！
本帖隐藏的内容需要积分高于 155 才可浏览
您当前积分为 0。
VIP即刻解锁阅读权限 或 查看其他获取积分的方式
Unlock interview details and practice with AI
Curated Interview Questions from Top Companies

3 假设你提出了改进产品的方法，需要做实验来验证，如何设计这个实验？

继续用MIT例子，想知道首页广告条数多少条能最大化广告收益，怎么设计？随机对照怎么allocate? 怎么计算metric? 怎么衡量你看见的结果是否可信？

4 什么情况下你说的数据可能会出错？你用什么信息还衡量是否出错了？如果错了你怎么去调查错在哪里？
5 补充一点，面试结尾如何提问？我一般会问对方，

您好！
本帖隐藏的内容需要积分高于 188 才可浏览
您当前积分为 0。
使用VIP即刻解锁阅读权限或查看其他获取积分的方式

游客，您好！
本帖隐藏的内容需要积分高于 188 才可浏览
您当前积分为 0。
VIP即刻解锁阅读权限 或 查看其他获取积分的方式
Unlock interview details and practice with AI
Curated Interview Questions from Top Companies

6 同意MITBBS songkun的说法，我自己面的好多中国学生也完全是这样，经常是well defined question非常会回答，但是embed到产品问题里面就迷糊了。你如果直接问什么什么分布要怎么计算mean and variance，i.e已知问题去求解，绝大部分的人肯定都会。但是工作里面问题几乎从来不是这么清楚定义好的。的的确确你需要自己去“建模”，就是把实际问题用数学和统计模型表示出来，然后再去求解。求解过程当然你必须能自己取下需要的数据，最好是清楚知道什么什么分布，什么什么hypothesis,然后具体怎么test往往问题就不大，假定你的统计有好好学过。哪怕不知道，你知道自己不知道，然后知道去问自己组里的谁，也成啊。。。当然如果“不知道自己不知道”然后瞎fit的人也有，尤其是某些专业的。。。。

用错一个test的结果可能不是致命的，也许你的结果会less conservative or more conservative。但是没有找到正确的问题，你用什么正确的test都白搭。

统计人我们都知道type I and type II errors. 这里借用一个说法：type III error: http://en.wikipedia.org/wiki/Type_III_error Fundamentally, Type III errors occur when researchers provide the right answer to the wrong question.
http://www.hisa.org.au/resource/ ... rof_Terry_Speed.pdf
引用Terry Speed的一句： Perhaps we prefer to be precisely wrong than approximately right.

这个在工业界是不行的。
我想不是国人不善于这种思路，的确是平常没有得到足够锻炼。看见技术一般但是就“NM能说"的老外能上位我也觉得很不平。

希望本文对数科人有所帮助。

==================
以上这些其实也没有太多专业知识，感觉就是典型的analyst问题了。我怀疑不要求写production code的数科里面暴多地方会问这种问题。
==================
有兴趣做数科（not a data engineer）不妨试试花点时间好好想想这些问题，欢迎回帖在下面，一起讨论。

或者也可以拿其他例子来讨论。

也许你会觉得，我都还没去上班，你凭什么要求我知道这些！！！但是呢，要知道，竞争这个职位的人也许就在类似公司上班，人家就是知道这些问题（真心也不难的），大家一起分析5个产品，保证你以后会有很多思路，这类open ended question也很少有多少“正确答案”，思路广就是最好的答案。

Let's do it!!

==================
假如你是国内的，可以分析豆瓣的数据，或者百度的search relevance

看到一篇讲 Duolingo A/B testing的，idea普遍适用：
http://firstround.com/review/the-tenets-of-a-b-testing-from-duolingos-master-growth-hacker/

谢谢k神总结，受益匪浅，好几年前的帖子了，如今9012年了考的product sense还是这些，我也觉得要多练，要提炼一套自己的模版

必须要说，这些问题的确是面试中会被问到的，自己就经常跪在这里。最近自己在准备，我感觉这个就跟口头议论文似的：
1，建立起分析类似问题的模板和套路，至少逻辑清楚
2，写几篇然后背下来...（如果能和人讨论就好了。。因为不知道自己写的是对是错！）

谢谢！

回帖就开始做题吧。。。。。光看一眼没用，必须得自己想，也别忙看别人的答案，一定要自己想啊啊啊啊~~~~~~~~~~~~~~

好开放的考题。。小K姐的帖子总能引发思考啊。。先摆好凳子再开始做题！

多谢多谢~~~ 请问下小K现在是在哪儿念书吗？？还是在工作了？？？

做什么题？？没理解ls说的

这个帖子里面的回tie 真是demoralizing
也就不奇怪为什么现在fresh grad不好找工作了
最近见过太多书本知识完全没问题，一碰到实际问题毫无头绪的小盆友
学校里只教你这类数据用某种方法分析，具体步骤是什么，但是工作里面是：这个实际问题应该是神马数据？用哪个方法分析？为什么？漏掉什么没有？这么分析能解决实际问题吗？

不做点事情还真是思路不行。。。。

K姐的提问赞。想想觉得还蛮难回答的，是思考的太少了。
表示product sense是很重要，不过最近找工作很着急，都没有啥固定的比较常登陆的网站。



可以研究此网站么？主要面向是申请留学的学生，找工作的人，总的来说就是素质高，学历高的一群在外奋斗或者打算去外面奋斗的这么一群人。
Business model主要是W大自己给大家做咨询服务。

用户满意度主要是，W大的个人咨询服务要做的好；网站上的发帖数量和质量要高，让大家愿意来交流。特别是留学是个很有时效性的时期，每年有几个月的高峰期。rention、churn主要在于他们留学之后还来不来逛论坛呢？靠什么吸引他们继续来呢？这就是生活和课外学习等部分要干的事情了。

W大博客会经常贴出一些比较有时效性的文章，和大家的学习工作很相关，可以引起大家的广泛讨论。
比较资深的会员，比如K姐会发起一些讨论或者话题。
不定时会有人整理自己的经验等等这些对于rention和吸引新用户都很有帮助。

暂时想到这些=。=

来说点mitbbs.com的，希望lz可以给点comments或者引导下。Thx！
mitbbs.com 网站我自己是没有注册的，之前也是在Google搜某些信息之后，点进去的
jiaoyou8完全不了解。目前看到的主网站2.5万人左右在线，jiaoyou8大约5，6百人的样子。而且用户推荐里的12人在过去的20分钟里面只有3-5个人更新了。所以感觉培养Business acumen估计的定时刷一刷网站，感受一下？

--潜水的大多数（提问：大约什么比例的用户会发帖？how would you measure it?）
发帖用户比例是否可以通过，统计每天的平均在线人数，以及一天内帖子增加的数量这两个来计算？或者还需要更深入的measure方法？

--广告商（提问，你估计一下大概广告费用是多少？他们的费用是怎么决定的？）
感觉主页上的广告大致这样分：网页位置和形状（是网页中间的，还是两侧的等等），分类的位置排序（网页中间ad也有不同的rank），是否动态图。
收费目测与上面说的广告分类有关，而且会根据impression和click两种流量同时收费，可能还和投放时间有关（例如早上和晚上可能价格不一样）。
具体费用的话，可能几美分/click，impression收费应该更低了。

其他问题我再想想了回答下。

这贴回的人好少 一是fresh没经验 二是这种问题确实烧脑子。。。