Re: [请益] 请问数据分析方向能够接案吗?

楼主: pelicanper (派立肯)   2020-07-03 20:02:44
这是一个很有趣的话题,不过先不要下结论
我目前在新西兰的一家线上信贷公司,讲潮一点就是FinTech
从早期P2P到今年因为想要当金主的太多,四月的时候正式停止散户的金主
现在出钱来借的反而都是银行基金信托等等...
至于借款人所有的流程都在网络上,从一开始的身分审查,到财务评估等等
我们用第三方服务审查身分和连结信用联征中心调阅个人信用资料
通过身分审查后客户授权我们到个人银行帐户调阅过去一年交易资料
最后我们评估客户的信用指数,贷款利率和金额然后通过贷款
在假设一切资料都足够的情况下从申请到拨款全部都是线上系统处理
资料产生除了客户个人资料和银行交易资料外,还有联征中心提供的信用纪录资料
此外还有前台第三方服务的资料,像是我们会用全世界流通的Email侦查金融犯罪的服务
或是根据客户提供的地址调查该地区平均各项消费的指数,收入,教育程度等等
此外,我们也撷取客户在使用前台服务的时候产生的各种Cookies
来研究各种用户体验和行为,
这些资料我们现在大部分用在两个模型,第一个是用来衡量客户倒债的机率来评估风险
结果就是计算最好的利率和贷款额度,第二个跟Google合作,
我们预测该客户能提供公司的利润然后即时传送结果给Google,
Google在即时用他们的算法搜寻最佳的标的放送广告提高点阅率
这个合作的模式让我们公司去年Marketing的Return提高超过150%,
也就是说每花一块钱的数位广告能够提升传统Google Search的1.5倍效益
这些资料量大不大?其实很恐怖...一个人一年的银行交易资料就是数千笔
一万个人就是上千万或亿笔,加上联征各种金融产品两年的纪录,前台网页Cookies,
第三方服务的资料等等,还有Real-time data的特性等等...
我想讲的重点是现今的资料科学涵盖很广,要把东西做出来很多时候都是从零开始
没有资料就去抓,抓回来就要想办法让它能用,什么分析模型都是建立在
有整理好的资料下,再来就是资料分析是很吃Business Domain的
很多时候你要面对的都是有决策的管理阶层,他们不太在乎你用的东西酷不酷炫
而是你能不能回答他们的问题,举个例来说因为COVID-19很多人失业或是被减薪
这个时候就会申请Hardship延迟付款,通常时效是三个月或六个月,
疫情至今很多Hardship逐渐到期,我们公司会主动调查客户的财务状况
可是因为这个疫情没有人有经验,时效上为了速度没有办法等研发前台功能
大家都用Google Sheet来Team Work,上面就希望我们能够抓Google Sheet的资料
连结数据库来做即时资料视觉报表,就这样
Google Service Account/Google Sheet API/Python/Snowflake/Tableau/SQL Agent
一天干出一套即时报表让上面的可以随时因应现今的状况来决定Hardship的政策
前线的客服继续用Google Sheet做他们的工作,老板们可以在Tableau上看着图做决策
至于我们就快快乐乐地继续领我们的薪水~~~
这些在大公司因为制度和官僚不太这样闪电式的发生,只有像是在我们这种相对小型的企业
才会这样搞,我们组只有三个人但是包山包海,我觉得这种工作其实也蛮有趣的
作者: nicha115 (cha)   2020-07-03 20:58:00
我想做的数据分析比较偏向科学计算,因为我是理科背景如果这样,应该比较没有机密的问题。只是好像都是学校在做就是了...
作者: s111100001 (极熊)   2020-07-03 21:24:00
我也想做科学计算那种但是不知道从那边去入门或是找工作
作者: WTFCN (WTFCN)   2020-07-03 22:10:00
推推
作者: nicha115 (cha)   2020-07-03 23:23:00
楼楼上,推udemy的Fred Baptiste讲师,deepdive至于找工作,我也在摸索中。我觉得台湾目前这种工作少但我觉得未来会越来越多
作者: s111100001 (极熊)   2020-07-03 23:27:00
感谢楼上 正在尝试能不能做出东西来
作者: azzc1031 (azzc1031)   2020-07-04 03:03:00
同为data analysts ,好奇一下1.你们需要做data cleaning吗?感觉调来的资料都是干净的(?) 2.资料是一般的结构式还是非结构式(noSQL)资料?3.会用到爬虫吗?你们需要会爬虫的技能吗?还是直接套现有的module? 谢谢另外真的超同意data management 这个概念,部门长官会认为跟data或自动化有关的project都会assign给你做。我们部门今年开始写c#读Excel进去SQL,然后各种增删改查、巢状SQL指令、连表,变成一张大表后寄给user们。
作者: hmsDEBBIE (*黛比*)   2020-07-05 14:27:00
GDPR如果各国跟进欧盟实施的话,就不能抓cookies来玩了

Links booklink

Contact Us: admin [ a t ] ucptt.com