[心得] 给板友们,选磁盘阵列产业的考量

楼主: eisenccw (板标白马)   2018-10-21 19:50:00
给板友们,选磁盘阵列产业的考量
有错/有问题的地方,还请指正~
全文讲的都是韧体的研发人员,不分企业
内容大多是10多年前的印象,大多数是观念性的东西,Google很容易找到,希望对板友们
能有一点点贡献
磁盘产业的核心有3个,每家企业重视的都不同
1.韧体
2.硬件
3.软件
Host side(韧体)
这是指电脑端的东西,这个部份有Fiber、SAS、SATA、iSCSI等,因为很久没有关注了,
写这篇文章的时候,有稍微上网Google一下。
Host side的技术跟使用的芯片与芯片的驱动程式有关,因此有些企业或产品会指定只能
用什么型号的 HBA(host bus adapter)卡,也就是RAID卡,是有原因,因为开发成本超高
,还要取得授权。
身为研发人员的你,或许要了解这些芯片与驱动程式的东西,再配合自家企业写的Host
side的韧体
Fiber
是里面价格最高的产品,相对的它的难度也是高,台湾真的有硬实力能力做好Host Fiber
的RD非常少,大多RD都是在国外
为什么说他难度最高,因为研发Fiber所需要的设备、韧体、硬件、软件的成本都非常高
,而且人非常难以培养,通常可以培养起来的RD,跳到国外之后,薪资马上起飞,一些中
大型以上的机房都是用Fiber,我看过得机房至少有20座以上,每座机房至少有10个以上
的机柜,机器塞好塞满,70%的机柜都是Fiber
SAS
SCSI的下一代协定,早期有一堆人做SCSI,包含国外,因为是从SCSI升级,所以,有些
Code也是直接升级,因此SAS,台湾的硬件与韧体技术相对稳定,进入企业之后,这是比
较有可能接触到的东西。
SATA
ATA的下一代协定,门槛较SAS再低一点,不过,SATA的传输速度是追着SAS,eSATA这个我
也算同一类,这个东西印象中也蛮多人做的,算是很竞争,进入企业之后,这是比较有可
能接触到的东西。
iSCSI
走IP的协定,以网络线连结磁盘阵列,是走TCP/IP,影响最大的应该是从 IPv4 改为
IPv6,与线材,无论什么产品说它的速度有多快,全部都是看线材与那颗网络芯片,常
见的是Cat6、cat7,不知道Cat8出来了没。
印象中这个产品台湾有,但是真的在机房里面是比较少见,看起来似乎很容易、很方便,
但是在设定上比较麻烦。
PCIe
我对这个不熟,但是我不看好
USB
这个目前没看到特别的东西,不过,这个东西是大众最了解的东西,最容易被人使用
总结:
1.关注Host端的速度,如果有继续提升,表示这个产业才有持续升级,如果没有,这个产
业就死90%,企业只能削价竞争,或往其他领域经营
2.做Fiber的身价比较高,但是,企业不一定有能力做
3.如果Host side的通讯协定没有升级的话,那相对比较难详细接触到Host的东西,有升
级就会改版,有改版就有Bug,有Bug才炼得出真功夫
4.读Code会很硬、很累,因为不一定有shadow code 可以看
5.从HBA(host bus adapter)的价格,就可以知道哪个技术门槛比较高
6.界面升级,就是加班的无限地狱
Drive side(韧体)
这是指硬盘端的东西,这个部份有Fiber、SAS、SATA等,或许还有SSD、SDcard等新的储
存硬件,这里印象中有算法。
从Host side接收资料,来到Drive side就会开始演算,将切割资料好,分别放在硬盘里
面,已达到保护资料的目的。
每家企业所使用的算法都是高阶的研发人员才知道,通常这个也会签保密协议。
Fiber
双通道,最贵的硬盘,效能据说也最好,不一定最多人用,会买这种硬盘组成的 Disk
array 都是大咖,也能赚最多,但是台湾好像没人赚的起。
SAS
双通道,比较多人使用。
SATA
单通道,通常会加1片1对2通道,变成双通道,比较多人使用,这个就便宜了。
算法
通常产品的算法早就已经定死了,而且可能是由研发长、研发经理这个位置的人亲自写
的,这个算法与纯数学有关,如果你想接触这块,除了数学好之外,资料架构的能力要
强。有传言算法是可以买的,不过我没求证过。
双通道
这个功能是为了避免硬盘的通道突然损毁,一般来说,一般的硬盘只有会一个通道,像
SAS就有2个、SATA就只有1个。
因为有了双通道的关系,对于硬盘资料的保护可以有更多的运用,有的中间会在串接一些
路由器(Router)、交换器(Switch),保护硬盘不会因为单通道毁损就shutdown
总结:
1.算法你不一定碰的到
2.这是Host side 与 Drive side 互相丢资料的游戏
3.硬盘的界面升级就是加班的无限地狱
4.硬盘新界面的出现,也是加班的无限地狱
其他:
1.Disk array 还有什么样的功能,各家都不同,有的有机会接触算法。
2.软件、硬件我不清楚。在台湾这个产业是有机会养老的,只是会很辛苦。
3.监控系统,其实这是算法的延伸使用,因为影像也是资料的一种,不过,这个部份的
产品线很微妙,我个人觉得只是摆好看的而已
以上
拉里拉杂的写了一堆,希望在你评估职涯的时候,能多了解一下市场,为自己的人生多思考一
点,这才是科技~
作者: chouvincent (我肥宅 我驕傲)   2018-10-22 12:07:00
Pcie 火热一阵子了吧
作者: providence (providence)   2018-10-22 14:11:00
第一次看到PCIe被忽略成这样= =
作者: Westan   2018-10-22 14:48:00
原po普安?
作者: benden (20%/y的蜗牛)   2018-10-21 19:57:00
作者: kkoouu (LL)   2018-10-21 20:35:00
作者: os369510 (Jeremy)   2018-10-21 20:44:00
内容没什么深度.. 有心写不忍嘘 也可以多了解PCIe
楼主: eisenccw (板标白马)   2018-10-21 21:05:00
确实是没什么深度补充,我接受嘘文
作者: gn01216674 (Dog)   2018-10-21 21:14:00
真的不忍嘘...
作者: GodIronman (格林皮卡丘a铁)   2018-10-21 21:22:00
分享就给推!! 让不同产业的朋友们也能增广见闻一下
作者: cplusplus426 (c++)   2018-10-21 21:47:00
重点应该不是这些规格的东西八= =
作者: mercurycgt68 (发芽的吉它手)   2018-10-21 21:52:00
你对 PCI-e 误会蛮大的 要不要利用原有的基础 不带成见地重新理解产业现况呢?
作者: MullerLu1981 (阿贤)   2018-10-21 21:58:00
NGFF PCIe NVMe 4 lane M.2 2280 组成的磁盘阵列系统,目前intel 正在努力宣传他的产品。
作者: cloudchiou (cloud)   2018-10-21 22:20:00
不是双通道 是双控制器
作者: EZ5566 (料理是带给人们幸福的)   2018-10-21 22:34:00
我不是研发人员,不过我看到我的客户PCIe储存需求越来越高
作者: erial (erial)   2018-10-21 22:43:00
好些的PCIe SSD一块十来万呢
作者: ReiFu21 (ReiFu)   2018-10-21 22:43:00
我个人是......看不懂就不要盲推了 哈哈
作者: ljmk1246 (ljmk1246)   2018-10-21 22:51:00
何不自己回一篇文 在推文酸还真有高度呢
作者: CIIIO (郭+)   2018-10-21 23:24:00
已存最爱
作者: gigisteve (阿吉Q)   2018-10-21 23:49:00
台湾的韧体都是整合比较多吗? 我去面试时面试官提到韧体走研发的比例非常少......
作者: tyfu (慎)   2018-10-22 00:22:00
的确十年多前的..很多东西渐渐式微了..现在比较有话题的是NVMe over fabrics但在台湾的确是冷门产业,没什么人关注,有心还是出国吧看得到、摸得到、听得到,这些才是短视近利的老板们想要的
作者: harn1991 (qwe0000)   2018-10-22 00:35:00
以后应该都是PCIe
作者: bcew (bcew)   2018-10-22 00:36:00
各protocol的理解可以再去看一下近几年的科普文较好,还有通道方面也是看一下RAID的内容。未来的趋势有蛮大的机率是NVMe,走PCIe;fiber或网络...
作者: tyfu (慎)   2018-10-22 00:43:00
比起这、个人是对Persistent Memory对产业的冲击比较期待过往OS跟APP惯用的内存不再是挥发性储存时,很多习惯都必须因应新的架构做出对应的调整NVMe有点像是过渡性的需求,只是NVM真正当Memory使用的前奏真要当储存用,多的是企业在做All Flash Array,也不需NVMe
作者: hanshsu (小肉呆)   2018-10-22 08:12:00
目前比较潮的是 all-flash 未来很难说 储存媒介好像快要有新突破惹
作者: morrischen (porsche~my drive)   2018-10-23 00:26:00
RAID硬件核心,xor asic才是王道,再+周边韧体软件tool
作者: glowbu (只是个说法)   2018-10-23 22:04:00
字多辛苦了,深度让版友们自行google

Links booklink

Contact Us: admin [ a t ] ucptt.com