当前位置:首页 » 存储配置 » 存储工程师负责什么

存储工程师负责什么

发布时间: 2023-08-23 14:36:02

存储工程师和网络工程师

存储一般做服务器,技术要求更高。现在虚拟化更是趋势。
网络呢,要了解服务器,但是知名企业要求也很高。
建议选择存储工程师。学历不高的话选择网工。当然,网工做好了也一样有前途,只是开始技术含量没前者高。

② 关于大学计算机专业数据库方向

大学计算机专业数据库方向:
1、数据库应用开发 (application development)
除了基本的SQL方面的知识,还要对开发流程,软件工程,各种框架和开发工具等等
数据库应用开发这个方向上的机会最多,职位最多。
2、数据建模专家 (data modeler)
除了基本的SQL方面的知识,非常熟悉数据库原理,数据建模负责将用户对数据的需求转化为数据库物理设计和物理设计,这个方向上在大公司(金融,保险,研究,软件开发商等)有专门职位,在中小公司则可能由程序员承担。
3、商业智能专家 (business intelligence - BI)
主要从商业应用,最终用户的角度去从数据中获得有用的信息,涉及OLAP (online analytical processing) ,需要使用SSRS, cognos, crystal report等报表工具,或者其他一些数据挖掘,统计方面的软件工具。
4、ETL开发 (ETL Developer)
使用ETL工具或者自己编写程序在不同的数据源之间对数据进行导入,导出,转换,所接触的数据库一般数据量非常大,要求进行的数据转换也比较复杂和数据仓库和商业智能的关系比较密切。在一些数据库应用规模很大的公司里面有专门的职位,中小公司里面则可能由程序员或者DBA负责这方面的工作。
5、数据构架师 (Data Architect)
主要从全局上制定和控制关于数据库在逻辑这一层的大方向,也包括数据可用性,扩展性等长期性战略,协调数据库的应用开发,建模,DBA之间的工作。这个方向上在大公司(金融,保险,研究,软件开发商等)有专门职位, 在中小公司或者没有这个职位,或者由开发人员,DBA负责。
6、数据库管理员 (database administrator - DBA)
数据库的安装,配置,调优,备份/恢复,监控,自动化等,协助应用开发(有些职位还要求优化SQL,写存储过程和函数等)。这个方向上的职位相对少一些,但一般有点规模的公司还是会有这样的职位
7、数据仓库专家 (data warehouse - DW)
应付超大规模的数据,历史数据的存储,管理和使用,和商业智能关系密切,很多时候BI和DW是放在一个大类里面的,但是我觉得DW更侧重于硬件和物理层上的管理和优化。
8、存储工程师 (storage engineer)
专门负责提供数据存储方案,使用各种存储技术满足数据访问和存储需求,和DBA的工作关系比较密切。对高可用性有严格要求(比如通信,金融,数据中心等)的公司通常有这种职位, 这种职位也非常少。
9、性能优化工程师 (performance engineer)
专长数据库的性能调试和优化,为用户提供解决性能瓶颈方面的问题。也有专门的性能优化工程师,负责为其数据库产品和关键应用提供这方面的技术支持。对数据库性能有严格要求的公司(比如金融行业)可能会有这种职位。 因为针对性很强,甚至要求对多种数据库非常熟悉,所以职位极少。
10、高级数据库管理员 (senior DBA)
在DBA的基础上,还涉及上面3种职位的部分工作,具体包括下面这些:对应用系统的数据(布局,访问模式,增长模式,存储要求等)比较熟悉。对性能优化非常熟悉,可以发现并优化从SQL到硬件I/O,网络等各个层面上的瓶颈,对于存储技术相对熟悉,可能代替存储工程师的一些工作,对数据库的高可用性技术非常熟悉(比如MSSQL的集群,ORACLERAC/FailSafe, IBM的DPF, HADR等),对大规模数据库有效进行物理扩展(比如表分区)或者逻辑扩展(比如数据库分区,联合数据库等)。熟悉各种数据复制技术,比如单向,双向,点对点复制技术,以满足应用要求。灾难数据恢复过程的建立,测试和执行。这种职位一般只在对数据库要求非常高并且规模非常大(比如金融,电信,数据中心等)的公司需要,而且这种公司一般有一个专门独立负责数据库的部门或组。这种职位非常少。

③ 云存储工程师的技能树是怎样的

1. 分块思想。分布式的基本思想就是分而治之,几乎所有的分布式存储系统都会对一个文件切成一个一个的块(block)。
2. 数据分布算法。分布式存储系统需要把所有分割的块对象存储到不同的机器中,这些块应该如何分布使得既能保证数据均匀,又能使节点增加或者减少时尽量减少数据迁移,即数据分布算法,比如crush算法、一致性hash算法等。以前遇到一个面试题大概意思是说有N个文件需要保存到M台机器中,存储策略是什么,最简单的算法就是对文件求hash取模,这样既能保证数据均衡分布,又能高效索引(再去求hash取模就找到了文件存储位置),万一我增加个存储节点该怎么办呢。
3. 冗余副本。一个文件被分割成了若干块后被分布在不同的机器上,万一网络故障或者某台机器挂了,文件就访问不了了,为了保证可用性和可靠性,通常都是通过冗余副本来实现,即一个块会复制成多个相同的块副本(通常3副本),并分布在不同的机器上,这样即使某个块所在的机器访问不了了,也能通过其它块读取。这些副本同样需要考虑如何分布的问题,尽量不要在同一个故障域中。
4. 纠删码。采用以上副本的方式保护数据,缺点是需要占用多倍的存储空间来提供冗余,成本太高,你也可以考虑使用纠删码的数据保护方法,能够使用较少的冗余存储空间提供一样的可靠性等级,当然读写性能要下降些,典型时间换空间的例子。
5. 数据同步和一致性。每个块都被分割成了多个副本,这些副本如何保证一致性,读写效率和一致性之间如何权衡,了解CAP理论和NWR策略,各种一致性模型,比如最终一致性、强一致性等。
6.数据索引。一个文件被分割成块并分布在不同的机器,如何重新找到这些块组装成原来的文件。你可以用一个专门的服务来维护和存储文件和块之间的映射关系(HDFS namenode),也可以通过计算的方法找到这些映射关系(Ceph crushmap)。
7.其它。比如网络通信、RPC、序列化等。
8.块存储、文件系统存储、对象存储区别。

④ 存储工程师需要掌握哪些东西

需要曾经承担过大型项目集成工程,能够独立制作技术方案及存储、备份系统设计工作;
对于业界主流服务器、存储、数据库以及备份系统(如HP/IBM/EMC/昆/Symantec/Oracle等),在产品性能、设备选型以及解决方案等方面有比较深刻的理解。
网络存储工程师俗称“数据管家”。网络存储是对当今网络具有强大影响力的技术,它的出现把数据从以往的分散管理转变为集中管理,可大幅度降低成本、提高效率,同时又提供了可靠性高的数据备份,解决了因服务器变更或服务器合并等操作带来的诸多问题,利用远程镜像技术在灾难发生时也能够保证数据的可靠恢复。
网络存储是对当今网络具有强大影响力的技术,它的出现把数据从以往的分散管理转变为集中管理,可大幅度降低成本、提高效率,同时又提供了可靠性高的数据备份,解决了因服务器变更或服务器合并等操作带来的诸多问题,利用远程镜像技术在灾难发生时也能够保证数据的可靠恢复。对于信息就是财富的金融、电信、证券、保险以及其它类似的行业来说,信息的丢失就意味着企业的业务将遭受致命的打击,所以诸多企业对网络存储专业人才都是求贤若渴。

⑤ 网络存储工程师的主要职责

分析用户需求、定做方案建议书;为用户提供存储系统的规划、设计、实现、运作和优化服务;对市场活动,售前、售后服务提供支持;负责数字产品的日常存储管理工作。
岗位要求:3年以上工作经历,从事过系统、数据库、存储系统等相关工作;有存储软、硬件产品和项目的支持经验,了解磁盘柜、磁带库、SAN解决方案的相关知识;熟悉EMC、IBM、HP、Veritas、STK、NT、Novell等主要厂商的存储产品;熟悉网络存储平台的设计与管理,精通Or?acle数据库管理,精通SQLServer的管理,熟悉多媒体文件的存储与管理;有较强的数据库规划管理能力;有较强的客户服务观念;有良好的文字表达能力,学习能力强,务实、善于沟通、具有团队合作精神。
职业前景:有统计表明,每100万元的存储设备就需要4个人来维护。而2002年中国存储系统市场规模就已经达到了56亿元,据预测,在5年内,存储市场会以10%-20%的年增长率递增,即在未来5年内,我国至少会有20万的人才缺口,而国内现在具备存储工程师资格的技术人员不到500人。
薪资水平:由于人才紧缺,拥有存储技术的高级工程师月薪可达万元。
工作任务描述:
主要工作在一些大的数据需要量大的公司如银行、电视台、IDC中心
有效管理公司海量数据,有存储设备测试、评估环境、系统咨询、实施指导、测试、培训、相关解决方案
灾难恢复
要求:
最好有多年的网络管理经验
熟悉一些常用数据库软件
有网络存储理论知识,包括存储基础、技术及网络存储高级技术
熟悉主流存储、备份厂商的产品线;如IBM/HP/SUN
熟练掌握veritas、legato、tsm、dp等备份软件工具使用
具有良好的撰写需求分析、解决方案、PPT、系统软硬件配置等方案的能力

热点内容
合资汽车配置有什么 发布:2025-02-01 02:56:07 浏览:76
wifi共享精灵源码 发布:2025-02-01 02:40:15 浏览:971
java软件怎么安装 发布:2025-02-01 02:40:09 浏览:547
河北税务局电子密码是什么 发布:2025-02-01 02:40:07 浏览:833
检查服务器设置是什么意思 发布:2025-02-01 02:31:26 浏览:183
神偷四第四章密码是多少 发布:2025-02-01 02:07:29 浏览:13
qq登录在哪个文件夹 发布:2025-02-01 01:57:59 浏览:625
如何加入安卓代理 发布:2025-02-01 01:51:40 浏览:3
我的世界手游服务器刷钻石教程 发布:2025-02-01 01:48:13 浏览:774
sqlifthen男女 发布:2025-02-01 01:44:59 浏览:691