java大数据工程师是做什么的

高级数据处理工程师

职位描述：

负责大数据部门的数据采集与爬取、解析处理、入库及备份等数据日常工作；
负责分析新的数据需求, 完成数据处理的设计(文档)和实现；
负责数据质量的监控, 根据实际情况设计方案并实现数据质量的提高；
负责数据处理程序设计框架改善, 数据处理性能优化, 系统数据处理的能力提高；
负责和数据架构师协同工作, 完成架构升级更新；

职位要求：

本科及以上学历, 计算机软件及相关专业；
熟练掌握java编程, 熟悉/了解shell或者其他etl框架；
熟悉数据库, 对数据处理和数据质量有较深认识, 有NoSQL数据库数据处理和数据处理性能优化经验；
熟悉Linux系统及基本操作；
有网络爬虫相关经验者优先考虑；
有责任心, 学习能力强, 工作积极主动, 思路清晰，擅长沟通；
有团队合作精神有良好的英文沟通能力者，优先考虑。
了解AWS相关技术，优先考虑
生物/化学背景优先