1、负责对接数据需求,数据的管理,需求对接;
2、负责半结构化数据的抽取和清洗等研发和优化工作;
3、参与视频搜索各个功能模块的设计与实现,构建高可靠,高可用 ,高扩展的体系结构,满足日趋复杂的业务需求。
任职要求
1、热爱互联网,对技术研究和应用具有浓厚的兴趣,有强烈的上进心和求知欲,善于学习;
2、熟练掌握至少一种脚本开发语言(Python,Shell等),掌握至少一种开发语言(Java, C++);
3、熟悉网络编程,多线程,对数据机构和算法设计具有较为深刻的理解;
4、熟悉Http,Tcp协议,了解网页抓取原理以及技术;了解抓包分析,对搜索有一定的理解;
5、了解大数据相关知识(Hadoop,Hive,Kafka等)。