爬虫工程师

爬虫工程师爬虫工程师

岗位职责:
1、负责网络海量数据抓取和挖掘系统的架构设计和开发,负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析工作;
2、能将网络抓取的数据经结构化分析,通过技术手段,将相关数据纳入现有的数据库系统;
3、实时监控爬虫的进度和警报反馈,能对产品或项目实现过程中出现的技术问题、技术难题提出有效的方案进行攻关;
4、深入理解业务需求并归纳抽象,进行系统分析及建模,配合完成数据库搭建需要和产品需求的整体解决方案;
5、了解网站、APP等各项产品结构,建立自身产品反爬虫策略;
6、能够独立完成需求文档编写,并完成编写数据库结构的文档说明;
7、配合相关部门对产品或项目业务需求进行分析。

任职要求:
1、本科及以上学历,计算机或相关专业毕业;
2、精通C#语言,3年以上的C#客户端开发经验,做过网络爬虫/网络数据抓取项目者优先;
3、熟悉WINDOWS API,有丰富的WinForm/WPF开发经验者优先;
4、熟悉.NET框架,对NET框架有较深认识;
5、熟悉C#中Http、Webservice、Socket等相关的网络开发技术和XML相关技术;
6、熟练掌握OOP以及设计模式等基本设计方法,熟练应用Sqlserver数据库及sql优化;
7、熟练掌握js、jquery,精通web开发,使用过Echarts者优先。
8、精通多线程编程、同步、互斥、线程间通信等;
9、具有一定的文档编写能力;
10、熟悉Python开发语言优先。

公司简介

基金会中心网由国内35家知名基金会联合发起,于2010年7月8日正式成立。基金会中心网的使命是建立基金会行业信息披露平台,提供行业发展所需的能力建设服务,促进行业自律机制形成和公信力提升,培育良性、透明的公益文化。 在过去的五年里,基金会中心网与国内外的诸多知名基金会建立了良好的合作关系,包括美国盖茨基金会、福特基金会、亚洲基金会、洛克菲勒基金会、德国宝马BMW基金会、粮惠世界、墨卡托基金会、日本基金会、丰田基金会、美国基金会中心、欧洲基金会中心等等;同时也与国内外的一些知名大学建立了良好关系,包括哈佛大学、斯坦福大学、印第安纳大学、清华大学、北京大学、北京师范大学、浙江大学等等。2012年参与在北师大珠海分校设立了国内第一个慈善教学的本科层次的建立,已为国内的慈善组织培养了3期慈善专业的本科学生,广受业界好评和欢迎。几年来,基金会中心网的国际影响力也不断提升,目前基金会中心网已经成为"全球资助者协会"的理事,这个协会是国际著名的慈善团体组织,在全球享有较高的美誉度和知名度;基金会中心网还参与了《国际慈善数据宪章》的起草和制定,发出了中国慈善组织应有的声音。 几年来,基金会中心网秉承使命,已经基本成为国内最具影响力的信息披露平台,在倡导慈善数据的应用方面发挥了一定作用,推出了基金会透明标准中基透明指数FTI,有效地推动了基金会行业整体的透明度发展;建立良好的公共关系体系,推动社会文明进步;建立国内国际慈善交流合作机制,提升国际化视野;充分发挥倡导性平台作用,推进基金会组织专业化发展。

北京东城区科林大厦A座216

网站免责声明 本网站所提供的信息,只供参考之用。 本网站及其雇员一概毋须以任何方式就任何信息传递或传送的失误、不准确或错误对用户或任何其他人士负任何直接或间接的责任。 本网站在此声明,不承担用户或任何人士就使用或未能使用本网站所提供的信息或任何链接或项目所引致的任何直接、间接、附带、从属、特殊、惩罚性或惩戒性的损害赔偿(包括但不限于收益、预期利润的损失或失去的业务、未实现预期的节省)。 本网站所提供的信息,若在任何司法管辖地区供任何人士使用或分发给任何人士时会违反该司法管辖地区的法律或条例的规定或会导致本网站或其第三方代理人受限于该司法管辖地区内的任何监管规定时,则该等信息不宜在该司法管辖地区供该等任何人士使用或分发给该等任何人士。用户须自行保证不会受限于任何限制或禁止用户使用或分发本网站所提供信息的当地的规定。 本网站图片,文字之类版权申明,因为网站可以由注册用户自行上传图片或文字,本网站无法鉴别所上传图片或文字的知识版权,如果侵犯,请及时通知我们,本网站将在第一时间及时删除。 凡以任何方式登陆本网站或直接、间接使用本网站资料者,视为自愿接受本网站声明的约束。联系QQ515827934