爬虫工程师，逆向工程师，CSDN博客专家，华为云云享专家，51CTO专家博主，爬虫逆向社区站长。
从业6年，毕业于郑州大学，计算机科学技术。
掌握python，java，js，Arm。精通现有爬虫技术，逆向经验丰富。 掌握常用机器学习算法，图像处理技术，推荐算法。有目标检测、验证码识别等开发部署经验。
独立开发asyncpy爬虫框架、crawlx爬虫管理平台。
新工科大数据能力认证、CSDN首届GEEK+原创大赛一等奖、CSDN2019、2020、2021年博客之星。
拥有多项数据挖掘领域发明专利，著有爬虫书籍《爬虫逆向进阶实战》。
中国科技志愿者、河南省中原科技城E类人才。
Sep 20** - Present
data mining engineer
According to business requirements, collect, extract, clean, verify, analyze and process market data. Guide the team to crawl various relevant data, maintain the stability and maintainability of the reptile, and improve the efficiency of the reptile operation。
*
*
*
实时追踪全平台电视剧、综艺节目生命周期，进行舆情分析和信息监控。
数据源：主流媒体，网络媒体，微信，微博，抖音，快手，豆瓣，腾讯，爱奇艺，芒果、优酷，搜索引擎，指数平台等
架构：SpringCloud、docker-scrapy、uniapp
rack the life cycle of TV dramas and variety shows on the whole platform in real time, and conduct public opinion analysis and information monitoring.
Data source: DouYin, mainstream media, Internet media, WeChat, DouBan, Weibo,TencentTv, Iqiyi, manguoTv, YoukuTv, search engine, index platform, etc.
Architecture: spring cloud, docker-scrapy, uniapp.
开发过两次电商爬虫项目。
数据源：淘宝、天猫、京东、拼多多、抖音小店等
Developed two e-commerce crawler projects.
Data sources: Taobao, Tmall, Jingdong, tiktok, jigsaw store, etc.
项目简介：对短视频相关应用数据的采集。
数据源：抖音、快手、小红书、火山视频、西瓜视频等
Acquisition of application data related to short video.
Data Sources:Tiktok, KuaiShou, XHS, HuoShan video, XiGua video.
对论文、专利、标准数据的采集系统
数据源：知网、万方、WOS、维普、Jstor、Zlibraty、Oalib、各级专利局、各类标准网等
Collection system for thesis and patent data
Data sources: CNKI, Wanfang, WOS,Jstor, Zlibraty, Oalib, etc
一种基于全网检索高端人才的采集系统。
总人才数量近5亿、全球高端人才500万。
详情不便说明。
A collection system based on the whole network retrieval of high-end talent
Details inconvenient to specify
抖音、淘宝、京东、闲鱼、学习强国、央视频、酷狗、优酷、豆瓣、美图、顶端新闻、一点资讯、捷风资讯、凤凰新闻、化妆品监管、人民网、飞瓜、heytap、大众点评、趣头条等等
thanks. (截止:2021/11/6)
企业工商注册信息的采集
数据源：企查查、天眼查、红盾查询、东方财富、工商信息公示网等
产业链知识图谱包括产业、企业、产品、岗位等实体，大数据分析产业链与人才关系。
The industrial chain knowledge atlas includes entities such as industry, enterprise, product and post, and big data analysis of the relationship between industrial chain and talent
集成了图文验证码、滑块验证码、点选验证码识别的通用系统。
训练集：搜狗、微博、12306、bilibili等
项目框架：tensorflow、yolov、pytorch、opencv
A general system integrating graphic verification code, slider verification code and click verification code recognition is integrated.
frame：tensorflow、yolov、pytorch、opencv
