kangchch Goto Github PK

ali_memberid

通过username抓取memberid

alicompany_picture

please read read.md

alipc_company_selenium

read.md

anonymous

匿名者项目

building_materials

抓取**建材网的公司企业库

echarts-for-weixin

ECharts 的微信小程序版本

fetch_258net

抓取258网站公司企业信息，按照行业分类

fetch_bmlink

抓取**建材网公司企业信息（分为两个程序）

fetch_keywords_5118

根据百度+v网址抓取关键词

fetch_keywords_instruments

抓取药监局的国产医疗器械和进口医疗器械，排重整合处理成excel文件

fetch_made_china

fetch_mobile

通过集号吧网站抓取手机号段

flask_get_supcat

python flask web接口，直接以json格式返回，作用：调用这个接口，会把公司名字插入redis队列，供别的抓取程序抓取，抓取后更新到mongo，然后接口从mongo库里查数据以json的格式返回

hc_72.9_some

hc360 72.9虚拟机 （cms、天眼查，淘宝搬家）

hibor-keywords

huicong_yuqing

增加360 搜狗 百度 下拉词联想词判断，在其他纬度增加抓取排名，页数，简介，媒体名称信息

jd_maotai_seckill

优化版本的京东茅台抢购神器

kangchch.github.io

个人博客

malad_add_click

模拟浏览器点击百度m站的互通宝可售词

paddle

PArallel Distributed Deep LEarning

proxy_ip

proxy->代理ip抓取 proxy_auth->代理ip验证

script

常用脚本

selenium_spider_baidutongji

模拟浏览器登陆百度统计抓取数据

slider_fastapi

滑动验证码破解接口（jqka网站）

spider_baidu_tongji

spider_china-10

抓取十大品牌网 按照行业标签，一级 二级 三级 品牌信息

spider_hc_m_yuqing

抓取百度m站负面新闻（全部，资讯，贴吧，问答，下拉词，联想词）

spider_steel

抓取钢铁网公司信息

spider_tianyancha

从天眼查网站核实已抓取的leads公司名称（从m站核实，正常网站302）

technology_books

一些技术性的书籍，上传到github不至于丢失