这是一种“网络爬虫”,用于抓取网站的数据。最初实施于某国家级政府机关单位,用于抓取国外特定网站上的数据,包括日韩欧美等近20个特定网站上的数据。后又用于抓取其它多个领域的网站数据 1. 功能特点 可以对要抓取数据的网站进行配置,核心代码根据配置对各个网站进行解析,获取有用数据存储入库,可以进行复杂的数据提取,比如下载分页的pdf附件,在附件可有可无、名称不确定、页数不确定的情况下也能正确抓取; 可以指定抓取某个网站上的某个网页的某个区域的数据; 可以模仿人工浏览网页的方式执行数据抓取。比如抓取某网站的pdf文件,手工操作按照这些步骤进行:第一步需要先输入用户名密码后登录,第...
小普票夹小程序是方便用户在pc端上传发票,做到手机拍照直接上传,pc端进行上报。小普票价小程序前后端独立一个人开发。用到小程序登录接口,发票识别第三方sdk封装后端进行调用,图片上传,基础增删改查。技术关键词:vue,css,webapi,axios,wx.getUserProfile,wx.chooseImage,JavaScript,.net,sqlserver....
项目二:烘焙坊 项目描述:接到甲方需求,需要研发一套分享社交平台,需要实现美食让用户能够分享他们的烘焙作品、食谱、技巧 和体验,同时为烘焙爱好者提供一个交流和学习的环境。功能模块有 用户注册与个人资料管理、美食分享、互动评论、 食谱发布与收藏等。 项目技术: Nginx ,Springboot ,MySQL,maven ,NFS ,华为云 ESC 设置和 EIP 服务 项目职责: 1:负责安装和配置 Nginx 作为反向代理服务器,以实现后端 web 服务器的代理。确保 Nginx 代理服务的正确运行, 处理请求转发和负载均衡等功能。 2:使用 Nginx 搭建网站服务,用于...
项目技术:Nginx,Elasticsearch, Redis ,RabbitMQ ,MySQL,华为云 ESC 设置和 EIP 服务 项目职责: 1:负责设计整体系统架构,确保系统的稳定性、可扩展性和高可用性。实施 Nginx 代理服务和负载均衡集群,以缓 解单点服务器压力问题。 2:配置 Nginx 作为 WEB 服务器,处理客户端请求和请求分离。确保 WEB 服务的高性能和安全性。 3:使用 Elasticsearch 提供高效的搜索引擎服务,加速海量数据的搜索。优化搜索算法和索引结构,提高搜索的准确性 和响应速度。 4:使用 Redis 作为缓存数据库服务,加速系统响应,...
top小程序是一个大型的crm系统。主要目的是提升客户之间的关系,对客户进行评价打分,与客户互动和对数据的跟踪。我主要开发部分前端及交互的后端数据接口。用到了echarts数据响应图,接口返回数据,对数据进行重构,与echarts组件结合,用到了第三方接口,对接口进行封装,利用第三方提供的sdk封装在后台,用到了企业微信发消息及企业微信登录等接口。项目只做到第二期。项目技术关键词:vue,css,JavaScript,webapi,.net, mvc,sqlserver,apijson,echarts,axios,uniapp,vs2019....
企挚友 App 是一个专门为企业用户提供多元化福利资源、优质商品特惠、员工健康检测、筛查、调理、健康管理培训、就医绿色通道对接、24 小时在线客服支持的一站式企业综合服务平台。旨在帮助各企业集团优化员工福利流程及模式,降低企业福利成本,节省员工优质消费品方面的开支,以及有效提升企业全员身体健康状况,降低企业用人风险及流失,助力企业长期稳定高效发展的 App 责任描述: 1.负责购物车的开发以及优化 2.负责优惠券的开发以及优化 4.负责用户的关注列表和粉丝列表的优化 5.负责计数服务的开发和优化 6.负责商品详情页和商品首页的开发以及优化 7.负责用户的交易系统的开发...