猿急送>

上海UI设计师兼职程序员

ID：322328

Z.

云计算交付工程师

公司信息：
上海恒驰信息系统有限公司

工作经验：
1年

兼职日薪：
500元/8小时

兼职时间：
下班后
周六
周日

所在区域：
上海
静安

技术能力

掌握Python、Autojs语言开发技术
华为云计算专家，精通公有云技术
熟悉Linux、docker、openstack日常操作使用，了解python语言
熟悉华为云公有云架构体系以及主流公有云产品计算类、存储类、网络类、数据库类等的使用、掌握上云迁移方法论
掌握apache、nginx、minio、jumpserver、openvpn、discuz、wordpress、可道云等主流的产品使用
掌握mysql、redis、mongodb数据库的操作使用
了解ELK、openvpn、discuz、wordpress、可道云等主流产品使用
了解TCP/IP协议，具备基本的爬虫能力、可以分析网络流量走向

项目经验

项目时间：2017-01到2011-10

项目名称：分布式爬虫爬取北京市企业信用信息网

项目描述：

这个项目是通过scrapy-redis搭建分布式爬虫爬取企业信用信息网公布栏，爬取列表页每一项下的子页获取数据

我的职责

首先爬取首页后通过xpath匹配每个的信息块的span后构建请求，并通过scrapy.Request发送请求，用xpath匹配需要的信息。

同时循环创建下一页请求的form表单，通过scrapy.FormRequest发送POST请求。所有爬取的信息缓存到redis数据库中，

最后通过编写python脚本将redis数据库中数据读取出来加入mysql数据库。

其他爬取的网站：搜狐新闻、豆瓣、腾讯新闻网

案例展示

私有化chatgpt

Alpaca大模型是一款基于LLaMA的大语言模型，它可以模拟自然语言进行对话交互，并协助用户完成写作、翻译、编写代码、生成脚本等一系列创作任务。同时，使用了中文数据进行二次预训练，提升了中文基础语义理解能力。此次实现是基于GPU服务器和Alpaca大模型，成功快速搭建个人版
AIGC文本生成3D模型

自多态模型GPT-4发布后，AIGC（AI Generated Content，AI生成内容）时代正扑面而来，从单一的文字文本，演化到更丰富的图片、视频、音频、3D模型等。