用Perl和NoSQL数据库(LevelDB)开发了ETL数据处理系统。该系统负责对上千万条书目数据的备份、检索与提取,具备基于Linux的数据处理子系统与基于HTML5的的网络应用子系统。无故障运行超过两年的时间,总处理数据量约20亿次。
使用Python开发爬虫系统抓取新浪微博数据并存储:https://github.com/coosigma/weibo_crawler
使用.NET(C#)结合SQL Server开发Demo网站:http://dochyper.unitec.ac.nz/liangb05/asp_application1
使用PHP(Laravel)集合MySQL开发Demo网站:http://dochyper.unitec.ac.nz/liangb05/maorisouvenir/
使用Perl和Python进行过机器学习的实验(SVM and CNN):https://github.com/coosigma/exp_of_cnn