myblog更新第二版,增加python爬取与文章实时更新
发布于 1 个月前 作者 a1511870876 541 次浏览 最后一次编辑是 25 天前 来自 分享

myblog

简介


一个博客,使用nodejs的koa1.0+Mongodb+ejs+bootstrap+jquery实现,主程序:app.js,静态文件目录:public,路由文件目录:routes,前端页面目录:views,模块目录:modules,启动文件为run.bat。 gihub地址:https://github.com/a1511870876/myblog 后台爬虫采用python脚本实现,每天爬取一次。 目前实现主要功能:登录、注册、添加好友印象、文章爬取、文章动态更新。 项目同时部署在阿里云,访问地址www.keepforward.xyz:3000 个人也在研究一些新技术,包括Reactjs、Angularjs等等,新技术主要在https://github.com/a1511870876/secondWorks开发试验,同时也部署在阿里云的7000端口www.keepforward.xyz:3000 另外个人有一些学习分享,大家共同交流,地址https://github.com/a1511870876/studyFiles ‘OK,我确实不懂,但是我能学会,并且会想尽一切办法做得更好。’ ‘无贵无贱,无长无少,道之所存,师之所存也。’

包管理

后台使用npm,前台使用bower,信息分别存储在package.json和bower.json中。

版本

版本号:v1.1 更新说明: 1、测试用户名:[email protected] 测试密码:123 2、开放注册(推荐尝试) 3、开放添加好友印象(推荐尝试) 4、正在制作:首页英文短句1分钟更新一次并且支持增加 5、正在制作:文章添加 开放功能:登录、注册、主页、关于我、添加好友印象…

版本号:v1.2 更新说明: 1、编写python脚本,爬取CNode社区我的帐号下的文章,周期为每天爬取一次。 2、爬取的文章动态加载到博客中,实现动态更新。 3、python版本为2.7,脚本文件为cnodeTest.py,启动文件为sphinxRun.bat。 4、资源加载部分更换为cdn加速。

下个版本 预计更新内容: 1、首页英文鸡汤实时更新,关联一个库。 2、模版右侧文章推荐功能实现。 3、本项目毕竟是第一个项目,练习项目,都是运用的很基础的东西,很多地方也不是很完善不打算长久更新,目前打算在这之后更新最后一版。更加优秀的、新的技术将在另一个项目中继续学习、实践,计算机的世界博大精深,无论度过怎样的岁月,若能坚持当下,不忘初心,定能一如既往,与小伙伴们一起前进。

不足之处

不足之处,请诸位赐教: 1、网站在手机端尤其QQ、微信等打开特别慢,手机端浏览器打开可以,是不是因为没备案被检测为不安全之类的原因。 2、js/css压缩不太会搞,在百度应用检测中心测试,js/css压缩存在问题。 3、前台编程还不是太熟悉,请各位大神补充。

研三 最想进阿里 有么有阿里大哥收留 哈哈

5 回复

求阿里大哥收留

@a1511870876 node本身就可以搞爬虫,用py有什么特殊需求吗?

@CarlosRen 情况是这样,市场上做爬虫现在还是用python多,我之前做过python,node这边对爬虫还不熟悉,或者说没想去熟悉。。。因为实际环境中感觉很少见到用node做爬虫的,只看到一些教程。各种原因吧,各有所爱,我本身比较顺手python

@a1511870876 superagent + cheerio 应该能满足基本需求,可以试试,我给业务系统爬的每日汇率就使用node做的,但是数据处理上还是py更成熟一些

@CarlosRen 嗯,其实我也有过尝试用node做的想法,最终没有实践,大部分原因也是数据处理想法不多,感觉爬虫这东西,爬是一部分,关键还是在数据处理,node爬的应该快一些。

回到顶部