SCRAPY学习笔记(思维导图) 在学校进行科创项目时,由于需要用到 Scrapy 爬虫框架,花了一段时间自学,期间整理的思维导图记录在此。 一、关于 ScrapyScrapy 是一个 Python 爬虫框架,可以很方便地使用此框架编写爬虫并爬取解析网络数据,Scrapy 官网在这里。 安装 Scrapy: 1.使用 Anaconda 进行安装 在 Windows 平台安装 Scrapy 需要使用 Anaconda Distrib 2019-03-04 Computer Science > Frameworks & Tools > Scrapy
使用JAVA搭建小程序WEBSOCKET服务器 最近参加了一些计算机比赛,我们队根据题目要求制作了一个使用微信小程序作为客户端的实时社交应用系统,使用 Java 开发服务器端。因为小程序只支持 Https 和 WebSocket 方式与服务器交互,同时题目要求小程序具有实时通讯的功能(例如实时消息),所以我们使用 WebSocket 实现实时交互。 我们都知道,目前的网络应用大部分是客户端/服务器(Client/Server,C/S)架构,客户 2018-11-24 Computer Science > Programming Language > Java
BOINC分布式科学计算项目 BOINC 为科学而计算 BOINC可让您使用计算机(Windows,Mac,Linux)或Android设备帮助进行尖端的科学研究。 伯克利开放式网络计算平台(英语:Berkeley Open Infrastructure for Network Computing,)是目前的主流分布式计算平台之一,由加州大学伯克利分校计算机学系发展出的分布式计算系统。原本专为SETI@home项目而设 2018-09-01 Special > Software Recommendation
软件推荐 软件推荐专栏会更新一些我认为比较实用或者有趣的软件项目。 BOINC分布式科学计算项目 BOINC 为科学而计算 BOINC可让您使用计算机(Windows,Mac,Linux)或Android设备帮助进行尖端的科学研究。 伯克利开放式网络计算平台(英语:Berkeley Open Infrastructure for Network Computing)是目前的主流分布式计算平台之一,由加 2018-09-01 Special > Software Recommendation
文明的旅程——《三体》读后感 今天我把从很久之前就开始读第一部的三体全册都读完了,因为各种事情忘记了读,以至于读这套书一共经历了三年的时间,以至于我每次要开始看的时候都要努力地回想之前的情节,甚至要去翻翻书才能想得起来。虽然如此,我还是每次都能回忆得起来之前的情节,也许是因为这本小说我对它的印象比较深吧。 其实,看一本书,或者一套小说,应该是要连续的读完的。这样才能将前后的情节连贯起来,更加准确地了解各个人物的特点和小说的主旨 2018-06-16 Reading Note > Novel
部署LAMP应用程序(附环境安装脚本) 以目前来看,基于微信公众平台和小程序的应用程序开发是很普遍的,需求量也是很大的。经过几次LAMP环境应用程序的部署工作后,我觉得有必要把一般在Linux平台部署基于LAMP环境的应用程序的一般步骤记录下来作为经验积累。 为了部署过程更加便捷,我将此文章中所述的环境搭建步骤写成了 Python 脚本,使用此脚本可以自动安装LAMPP(Apache、MySQL、PHP、PHPMyAdmin)环境,可以 2018-05-05 Computer Science > Operation & Maintenance
使用GITLAB的API自动更新部署代码 对于一些小项目而言,在 Gitlab 上开发完成并部署到服务器上后,出于修改或者增加功能的需要,常常要更新服务器中的程序代码,我们当然可以手动将更新的代码上传到服务器中,但是这样无疑要增加很多繁琐的操作步骤。对于使用 Gitlab 托管代码的应用程序而言,我们完全可以使用 Gitlab 的 API 和服务器中的脚本来实现代码的自动更新。 实现自动更新的基本方法是,通过 Gitlab 项目的 Web 2018-01-13 Computer Science > Operation & Maintenance
使用STYLE-TRANSFER转移照片艺术风格 最近几天学习了一下如何使用 Github 上的项目“style-transfer”(https://github.com/fzliu/style-transfer)来转移照片的艺术风格。用这篇文章记录一下操作过程,即如何配置运行环境、如何使用“style-transfer”完成操作。 一、style-transferGithub 中有一个照片风格算法的 Python 实现,就是上述的这个项目,这个 2018-01-04 Computer Science > Machine Learning
解决CENTOS下NGINX运行PHP显示FILE NOT FOUND的方法 最近配置 LNMP 网站的时候遇到了 php-fpm 总是返回“File not found”的错误,Nginx 的日志文件中的记录是: 1FastCGI sent in stderr: "Primary script unknown" while reading response header from upstream 上网搜索解决方法,发现大部分这个问题都是由于脚本路径 2017-11-11 Computer Science > Operation & Maintenance
LNMP架构网站的搭建 因为最近接手了学校社团的网站运维工作,并且社团的网站使用的是 LNMP 架构,所以为了学习一下如何部署、配置和运维 LNMP 架构的网站,我把自己的个人网站(也就是这个网站),重新部署成了 LNMP 架构的网站。 在使用 Nginx 之前,我是使用 xampp 的,xampp 将 Apache、MySQL、PHP 和 Perl 集成并都配置好了放在一起,而且还有 phpmyadmin 提供图形化的 2017-10-24 Computer Science > Architectures & Principles > Website