Marlous

My Conquest is the Sea of Stars.

Python 微博好友关系爬虫的知识点梳理总结(WFACat 项目架构)

本项目仓库:GitHub:WFACat此文章为 WFACat v2.0 一 软件概况 软件功能概述: 可以分析任意微博用户的二度人脉(全部为互关好友)情况,人脉深度为 2(生成数据可视化软件 Gephi 所需要的节点文件和边文件 node.csv、edge.csv)。 模块化设计,可以..


Python 项目的创建开发、安装部署问题

参考:1、 pipenv 笔记2、 python的构建工具setup.py3、 关于python打包成exe的一点经验之谈4、 使用pycharm将python项目打包成exe运行文件5、 pyinstaller参数介绍以及总结 一 项目创建 全新的项目: 已经安装了 Pipenv 库。..


用爬虫和 Gephi 研究微博好友二度人脉分析

一 处理数据 使用图数据结构处理社交网络数据: 每个节点就是一个人。 每个节点的度表示关系数。 为 Gephi 数据可视化软件准备数据: 节点 csv 文件:node.csv(列标题:id、label;值分别是微博用户 uid、微博用户名。) 边 csv 文件:edge.csv(列标..


通过微博手机客户端爬取数据的分析

参考:1、 爬虫打破封禁的六种方法2、 接口访问频次权限 3、 friendships/friends/bilateral4、 微博 SDK 一 想法 此处参考我的另一篇博文:《爬虫:微博好友关系分析》 通过微博抓取微博好友,然后抓取好友的好友,以自己到直接好友为一度人脉,依次类推。/..


Python 软件项目文件结构组织

参考:1、 有趣的Python爬虫和Python数据分析小项目2、 python基础6–目录结构3、 开篇python–明白python文件如何组织,理解建立源文件4、 Open Sourcing a Python Project the Right Way5、 python模块和包,项目结构..


数据可视化软件 Gephi 的基本使用

参考:1、 Gephi 官方教程2、 GEPHI中文教程3、 Gephi 入门使用4、 介绍用Gephi进行数据可视化5、 Gephi网络图极简教程6、 Gephi学习笔记-画出图形基本流程7、 Gephi快速入门指南 PDF 文档8、 使用Gephi分析论坛社交关系网络9、 GEPHI – ..


Python 全栈开发(流程方法总结)

参考:1、 Python Web 入坑指南 一 开发前准备 基础环境: 安装 Python 某个版本的安装包。 安装 IDE 或编辑器:PyCharm(本文以此为例。设置好要使用的 Python 解释器、编码等),VSCode(将配置备份,使用 setting sync)。 基础配置..


前端开发知识思维导图版(转载)

参考:1、 GitHub:frontend-system-map2、 前端知识归纳3、 HTML详细版脑图4、 CSS学习 | 思维导图5、 CSS脑图详细版6、 十张思维导图掌握javascript重点7、 HTML,CSS,JavaScript知识树思维导图 一 知识点清单1 前端体系 ..


Dev-C++、CodeBlocks 两款 C 语言 IDE 的使用

一 概述 各种 IDE 差别不大,学会使用一种触类旁通。 主要功能:建立项目、代码编辑、调试、构建。 Dev-C++ 现已经停止维护,其不同之处在于 Dev-C++ 可以不用建立项目,编译单个 .C 文件,但是想要多个 c 文件的话,必须建立工程项目。 二 Dev-C++1 设置为中文Dev-..


CI/CD 工具 Jenkins 的基本使用(Hexo 为例)

参考:1、 [小题大做] Github + Jenkins 实现自动化部署 hexo 博客静态文件2、 ubuntu搭建Jenkins自动化部署服务 一 概述 示例:Hexo 的 CI/CD 持续集成和部署:把 nodejs 环境、Git、Jenkins 打包成 docker 镜像,然后在 ..