Author Archives: marsdream
开源书籍-Python爬虫教程从0到1
《Python爬虫教程从0到1》是一本从 0 到 1 学习 Python 爬虫的开源中文教程，内容含有如何抓包，各种爬虫常用的模块使用，实战教程，以及如何反爬虫的技术。遵守MIT开源协议。 具体内容包括浏览器抓包，手机APP抓包，如 fiddler、mitmproxy，各种爬虫涉及的模块的使用，如：requests、beautifulSoup、selenium、appium、scrapy等，以及IP代理，验证码识别，Mysql，MongoDB数据库的python使用，多线程多进程爬虫的使用，css 爬虫加密逆向破解，JS爬虫逆向，分布式爬虫，爬虫项目实战实例等。
Linux基金会发布-2020 年开源就业报告
Linux基金会与在线课程公司 edX联合发布2020 年开源就业报告。报告分析了开源领域的就业形势，开源界需要的技能，求职者动机，雇主如何吸引更好的雇员， 以及COVID-19 疫情对招聘趋势的影响。调研数据基于全球企业、中小型企业（SMB）、政府组织和人事代理机构的 175 多名招聘经理的数据，以及 900 多名开源专业人员的调查。 主要结论： 尽管COVID-19 和全球经济放缓，但仍有 37％ 的招聘经理表示，将在未来六个月内招聘更多技术熟练的专业人员。 在线培训在 COVID-19 时代受到欢迎： 80％ 的雇主表示，为员工提供在线培训课程学习开源软件。 比起两年前，数据增长 66％…
开源系统TrueOS项目停止
TrueOS官网宣布，暂停TrueOS项目的继续开发。主要原因是团队将把更多精力放在其他项目上，如TrueNAS CORE。TrueOS是基于 FreeBSD的类 Unix 操作系统。最初由 FreeBSD 专家 Kris Moore 于 2005 年初创立，当时被命名为 PC-BSD。2006 年 8 月，它被 评选为最适合初学者的操作系统。2016 年，PC-BSD 更名为 TrueOS。 实际早在2020年初，项目主干就曾在社区论坛上表示项目已死。不过官方表示TrueOS 源代码将保留在 GitHub 上，以供其他感兴趣继续的人来使用。
Youtube-dl被Github下线
youtube-dl 是一个开源的命令行工具，支持大部分视频网站包括YouTube和Vimeo等，用户可以选择下载视频，或是将视频流直接导出到播放器中，也支持以JSON的形式获取可下载资源的URL,，以及转换格式如MP3。目前Github收到了美国唱片业协会（RIAA）的 DMCA 通知后，下线了youtube-dl项目。
开源的系统安全监控平台-Glances
Glances是一款跨平台的开源系统安全监控系统。基于Python 编写，遵守LGPL开源协议。可以通过终端terminal, 或者网页版调用Web API (XML-RPC 和 RESTful)来显示系统信息，包括监控 CPU、平均负载、内存、网络接口、磁盘 I/O，文件系统空间利用率、挂载的设备、所有活动进程以及消耗资源最多的进程等。支持在配置文件中设置阀值（careful小心、warning警告、critical致命），用不同颜色显示系统的瓶颈信息。支持多操作系统：GNU/Linux, BSD, Mac OS 以及 Windows。