wyc-blog

道法自然


  • 首页

  • 关于

  • 标签

  • 分类

  • 归档

  • 搜索

软件开发不只写代码那么简单——沟通一直都是问题

发表于 2018-07-27 | 分类于 书籍整理
引言沟通,对于程序员来说一直都是不可回避的。但是往往也是容易忽略的,因为我们就是这样的人群,默默地在深夜工作着,似乎根本不需要与他人沟通,但是在软件开发中,沟通一直都是存在的问题。 经典语录杰出的程序 ...
阅读全文 »

软件开发不只写代码那么简单——程序员的8种境界

发表于 2018-07-26 | 分类于 书籍整理
寄语平心而论,不能为了编程而编程,大多数想要学习编程的人一般都是被盲目的信仰刺激。所以我奉劝看到这篇博客的各位,请下定自己的决心之后,在决定是否仍要踏入这个行业。 什么是程序员?程序员是耗尽毕生精力去 ...
阅读全文 »

mysql死锁——insert操作死锁

发表于 2018-05-21 | 分类于 DBA
mysql基础参数不用的mysql版本,加锁的过程不一样;mysql的数据库引擎和事务隔离方式也对分析死锁有帮助。这里涉及的mysql基础参数的查询方式与此次错误无关。1234567891011121 ...
阅读全文 »

关于jackson转化json的原理

发表于 2018-04-11 | 分类于 spring
背景web工程中,数据交互是不可避免的,相比xml,json是现在流行的数据交互。在调试接口中,发现返回字段的大小写不是我所期望的,原本应该返回的nNum字段变成了nnum,这样就导致和前端约定的有出 ...
阅读全文 »

python网络数据采集——存储数据

发表于 2018-03-25 | 分类于 python
文件下载12345678910111213抛出一个问题:对于爬虫而言,链接中的文件是下载呢,还是只是保存url链接,使用时直接链路?这里我总结我所知道的优缺点:不下载优点:1.爬虫运行更快,耗费的流量 ...
阅读全文 »

python网络数据采集——使用API

发表于 2018-03-19 | 分类于 python
API在网络爬虫的世界里,你可以通过爬取html页面上的信息来收集信息,而使用开放的API接口是另一种方式。这里开放的API接口指的是:服务器可访问的http请求。其实html中的数据也是通过访问ht ...
阅读全文 »

python网络数据采集——链接爬取和跳转

发表于 2018-03-14 | 分类于 python
网页跳转在网络数据采集中,如果只对单页面进行操作,那么这个爬虫将毫无意义。因为采集的数据往往是分散在不同的网页的,所以对于单页面而言,爬虫需要采集页面中的链接,并且进行跳转。网页跳转,在正在采集的页面 ...
阅读全文 »

python网络数据采集——BeautifulSoup

发表于 2018-03-11 | 分类于 python
BeautifulSoupBeautifulSoup 是 python 中最受欢迎的 html 解析库。如果 BeautifulSoup 这个第三方库不能解决问题,读者可以考虑另外两个库:123456 ...
阅读全文 »

python网络数据采集——网络连接

发表于 2018-03-09 | 分类于 python
初识urllib要采集信息,首先你需要将html文件抓取到本地,python中使用urllib这个包来进行网络连接,并且进行html的抓取,如果是python2.x版本,使用的是urllib2这个包。 ...
阅读全文 »

python网络数据采集——简介

发表于 2018-03-04 | 分类于 python
简介网络数据采集(网络爬虫),是一种网络数据的采集方式,又称为网页抓屏,数据挖掘,网络收割或者其他类似的版本。网络数据采集是一种通过多种手段收集网络数据的方式,比如通过api交互,当然如果你有毅力可以 ...
阅读全文 »
1…456…8
wyc

wyc

君埋泉下泥销骨 我寄人间朝与暮
沧海桑田 也输 一纸流年
我曾 把那 蒹葭 叹几遍
才留得 风花雪月几更天

80 日志
22 分类
33 标签
GitHub
© 2020 wyc
由 Hexo 强力驱动
|
主题 — NexT.Mist v5.1.4