今年三月，开始转向期货。入金一万，刚好做一个月，亏损3000整，加上成本，净亏3764.56。品种方面，开始尝试过螺纹钢、菜粕，最后看了下各个品种的手续费及波动性，决定只做郑醇日内。最近一周最惨，亏损3030.67。而且主要就发生在28、29号两天。开始交易发生一笔大亏，随后就频繁重仓交易，企图一笔回本。结果是越输越惨。24号也发生了同样的事情，一开始亏损了500多，然后在尾盘一笔3手的空单...
阅读更多 →
接上篇《Python 爬虫：模拟登录知乎》。分析页面请求LZ准备从知乎的话题页抓取所有的话题及其结构，在页面上获取话题共有两类ajax request，分别是「显示子话题」和「加载更多」，两者都是一次输出10个话题。request url如下：https://www.zhihu.com/topic/19776749/organize/entire?child=&parent=1955...
阅读更多 →
在BeautifulSoup中，用contents或children遍历子节点的时候，如果节点下存在字符串，则会同时获取Tag和NavigalbeString对象。这是一个非常坑爹的特性，一方面通常获取子节点主要是得到Tag，另一方面，bs已经提供了strings及stripped_strings单独获取节点下的字符串，这里就是多此一举。下面以contents为例，来看看这个问题的具体情况并...
阅读更多 →
接上一篇《Python 爬虫：抓取知乎某一话题下的全部问题》，需要说明的是我换了开发环境及一些工具库，现在用的是环境：Python 3.5HTTP请求：requestXML处理：BeautifulSoup + lxml能够抓取一个话题下的问题后，我在想要如何抓取知乎全站数据呢？传统的方法，随便从某一个页面（通常是首页）开始抓取，然后提取页面中的URL，再根据提取到的URL去抓下一个页面。但对...
阅读更多 →
前两天做query分析时候，需要从20w随机query中筛选出包括股票实体的query，股票实体大概5000多个。于是写了个循环处理，代码如下：# 读取query
with open('query_20w.txt', 'r', encoding='utf-8') as fq:
query = fq.readlines()
#...
阅读更多 →