Python + selenium 爬取选股宝首页新闻

发表于 2019-01-12 | 阅读次数：

利用Python + Selenium 爬取选股宝首页新闻及利好,利空消息.

直接附上源码:

阅读全文 »

通过asyncio+aiohttp实现异步请求

发表于 2019-01-06 | 阅读次数：

asyncio+aiohttp示例

通过python自带的包asyncio可以实现异步io, 但是由于asyncio只支持TCP请求, 不支持HTTP请求, 所以我们需要对请求进行封装. 调用第三方包aiohttp可以很方便的实现封装.

直接上代码:

#!/usr/bin/env python
# -*- coding: utf-8 -*-
# @Time    : 2019/1/6 18:16
# @Author  : Vince
# @Site    : https://zws910.github.io


import aiohttp
import asyncio


@asyncio.coroutine
def fetch_aync(url):
    print(url)
    # response = yield from aiohttp.request('GET', url)
    response = yield from aiohttp.ClientSession().get(url)
    print(url, response)
    response.close()


tasks = [
    fetch_aync('http://www.baidu.com'),
    fetch_aync('http://www.google.com'),
]

event_loop = asyncio.get_event_loop()
results = event_loop.run_until_complete(asyncio.gather(*tasks))
event_loop.close()

阅读全文 »

python列表查询、冒泡排序、快速排序、堆排序

发表于 2019-01-03 | 更新于 2019-01-06 | 阅读次数：

列表查询:

def bin_search(data_set, val):
    low = 0
    high = len(data_set) - 1
    while low <= high:
        mid = (low + high) // 2
        if data_set[mid] == val:
            return mid
        elif data_set[mid] < val:  # val在右边
            low = mid + 1
        else:  # val在左边
            high = mid - 1
    return  # 没找到

冒泡排序:

def bubble_sort(li):
    for i in range(len(li) - 1):
        exchange = False
        for j in range(len(li) - i - 1):
            # 升序排列
            if li[j] > li[j + 1]:
                li[j], li[j + 1] = li[j + 1], li[j]
                exchange = True
        if not exchange:
            break

阅读全文 »

个人项目展示 / Projects

发表于 2019-01-02 | 阅读次数：

基于node.js + Express + mongoDB的博客系统

github: https://github.com/zws910/nodejs_projects/tree/master/nodejs-demo

nodejs

Ubuntu 16.04 安装MongoDB

发表于 2018-12-30 | 阅读次数：

之前ubuntu 16.04上安装的MongoDB出现了问题, 这里记录一下重新安装的过程.

卸载MongoDB

1	sudo apt-get --purge remove mongodb mongodb-clients mongodb-server

通过apt-get安装

1. 添加mongodb签名到APT

1	$ sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv EA312927

阅读全文 »

redis事务及持久化 / Redis Transaction

发表于 2018-10-21 | 阅读次数：

简单事务控制

redis是单线程处理所有client的请求
multi当前client连接进入一个事务上下文, 该连接后续的命令不会立即执行, 而是放到队列(Queue)中, 直到接收到exec指令后才会按顺序执行

redis 127.0.0.1:6379> multi
OK
redis 127.0.0.1:6379> set age 10
QUEUED
redis 127.0.0.1:6379> set age 20
QUEUED
redis 127.0.0.1:6379> exec
1) OK
2) OK
redis 127.0.0.1:6379> get age
"20"
redis 127.0.0.1:6379>