主頁 > 後端開發 > 手把手教你利用 python 爬蟲分析基金、股票

手把手教你利用 python 爬蟲分析基金、股票

2021-02-26 11:14:58 後端開發

手把手教你利用 python 爬蟲分析基金、股票

文章目錄

  • 手把手教你利用 python 爬蟲分析基金、股票
      • 第一步:基金資料爬取
      • 第二步:股票增持計算
      • 第三步:好股基金選取

從前大家朋友圈都在曬美食,曬旅游,曬玩樂,現在翻來朋友圈一看,竟然有很多人在曬炒股,這是一個好現象,說明人民日益增長的美好生活需要,已經從溫飽休息,變成了投資和理財,股票和基金等似乎依然還是大眾眼中新鮮和高級的事物,買過股票,漲漲跌跌,也值得網上凡爾賽一番,
在通貨膨脹的時代,錢放著就是在貶值,如果你有余錢且有些許碎片化時間的話,投資和理財是很有必要的,股票對于大部分散戶來說,無疑是坐等著被割韭菜,所以,比起股票,對于散戶,我更建議買一些基金,當然,若是真的鐘情于股票,倒是可以花一些無關緊要丟了也罷的小錢玩一玩,
經常會聽到別人喜歡給人推薦股票,這種人都是新手,因為真正經歷了股海沉浮的人,是不敢給人推薦股票的,這句話懂的人都懂,每一個炒股的人,都應該有自己的選股系統,否則,你憑別人推薦贏得的錢,遲早會憑自己的無知輸掉,
我想了想,花了一天的時間,爬了些資料,寫了兩個基金推薦的程式,一個是網上流行的 4433 法則,另外一個我自己想的,基于最受歡迎股票的持倉穩合度,我不買基金,需要我推薦基金的可以找我,去年來行情那么好,投資回報只做到 30% 的,都算是差的,
不妨和大家分享一下我的選股和選基金的思路,簡單來說就是“抄作業”,
作為專業投資機構,基金公司選擇股票都有特定的程式,一般基金公司有自己的研究人員,研究人員把自己的研究結果匯總給基金經理,基金公司也會從券商的研究機構那里付費買研究報告,另外,基金公司的研究團隊還經常到上市企業實地考察,以便了解第一手資料,基金經理根據匯總過來的資料和自己的經驗判斷大盤走勢、板塊趨勢及個股存在的機會,然后有的還要經過開會討論,集思廣益,最后才讓操盤人員買賣股票,
作為普通人,我們大概率是比不上這些機構的,那么我們應該怎么做?我們可以抄基金公司的作業呀,把別人的成果據為己有,站在巨人的肩膀上看問題,不香么,現在問題來了,根據法律規定基金公司在特定時間,只會公布上一個季度的持倉資料,那么它的作業就是老作業,布置了新作業,卻交上一次的作業,肯定是不行的,那有什么辦法呢?有,就是多抄幾分作業,用頻率來替代概率,我的程式可以抄所有基金公司的作業,把它整合成一個作業,雖然不那么完美,但是總歸是不錯的,怎么樣把七千多份作業抄成一份,這就是我的賣點所在,我不懂選股,但是我希望能站在基金這個巨人的肩膀上看問題,總是不會錯的,
學資料科學的應該清楚,資料分析的三板斧,其實非常有用的一招就是“count”(數數),小學就會的,最簡單的,也是非常有效的,

廢話不多說,直接上菜,

第一步:基金資料爬取

打開天天基金網,通過瀏覽器的開發者工具,我們能觀察到用戶的請求和資料的回傳程序,從而利用正則運算式,以及 xpath 等工具,輔以一點 python 爬蟲的知識,很容易就能獲取到每支基金的增長率和持倉情況,

我所用到的代碼如下,

XMtool.py:

# In[]: 
#!/usr/bin/env python
# coding: utf-8
# encoding=utf-8
import pandas as pd
import requests
from lxml import etree
import re
#import collections
import numpy as np


# In[]: 
sample = '150000'#樣本數量
sc = '6yzf'#排序鍵值
st = 'desc'#排序方式
ft = 'gp'#基金型別
dx = '1'#是否可購
season = 1#季度選擇


r1r = 1#日增長率
r1z = 1#近1周
r1y = 1#近1月
r3y = 0.3333#近3月
r6y = 0.3333#近6月
r1n = 0.25#近1年
r2n = 0.25#近2年
r3n = 0.25#近3年
rjnl = 0.25#今年來
rcll = 1#成立來


    
sd = '2021-01-07'
ed = '2021-02-07'

# In[] 在引數文書寫單元后加上這么一段就可以了
#from PyQt5.QtWidgets import QInputDialog, QLineEdit, QDialog
from PyQt5.QtWidgets import QDialog
import sys
from PyQt5.QtWidgets import QApplication
import dialog
class TestDialog1(QDialog,dialog.Ui_XMtool):  
    def __init__(self,parent=None):  
        super(TestDialog1,self).__init__(parent)  
        self.setupUi(self)

app=QApplication(sys.argv)  
dlg=TestDialog1()  
dlg.show()  
app.exec_()

sample = dlg.sample.text() #樣本數量
sc = dlg.sc.currentText() #排序鍵值
st = dlg.st.currentText() #排序方式
ft = dlg.ft.currentText() #基金型別
dx = dlg.dx.currentText() #是否可購
season = int(dlg.season.currentText()) #季度選擇


r1r = float(dlg.r1r.text()) #日增長率
r1z = float(dlg.r1z.text())#近1周
r1y = float(dlg.r1y.text())#近1月
r3y = float(dlg.r3y.text())#近3月
r6y = float(dlg.r6y.text())#近6月
r1n = float(dlg.r1n.text())#近1年
r2n = float(dlg.r2n.text())#近2年
r3n = float(dlg.r3n.text())#近3年
rjnl = float(dlg.rjnl.text())#今年來
rcll = float(dlg.rcll.text())#成立來

# In[]:
header = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/88.0.4324.96 Safari/537.36',
        'Referer': 'http://fund.eastmoney.com/data/fundranking.html',
        'Cookie':'st_si=74949607860286; st_asi=delete; ASP.NET_SessionId=gekyucnll0wte0wrks2rr23b; _adsame_fullscreen_18503=1; EMFUND1=null; EMFUND2=null; EMFUND3=null; EMFUND4=null; EMFUND5=null; EMFUND6=null; EMFUND7=null; EMFUND8=null; EMFUND0=null; EMFUND9=02-07 16:37:21@#$%u521B%u91D1%u5408%u4FE1%u5DE5%u4E1A%u5468%u671F%u80A1%u7968A@%23%24005968; st_pvi=90009717841707; st_sp=2021-02-07%2012%3A14%3A29; st_inirUrl=https%3A%2F%2Fwww.baidu.com%2Flink; st_sn=21; st_psi=2021020716562364-0-0372414431'
}
url = 'http://fund.eastmoney.com/data/rankhandler.aspx?op=ph&dt=kf&ft='+ft+'&rs=&gs=0&sc='+sc+'&st='+st+'&sd='+sd+'&ed='+ed+'&qdii=&tabSubtype=,,,,,&pi=1&pn='+sample+'&dx='+dx+'&v=0.2692835962833908'
response = requests.get(url=url, headers=header)
text = response.text
data = text.split('=')[1]#使用等號分開去后面一部分
compile_data = re.findall("{datas:\\[(.*)\\],allRecords", str(data))[0]#取datas和allRecords中的所有內容
strip_data = str(compile_data).strip('[').strip(']')#移除字串頭尾的中括號
replace_quta = strip_data.replace('"', "")#雙引號替換為空
quota_arrays = replace_quta.split(",")#使用逗號轉為串列
intervals = [[i * 25, (i + 1) * 25] for i in range(15000)]#生成10000個區間,每個區間長度為25
narrays = []
for k in intervals:
    start, end = k[0], k[1]
    line = quota_arrays[start:end]#將條目25個分為一組,表示一只基金
    narrays.append(line)
header = ["基金代碼", "基金簡稱", "基金條碼", "日期",
          "單位凈值", "累計凈值", "日增長率", "近1周", "近1月", "近3月", "近半年", "近1年", "近2年", "近3年",
          "今年來", "成立來", "其他1", "其他2", "其他3", "其他4", "其他5", "其他6", "其他7", "其他8", "其他9"]
df = pd.DataFrame(narrays, columns=header)#生成pd資料結構
df.dropna()
total = df.count()[0]
print("共有{}支基金!".format(total))
df = df.head(total)
df_part = df[["基金代碼", "基金簡稱", "日增長率", "近1周", "近1月", "近3月", "近半年", "近1年", "近2年", "近3年",
          "今年來", "成立來"]]#挑選部分感興趣的條目
df.to_csv("./基金增長率.csv", encoding="utf_8_sig")

# In[]:
df_picked_part = df_part
rates = [r1r,r1z,r1y,r3y,r6y,r1n,r2n,r3n,rjnl,rcll]
i = -1
for sc in ["日增長率", "近1周", "近1月", "近3月", "近半年", "近1年", "近2年", "近3年",
          "今年來", "成立來"]:
    i = i+1
    #print(sc)
    rate = rates[i]
    rate_num = int(total*rate)
    df_tmp = df_part.sort_values(by=[sc], ascending=False, axis=0)
    df_tmp = df_tmp.head(rate_num)
    df_picked_part = pd.merge(df_picked_part,df_tmp,how='inner')
print(df_picked_part.head(10))
df_picked_part.to_csv("./4433法則結果.csv", encoding="utf_8_sig")

# In[]:
rank_codes = df_part['基金代碼'].values.tolist()
#len_codes = len(rank_codes)
stocks_array = []
stock_funds = []
total_part = int(total/100)+1 #每百分之一報一次進度
for index, code in enumerate(rank_codes):
#    if index < 1:
#        print("<" * 30 + "所有基金的股票池前10情況" + ">" * 30)
#    print(code)
    if index%total_part==0:
        print("<" * 30 + "獲得基金持倉資料中:"+str(index)+"/"+str(total)+ ">" * 30)
    url = "http://fundf10.eastmoney.com/FundArchivesDatas.aspx?type=jjcc&code={}&topline=10&year=&month=&rt=0.5032668912422176".format(code)
    head = {
    "Cookie": "EMFUND1=null; EMFUND2=null; EMFUND3=null; EMFUND4=null; EMFUND5=null; EMFUND6=null; EMFUND7=null; EMFUND8=null; EMFUND0=null; st_si=44023331838789; st_asi=delete; EMFUND9=08-16 22:04:25@#$%u4E07%u5BB6%u65B0%u5229%u7075%u6D3B%u914D%u7F6E%u6DF7%u5408@%23%24519191; ASP.NET_SessionId=45qdofapdlm1hlgxapxuxhe1; st_pvi=87492384111747; st_sp=2020-08-16%2000%3A05%3A17; st_inirUrl=http%3A%2F%2Ffund.eastmoney.com%2Fdata%2Ffundranking.html; st_sn=12; st_psi=2020081622103685-0-6169905557"
    ,
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.125 Safari/537.36"}
    response = requests.get(url, headers=head)
    text = response.text
    div = re.findall('content:\\"(.*)\\",arryear', text)[0]
    html_body = '<!DOCTYPE html><html lang="en"><head><meta charset="UTF-8"><title>test</title></head><body>%s</body></html>' % (
        div)#構造網頁
    html = etree.HTML(html_body)#將傳進去的字串轉變成_Element物件
    stock_info = html.xpath('//div[{}]/div/table/tbody/tr/td/a'.format(season))
    # for ii in stock_info:
    #     print(ii.text)
    #print(season)
    stock_money = html.xpath('//div[{}]/div/table/tbody/tr/td[@class="tor"]'.format(season))
    if stock_money == []:
        stock_money = html.xpath('//div[{}]/div/table/tbody/tr/td[@class="toc"]'.format(season))
    stock_attr = []
    # for i in range(0,len(stock_money)):
    
    stock_money_text = []
    for ii in stock_money:
        ii_text = ii.text
 #       print(ii_text)
        if ii_text!=None:
            ii.text = ii.text.replace('---','0')
            stock_money_text.append(float(ii.text.replace(',','').replace('%','')))
    
#        print(ii.text)
   # stock_money_text.dropna()
    stock_one_fund = []
    if len(stock_info)!=0 and len(stock_money_text)!=0:
        count = -1
        for i in range(0,len(stock_info)):
            stock = stock_info[i]
            if stock.text==None:
                stock.text = '缺失'
            tmp0 = stock.text.split('.')
            tmp = tmp0[0]          
            if stock.text and (tmp.isdigit() or (tmp.isupper() and tmp.isalnum() and len(tmp0)>1)):
    #        if stock.text and stock.text.isdigit():
               # list_tmp = [stock.text,stock_info[i+1].text]
                count = count+1
                stock_one_fund.append([stock_info[i+1].text,
                                       stock_money_text[3*count+0],
                                       stock_money_text[3*count+1],
                                       stock_money_text[3*count+2]])
    #            print(stock_info[i+1].text)
#    if len(stock_one_fund)>1:
  #      print("基金代碼:{}".format(code), "基金持有前10股票池", stock_one_fund)
    stock_funds.append([code,stock_one_fund])
        # print(code)
        # print(stock_one_fund)
#    else:
#        print('發現無持倉基金!')
#   if len(stock_one_fund) > 1 and stock_one_fund:
    stocks_array.extend(stock_one_fund)
print("<" * 30 + "獲得基金持倉資料中:done!!!"+ ">" * 30)
# print("test")
tmp = pd.DataFrame(stock_funds,columns=['基金代碼','十大重倉'])
df_funds_info_extend = pd.merge(df_part,tmp,how='inner',on='基金代碼')
df_funds_info_extend.set_index('基金代碼')
df_funds_info_extend.to_csv("./基金持倉.csv", encoding="utf_8_sig")


# In[]:
stock_info_list = []
for row in df_funds_info_extend.iterrows():
    tenpos = row[1]['十大重倉']
    fund_jc = row[1]['基金簡稱']
    if len(tenpos)!=0:
        tmp = [tenpos[0][0],fund_jc,tenpos[0][1],tenpos[0][2],tenpos[0][3]]
        stock_info_list.append(tmp)
df_stock_info = pd.DataFrame(stock_info_list,columns=['股票簡稱','所屬基金','占凈值比例','持股數_萬','持倉市值_萬'])
df_stock_info.to_csv("./股票被持有資訊.csv", encoding="utf_8_sig")

# In[]
#df_stock_info.loc[:,['股票簡稱','持股數_萬','持倉市值_萬','占凈值比例']]
df_stock_info_cp = df_stock_info
df_stock_info_cp['所屬基金cp'] = df_stock_info['所屬基金']
df_stock_info_gb = df_stock_info_cp.groupby('股票簡稱')
#df_stock_info.drop(axis=1,['所屬基金'])
# for n in df_stock_info_gb:
#     print(n)
#     print('\n')
#stock_agg_result = df_stock_info_gb.agg({'持股數_萬':np.sum,'持倉市值_萬':np.sum,'占凈值比例':np.mean})
stock_agg_result = df_stock_info_gb.agg({'持股數_萬':np.sum,'持倉市值_萬':np.sum,'占凈值比例':np.mean,'所屬基金':len,'所屬基金cp':list})
stock_agg_result.columns = ['被持股數_萬','被持倉市值_萬','平均占比','所屬基金數目','所屬基金集合']
stock_agg_result.to_csv("./股票被持有資訊統計.csv", encoding="utf_8_sig")
# df_stock_info_gb.to_csv("./測驗.csv", encoding="utf_8_sig")

# In[]
rank = 10
stock_agg_result = stock_agg_result.sort_values(by="所屬基金數目",ascending=False)
stock_agg_result_head0 = stock_agg_result.head(rank)
stock_agg_result = stock_agg_result.sort_values(by="被持倉市值_萬",ascending=False)
stock_agg_result_head1 = stock_agg_result.head(rank)
stock_agg_result = stock_agg_result.sort_values(by="平均占比",ascending=False)
stock_agg_result_head2 = stock_agg_result.head(rank)
funds_stocks_count = []
for st_funds_ in stock_funds:
    #st_funds_ = stock_funds[0]
    st_funds = st_funds_[1]
    tmp = [i[0] for i in st_funds]
    df_stock_funds = pd.DataFrame(tmp,columns=['股票簡稱'])
#    print(df_stock_funds)
    count0 = pd.merge(stock_agg_result_head0,df_stock_funds,how='inner',on='股票簡稱').iloc[:,0].size
    count1 = pd.merge(stock_agg_result_head1,df_stock_funds,how='inner',on='股票簡稱').iloc[:,0].size
    count2 = pd.merge(stock_agg_result_head2,df_stock_funds,how='inner',on='股票簡稱').iloc[:,0].size
    jc_tmp = df_part[df_part['基金代碼']==st_funds_[0]].iloc[0,1]
    funds_stocks_count.append([jc_tmp,count0,count1,count2])
df_funds_stock_count = pd.DataFrame(funds_stocks_count,columns = ['基金簡稱','優倉數目_所屬基金數','優倉數目_被持倉市值','平均占比'])
df_funds_stock_count = df_funds_stock_count.sort_values(by=["優倉數目_所屬基金數"], ascending=False, axis=0)
df_funds_stock_count = pd.merge(df_funds_stock_count,df_part,how='inner',on='基金簡稱')
df_funds_stock_count.to_csv("./基金持受歡迎股數目統計.csv", encoding="utf_8_sig")

dialog.py

# -*- coding: utf-8 -*-

# Form implementation generated from reading ui file 'dialog.ui'
#
# Created by: PyQt5 UI code generator 5.9.2
#
# WARNING! All changes made in this file will be lost!

from PyQt5 import QtCore, QtGui, QtWidgets

class Ui_XMtool(object):
    def setupUi(self, XMtool):
        XMtool.setObjectName("XMtool")
        XMtool.resize(701, 622)
        self.verticalLayout = QtWidgets.QVBoxLayout(XMtool)
        self.verticalLayout.setObjectName("verticalLayout")
        self.formGroupBox_2 = QtWidgets.QGroupBox(XMtool)
        self.formGroupBox_2.setObjectName("formGroupBox_2")
        self.gridLayout = QtWidgets.QGridLayout(self.formGroupBox_2)
        self.gridLayout.setObjectName("gridLayout")
        self.label_18 = QtWidgets.QLabel(self.formGroupBox_2)
        self.label_18.setObjectName("label_18")
        self.gridLayout.addWidget(self.label_18, 0, 0, 1, 1)
        self.pushButton = QtWidgets.QPushButton(self.formGroupBox_2)
        self.pushButton.setObjectName("pushButton")
        self.gridLayout.addWidget(self.pushButton, 2, 0, 1, 2)
        self.frame = QtWidgets.QFrame(self.formGroupBox_2)
        self.frame.setObjectName("frame")
        self.formLayout_4 = QtWidgets.QFormLayout(self.frame)
        self.formLayout_4.setObjectName("formLayout_4")
        self.label = QtWidgets.QLabel(self.frame)
        self.label.setObjectName("label")
        self.formLayout_4.setWidget(0, QtWidgets.QFormLayout.LabelRole, self.label)
        self.r1r = QtWidgets.QLineEdit(self.frame)
        self.r1r.setObjectName("r1r")
        self.formLayout_4.setWidget(0, QtWidgets.QFormLayout.FieldRole, self.r1r)
        self.label_2 = QtWidgets.QLabel(self.frame)
        self.label_2.setObjectName("label_2")
        self.formLayout_4.setWidget(1, QtWidgets.QFormLayout.LabelRole, self.label_2)
        self.r1z = QtWidgets.QLineEdit(self.frame)
        self.r1z.setObjectName("r1z")
        self.formLayout_4.setWidget(1, QtWidgets.QFormLayout.FieldRole, self.r1z)
        self.label_3 = QtWidgets.QLabel(self.frame)
        self.label_3.setObjectName("label_3")
        self.formLayout_4.setWidget(2, QtWidgets.QFormLayout.LabelRole, self.label_3)
        self.r1y = QtWidgets.QLineEdit(self.frame)
        self.r1y.setObjectName("r1y")
        self.formLayout_4.setWidget(2, QtWidgets.QFormLayout.FieldRole, self.r1y)
        self.label_4 = QtWidgets.QLabel(self.frame)
        self.label_4.setObjectName("label_4")
        self.formLayout_4.setWidget(3, QtWidgets.QFormLayout.LabelRole, self.label_4)
        self.r3y = QtWidgets.QLineEdit(self.frame)
        self.r3y.setObjectName("r3y")
        self.formLayout_4.setWidget(3, QtWidgets.QFormLayout.FieldRole, self.r3y)
        self.label_5 = QtWidgets.QLabel(self.frame)
        self.label_5.setObjectName("label_5")
        self.formLayout_4.setWidget(4, QtWidgets.QFormLayout.LabelRole, self.label_5)
        self.r6y = QtWidgets.QLineEdit(self.frame)
        self.r6y.setObjectName("r6y")
        self.formLayout_4.setWidget(4, QtWidgets.QFormLayout.FieldRole, self.r6y)
        self.label_6 = QtWidgets.QLabel(self.frame)
        self.label_6.setObjectName("label_6")
        self.formLayout_4.setWidget(5, QtWidgets.QFormLayout.LabelRole, self.label_6)
        self.r1n = QtWidgets.QLineEdit(self.frame)
        self.r1n.setObjectName("r1n")
        self.formLayout_4.setWidget(5, QtWidgets.QFormLayout.FieldRole, self.r1n)
        self.label_7 = QtWidgets.QLabel(self.frame)
        self.label_7.setObjectName("label_7")
        self.formLayout_4.setWidget(6, QtWidgets.QFormLayout.LabelRole, self.label_7)
        self.r2n = QtWidgets.QLineEdit(self.frame)
        self.r2n.setObjectName("r2n")
        self.formLayout_4.setWidget(6, QtWidgets.QFormLayout.FieldRole, self.r2n)
        self.label_8 = QtWidgets.QLabel(self.frame)
        self.label_8.setObjectName("label_8")
        self.formLayout_4.setWidget(7, QtWidgets.QFormLayout.LabelRole, self.label_8)
        self.r3n = QtWidgets.QLineEdit(self.frame)
        self.r3n.setObjectName("r3n")
        self.formLayout_4.setWidget(7, QtWidgets.QFormLayout.FieldRole, self.r3n)
        self.label_9 = QtWidgets.QLabel(self.frame)
        self.label_9.setObjectName("label_9")
        self.formLayout_4.setWidget(8, QtWidgets.QFormLayout.LabelRole, self.label_9)
        self.rjnl = QtWidgets.QLineEdit(self.frame)
        self.rjnl.setObjectName("rjnl")
        self.formLayout_4.setWidget(8, QtWidgets.QFormLayout.FieldRole, self.rjnl)
        self.label_10 = QtWidgets.QLabel(self.frame)
        self.label_10.setObjectName("label_10")
        self.formLayout_4.setWidget(9, QtWidgets.QFormLayout.LabelRole, self.label_10)
        self.rcll = QtWidgets.QLineEdit(self.frame)
        self.rcll.setObjectName("rcll")
        self.formLayout_4.setWidget(9, QtWidgets.QFormLayout.FieldRole, self.rcll)
        self.gridLayout.addWidget(self.frame, 1, 1, 1, 1)
        self.frame_2 = QtWidgets.QFrame(self.formGroupBox_2)
        self.frame_2.setObjectName("frame_2")
        self.label_11 = QtWidgets.QLabel(self.frame_2)
        self.label_11.setGeometry(QtCore.QRect(18, 18, 96, 24))
        self.label_11.setObjectName("label_11")
        self.label_12 = QtWidgets.QLabel(self.frame_2)
        self.label_12.setGeometry(QtCore.QRect(18, 61, 96, 24))
        self.label_12.setObjectName("label_12")
        self.sc = QtWidgets.QComboBox(self.frame_2)
        self.sc.setGeometry(QtCore.QRect(126, 61, 91, 30))
        self.sc.setObjectName("sc")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.addItem("")
        self.sc.setItemText(15, "")
        self.label_13 = QtWidgets.QLabel(self.frame_2)
        self.label_13.setGeometry(QtCore.QRect(18, 103, 96, 24))
        self.label_13.setObjectName("label_13")
        self.st = QtWidgets.QComboBox(self.frame_2)
        self.st.setGeometry(QtCore.QRect(126, 103, 90, 30))
        self.st.setObjectName("st")
        self.st.addItem("")
        self.st.addItem("")
        self.label_14 = QtWidgets.QLabel(self.frame_2)
        self.label_14.setGeometry(QtCore.QRect(18, 145, 96, 24))
        self.label_14.setObjectName("label_14")
        self.ft = QtWidgets.QComboBox(self.frame_2)
        self.ft.setGeometry(QtCore.QRect(126, 145, 90, 30))
        self.ft.setObjectName("ft")
        self.ft.addItem("")
        self.ft.addItem("")
        self.ft.addItem("")
        self.ft.addItem("")
        self.ft.addItem("")
        self.ft.addItem("")
        self.ft.addItem("")
        self.ft.addItem("")
        self.label_15 = QtWidgets.QLabel(self.frame_2)
        self.label_15.setGeometry(QtCore.QRect(18, 187, 96, 24))
        self.label_15.setObjectName("label_15")
        self.dx = QtWidgets.QComboBox(self.frame_2)
        self.dx.setGeometry(QtCore.QRect(126, 187, 55, 30))
        self.dx.setObjectName("dx")
        self.dx.addItem("")
        self.dx.addItem("")
        self.label_16 = QtWidgets.QLabel(self.frame_2)
        self.label_16.setGeometry(QtCore.QRect(18, 229, 96, 24))
        self.label_16.setObjectName("label_16")
        self.season = QtWidgets.QComboBox(self.frame_2)
        self.season.setGeometry(QtCore.QRect(126, 229, 56, 30))
        self.season.setObjectName("season")
        self.season.addItem("")
        self.season.addItem("")
        self.season.addItem("")
        self.season.addItem("")
        self.sample = QtWidgets.QLineEdit(self.frame_2)
        self.sample.setGeometry(QtCore.QRect(126, 18, 151, 30))
        self.sample.setObjectName("sample")
        self.gridLayout.addWidget(self.frame_2, 1, 0, 1, 1)
        self.label_17 = QtWidgets.QLabel(self.formGroupBox_2)
        self.label_17.setObjectName("label_17")
        self.gridLayout.addWidget(self.label_17, 0, 1, 1, 1)
        self.frame.raise_()
        self.frame_2.raise_()
        self.label_18.raise_()
        self.label_17.raise_()
        self.pushButton.raise_()
        self.verticalLayout.addWidget(self.formGroupBox_2)

        self.retranslateUi(XMtool)
        self.pushButton.clicked.connect(XMtool.accept)
        QtCore.QMetaObject.connectSlotsByName(XMtool)

    def retranslateUi(self, XMtool):
        _translate = QtCore.QCoreApplication.translate
        XMtool.setWindowTitle(_translate("XMtool", "股林秘籍小明三式"))
        XMtool.setToolTip(_translate("XMtool", "<html><head/><body><p>歡迎使用小明選股軟體!</p></body></html>"))
        XMtool.setWhatsThis(_translate("XMtool", "<html><head/><body><p>不認識爸爸?</p></body></html>"))
        self.label_18.setText(_translate("XMtool", "基金資料引數設定:"))
        self.pushButton.setText(_translate("XMtool", "小明已確定"))
        self.label.setText(_translate("XMtool", "日增長率"))
        self.r1r.setText(_translate("XMtool", "1"))
        self.label_2.setText(_translate("XMtool", "近1周"))
        self.r1z.setText(_translate("XMtool", "1"))
        self.label_3.setText(_translate("XMtool", "近1月"))
        self.r1y.setText(_translate("XMtool", "1"))
        self.label_4.setText(_translate("XMtool", "近3月"))
        self.r3y.setText(_translate("XMtool", "0.33333"))
        self.label_5.setText(_translate("XMtool", "近6月"))
        self.r6y.setText(_translate("XMtool", "0.33333"))
        self.label_6.setText(_translate("XMtool", "近1年"))
        self.r1n.setText(_translate("XMtool", "0.25"))
        self.label_7.setText(_translate("XMtool", "近2年"))
        self.r2n.setText(_translate("XMtool", "0.25"))
        self.label_8.setText(_translate("XMtool", "近3年"))
        self.r3n.setText(_translate("XMtool", "0.25"))
        self.label_9.setText(_translate("XMtool", "今年來"))
        self.rjnl.setText(_translate("XMtool", "0.25"))
        self.label_10.setText(_translate("XMtool", "成立來"))
        self.rcll.setText(_translate("XMtool", "1"))
        self.label_11.setText(_translate("XMtool", "樣本數量"))
        self.label_12.setText(_translate("XMtool", "排序鍵值"))
        self.sc.setItemText(0, _translate("XMtool", "6yzf"))
        self.sc.setItemText(1, _translate("XMtool", "dm"))
        self.sc.setItemText(2, _translate("XMtool", "jc"))
        self.sc.setItemText(3, _translate("XMtool", "jzrq"))
        self.sc.setItemText(4, _translate("XMtool", "dwjz"))
        self.sc.setItemText(5, _translate("XMtool", "ljjz"))
        self.sc.setItemText(6, _translate("XMtool", "rzdf"))
        self.sc.setItemText(7, _translate("XMtool", "zzf"))
        self.sc.setItemText(8, _translate("XMtool", "1yzf"))
        self.sc.setItemText(9, _translate("XMtool", "3yzf"))
        self.sc.setItemText(10, _translate("XMtool", "1nzf"))
        self.sc.setItemText(11, _translate("XMtool", "2nzf"))
        self.sc.setItemText(12, _translate("XMtool", "3nzf"))
        self.sc.setItemText(13, _translate("XMtool", "jnzf"))
        self.sc.setItemText(14, _translate("XMtool", "lnzf"))
        self.label_13.setText(_translate("XMtool", "排序方式"))
        self.st.setItemText(0, _translate("XMtool", "desc"))
        self.st.setItemText(1, _translate("XMtool", "asc"))
        self.label_14.setText(_translate("XMtool", "基金型別"))
        self.ft.setItemText(0, _translate("XMtool", "all"))
        self.ft.setItemText(1, _translate("XMtool", "gp"))
        self.ft.setItemText(2, _translate("XMtool", "hh"))
        self.ft.setItemText(3, _translate("XMtool", "zs"))
        self.ft.setItemText(4, _translate("XMtool", "qdii"))
        self.ft.setItemText(5, _translate("XMtool", "zq"))
        self.ft.setItemText(6, _translate("XMtool", "lof"))
        self.ft.setItemText(7, _translate("XMtool", "fof"))
        self.label_15.setText(_translate("XMtool", "是否可購"))
        self.dx.setItemText(0, _translate("XMtool", "1"))
        self.dx.setItemText(1, _translate("XMtool", "0"))
        self.label_16.setText(_translate("XMtool", "季度選擇"))
        self.season.setItemText(0, _translate("XMtool", "1"))
        self.season.setItemText(1, _translate("XMtool", "2"))
        self.season.setItemText(2, _translate("XMtool", "3"))
        self.season.setItemText(3, _translate("XMtool", "4"))
        self.sample.setText(_translate("XMtool", "15000"))
        self.label_17.setText(_translate("XMtool", "四四三三法則引數:"))

運行之后,需要填一些引數,如下,
在這里插入圖片描述
確定之后,除了爬下來了我們后面所要用到的全部資料之外,我們還利用 4433 法則,對于基金進行了一個初步的分析和篩選,

第二步:股票增持計算

有了上面爬下來的原始資料之后,我們就可以統計:單股票被基金公司持有的數量、單股票被基金公司持有的市值和持有單股票基金公司的數目,對于不同的相鄰季度,我們可以計算這三個量的增長,又得到三個新的指標,對于不同的指標進行降排序,我們可以得到股票在基金公司中的受歡迎程度,以此得到股票好壞度,指標值作為權重,不同的指標得到的不同的股票排序還可以拿前幾取交集,從而我們就得到了基金公司們期待值比較高的股票,

我所用的代碼如下:

#!/usr/bin/env python
# coding: utf-8
# In[]:
import pandas as pd
#import os
import tkinter as tk
from tkinter import filedialog
def getLocalFile():
    root=tk.Tk()
    root.withdraw()
    filePath=filedialog.askopenfilename()
    print('檔案路徑:',filePath)
    return filePath
#if __name__ == '__main__':
# In[]: 
file1 = getLocalFile()
file2 = getLocalFile()
#sheet1 = pd.read_csv('./all_1/股票被持有資訊統計.csv')
sheet1 = pd.read_csv(file1)
sheet1
#sheet2 = pd.read_csv('./all_2/股票被持有資訊統計.csv')
sheet2 = pd.read_csv(file2)
sheet3 = pd.merge(sheet1,sheet2,how='inner',on='股票簡稱')
sheet3
sheet3['增持股數'] = sheet3['被持股數_萬_x'] - sheet3['被持股數_萬_y']


# In[]:
sheet3['增持市值'] = sheet3['被持倉市值_萬_x'] - sheet3['被持倉市值_萬_y']
#sheet3['增持占比'] = sheet3['平均占比_x'] - sheet3['平均占比_y']
sheet3['增持基金數量'] = sheet3['所屬基金數目_x'] - sheet3['所屬基金數目_y']
sheet3.to_csv('增持情況統計.csv',encoding="utf_8_sig")

第三步:好股基金選取

第二步中,我們其實已經得到了被基金公司看重的股票,如果炒股,直接取其前幾,按其權重進行金額配置即可,現在問題是,國內股票交易,一手起步,選出來的股票很貴,比如說茅臺,你不一定買得起,這時候,我們還是寄希望于買基金,我們希望選出的基金的持倉和我們選出的好股票集合的“相似度”盡可能高,相似度的衡量又很多方法,比如說:基金持有的十大重倉含有好股的數目、基金持有的十大重倉含有好股的市值、基金持有的十大重倉含有好股的占比、基金持有的十大重倉含有好股的加權占比(加權基于增持市值或增持基金數量)等等,

下面是我所用到的代碼,細節可看,

#!/usr/bin/env python
# coding: utf-8

# In[]:
import pandas as pd
#import os


# In[]:
import tkinter as tk
from tkinter import filedialog
def getLocalFile():
    root=tk.Tk()
    root.withdraw()
    filePath=filedialog.askopenfilename()
    print('檔案路徑:',filePath)
    return filePath
#if __name__ == '__main__':


# In[]
print('請輸入增持情況統計:')
increase_hold_add  = getLocalFile()
inc = pd.read_csv(increase_hold_add,index_col = 0)
inc
# In[]:
#print('請輸入比率:')
str_num = input("Enter your number: ")
rate = int(str_num)
rate


# In[]:


inc_sort_zcgs = inc.sort_values(by=["增持股數"], ascending=False, axis=0)
inc_sort_zcsz = inc.sort_values(by=["增持市值"], ascending=False, axis=0)
inc_sort_zcjjsl = inc.sort_values(by=["增持基金數量"], ascending=False, axis=0)
inc_sort_zcgs
inc_sort_zcgs = inc_sort_zcgs.head(rate)
inc_sort_zcsz = inc_sort_zcsz.head(rate)
inc_sort_zcjjsl = inc_sort_zcjjsl.head(rate)
inc_merge = pd.merge(inc_sort_zcsz,inc_sort_zcjjsl,how='inner',on='股票簡稱')
inc_merge
intersec = inc_merge['股票簡稱']
intersec
print('選出來的前{}股票交集為:'.format(rate))
print(intersec)
print('共{}只!'.format(len(intersec)))


# In[]:


print('請選擇基金持倉:')
funds_hold_add = getLocalFile()
funds_hold = pd.read_csv(funds_hold_add,index_col = 0)
stock_funds = funds_hold
stock_funds
intersec
intersec_ex = pd.merge(intersec,inc,how='inner',on='股票簡稱')
intersec_ex['權重_增持市值'] = intersec_ex['增持市值']/intersec_ex['增持市值'].sum()
intersec_ex['權重_增持基金數量'] = intersec_ex['增持基金數量']/intersec_ex['增持基金數量'].sum()
intersec_ex.to_csv("./好股.csv", encoding="utf_8_sig")


# In[ ]:

result = []# pd.DataFrame()
for row in stock_funds.iterrows():
    tenpos = row[1]['十大重倉']
    exec('tps='+tenpos)
    fund_jc = row[1]['基金簡稱']
    #tmp = [i[0] for i in tps]   
    #rate = [r[1] for r in tps]
    list_tmp = [[i[0],i[1]] for i in tps]
    df_stock_rate = pd.DataFrame(list_tmp,columns=['股票簡稱','股票占比'])
 #   good_stock_rate 
 #   df_stock_funds = pd.DataFrame(tmp,columns=['股票簡稱'])
#    print(df_stock_funds)
    good_stock = pd.merge(intersec_ex,df_stock_rate,how='inner',on='股票簡稱')#.iloc[:,0]
    count = good_stock['股票簡稱'].size
    rate_vector = good_stock['股票占比']
    total_rate = rate_vector.sum()
    tmp = (rate_vector.mul(good_stock['權重_增持市值']))#.sum
    tmp = tmp.sum()
    total_rate_weighted_zcsz = tmp
    tmp = (rate_vector.mul(good_stock['權重_增持基金數量']))#.sum
    tmp = tmp.sum()
    total_rate_weighted_zcjjsl = tmp
    #good_stock_jc = good_stock['基金簡稱']   
    result.append([fund_jc,count,total_rate,total_rate_weighted_zcsz,total_rate_weighted_zcjjsl])

pd_result = pd.DataFrame(result,columns = ['基金簡稱','好股數目','好股占比','加權好股占比_增持市值','加權好股占比_增持基金數量'])
pd_result = pd_result.sort_values(by='加權好股占比_增持市值',ascending=False)



pd_result = pd.merge(pd_result,stock_funds,how='inner',on='基金簡稱')


# In[]:


pd_result.to_csv("./基金持好股情況統計.csv", encoding="utf_8_sig")
print('完成!按任意鍵退出!')
stop = input() 

使用以往的資料做個測驗驗證,如下:
在這里插入圖片描述
從上圖可看出,用我的基金選擇策略,選出來的基金一個月漲跌為 15 個點,兩個指數基金翻車,只有百分之五,勉強跑得贏上證,

“風險越高,收益越高”總是不變的鐵律,從這個角度來看,似乎就不必糾結于哪種方案或者策略收益是最高的,差不多就行了,

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/263824.html

標籤:python

上一篇:Py之pandas:利用where、replace等函式對dataframe格式資料按照條件進行資料替換

下一篇:【資料科學筆記】第四章 資料可視化

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Rust中的智能指標:Box<T> Rc<T> Arc<T> Cell<T> RefCell<T> Weak

    Rust中的智能指標是什么 智能指標(smart pointers)是一類資料結構,是擁有資料所有權和額外功能的指標。是指標的進一步發展 指標(pointer)是一個包含記憶體地址的變數的通用概念。這個地址參考,或 ” 指向”(points at)一些其 他資料 。參考以 & 符號為標志并借用了他們所 ......

    uj5u.com 2023-04-20 07:24:10 more
  • Java的值傳遞和參考傳遞

    值傳遞不會改變本身,參考傳遞(如果傳遞的值需要實體化到堆里)如果發生修改了會改變本身。 1.基本資料型別都是值傳遞 package com.example.basic; public class Test { public static void main(String[] args) { int ......

    uj5u.com 2023-04-20 07:24:04 more
  • [2]SpinalHDL教程——Scala簡單入門

    第一個 Scala 程式 shell里面輸入 $ scala scala> 1 + 1 res0: Int = 2 scala> println("Hello World!") Hello World! 檔案形式 object HelloWorld { /* 這是我的第一個 Scala 程式 * 以 ......

    uj5u.com 2023-04-20 07:23:58 more
  • 理解函式指標和回呼函式

    理解 函式指標 指向函式的指標。比如: 理解函式指標的偽代碼 void (*p)(int type, char *data); // 定義一個函式指標p void func(int type, char *data); // 宣告一個函式func p = func; // 將指標p指向函式func ......

    uj5u.com 2023-04-20 07:23:52 more
  • Django筆記二十五之資料庫函式之日期函式

    本文首發于公眾號:Hunter后端 原文鏈接:Django筆記二十五之資料庫函式之日期函式 日期函式主要介紹兩個大類,Extract() 和 Trunc() Extract() 函式作用是提取日期,比如我們可以提取一個日期欄位的年份,月份,日等資料 Trunc() 的作用則是截取,比如 2022-0 ......

    uj5u.com 2023-04-20 07:23:45 more
  • 一天吃透JVM面試八股文

    什么是JVM? JVM,全稱Java Virtual Machine(Java虛擬機),是通過在實際的計算機上仿真模擬各種計算機功能來實作的。由一套位元組碼指令集、一組暫存器、一個堆疊、一個垃圾回收堆和一個存盤方法域等組成。JVM屏蔽了與作業系統平臺相關的資訊,使得Java程式只需要生成在Java虛擬機 ......

    uj5u.com 2023-04-20 07:23:31 more
  • 使用Java接入小程式訂閱訊息!

    更新完微信服務號的模板訊息之后,我又趕緊把微信小程式的訂閱訊息給實作了!之前我一直以為微信小程式也是要企業才能申請,沒想到小程式個人就能申請。 訊息推送平臺🔥推送下發【郵件】【短信】【微信服務號】【微信小程式】【企業微信】【釘釘】等訊息型別。 https://gitee.com/zhongfuch ......

    uj5u.com 2023-04-20 07:22:59 more
  • java -- 緩沖流、轉換流、序列化流

    緩沖流 緩沖流, 也叫高效流, 按照資料型別分類: 位元組緩沖流:BufferedInputStream,BufferedOutputStream 字符緩沖流:BufferedReader,BufferedWriter 緩沖流的基本原理,是在創建流物件時,會創建一個內置的默認大小的緩沖區陣列,通過緩沖 ......

    uj5u.com 2023-04-20 07:22:49 more
  • Java-SpringBoot-Range請求頭設定實作視頻分段傳輸

    老實說,人太懶了,現在基本都不喜歡寫筆記了,但是網上有關Range請求頭的文章都太水了 下面是抄的一段StackOverflow的代碼...自己大修改過的,寫的注釋挺全的,應該直接看得懂,就不解釋了 寫的不好...只是希望能給視頻網站開發的新手一點點幫助吧. 業務場景:視頻分段傳輸、視頻多段傳輸(理 ......

    uj5u.com 2023-04-20 07:22:42 more
  • Windows 10開發教程_編程入門自學教程_菜鳥教程-免費教程分享

    教程簡介 Windows 10開發入門教程 - 從簡單的步驟了解Windows 10開發,從基本到高級概念,包括簡介,UWP,第一個應用程式,商店,XAML控制元件,資料系結,XAML性能,自適應設計,自適應UI,自適應代碼,檔案管理,SQLite資料庫,應用程式到應用程式通信,應用程式本地化,應用程式 ......

    uj5u.com 2023-04-20 07:22:35 more