神級程序員帶來一篇Requests 自動登錄案例！看完能接兼職做！

Python requests 自動登錄某財BBS，自動簽到打卡領銅錢，最後再配個plist，每天自動執行。在給大家分享之前呢，小編推薦一下一個挺不錯的交流寶地，裡面都是一群熱愛並在學習Python的小夥伴們，大幾千了吧，各種各樣的人群都有，特別喜歡看到這種大家一起交流解決難題的氛圍，群資料也上傳了好多，各種大牛解決小白的問題，這個Python群：330637182 歡迎大家進來一起交流討論，一起進步，儘早掌握這門Python語言。

某財的用戶應該都知道這個網站，在“簽到有禮”版塊，每天會有一貼，用帖子中給出的關鍵字回帖，得銅錢，據說銅錢可以換現金，還可以換書。

真好，裸辭在家的失業人員最需要這個～每天領之。

基本思路：

1. 先用抓包工具仔細分析下登陸以及回帖時post了哪些數據，這些數據從何而來（我用的Firefox ＋ Firebug，挺好用的，選上保持＋全部，就算頁面重定向，所有的請求也都能看到）；

2. python requests庫，用requests.Session().post來登陸和回帖，用get來讀取頁面內容；

3. 登陸之後，拿到BBS首頁HTML源碼，正則＋BeautifulSoup，找到“簽到有禮”子版塊的相對URL，以及它的forumID，跟baseURL拼接得到子版塊URL；

4. get子版塊URL，拿到子版塊首頁HTML源碼，相同的方法，得到當日簽到帖子的相對URL和threadID；

5. get簽到帖子URL，找到帖子裡的關鍵字，post回帖之；

6. 然後再一路找到自己信息欄，看看自己的銅錢數；

7. 最後，把這一路走來的中間過程和狀態寫入到log文件裡，方便出問題後反查。

8. 最後的最後，使用寫個.sh腳本，裡面運行這個python程序，配置個相應的plist，每天自動執行（MAC OS）

先說說我踩過的坑：

• 登陸post之後，返回的是200狀態值，也就是成功，但是回帖post時，永遠提示未登陸，肯定是cookie出了問題，但是requests是自動保持cookie和session的，吭吭哧哧大半天之後，crab大神一語點醒了我。仔細看抓包工具裡的相關包，仔細看post之後，響應的content！！！這 個網站登陸數據post之後，響應的content裡面有兩個鏈接，乍一看，都是什麼API...沒猜錯的話，這個鏈接就是種cookie的。從抓包工具 裡也能清楚的看到，post登陸數據之後，立馬連著兩個get，請求的URL正是post之後，響應的content裡面的那兩個URL。

小知識點GET：

• f = open(file,'r+')

• f = open(file,'w+')

• 乍一看，r+ 跟 w+ 沒區別，其實有很大區別：r+ 方式，文件必須存在，否則會報錯，用r+方式寫的時候，它是從頭開始覆蓋的，覆蓋到哪裡算哪裡；而w+方式，文件不存在時會新建，寫入的時候是全部清空再寫入的。a+則是可讀可寫，並且是用追加方式寫入的。

下面程序運行方法：python 路徑/Auto_Login_Reply.py 用戶名/密碼，這種方式有個好處，不用改.py裡面的用戶名密碼參數，直接帶參數運行。

本程序是面向過程的，從頭至尾，一氣呵成。

python真好，既能面向對象，也能面向過程，靈活巧妙，贊！

#print os.path.abspath('.')log_list = []log_list.append('+++++++++++++++++++++++++++++++++++++++++++++n')log_list.append('++++挖財簽到有禮'+(time.strftime("%m.%d %T"))+' 每天簽到得銅錢++++n')log_list.append('+++++++++++++++++++++++++++++++++++++++++++++n')s = requests.Session()agent = 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.10; rv:38.0) Gecko/20100101 Firefox/38.0'connection = 'keep-alive's.headers. update({'User-Agent':agent,'Connection':connection})'''~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~post login request to this URL, observed in Firebug~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~'''login_url = 'https://www.wacai.com/user/user!login.action?cmd=null'login_post_data ={'user.account':username,'user.pwd':pwd}try:login_r = s.post(login_url,login_post_data)except Exception,e:log_list.append(time.strftime("%m.%d %T") + '--Login Exception: '+ e + '.n')#print login_r.content'''~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~these two get() are very import!!!login_r.content return these 2 api URLs.Without getting these 2 URLs, the BBS will not take our session as already login.I assume, getting these 2 URLs, some critical cookie will be returned.~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~'''src1 = login_r.content[login_r.content.find('src')+5:login_r.content.find('"></script>')]src2 = login_r.content[login_r.content.rfind('src')+5:login_r.content.rfind('"></script><script>')]#print src1#print src2s.get(src1)s.get(src2)base_url = 'http://bbs.wacai.com/'homepage_r = s.get(base_url)if '我的挖財' in homepage_r.content:log_list.append(time.strftime("%m.%d %T") + '--Successfully login.n')'''~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~find the checkin forum URL and ID, which is used as fid parameter in the reply post URL~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~'''pattern = '<.+>簽到有禮<.+>'p = re.compile(pattern)soup = BeautifulSoup(p.findall(homepage_r.content)[0])checkin_postfix = soup.a['href']checkin_forum_url = base_url+ checkin_postfix#print checkin_forum_urlforum_id = checkin_postfix[checkin_postfix.find('-')+1:checkin_postfix.rfind('-')]if forum_id != '':log_list.append(time.strftime("%m.%d %T") + '--Successfully find the checkin forum ID.n')'''~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~get the checkin forum portal page and find today's thread URL and ID, which is used as tid parameter in the reply post URL~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~'''checkin_forum_page=s.get(checkin_forum_url)#print checkin_forum_page.status_codetitle = '簽到有禮'+(time.strftime("%m.%d")+'0').strip('0')+'每天簽到得銅錢，每人限回一次'pattern_1 = '<.+>'+title + '<.+>'p_1 = re.compile(pattern_1)soup = BeautifulSoup(p_1.findall(checkin_forum_page.content)[0])thread_postfix = soup.a['href']thread_url = base_url + thread_postfixthread_id= thread_postfix[thread_postfix.find('-')+1:thread_postfix.rfind('-')-2]#print thread_idif thread_id != '':log_list.append(time.strftime("%m.%d %T") + '--Successfully find the thread ID.n')t = s.get(thread_url)'''~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~formhash is a must in the post data, observed in Firebug.So get the formhash from the html of the page~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~'''pattern_2 = '<input type="hidden" name="formhash" .+/>'p_2 = re.compile(pattern_2)soup = BeautifulSoup(p_2.findall(t.content)[0])formhash = soup.input['value']pattern_3 = '回帖內容必須為'+'.+'+'</font>非此內容將收回銅錢獎勵'result_3 = re.compile(pattern_3).findall(t.content)#print result_3key = result_3[0][result_3[0].find('>')+1:result_3[0].rfind('<')-1]if key != '':log_list.append(time.strftime("%m.%d %T") + '--Successfully find the key word.n')'''~~~~~~~auto reply~~~~~~~~~~'''host='bbs.wacai.com's.headers.update({'Referer':thread_url})s.headers.update({'Host':host})reply_data={'formhash':formhash,'message':key,'subject':'','usesig':''}reply_post_url = 'http://bbs.wacai.com/forum.php?mod=post&action=reply&fid='+forum_id+'&tid='+thread_id+'&extra=&replysubmit=yes&infloat=yes&handlekey=fastpost&inajax=1'try:reply_r = s.post(reply_post_url,data=reply_data)except Exception,e:log_list.append(time.strftime("%m.%d %T") + '--Reply exception: '+ e +'.n' )if '非常感謝，回覆發佈成功，現在將轉入主題頁，請稍候……' in reply_r.content:#successlog_list.append(time.strftime("%m.%d %T") + '--Successfully auto reply.n')else:log_list.append(time.strftime("%m.%d %T") + '--Fail to reply: '+ reply_r.content + '.n')'''~~~~~~~~~~~~~~find my WaCai URL~~~~~~~~~~~~~~~~~'''pattern_4 = '<.+訪問我的空間.+</a>'p_4 = re.compile(pattern_4)soup = BeautifulSoup(p_4.findall(t.content)[0])if soup.a['href'] != '':log_list.append(time.strftime("%m.%d %T") + '--Successfully find my WaCai link.n' )mywacai_url = base_url + soup.a['href']mywacai_page = s.get(mywacai_url)'''~~~~~~~~~~~~~find my info URL~~~~~~~~~~~~~~~~'''pattern_5 = '<.+個人資料</a>'p_5 = re.compile(pattern_5)soup = BeautifulSoup(p_5.findall(mywacai_page.content)[0])if soup.a['href'] != '':log_list.append(time.strftime("%m.%d %T") + '--Successfully find my info link.n' )myinfo_url = base_url+ soup.a['href']myinfo_page = s.get(myinfo_url)'''~~~~~~~~~~~~~~find my coin info~~~~~~~~~~~~~~~~~'''pattern_6 = '<em>銅錢.+n.+n'p_6 = re.compile(pattern_6)coin = p_6.findall(myinfo_page.content)[0]coin = coin[coin.find('</em>')+5:coin.find('</li>')]if int(coin.strip()) != 0:log_list.append(time.strftime("%m.%d %T") + '--Successfully get my coin amount: %s.n'% int(coin.strip()))log_list.append('n')'''~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~if log.txt does not exist under current executing path, create it.write log, if the log file is larger than 100 lines, delete all then write from beginning~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~'''file = os.path.abspath('.')+'/log.txt'#get the absolute path of .py executingif not os.path.isfile(file):#not exist, create a new onef = open(file,'w')f.close()if os.path.getsize(file)/1024 > 1024:#larger than 1MBf = open(file,'w')try:f.write('')finally:f.close()f = open(file,'a')#appendtry:f.writelines(log_list)finally:f.close()</span></span>

最後是plist，mac電腦用這個配置定時任務，windows的話，寫個bat，然後也可以配置的貌似。

先寫個test.sh腳本，注意用chmod 777 test.sh給它賦予可執行的權限：

cd /Users/Sophie/PycharmProjects/Auto_Login_Reply_BBS_WaCai

python Auto_Login_Reply.py username/password

然後到如下路徑

~/Library/LaunchAgents，新建個plist文件，文件名為：wacai.bbs.auto.login.reply.plist。

注 意label不要跟別的重複，寫個特別點的，ProgramArguments裡面寫上test.sh的絕對路 徑，StartCalendarInterval裡面配置成幾點幾分自動執行，最後的StandardOutPath和 StandardErrorPath要不要都行，要更好，出錯了可以看看錯誤信息。

<span style="font-size:14px;"><span style="font-size:12px;"><?xml version="1.0" encoding="UTF-8"?><!DOCTYPE plist PUBLIC "-//Apple//DTD PLIST 1.0//EN" "http://www.apple.com/DTDs/PropertyList-1.0.dtd"><plist version="1.0"><dict><key>Label</key><string>wacai.bbs.auto.login.reply</string><key>ProgramArguments</key><array><string>/Users/Sophie/PycharmProjects/Auto_Login_Reply_BBS_WaCai/test.sh</string></array><key>StartCalendarInterval</key><dict><key>Minute</key><integer>30</integer><key>Hour</key><integer>1</integer></dict><key>StandardOutPath</key><string>/Users/Sophie/PycharmProjects/Auto_Login_Reply_BBS_WaCai/run.log</string><key>StandardErrorPath</key><string>/Users/Sophie/PycharmProjects/Auto_Login_Reply_BBS_WaCai/runerror.log</string></dict></plist></span></span>

編輯好了之後

launchctl load wacai.bbs.auto.login.reply.plist 啟用這個plist

launchctl start wacai.bbs.auto.login.reply 立即執行一次，注意，這裡是那個label值，不帶plist後綴的

修改plist之後，要launchctl unload .... 再 launchctl load...重新加載

還可以用launchctl list | grep wacai 來看看執行狀態，一般，有了PID，並且status為0即為一切正常，否則，哪裡有問題導致執行出了問題。

最後附上某財網站截圖，希望頁面不要頻繁變動，不然我就得debug改腳本了 = =#