Ⅰ 如何用EXCEL power query 獲取需要登錄、選擇「狀態」的網頁數據
1.Excel Power Query爬取網頁數據的強大之處不僅操作簡單，而且後期只需要一鍵刷新即可實時更新
2.中間獲取數據的時候，我是根據自己的需求來勾選數據
3.由於貝貝網的特賣寶貝每天都更新，所以會造成您做案例的時候和我做案例中的寶貝會不一樣，忽略就好，只要過程沒錯，案例中的寶貝不影響最終的數據效果
4.按照此方法，可以獲取貝貝網其他類目的銷售情況，以及其他同類網站的數據
Ⅱ 如何抓取帶登錄賬戶和密碼的網頁數據
用前嗅的ForeSpider數據採集軟體可以採集登錄後才能採集的數據。在ForeSpider里有一個內置瀏覽器，在里邊打開這個網站，和在瀏覽器上一樣輸入用戶名密碼，登錄上去後就可以了。可以設置自動登錄，下次爬蟲還會自動登錄這個網站。
可以下載個免費版的試試，軟體里有一些免費的模板，里邊有一個登錄的案例。幫助文檔里也有登錄的配置步驟。
Ⅲ python怎樣爬取帶驗證碼的網頁
如果只是為了登錄，你可以把驗證碼圖片打出來，看出來驗證碼之後輸入進交互界面，然後連同用戶名密碼一起post，登錄，如果想大量識別驗證碼，就需要分析驗證碼的難易程度，簡單一些的可以模式識別，或者神經網路，復雜的就不行了
Ⅳ 如何獲取網頁上所填寫的用戶名和密碼
獲取網頁上所填寫的用戶名密碼做了個範本.我剛學vc,還望大俠一點說的細):
IHTMLDocument2* pIHTMLDocument2 = (IHTMLDocument2 *)GetDocument();
HRESULT hr;
CString output = "";
CComBSTR bstrTitle;
pIHTMLDocument2->get_title( &bstrTitle ); //取得賬號標題
USES_CONVERSION;
// cout << _T("開始枚舉「") << OLE2CT( bstrTitle ) << _T("」的表單") << endl;
CComQIPtr< IHTMLElementCollection > spElementCollection;
hr = pIHTMLDocument2->get_forms( &spElementCollection ); //取得表單集合
if ( FAILED( hr ) )
{
MessageBox("error");
return;
}
long nFormCount=0; //取得表單數目
hr = spElementCollection->get_length( &nFormCount );
if ( FAILED( hr ) )
{
MessageBox("獲取表單數目錯誤");
return;
}
for(long i=0; i<nFormCount; i++)
{
IDispatch *pDisp = NULL; //取得第 i 項表單
hr = spElementCollection->item( CComVariant( i ), CComVariant(), &pDisp );
if ( FAILED( hr ) ) continue;
CComQIPtr< IHTMLFormElement > spFormElement = pDisp;
pDisp->Release();
long nElemCount=0; //取得表單中 域 的數目
hr = spFormElement->get_length( &nElemCount );
if ( FAILED( hr ) ) continue;
for(long j=0; j<nElemCount; j++)
{
CComDispatchDriver spInputElement; //取得第 j 項表單域
hr = spFormElement->item( CComVariant( j ), CComVariant(), &spInputElement );
if ( FAILED( hr ) ) continue;
CComVariant vName,vVal,vType; //取得表單域的 名，值，類型
hr = spInputElement.GetPropertyByName( L"name", &vName );
if( FAILED( hr ) ) continue;
hr = spInputElement.GetPropertyByName( L"value", &vVal );
if( FAILED( hr ) ) continue;
hr = spInputElement.GetPropertyByName( L"type", &vType );
if( FAILED( hr ) ) continue;
LPCTSTR lpName = vName.bstrVal?
OLE2CT( vName.bstrVal ) : _T("NULL"); //未知域名
LPCTSTR lpVal = vVal.bstrVal?
OLE2CT( vVal.bstrVal ) : _T("NULL"); //空值，未輸入
LPCTSTR lpType = vType.bstrVal?
OLE2CT( vType.bstrVal ) : _T("NULL"); //未知類型
MessageBox(lpName);
}
//想提交這個表單嗎？刪除下面語句的注釋吧
//pForm->submit();
}
Ⅳ 如何把網頁上的登錄密碼提取出來
以谷歌瀏覽器為例，保存網頁密碼設置如下：
1、打開谷歌瀏覽器，找到右上角的自定義及控制一項，點擊。
2、點擊自定義及控制後，在出來的菜單中找到「設置」一項，點擊進入。
3、進入設置後，找到「密碼」一項，點擊進入。
4、進入密碼後，將「提示保存密碼」和「自動登錄」這兩項的開關開啟，以後進入網站登錄後就會提醒保存密碼，然後再次登錄時就會自動登錄。
Ⅵ 如何提取IE瀏覽器網頁用戶名和密碼
解決方法：1、任意打開一個網頁，打開"工具"下"Internet選項":
圖一
2、選擇"Internet選項"下"內容",在選擇"自動完成",將"自動完成功能應用於選項"都打上勾如下圖進行設置，如需保存密碼，將最後一項"提示我保存密碼"前面也打上勾即可：
註：如果清理的COOKIES的話，原來已保存的用戶名和密碼，就會清空了。
Ⅶ 如何用 Python 爬取需要登錄的網站
最近我必須執行一項從一個需要登錄的網站上爬取一些網頁的操作。它沒有我想像中那麼簡單，因此我決定為它寫一個輔助教程。
在本教程中，我們將從我們的bitbucket賬戶中爬取一個項目列表。
教程中的代碼可以從我的 Github 中找到。
我們將會按照以下步驟進行：
提取登錄需要的詳細信息
執行站點登錄
爬取所需要的數據
在本教程中，我使用了以下包（可以在 requirements.txt 中找到）：
Python
requests
lxml
1
2
requests
lxml
步驟一：研究該網站
打開登錄頁面
進入以下頁面 「bitbucket.org/account/signin」。你會看到如下圖所示的頁面（執行注銷，以防你已經登錄）
仔細研究那些我們需要提取的詳細信息，以供登錄之用
在這一部分，我們會創建一個字典來保存執行登錄的詳細信息：
1. 右擊 「Username or email」 欄位，選擇「查看元素」。我們將使用 「name」 屬性為 「username」 的輸入框的值。「username」將會是 key 值，我們的用戶名/電子郵箱就是對應的 value 值（在其他的網站上這些 key 值可能是 「email」，「 user_name」，「 login」，等等）。
2. 右擊 「Password」 欄位，選擇「查看元素」。在腳本中我們需要使用 「name」 屬性為 「password」 的輸入框的值。「password」 將是字典的 key 值，我們輸入的密碼將是對應的 value 值（在其他網站key值可能是 「userpassword」，「loginpassword」，「pwd」，等等）。
3. 在源代碼頁面中，查找一個名為 「csrfmiddlewaretoken」 的隱藏輸入標簽。「csrfmiddlewaretoken」 將是 key 值，而對應的 value 值將是這個隱藏的輸入值（在其他網站上這個 value 值可能是一個名為 「csrftoken」，「 authenticationtoken」 的隱藏輸入值）。列如：「」。
最後我們將會得到一個類似這樣的字典：
Python
payload = {
"username": "<USER NAME>",
"password": "<PASSWORD>",
"csrfmiddlewaretoken": "<CSRF_TOKEN>"
}
1
2
3
4
5
payload = {
"username": "<USER NAME>",
"password": "<PASSWORD>",
"csrfmiddlewaretoken": "<CSRF_TOKEN>"
}
請記住，這是這個網站的一個具體案例。雖然這個登錄表單很簡單，但其他網站可能需要我們檢查瀏覽器的請求日誌，並找到登錄步驟中應該使用的相關的 key 值和 value 值。
Ⅷ python 爬取帶驗證碼需要登陸後的網站
這個有點繁瑣，告訴你，你也可能搞不定
首先請求網頁，然後用你的未登錄cookies去二次請求驗證碼，用byte類型保存在內存中，用pillow模塊展示出來，你在手動輸入，主程序這邊用input阻塞，等你輸入完，主程序向登錄介面提交賬號密碼和驗證碼，然後後面就正常爬取，這是非selenium的模擬登錄，這邊糾正一點，凡是登錄，不管你用什麼模塊，都屬於模擬登錄，並非selenium登錄方式才叫模擬登錄，