實(shí)時(shí)文章采集 干貨系列:akshare/introduction
優(yōu)采云 發(fā)布時(shí)間: 2022-10-17 20:38實(shí)時(shí)文章采集 干貨系列:akshare/introduction
;如果您的問(wèn)題無(wú)法在文檔中得到解答,您也可以加入AKShare-VIP群:為了提高問(wèn)答質(zhì)量,本群為付費群(可以進(jìn)群喝杯咖啡),您可以加AKShare-小助手,由小助手邀請入群!
知識星球【數據科學(xué)家】已上線(xiàn)。如果你想了解更多關(guān)于金融量化和數據科學(xué)的知識,請加入知識星球【數據科學(xué)家】?jì)?yōu)質(zhì)社區,里面有豐富的視頻、問(wèn)答、文章、書(shū)籍和代碼等:
引用
如果您想在 文章 或項目中引用 AKShare,請使用以下 bibtex 格式:
@misc{akshare2019,
author = {Albert King},
<p>
title = {AKShare},
year = {2019},
publisher = {GitHub},
journal = {GitHub repository},
howpublished = {\url{https://github.com/akfamily/akshare}},
}
</p>
AKShare介紹
首先非常感謝FuShare和TuShare在代碼和項目開(kāi)發(fā)上為這個(gè)項目提供了參考和學(xué)習的機會(huì )!
AKShare 是一個(gè)基于 Python 的金融數據接口庫。目的是實(shí)*敏*感*詞*、外匯、債券、指數、加密貨幣等金融產(chǎn)品的基本面數據、實(shí)時(shí)和歷史市場(chǎng)數據以及衍生數據。Data采集,一套從數據清洗到數據落地的工具,主要用于學(xué)術(shù)研究目的。
AKShare的特點(diǎn)是獲取了相對權威的財經(jīng)數據網(wǎng)站公布的原創(chuàng )數據,并利用原創(chuàng )數據對各種數據源進(jìn)行交叉驗證,再對其進(jìn)行再加工,得出科學(xué)結論。
AKShare將根據學(xué)術(shù)論文和研究報告增加更多的數據接口和衍生指標,并提供相應的計算代碼,敬請期待。
AKShare 的特點(diǎn)
AKShare 的主要改進(jìn)如下:
代碼語(yǔ)法符合PEP8規范,數據接口命名統一;優(yōu)化支持Python 3.8.5及以上版本;提供最好的文檔支持,每個(gè)數據接口都提供詳細的說(shuō)明和示例,可以通過(guò)復制粘貼數據來(lái)下載;繼續維護因目標網(wǎng)頁(yè)變化導致部分數據接口運行異常;持續更新財務(wù)數據接口,同時(shí)優(yōu)化源代碼;提供全面的接口文檔,提高AKShare的可用性;對于非 Python 用戶(hù),提供 HTTP API 接口工具 AKTools。
AKShare的初衷
AKShare主要用于金融研究,解決金融研究中的數據獲取問(wèn)題。當前版本主要基于Python語(yǔ)言,通過(guò)調用相關(guān)數據接口在本地獲取數據。原則上是在用戶(hù)本地運行Python代碼,將網(wǎng)絡(luò )采集的數據實(shí)時(shí)傳輸到本地,方便數據分析。由于網(wǎng)絡(luò )數據采集需要維護的接口很多,并且由于目標網(wǎng)站改變網(wǎng)頁(yè)格式,經(jīng)常需要維護和更新相關(guān)接口,用戶(hù)需要更新本項目在使用本項目的過(guò)程中經(jīng)常更新到最新版本。同時(shí)還需要關(guān)注項目文檔的更新,
測評:2019年Ahrefs工具的終極使用教程! (超全面超詳細!)
有關(guān)如何使用 Semrush 的終極教程,請跳轉至:
言歸正傳,讓我們開(kāi)始解釋如何使用 Ahrefs 工具:
1. 什么是 Ahrefs?
Ahrefs是著(zhù)名的反向鏈接分析和seo分析工具集,其中Site Explorer、Content Explorer、Keyword explorer等工具深受網(wǎng)絡(luò )營(yíng)銷(xiāo)人員的好評。
它擁有自己的爬蟲(chóng)和強大的數據庫,并開(kāi)發(fā)了一系列獨家的SEO指標,如AR、DR和UR,市場(chǎng)份額也在逐年增加。
好東西不便宜。Ahrefs 每個(gè)套餐的價(jià)格如下:
?。ㄒ部梢哉覀€(gè)寶,說(shuō)不定有靠譜的賣(mài)家。)
二、Ahrefs工具功能總結
Ahrefs 使用什么值?
嗯,這真的太多了。為了讓大家對接下來(lái)的學(xué)習充滿(mǎn)信心和興趣,我們在這里簡(jiǎn)單總結一下它的作用:
…
3. Ahrefs工具詳解
進(jìn)入后,最上面是ahrefs的幾大工具
包括:警報、站點(diǎn)瀏覽器、內容瀏覽器、關(guān)鍵字瀏覽器、排名跟蹤器、站點(diǎn)審計等。
下面我們將詳細解釋這些工具中的每一個(gè)。
1. 警報:
我把這個(gè)工具叫做“*敏*感*詞*”,一旦你設置的條件被觸發(fā),系統會(huì )自動(dòng)給你發(fā)郵件通知你。
點(diǎn)擊上方的Alerts進(jìn)入報警設置界面:
如上圖,可以設置三個(gè)觸發(fā)器:
監視 網(wǎng)站 外部鏈接的添加或丟失。設置完成后,Ahrefs 會(huì )在檢測到某個(gè)網(wǎng)站 有新的外鏈或者外鏈丟失時(shí),會(huì )向相關(guān)郵箱發(fā)送郵件提醒。
設置方法很簡(jiǎn)單,點(diǎn)擊右上角“+新提醒”,
然后在彈窗中填寫(xiě)你要監控的網(wǎng)站域名,設置要監控的*敏*感*詞*(新增外鏈、丟失外鏈、或全部外鏈),填寫(xiě)郵箱接收提醒,并設置電子郵件提醒的頻率(每周一次或每月一次)。
最后,單擊添加。就這么簡(jiǎn)單,無(wú)需添加任何代碼!
SEO技巧在這里:
如果您有明確的競爭對手,那么您可以將他們的域名設置為外部鏈接警報。每當他們的外部鏈接增加時(shí),您都可以及時(shí)看到它們。對于那些優(yōu)質(zhì)的外鏈,要及時(shí)跟進(jìn)模仿。,甚至相互推斷。
這個(gè)功能更強大。只要設置了要監控的網(wǎng)站,Ahrefs就會(huì )根據其龐大的數據庫,自動(dòng)對這個(gè)網(wǎng)站的所有相關(guān)關(guān)鍵詞進(jìn)行排名測試。一旦找到明確的排名更改將通過(guò)電子郵件發(fā)送給您。
有人在談?wù)撃?,但你不知道?有人在談?wù)撃汴P(guān)心但你不知道的話(huà)題?
沒(méi)關(guān)系,Mentions alert 可以幫你看四面八方,聽(tīng)四面八方!
設置一個(gè)特定的關(guān)鍵詞(即搜索查詢(xún)),當網(wǎng)絡(luò )上提到這個(gè)關(guān)鍵詞 時(shí),您將收到電子郵件通知。
SEO技巧在這里:
如果你是品牌,可以將自己的品牌名稱(chēng)設置為搜索查詢(xún),這將是采集輿論和提升自我的好方法;您還可以將競爭對手的品牌設置為搜索查詢(xún),以查看人們對您的競爭對手的評價(jià)并對其進(jìn)行反思。需要改進(jìn)的地方。
如果你在找好的外鏈,也可以用這個(gè)方法:比如我是手機殼廠(chǎng)家,我可以把手機殼廠(chǎng)家設置為Search query,當網(wǎng)上提到這個(gè)詞的時(shí)候,我會(huì )檢查它那個(gè)平臺,看看你是否可以獲得鏈接。等等,你可以監控一個(gè)話(huà)題,一個(gè)你寫(xiě)的教程,一個(gè)新產(chǎn)品等等。
2. 站點(diǎn)瀏覽器(強調?。?/p>
站點(diǎn)瀏覽器是一個(gè)工具,它將給出某個(gè)網(wǎng)站的綜合醫學(xué)報告,從內容到外部鏈接,再到搜索流量和排名。
內容很多,所以我們把它分成塊。讓我們從紅色線(xiàn)框中的內容開(kāi)始。
看左邊的內容:它分為五個(gè)塊:Overview、Backlink profile、Organic search、Pages、Outgoing links、Paid search。
1) 概述
這實(shí)際上是對Backlink profile、Organic search和Paid search等模塊的概述,如下圖所示:
下面對所有知識點(diǎn)進(jìn)行詳細講解,這里直接略過(guò)。
2)反向鏈接配置文件
?、?點(diǎn)擊反向鏈接:
可以看到 Ahrefs 統計的這個(gè) 網(wǎng)站 的所有外部鏈接:
包括外鏈總數、外鏈的源頁(yè)(Referring page)、源頁(yè)的UR、出站鏈接數(EXT)、月流量(Traffic)、關(guān)鍵詞數> 排名(Kw),外鏈數量錨文本形式是指向的頁(yè)面(Anchor and backlink),外鏈第一次被檢測到的日期和最后一次檢查的日期(First seen, last check)。
細心的朋友可能還會(huì )發(fā)現,在Referring page一欄中,還標注了EN和WORDPRESS,告訴你這個(gè)頁(yè)面是英文的,是用Wordpress搭建的網(wǎng)站。
點(diǎn)擊新建,可以看到新添加的外鏈,如下圖:
上半部分顯示了每天特定的新外部鏈接的數量。
下半部分,顯示在紅線(xiàn)框內,是新增*敏*感*詞*:今天、昨天、一周內、一個(gè)月內、一個(gè)月內兩次。
點(diǎn)擊丟失,可以看到外鏈的丟失狀態(tài),如下圖:
上半部分具體到某一天,丟失外鏈的數量;
下半部分是丟失*敏*感*詞*:今天、昨天、一周內、一個(gè)月內、兩個(gè)月內。
點(diǎn)擊Broken,可以在網(wǎng)站上看到指向404頁(yè)面的反向鏈接(Broken Backlinks)。如下所示:
搜索引擎優(yōu)化提示:
你知道404反向鏈接嗎?我經(jīng)常使用的是把競爭對手的域名放在 Ahrefs 中,然后在這里找到它的 Broken Backlinks。
然后去聯(lián)系外部鏈接源網(wǎng)站,并提醒他們的站長(cháng):你好,我發(fā)現你的一個(gè)鏈接指向一個(gè)404頁(yè)面。這種鏈接不利于網(wǎng)站和用戶(hù)體驗。哦,我這里有一個(gè)合適的頁(yè)面來(lái)替換它,你得考慮一下。
那么,只要你的頁(yè)面相關(guān)且質(zhì)量好,他們通常不會(huì )拒絕你,畢竟你是在幫他們一個(gè)忙~
?、邳c(diǎn)擊“Referring domain”查看所有外部鏈接的源域。
和①Backlinks類(lèi)似,點(diǎn)擊New,可以看到每天新增外鏈源域的數量;今天、昨天、一周內、一個(gè)月內、兩個(gè)月內新增的外鏈源域是多少,DR是多少,Ahrefs排名是多少等。
點(diǎn)擊丟失,可以看到每天丟失的外鏈源域數量;今天、昨天、一周內、一個(gè)月內、兩個(gè)月內丟失的外鏈源域是什么,DR是什么,Ahrefs rank是什么等等。
?、?點(diǎn)擊Anchors,可以看到一個(gè)網(wǎng)站或者特定頁(yè)面的錨文本,如下圖:
馬賽克出來(lái)的是不同形式的錨文本。.
?、茳c(diǎn)擊Referring IPs,可以看到Ahrefs根據IP外鏈和源域名進(jìn)行的分類(lèi)。如下所示:
同一IP下的外鏈越少,外鏈越自然,人為痕跡越少。
?、蔹c(diǎn)擊Internal backlinks,可以看到這個(gè)網(wǎng)站中收錄URL的頁(yè)面總數。如下所示:
筆記:
對于Backlink profile,我建議大家也應該看看1) Overview,這里會(huì )有比較直觀(guān)的backlinks增長(cháng)趨勢,backlinks的dofollow和nofollow的比例,backlinks的來(lái)源國分布等等, backlinks的anchors文本分布如下:
以下是一些簡(jiǎn)單易記的結論,供您參考:
3)自然搜索:
這篇文章自然是關(guān)于自然搜索數據的。
?、冱c(diǎn)擊有機關(guān)鍵詞
可以看到網(wǎng)站所有關(guān)鍵詞自然排名,如下圖:
【注:關(guān)鍵詞可以根據月搜索量等屬性從高到低或從低到高排序,點(diǎn)擊量或黃框內的其他屬性即可實(shí)現?!?/p>
單擊新建以查看自上周以來(lái)顯著(zhù)上升的 關(guān)鍵詞。
為什么會(huì )出現明顯的上漲?----- Ahrefs將前50名關(guān)鍵詞分為三個(gè)不同的等級,分別是1-3、4-10和11-50,從后排到前排,即使有明顯的提升。
此外,您還可以看到這三個(gè)組各自的關(guān)鍵詞數字和趨勢。(圖中第一個(gè)*敏*感*詞*方框內的內容)
點(diǎn)擊Movements,可以看到一個(gè)網(wǎng)站或者所有排名發(fā)生變化的關(guān)鍵詞頁(yè)面,如下圖:
關(guān)注*敏*感*詞*線(xiàn)框中的幾個(gè)選項:
SEO技巧在這里:
當網(wǎng)站的自然搜索流量下降時(shí),如何快速識別問(wèn)題頁(yè)面?——- 在這里找到網(wǎng)站上Down的有機關(guān)鍵詞,然后按時(shí)間排序,導出數據后,對重復頁(yè)面進(jìn)行去重,找到最近排名下降的頁(yè)面關(guān)鍵詞,就可以了做進(jìn)一步分析。
?、谑醉?yè)
您可以查看網(wǎng)站主要流量來(lái)源是哪些頁(yè)面。比如下圖就是我們官網(wǎng)的主要源碼頁(yè)面是
,占流量的85%。(這是一個(gè)分享各種SEO&SEM干貨的匯總頁(yè)面,可以通過(guò)google優(yōu)化搜索找到。)
搜索引擎優(yōu)化應用:
當你準備做一個(gè)獨立網(wǎng)站的時(shí)候,你不知道你的話(huà)主要是基于分類(lèi)頁(yè)面、產(chǎn)品頁(yè)面還是文章。
使用它來(lái)研究 8 個(gè)或 9 個(gè)競爭對手的 網(wǎng)站,看看他們的主要流量來(lái)源是什么類(lèi)型的頁(yè)面。如果基本上是分類(lèi)頁(yè)面,說(shuō)明你也需要關(guān)注分類(lèi)頁(yè)面。因為自然選擇,分類(lèi)頁(yè)面可以更好地滿(mǎn)足用戶(hù)體驗。但這是不能一概而論的事情。希望大家多多研究,找到規律。
?、跿op子域和Top子域:即網(wǎng)站的路徑和子域按照網(wǎng)頁(yè)接收到的自然搜索流量排序
?、芨偁幱蛎透偁庬?yè)面:Ahrefs根據網(wǎng)站關(guān)鍵詞排名的競爭對手名單(前者為域名,后者為網(wǎng)頁(yè))。
?、輧热莶罹啵哼@個(gè)工具很強大,它可以找到一個(gè)或幾個(gè)網(wǎng)站排名但另一個(gè)網(wǎng)站沒(méi)有排名關(guān)鍵詞。
你可以使用這個(gè)工具來(lái)找出你和你的競爭對手之間的差距,看看你的競爭對手在哪些詞上排名,但你沒(méi)有,你可能會(huì )發(fā)現一些你以前忽略的高價(jià)值詞。
方法很簡(jiǎn)單:
在下面的*敏*感*詞*框中輸入您競爭對手的域名(一個(gè)或多個(gè)),在旁邊的紅色框中輸入您的域名,然后點(diǎn)擊顯示關(guān)鍵字。
?。ㄏ聢D展示了如何找到Backlinko有排名但沒(méi)有排名的關(guān)鍵詞)
4) 頁(yè)面
?、?最佳鏈接
網(wǎng)站的所有頁(yè)面都是按照頁(yè)面外鏈的質(zhì)量和數量進(jìn)行排序的,即按照UR值的大小對頁(yè)面進(jìn)行排序。如下所示:
?、?最佳鏈接增長(cháng)
網(wǎng)站頁(yè)面根據新增外鏈的排名,如下圖:
?、?熱門(mén)內容
Ahrefs 根據他們計算的社交分享數量對 網(wǎng)站 頁(yè)面進(jìn)行排名。
如上所示,您可以看到每個(gè)頁(yè)面在 Twitter、Facebook 和 Pinterest 上獲得了多少分享。而每個(gè)頁(yè)面的SP(Social Power),SP值越大,網(wǎng)頁(yè)的社會(huì )影響力越大,越受歡迎。
搜索引擎優(yōu)化應用在這里:
在尋找內容營(yíng)銷(xiāo)的話(huà)題時(shí),您可以使用此功能查看多個(gè)競爭對手的熱門(mén)內容,然后用更好的社交分享數據總結這些話(huà)題。
5)傳出鏈接:
也就是我們常說(shuō)的出站鏈接和出站鏈接是從我們的網(wǎng)站到其他網(wǎng)站的鏈接(區別于外部鏈接,是從其他網(wǎng)站到我們網(wǎng)站的鏈接> 鏈接)
?、冁溄佑蛎簠R總了與我們有鏈接的域名網(wǎng)站。
?、贏(yíng)nchors:出站鏈接的錨文本
?、蹟嚅_(kāi)的鏈接:所有指向不存在頁(yè)面的出站連接。
搜索引擎優(yōu)化應用在這里:
及時(shí)檢查我們自己的網(wǎng)站壞掉的鏈接,并進(jìn)行修復,提升用戶(hù)體驗;
另外,如果你發(fā)現了一個(gè)相關(guān)度很高的網(wǎng)站,又怕直接要求別人不給,可以查看一下這個(gè)網(wǎng)站的失效鏈接,看看有沒(méi)有合適的位置。
6) 付費搜索
這是Ahrefs對網(wǎng)站的付費廣告的測試報告(僅供參考,不是很全面)
3. 內容瀏覽器
在內容為王的今天,找到好的主題至關(guān)重要。
找出所有現有的熱門(mén)內容,研究它們的共性,弄清楚用戶(hù)心理和需求,然后寫(xiě)出用戶(hù)體驗更好的內容,甚至可以一舉找到新的引爆點(diǎn),一舉成名。這些都是很有可能的。
使用 Content explorer 工具,在輸入框中輸入您的主題 關(guān)鍵詞,例如 Google seo。
當然,您也可以通過(guò)在紅色箭頭處選擇“in title”、“in url”、“in content”或“Everywhere”來(lái)初步過(guò)濾結果。在標題中選擇,然后所有結果的標題中都會(huì )有 Google seo。
如上圖紅框所示,您可以通過(guò)設置內容的發(fā)布日期、語(yǔ)言、社交分享數、DR、字數和流量來(lái)過(guò)濾結果。
對于每個(gè)結果,您可以看到它的標題、URL、簡(jiǎn)短描述、在 Twitter 等社交平臺上的分享。
4. Ahrefs 關(guān)鍵詞瀏覽器
它也是一個(gè)很好的研究工具關(guān)鍵詞。
如何?
在輸入框中輸入要研究的關(guān)鍵詞,然后選擇國家,點(diǎn)擊搜索。
這個(gè)工具很棒:
首先看第一個(gè)紅框,它不僅給出了Keyword難度(關(guān)鍵詞SEO難度系數),還預測了你需要多少外鏈才能讓這個(gè)詞進(jìn)入谷歌前十。
查看第二個(gè)紅色框,它給出了這個(gè)詞的每月搜索量(實(shí)際上給出了搜索和點(diǎn)擊/沒(méi)有點(diǎn)擊的百分比?。?,Return Rate(同一個(gè)人在 30 天內搜索這個(gè)詞的相對頻率) 價(jià)值)、點(diǎn)擊次數(每月點(diǎn)擊次數,按自然搜索和付費搜索來(lái)源的百分比細分)、每次點(diǎn)擊費用(付費搜索廣告中每次點(diǎn)擊花費的金額)、點(diǎn)擊率和全球每月搜索量。
它還向您顯示了搜索詞的父主題,即此 關(guān)鍵詞 的父主題,其每月搜索量以及它可以帶來(lái)的潛在流量。
然后專(zhuān)注于它給出的 關(guān)鍵詞 建議(關(guān)鍵字提示)
5.排名跟蹤器:
一個(gè)監控關(guān)鍵詞排名的工具,用法很簡(jiǎn)單:
根據需要驗證Ahrefs與網(wǎng)站的關(guān)聯(lián)后,可以直接將關(guān)鍵詞添加到Ahrefs Rank tracker,監控其排名。此外,您還可以添加競爭對手的域名(Competitions)來(lái)檢測他們的排名。關(guān)鍵詞排名。
6. 現場(chǎng)審核
此工具類(lèi)似于 Google 網(wǎng)站管理員工具。Ahrefs 有自己的爬蟲(chóng)(僅次于 Google 的第二好的爬蟲(chóng)),它會(huì )爬取你的 網(wǎng)站 并為你提供一堆 SEO 分析。
我自己更喜歡使用 Google 帳戶(hù)網(wǎng)站管理員工具。對此功能感興趣的朋友可以試試。我不會(huì )在這里多說(shuō)。
7. 更多
這里列出了其他一些工具,包括 Ahrefs 排名表、SEO Toll Bar、API、APP 等。
我認為它們被列在更多是因為它們不是那么強大并且不是很受歡迎。. . 但值得一提的是 SEO 工具欄,使用方法見(jiàn)上篇教程:
好的,Ahrefs 教程就在這里。如有疑問(wèn),可留言或咨詢(xún)公眾號。