神箭手軟件免費(fèi)版是一款由杭州快憶科技有限公司推出的爬蟲(chóng)軟件，功能強(qiáng)大，基于該公司的平臺(tái)能夠快速準(zhǔn)確地可視化選取的網(wǎng)頁(yè)數(shù)據(jù)，用戶可以統(tǒng)一導(dǎo)出數(shù)據(jù)，操作更加簡(jiǎn)單方便，有需要的朋友歡迎來(lái)體驗(yàn)！

神箭手云爬蟲(chóng)怎么樣

大數(shù)據(jù)和人工智能的云操作系統(tǒng)，您可以在神箭手上快速開(kāi)發(fā)大數(shù)據(jù)和ai應(yīng)用，包括爬蟲(chóng)/機(jī)器學(xué)習(xí)/數(shù)據(jù)清洗/api接口等。神箭手封裝了復(fù)雜的算法和分布式邏輯，提供簡(jiǎn)單靈活的開(kāi)發(fā)接口；應(yīng)用自動(dòng)分布式部署和運(yùn)行，可視化簡(jiǎn)單操作，彈性擴(kuò)展計(jì)算和存儲(chǔ)資源；統(tǒng)一可視化管理不同來(lái)源的數(shù)據(jù)，restful接口/webhook推送/graphql訪問(wèn)等高級(jí)功能讓您無(wú)縫對(duì)接現(xiàn)有系統(tǒng)！

神箭手云爬蟲(chóng)好在哪

快速開(kāi)發(fā)，降低開(kāi)發(fā)成本；

提供標(biāo)準(zhǔn)的彈性云服務(wù)；

無(wú)縫對(duì)接您的現(xiàn)有系統(tǒng)；

數(shù)據(jù)實(shí)時(shí)精準(zhǔn)/分布式處理。

使用教程

1、如何爬取數(shù)據(jù)

步驟一 登錄

打開(kāi)神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點(diǎn)擊”登錄”進(jìn)入控制臺(tái)。

步驟二 創(chuàng)建爬蟲(chóng)

您可以：

從神箭云市場(chǎng)獲取需要的爬蟲(chóng)，直接使用：

注意： 免費(fèi)爬蟲(chóng)注冊(cè)用戶可以免費(fèi)使用；套餐限制為【個(gè)人專業(yè)版】及以上或有價(jià)格爬蟲(chóng)，可以先試用爬取10條數(shù)據(jù)，然后再根據(jù)提示 升級(jí)指定套餐 或 購(gòu)買使用天數(shù) 繼續(xù)使用。

創(chuàng)建一個(gè)新爬蟲(chóng)，在線開(kāi)發(fā)：

步驟三 設(shè)置爬蟲(chóng)

打開(kāi)爬蟲(chóng)，在爬蟲(chóng)設(shè)置頁(yè)面，可以通過(guò)【功能設(shè)置】設(shè)置 文件云托管 和 代理ip種類 等；通過(guò)【自定義設(shè)置】設(shè)置具體要爬取的方式和范圍等。

注意： 如果您更改了設(shè)置，請(qǐng)保存后重啟爬蟲(chóng)（停止后重啟 或者 暫停后繼續(xù)）才會(huì)生效。

步驟四 啟動(dòng)爬蟲(chóng)

在爬蟲(chóng)總覽頁(yè)面，點(diǎn)擊【啟動(dòng)爬蟲(chóng)】按鈕，啟動(dòng)爬蟲(chóng)運(yùn)行。啟動(dòng)前，可以設(shè)置 啟動(dòng)方式和定時(shí)運(yùn)行等。

注意：爬蟲(chóng)的速度和使用的節(jié)點(diǎn)有關(guān)。節(jié)點(diǎn)數(shù)越多，爬取速度越快；

爬取結(jié)果里的數(shù)據(jù)會(huì)自動(dòng)去重，以確保爬取的數(shù)據(jù)不出現(xiàn)重復(fù)。具體去重方式點(diǎn)此查看。

步驟五 預(yù)覽和導(dǎo)出數(shù)據(jù)

在爬蟲(chóng)爬取結(jié)果頁(yè)，您可以將爬取的數(shù)據(jù)導(dǎo)出到本地文件、發(fā)布到數(shù)據(jù)庫(kù)/網(wǎng)站/郵箱/媒體等；也可以設(shè)置webhook，神箭手會(huì)將爬取的數(shù)據(jù)post到您的服務(wù)器；還可以通過(guò)graphql接口查詢數(shù)據(jù)。

步驟六 更新爬蟲(chóng)

從市場(chǎng)獲取的爬蟲(chóng)，如果爬取失效或者其他原因?qū)е碌呐老x(chóng)代碼修改和升級(jí)，您都可以登錄神箭手后進(jìn)行更新。如果爬蟲(chóng)正在運(yùn)行中，需要重啟（停止后再啟動(dòng) 或者 暫停后繼續(xù)）下新代碼才會(huì)生效。

2、如何使用api接口

步驟一 登錄

打開(kāi)神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點(diǎn)擊”登錄”進(jìn)入控制臺(tái)。

步驟二 創(chuàng)建api接口

您可以：從神箭云市場(chǎng)獲取需要的api接口，直接使用：

注意: 免費(fèi)的api接口您可以免費(fèi)無(wú)限次調(diào)用；收費(fèi)的api接口您可以在贈(zèng)送的調(diào)用次數(shù)用完后，購(gòu)買調(diào)用次數(shù)繼續(xù)使用。

創(chuàng)建一個(gè)新api接口，在線開(kāi)發(fā)：

步驟三 設(shè)置api接口

打開(kāi)api接口，在api設(shè)置頁(yè)面，可以設(shè)置 調(diào)用白名單、代理ip種類和文件云托管等。

注意: 如果您更改了設(shè)置，請(qǐng)先保存設(shè)置后再調(diào)用才會(huì)生效。

步驟四 測(cè)試api接口

在測(cè)試工具頁(yè)面，輸入【請(qǐng)求參數(shù)】，點(diǎn)擊【開(kāi)始測(cè)試】按鈕。檢測(cè)調(diào)用api接口返回的數(shù)據(jù)。

步驟五 調(diào)用api接口

在調(diào)用代碼頁(yè)，參考不同語(yǔ)言的調(diào)用代碼示例，您可以通過(guò)程序調(diào)用api接口獲取數(shù)據(jù)。

步驟六 更新api接口

從市場(chǎng)獲取的api接口，如果調(diào)用失效或者其他原因?qū)е碌腶pi代碼修改和升級(jí)，您都可以登錄神箭手后進(jìn)行更新。更新后重新調(diào)用新代碼才生效。

3、如何使用數(shù)據(jù)源

步驟一 登錄

打開(kāi)神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點(diǎn)擊”登錄”進(jìn)入控制臺(tái)。

步驟二 獲取數(shù)據(jù)源

您可以：

打開(kāi)神箭云市場(chǎng)，選擇需要的數(shù)據(jù)源和規(guī)格，點(diǎn)擊”獲取數(shù)據(jù)”按鈕，自動(dòng)創(chuàng)建并打開(kāi)數(shù)據(jù)源；

注意: 免費(fèi)的數(shù)據(jù)源您可以免費(fèi)獲取所有數(shù)據(jù)；收費(fèi)的數(shù)據(jù)源您可以免費(fèi)預(yù)覽10條試用，購(gòu)買后可獲取完整數(shù)據(jù)。

在后臺(tái)的數(shù)據(jù)源管理中，創(chuàng)建一個(gè)新的數(shù)據(jù)源，上傳本地文件或者連接遠(yuǎn)程數(shù)據(jù)庫(kù)；也可以管理爬蟲(chóng)或者清洗等應(yīng)用自動(dòng)創(chuàng)建的數(shù)據(jù)源。

步驟三 預(yù)覽數(shù)據(jù)

在數(shù)據(jù)源的數(shù)據(jù)頁(yè)面，您可以【查看所有數(shù)據(jù)】，也可以點(diǎn)擊某條數(shù)據(jù)【預(yù)覽】。

步驟四 請(qǐng)求/發(fā)布/導(dǎo)出數(shù)據(jù)

在請(qǐng)求數(shù)據(jù)頁(yè)面，可以通過(guò)調(diào)用graphql接口直接查詢數(shù)據(jù)源中的數(shù)據(jù)。

在發(fā)布數(shù)據(jù)頁(yè)面，可以把數(shù)據(jù)發(fā)布到數(shù)據(jù)庫(kù)/網(wǎng)站/郵箱/微信公眾號(hào)等。

在導(dǎo)出數(shù)據(jù)頁(yè)面，可以將數(shù)據(jù)導(dǎo)出到本地文件。

步驟五 更新數(shù)據(jù)

從市場(chǎng)獲取的數(shù)據(jù)源，會(huì)不定期進(jìn)行更新。已有數(shù)據(jù)的更新是免費(fèi)的，新增數(shù)據(jù)您可以登錄神箭手后查看詳情，支付后即可獲取新增數(shù)據(jù)。

4、如何發(fā)布數(shù)據(jù)

步驟一 登錄

打開(kāi)神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點(diǎn)擊”登錄”進(jìn)入控制臺(tái)。

步驟二 安裝發(fā)布插件

如果要發(fā)布數(shù)據(jù)到cms網(wǎng)站，需要先在您的cms網(wǎng)站上安裝對(duì)應(yīng)的發(fā)布插件。

步驟三 創(chuàng)建發(fā)布項(xiàng)

在發(fā)布數(shù)據(jù)頁(yè)面，新建發(fā)布項(xiàng)，設(shè)置發(fā)布數(shù)據(jù)的地址、數(shù)據(jù)字段對(duì)應(yīng)等。點(diǎn)此查看詳細(xì)教程.

步驟四 手動(dòng)發(fā)布數(shù)據(jù)

在數(shù)據(jù)頁(yè)面，點(diǎn)擊一條或者選擇多條數(shù)據(jù)，選擇要使用的發(fā)布項(xiàng)（可以選擇多個(gè)發(fā)布項(xiàng)），手動(dòng)發(fā)布數(shù)據(jù)。

步驟五 自動(dòng)發(fā)布數(shù)據(jù)

在發(fā)布數(shù)據(jù)頁(yè)面，點(diǎn)擊【自動(dòng)發(fā)布】按鈕，所有數(shù)據(jù)會(huì)進(jìn)行自動(dòng)發(fā)布。

常見(jiàn)問(wèn)題

q: 如何復(fù)制應(yīng)用

登錄神箭手后，點(diǎn)擊應(yīng)用列表的復(fù)制應(yīng)用。api接口應(yīng)用不能復(fù)制

q: 節(jié)點(diǎn)是什么

節(jié)點(diǎn)是運(yùn)行神箭手應(yīng)用的最小計(jì)算單元；比如每個(gè)爬蟲(chóng)或者清洗應(yīng)用的運(yùn)行，都需要占用至少一個(gè)節(jié)點(diǎn)（定時(shí)休息的應(yīng)用也需要占用節(jié)點(diǎn)）；運(yùn)行一個(gè)應(yīng)用的節(jié)點(diǎn)越多，速度越快；一個(gè)應(yīng)用運(yùn)行完成，其占用的節(jié)點(diǎn)也會(huì)被自動(dòng)釋放，可以用來(lái)運(yùn)行其他應(yīng)用。神箭手的節(jié)點(diǎn)包括普通節(jié)點(diǎn)和gpu節(jié)點(diǎn)，gpu節(jié)點(diǎn)主要適用于機(jī)器學(xué)習(xí)等需要極速運(yùn)算的應(yīng)用。

q: 如何開(kāi)具發(fā)票

消費(fèi)滿300元即可免費(fèi)開(kāi)具發(fā)票，發(fā)票類目統(tǒng)一為 “軟件服務(wù)費(fèi)”。請(qǐng)?jiān)诘卿浬窦趾蟮陌l(fā)票管理中申請(qǐng)，每周五統(tǒng)一處理和郵寄（金額達(dá)到1萬(wàn)元可免郵，否則統(tǒng)一是順豐到付）

q: 如何簽訂服務(wù)合同

神箭手提供電子合同。購(gòu)買服務(wù)后，可以在登錄神箭手后的合同管理中下載。下載后可以點(diǎn)擊自動(dòng)生成帶電子章的正式合同

q: 爬蟲(chóng)爬取的圖片不能正常顯示

這種一般是因?yàn)槟繕?biāo)網(wǎng)站有圖片防盜鏈，可以在爬蟲(chóng)設(shè)置里開(kāi)啟自動(dòng)托管圖片，將圖片下載到云存儲(chǔ)上。神箭手托管文件后會(huì)自動(dòng)更新數(shù)據(jù)里的圖片鏈接，這樣圖片就能正常顯示了。點(diǎn)擊此處了解如何開(kāi)啟托管和費(fèi)用說(shuō)明

q: 如何批量下載爬取的文件鏈接

可以在爬蟲(chóng)設(shè)置里開(kāi)啟自動(dòng)托管文件，爬蟲(chóng)啟動(dòng)后會(huì)自動(dòng)識(shí)別文件下載鏈接并下載到云存儲(chǔ)上。點(diǎn)擊此處了解如何使用和費(fèi)用說(shuō)明

q: 怎么查看爬取到數(shù)據(jù)的時(shí)間和網(wǎng)頁(yè)鏈接

打開(kāi)爬蟲(chóng)的 “爬取結(jié)果”，可以看到爬取時(shí)間和鏈接默認(rèn)是不顯示的。點(diǎn)擊右上角的自定義列表項(xiàng)，在彈窗中勾選爬取時(shí)間和鏈接，這樣就能在爬取結(jié)果中顯示出來(lái)了

神箭手云爬蟲(chóng)是哪個(gè)公司的

快憶科技（kuaiyi tech）成立于2015年，是專注于大數(shù)據(jù)和人工智能服務(wù)的高科技互聯(lián)網(wǎng)公司，旨在為全球的企業(yè)和開(kāi)發(fā)者提供前沿的大數(shù)據(jù)和人工智能應(yīng)用開(kāi)發(fā)和服務(wù)生態(tài)。 基于來(lái)自google的技術(shù)團(tuán)隊(duì)自主研發(fā)的分布式大數(shù)據(jù)操作系統(tǒng)：kd-os，提供從大數(shù)據(jù)采集獲取、可視化存儲(chǔ)管理、數(shù)據(jù)清洗、bi商務(wù)智能到ai機(jī)器學(xué)習(xí)算法的數(shù)據(jù)訓(xùn)練、建模、模型管理、 模型服務(wù)(serve)等一站式產(chǎn)品和服務(wù)。