神箭手軟件免費版是一款由杭州快憶科技有限公司推出的爬蟲軟件，功能強(qiáng)大，基于該公司的平臺能夠快速準(zhǔn)確地可視化選取的網(wǎng)頁數(shù)據(jù)，用戶可以統(tǒng)一導(dǎo)出數(shù)據(jù)，操作更加簡單方便，有需要的朋友歡迎來體驗！

神箭手云爬蟲怎么樣

大數(shù)據(jù)和人工智能的云操作系統(tǒng)，您可以在神箭手上快速開發(fā)大數(shù)據(jù)和ai應(yīng)用，包括爬蟲/機(jī)器學(xué)習(xí)/數(shù)據(jù)清洗/api接口等。神箭手封裝了復(fù)雜的算法和分布式邏輯，提供簡單靈活的開發(fā)接口；應(yīng)用自動分布式部署和運行，可視化簡單操作，彈性擴(kuò)展計算和存儲資源；統(tǒng)一可視化管理不同來源的數(shù)據(jù)，restful接口/webhook推送/graphql訪問等高級功能讓您無縫對接現(xiàn)有系統(tǒng)！

神箭手云爬蟲好在哪

快速開發(fā)，降低開發(fā)成本；

提供標(biāo)準(zhǔn)的彈性云服務(wù)；

無縫對接您的現(xiàn)有系統(tǒng)；

數(shù)據(jù)實時精準(zhǔn)/分布式處理。

使用教程

1、如何爬取數(shù)據(jù)

步驟一 登錄

打開神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點擊”登錄”進(jìn)入控制臺。

步驟二 創(chuàng)建爬蟲

您可以：

從神箭云市場獲取需要的爬蟲，直接使用：

注意： 免費爬蟲注冊用戶可以免費使用；套餐限制為【個人專業(yè)版】及以上或有價格爬蟲，可以先試用爬取10條數(shù)據(jù)，然后再根據(jù)提示 升級指定套餐 或 購買使用天數(shù) 繼續(xù)使用。

創(chuàng)建一個新爬蟲，在線開發(fā)：

步驟三 設(shè)置爬蟲

打開爬蟲，在爬蟲設(shè)置頁面，可以通過【功能設(shè)置】設(shè)置 文件云托管 和 代理ip種類 等；通過【自定義設(shè)置】設(shè)置具體要爬取的方式和范圍等。

注意： 如果您更改了設(shè)置，請保存后重啟爬蟲（停止后重啟 或者 暫停后繼續(xù)）才會生效。

步驟四 啟動爬蟲

在爬蟲總覽頁面，點擊【啟動爬蟲】按鈕，啟動爬蟲運行。啟動前，可以設(shè)置 啟動方式和定時運行等。

注意：爬蟲的速度和使用的節(jié)點有關(guān)。節(jié)點數(shù)越多，爬取速度越快；

爬取結(jié)果里的數(shù)據(jù)會自動去重，以確保爬取的數(shù)據(jù)不出現(xiàn)重復(fù)。具體去重方式點此查看。

步驟五 預(yù)覽和導(dǎo)出數(shù)據(jù)

在爬蟲爬取結(jié)果頁，您可以將爬取的數(shù)據(jù)導(dǎo)出到本地文件、發(fā)布到數(shù)據(jù)庫/網(wǎng)站/郵箱/媒體等；也可以設(shè)置webhook，神箭手會將爬取的數(shù)據(jù)post到您的服務(wù)器；還可以通過graphql接口查詢數(shù)據(jù)。

步驟六 更新爬蟲

從市場獲取的爬蟲，如果爬取失效或者其他原因?qū)е碌呐老x代碼修改和升級，您都可以登錄神箭手后進(jìn)行更新。如果爬蟲正在運行中，需要重啟（停止后再啟動 或者 暫停后繼續(xù)）下新代碼才會生效。

2、如何使用api接口

步驟一 登錄

打開神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點擊”登錄”進(jìn)入控制臺。

步驟二 創(chuàng)建api接口

您可以：從神箭云市場獲取需要的api接口，直接使用：

注意: 免費的api接口您可以免費無限次調(diào)用；收費的api接口您可以在贈送的調(diào)用次數(shù)用完后，購買調(diào)用次數(shù)繼續(xù)使用。

創(chuàng)建一個新api接口，在線開發(fā)：

步驟三 設(shè)置api接口

打開api接口，在api設(shè)置頁面，可以設(shè)置 調(diào)用白名單、代理ip種類和文件云托管等。

注意: 如果您更改了設(shè)置，請先保存設(shè)置后再調(diào)用才會生效。

步驟四 測試api接口

在測試工具頁面，輸入【請求參數(shù)】，點擊【開始測試】按鈕。檢測調(diào)用api接口返回的數(shù)據(jù)。

步驟五 調(diào)用api接口

在調(diào)用代碼頁，參考不同語言的調(diào)用代碼示例，您可以通過程序調(diào)用api接口獲取數(shù)據(jù)。

步驟六 更新api接口

從市場獲取的api接口，如果調(diào)用失效或者其他原因?qū)е碌腶pi代碼修改和升級，您都可以登錄神箭手后進(jìn)行更新。更新后重新調(diào)用新代碼才生效。

3、如何使用數(shù)據(jù)源

步驟一 登錄

打開神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點擊”登錄”進(jìn)入控制臺。

步驟二 獲取數(shù)據(jù)源

您可以：

打開神箭云市場，選擇需要的數(shù)據(jù)源和規(guī)格，點擊”獲取數(shù)據(jù)”按鈕，自動創(chuàng)建并打開數(shù)據(jù)源；

注意: 免費的數(shù)據(jù)源您可以免費獲取所有數(shù)據(jù)；收費的數(shù)據(jù)源您可以免費預(yù)覽10條試用，購買后可獲取完整數(shù)據(jù)。

在后臺的數(shù)據(jù)源管理中，創(chuàng)建一個新的數(shù)據(jù)源，上傳本地文件或者連接遠(yuǎn)程數(shù)據(jù)庫；也可以管理爬蟲或者清洗等應(yīng)用自動創(chuàng)建的數(shù)據(jù)源。

步驟三 預(yù)覽數(shù)據(jù)

在數(shù)據(jù)源的數(shù)據(jù)頁面，您可以【查看所有數(shù)據(jù)】，也可以點擊某條數(shù)據(jù)【預(yù)覽】。

步驟四 請求/發(fā)布/導(dǎo)出數(shù)據(jù)

在請求數(shù)據(jù)頁面，可以通過調(diào)用graphql接口直接查詢數(shù)據(jù)源中的數(shù)據(jù)。

在發(fā)布數(shù)據(jù)頁面，可以把數(shù)據(jù)發(fā)布到數(shù)據(jù)庫/網(wǎng)站/郵箱/微信公眾號等。

在導(dǎo)出數(shù)據(jù)頁面，可以將數(shù)據(jù)導(dǎo)出到本地文件。

步驟五 更新數(shù)據(jù)

從市場獲取的數(shù)據(jù)源，會不定期進(jìn)行更新。已有數(shù)據(jù)的更新是免費的，新增數(shù)據(jù)您可以登錄神箭手后查看詳情，支付后即可獲取新增數(shù)據(jù)。

4、如何發(fā)布數(shù)據(jù)

步驟一 登錄

打開神箭手官網(wǎng) 或者 客戶端軟件， 輸入”賬戶”和”密碼”，點擊”登錄”進(jìn)入控制臺。

步驟二 安裝發(fā)布插件

如果要發(fā)布數(shù)據(jù)到cms網(wǎng)站，需要先在您的cms網(wǎng)站上安裝對應(yīng)的發(fā)布插件。

步驟三 創(chuàng)建發(fā)布項

在發(fā)布數(shù)據(jù)頁面，新建發(fā)布項，設(shè)置發(fā)布數(shù)據(jù)的地址、數(shù)據(jù)字段對應(yīng)等。點此查看詳細(xì)教程.

步驟四 手動發(fā)布數(shù)據(jù)

在數(shù)據(jù)頁面，點擊一條或者選擇多條數(shù)據(jù)，選擇要使用的發(fā)布項（可以選擇多個發(fā)布項），手動發(fā)布數(shù)據(jù)。

步驟五 自動發(fā)布數(shù)據(jù)

在發(fā)布數(shù)據(jù)頁面，點擊【自動發(fā)布】按鈕，所有數(shù)據(jù)會進(jìn)行自動發(fā)布。

常見問題

q: 如何復(fù)制應(yīng)用

登錄神箭手后，點擊應(yīng)用列表的復(fù)制應(yīng)用。api接口應(yīng)用不能復(fù)制

q: 節(jié)點是什么

節(jié)點是運行神箭手應(yīng)用的最小計算單元；比如每個爬蟲或者清洗應(yīng)用的運行，都需要占用至少一個節(jié)點（定時休息的應(yīng)用也需要占用節(jié)點）；運行一個應(yīng)用的節(jié)點越多，速度越快；一個應(yīng)用運行完成，其占用的節(jié)點也會被自動釋放，可以用來運行其他應(yīng)用。神箭手的節(jié)點包括普通節(jié)點和gpu節(jié)點，gpu節(jié)點主要適用于機(jī)器學(xué)習(xí)等需要極速運算的應(yīng)用。

q: 如何開具發(fā)票

消費滿300元即可免費開具發(fā)票，發(fā)票類目統(tǒng)一為 “軟件服務(wù)費”。請在登錄神箭手后的發(fā)票管理中申請，每周五統(tǒng)一處理和郵寄（金額達(dá)到1萬元可免郵，否則統(tǒng)一是順豐到付）

q: 如何簽訂服務(wù)合同

神箭手提供電子合同。購買服務(wù)后，可以在登錄神箭手后的合同管理中下載。下載后可以點擊自動生成帶電子章的正式合同

q: 爬蟲爬取的圖片不能正常顯示

這種一般是因為目標(biāo)網(wǎng)站有圖片防盜鏈，可以在爬蟲設(shè)置里開啟自動托管圖片，將圖片下載到云存儲上。神箭手托管文件后會自動更新數(shù)據(jù)里的圖片鏈接，這樣圖片就能正常顯示了。點擊此處了解如何開啟托管和費用說明

q: 如何批量下載爬取的文件鏈接

可以在爬蟲設(shè)置里開啟自動托管文件，爬蟲啟動后會自動識別文件下載鏈接并下載到云存儲上。點擊此處了解如何使用和費用說明

q: 怎么查看爬取到數(shù)據(jù)的時間和網(wǎng)頁鏈接

打開爬蟲的 “爬取結(jié)果”，可以看到爬取時間和鏈接默認(rèn)是不顯示的。點擊右上角的自定義列表項，在彈窗中勾選爬取時間和鏈接，這樣就能在爬取結(jié)果中顯示出來了

神箭手云爬蟲是哪個公司的

快憶科技（kuaiyi tech）成立于2015年，是專注于大數(shù)據(jù)和人工智能服務(wù)的高科技互聯(lián)網(wǎng)公司，旨在為全球的企業(yè)和開發(fā)者提供前沿的大數(shù)據(jù)和人工智能應(yīng)用開發(fā)和服務(wù)生態(tài)。 基于來自google的技術(shù)團(tuán)隊自主研發(fā)的分布式大數(shù)據(jù)操作系統(tǒng)：kd-os，提供從大數(shù)據(jù)采集獲取、可視化存儲管理、數(shù)據(jù)清洗、bi商務(wù)智能到ai機(jī)器學(xué)習(xí)算法的數(shù)據(jù)訓(xùn)練、建模、模型管理、 模型服務(wù)(serve)等一站式產(chǎn)品和服務(wù)。