一、爬蟲都可以干什么？

爬蟲技術(shù)前景非常不錯(cuò)，搜狗 百度 字節(jié)跳動 這樣的互聯(lián)網(wǎng)公司都需要爬蟲工程師啊，而且薪資非常不錯(cuò)。 數(shù)據(jù)采集、輿情分析、撰寫行業(yè)報(bào)告、AI、自然語言處理 都需要大數(shù)據(jù)和爬蟲啊我覺得你可以親自試試，感受一下爬蟲的魅力，比如 前嗅的數(shù)據(jù)采集器就可以，百度直接搜就行。Python、C++、PHP 這些編程語言都很火熱啊，現(xiàn)在干什么不都需要爬蟲啊。

二、爬蟲可以為我們做什么，可以做數(shù)據(jù)分析房價(jià)行情嗎

爬蟲需要掌握Python基礎(chǔ)，re正則模塊，Beatifulsoup，pyquery，xpath，selenium，scrapy等一些知識點(diǎn)，能爬取任何網(wǎng)站，包括某寶，某東。你說的房價(jià)行情通過爬蟲爬取房源數(shù)據(jù)，匯總到數(shù)據(jù)庫就可以做一定程度上的分析。一手資料有償?shù)蛢r(jià)給你?？梢园?，爬蟲是數(shù)據(jù)采集必備的技能而數(shù)據(jù)分析必然要有數(shù)據(jù)才能分析，要數(shù)據(jù)必然就會涉及到數(shù)據(jù)采集也就是爬蟲。

三、如何通過軟件抓取新浪財(cái)經(jīng)里單只股票數(shù)據(jù)

根本不用去新浪中抓取。如果你是準(zhǔn)備抓歷史數(shù)據(jù)，那還不如直接使用免費(fèi)的wdz程序，滬深1990年至今的全部日線歷史。2000年至今十幾年的5分鐘數(shù)據(jù)都可以直接輸出，而且可轉(zhuǎn)化為各種格式。

四、股票網(wǎng)站數(shù)據(jù)獲取

股票數(shù)據(jù)的獲取目前有如下兩種方法可以獲取:1.http/javascript接口取數(shù)據(jù)2.web-service接口1.http/javascript接口取數(shù)據(jù)以大秦鐵路（股票代碼：601006）為例，如果要獲取它的最新行情，只需訪問新浪的股票數(shù)據(jù)接口： http://hq.sinajs.cn/list=sh601006這個(gè)url會返回一串文本預(yù)知詳情 請采納 我傳給你份 詳細(xì)的。

五、python分布式爬蟲是什么意思

就是一群電腦去對付一臺電腦。舉個(gè)例子，你用主機(jī) C 去爬網(wǎng)站S，S發(fā)現(xiàn)你爬數(shù)據(jù)太快，認(rèn)為你不是人在操作，于是把你 IP 封了，你不是很郁悶么？于是，分布式爬蟲上場了，我用C1，C2，C3，…………N 臺電腦一起向S 發(fā)起爬數(shù)據(jù)，每臺領(lǐng)取一份任務(wù)，降低爬的頻率，但由于 N 臺是并行去爬，所以效率相當(dāng)驚人，把他們爬回的數(shù)據(jù)進(jìn)行拼裝就 OK 了。又如，主力若想拉升股價(jià)，必須資金量很大，如果資金在一臺電腦上集中拉升的話，交易所就記錄了你的 IP，日后ZJH就容易查到你。那么主力當(dāng)然會用分布式電腦來拉，把資金分散到 N 臺電腦上，并且分散到 N 個(gè)帳戶上，每個(gè)帳戶上的資金低于ZJH查你的紅線。分布式是個(gè)好東西。這樣他們看到的就是 N 臺電腦上的 N 個(gè)韭菜，很難判斷他們是不是一起行動的，只有主力的程序才知道他們是一起行動的。然后用分布式程序集中控制這 N 臺電腦 N 個(gè)帳號的資金聯(lián)動。

六、如何獲得股票行情數(shù)據(jù)，自己編程處理進(jìn)行數(shù)據(jù)挖掘

一般以微軟辦公室軟件的試算表就可以完成編程和數(shù)據(jù)分析。

七、如何獲取實(shí)時(shí)的股票數(shù)據(jù)

1,從證券交易所獲取,比較難 2.從證券公司獲取,一般 3.和其他獲得,如財(cái)訊網(wǎng)合作通過他獲得,較易。