url地址怎么獲取

關(guān)注：93 發(fā)布時(shí)間：2021-08-22 17:40:57

大黑客呢？我一定會(huì)自己寫劇本，不要一個(gè)個(gè)敲命令。在這里，我簡(jiǎn)單地使用lynx命令的應(yīng)用程序，提取出特征網(wǎng)頁(yè)中的一系列url。

看，這是小編的編輯。還不錯(cuò)。這是一種美麗的顏色。小編很幸運(yùn)能成為這位編輯。給小編加油。我會(huì)把源代碼貼在文末！

我來(lái)說(shuō)說(shuō)這個(gè)劇本是怎么運(yùn)作的

lynx將在顯示頁(yè)面時(shí)以比較佳格式顯示頁(yè)面文本，這可以遵循頁(yè)面上的所有超文本引用或鏈接。提取鏈接時(shí)，腳本僅使用sed打印頁(yè)面文本中引用字符串之后的所有內(nèi)容。然后根據(jù)用戶指定的選項(xiàng)處理鏈接列表。

以上只是我用linux寫的一些代碼，等等。我會(huì)發(fā)布源代碼。不懂可以問(wèn)我。從網(wǎng)頁(yè)中提取鏈接其實(shí)很有用。

讓我們運(yùn)行我寫的代碼

看，從搜索網(wǎng)站上找到這么多鏈接，很有成就感！

bash getlinks . sh http://www.amazon.com | wcl

也可以統(tǒng)計(jì)一下有多少鏈接。亞馬遜有134個(gè)鏈接。

bash getlinks . sh-d http ://www . baidu.com

通過(guò)刪除前面的http://，您可以看到這些鏈接指向多少個(gè)不同的域。

你看，效果很好！

比較后我們做教育，希望每個(gè)人都能學(xué)到東西是我們不變的初衷！比較后，我先貼出代碼：

#!/bin/bash

#日期2019-09-22

if[$ #-eq 0]；然后

echo " usage : $ 0[-d |-i |-x]url " 2

echo "-d=僅域，-i=僅內(nèi)部refs，-x=僅外部" 2

1號(hào)出口

船方不負(fù)擔(dān)裝貨費(fèi)用

if[$ #-gt 1]；然后

案例" $1 "

-d)lastcmd=" cut-d/-f3 | sort | uniq "

變化

；

-r)base domain=" http://$(echo $ 2 | cut-d-f3)/"

uniq "

變化

；

-a)base domain=" http://$(echo $ 2 | cut-d/-f3)/"

lastcmd=" grep-v \"^$basedomain\ " | sort | uniq "

變化

；

*) echo "$0未知選項(xiàng)指定了d : $ 1 " 2

1號(hào)出口

environmental systems applications center 環(huán)境系統(tǒng)應(yīng)用程序中心

其他

lastcmd="sort | uniq "

船方不負(fù)擔(dān)裝貨費(fèi)用

lynx -dump "$1" | \

sed -n "/^references$/,$p" | \

grep -e "[[:digit:]] \ . "| \

awk“{ print $ 2 }”| \

cut -d\？-f1 |\

eval $lastcmd

退出0

上一篇：立刷pos機(jī)安全嗎

下一篇：芝加哥是哪個(gè)國(guó)家

url地址怎么獲取

猜你喜歡

熱門十大品牌

微商技巧