url地址怎么獲取
關注：93 發布時間：2021-08-22 17:40:57
大黑客呢？我一定會自己寫劇本，不要一個個敲命令。在這里，我簡單地使用lynx命令的應用程序，提取出特征網頁中的一系列url。
看，這是小編的編輯。還不錯。這是一種美麗的顏色。小編很幸運能成為這位編輯。給小編加油。我會把源代碼貼在文末！
我來說說這個劇本是怎么運作的
lynx將在顯示頁面時以比較佳格式顯示頁面文本，這可以遵循頁面上的所有超文本引用或鏈接。提取鏈接時，腳本僅使用sed打印頁面文本中引用字符串之后的所有內容。然后根據用戶指定的選項處理鏈接列表。
以上只是我用linux寫的一些代碼，等等。我會發布源代碼。不懂可以問我。從網頁中提取鏈接其實很有用。
讓我們運行我寫的代碼
看，從搜索網站上找到這么多鏈接，很有成就感！
bash getlinks . sh http://www.amazon.com | wcl
也可以統計一下有多少鏈接。亞馬遜有134個鏈接。
bash getlinks . sh-d http ://www . baidu.com
通過刪除前面的http://，您可以看到這些鏈接指向多少個不同的域。
你看，效果很好！
比較后我們做教育，希望每個人都能學到東西是我們不變的初衷！比較后，我先貼出代碼：
#!/bin/bash
#日期2019-09-22
if[$ #-eq 0]；然后
echo " usage : $ 0[-d |-i |-x]url " 2
echo "-d=僅域，-i=僅內部refs，-x=僅外部" 2
1號出口
船方不負擔裝貨費用
if[$ #-gt 1]；然后
案例" $1 "
-d)lastcmd=" cut-d/-f3 | sort | uniq "
變化
；
-r)base domain=" http://$(echo $ 2 | cut-d-f3)/"
lastcmd=" grep \"^$basedomain\ " | sed \ " s | $ base domain | | g \ " | sort | \
uniq "
變化
；
-a)base domain=" http://$(echo $ 2 | cut-d/-f3)/"
lastcmd=" grep-v \"^$basedomain\ " | sort | uniq "
變化
；
*) echo "$0未知選項指定了d : $ 1 " 2
1號出口
environmental systems applications center 環境系統應用程序中心
其他
lastcmd="sort | uniq "
船方不負擔裝貨費用
lynx -dump "$1" | \
sed -n "/^references$/,$p" | \
grep -e "[[:digit:]] \ . "| \
awk“{ print $ 2 }”| \
cut -d\？-f1 |\
eval $lastcmd
退出0
猜你喜歡
-
假釋是什么意思64人支持
假釋是對被判處有期徒刑或者無期徒刑的罪犯，由于遵守監獄規定，接受教育改造，確有悔改表現，不致危害社會，經過一定刑期，提前有條件釋放的制度。申請假釋的條件： (一)法定對象，(二)法…
-
鄰座的怪同學電影好看嗎43人支持
由同名漫畫改編的青春校園片《鄰座的怪同學》于5月23日上映，由土屋太鳳和菅田將暉主演。那么《鄰座的怪同學》好看嗎？我們來看看隔壁陌生同學的電影故事介紹。《鄰座的怪同學…
-
基帶壞了修理多少錢109人支持
有時候蘋果x不服務了?，F在來分享一些解決的小技巧吧！方法一：開啟飛行模式，然后關閉有時候，因為手機周圍的網絡不好，信號會中斷。這時，在我們打開飛行模式，然后關閉飛行模式后，系統…
-
淘寶買家號降權是什么意思3人支持
有多少買家知道？任何平臺買家都有拒絕的權利，聊天記錄中的罵人、威脅、說不正當的話將由賣家舉報。異常交易的購買，以及反復出現的平臺糾紛、中差評、賬戶信息相關賬戶違規等。…
-
qq群排名首頁66人支持
想必大家都創建了qq，但是沒有排名，最后也沒有人放棄。它不活躍。今天，我教你如何讓一個qq群活起來，讓更多的人可以聊天，加入群。影響群體排名的因素和原則；第一點：集團層面抑制的重…
-
微信屏蔽小紅書等外部鏈接15人支持
換句話說，八姐作為一個每天無憂無慮，百無聊賴，有八卦心的女人，經常刷熱搜。當然，以前刷熱搜的時候，其實是關注娛樂八卦的。畢竟技術圈的網圈上熱搜的機會很小，除了離婚和被殺繼承?！?/p>
-
解密：分期樂購物額度自己套78人支持
分期音樂的初始額度只能用于消費。但是隨著發展，給了大家提現的機會。有些額度可以提取到綁定的銀行卡，或者有些購物額度只能用于消費。在平臺上購買商品，如電子產品、游戲卡、…
-
情人節文案朋友圈99人支持
因為平時喜歡華麗的文字和漂亮的文字，所以整理了一些文案，有些是自己原創的，希望對大家有幫助！1.牽著你的手，和你的兒子一起變老！2.但愿我能回首往事，深情白頭！3.曾經滄海難為水，永遠…
-
極兔速遞是誰家的？66人支持
申通、童淵、大云出人意料的聯手封殺極限兔快車。極限兔快遞之初，是通達系的網絡支撐其擴張，突破歷史價格戰搶占市場。為什么會出現這種現象？這就讓人懷疑極限兔快遞是個什么樣…
-
射手座和雙魚座配不配89人支持
射手座和雙魚座相配。射手座是代表自由的星座。自由、樂觀、熱情、直率是他們的標簽。他們特立獨行，熱愛自由，不愿意被規范和教條束縛。他們都想追求自己的思想和內心感受，無論…
-
微信群里怎么艾特所有人84人支持
[email?protected]最近微通信過熱更新，群聊人人都可以用，群聊所有成員都會收到消息。僅針對組所有者和管理員微信官方賬號留言多輪回復灰度測試：以前只支持讀者和作者多輪互動，…
-
新手現在入行電商13人支持
分析：再過10年、20年，電商還會存在，少數人還在賺錢，大多數人還沒賺錢。所以，在這個行業，不存在為時不晚的問題！不過電商確實過了紅利期，現在是紅海。就像三年前，剛開始做自媒體。當時…
熱門十大品牌
- 2021年我國十大黃金品牌排行榜30999人
- 眼鏡品牌十大排行榜前10名26357人
- 十大證券公司排行榜前10名23243人
- 2021年我國雜志排行榜前10名20054人
- 我國十大雜志排行榜前10名16358人
- 2021我國十個宜居城市排行榜前11487人
- 男士褲子品牌十大排行榜前10名11186人
- 2021十大火熱電腦游戲排行榜前11057人
- 十大衛生巾品牌排行榜前十名8848人
- 我國十大襪子品牌排行榜前十名8369人
微商技巧
關注人數：385
關注人數：388
關注人數：375
關注人數：360
關注人數：404
關注人數：359