(已解決) 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎? [論壇 - Ubuntu 程式設計]


正在瀏覽:   1 名遊客


 到底部   前一個主題   下一個主題  [無發表權] 請登錄或者註冊

(1) 2 »


(已解決) 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員二級
註冊日期:
2012/6/27 20:43
所屬群組:
已註冊使用者
等級: 8
HP : 0 / 176
MP : 27 / 3697
EXP: 6
離線
以Ubuntu正體中文站站為例

最上面有

下載:http://www.ubuntu-tw.org/modules/tinyd0/
新聞:http://www.ubuntu-tw.org/modules/news/
論壇:http://www.ubuntu-tw.org/modules/newbb/
星球:http://www.ubuntu-tw.org/modules/planet/

這四個連結

這四個連結的共通點在於前面的

http://www.ubuntu-tw.org/modules/

這段

請問有辦法可以透過

http://www.ubuntu-tw.org/modules/

此連結 就可以查到其下所有的連結嗎?

純粹好奇~

還煩請各位有經驗的大大解惑~<(_ _)>

2013/5/15 16:04
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員五級
註冊日期:
2009/9/1 11:42
所屬群組:
已註冊使用者
等級: 21
HP : 0 / 514
MP : 183 / 14993
EXP: 56
離線
Firefox

工具-->頁面資訊-->媒體

這樣嗎?

2013/5/15 16:21
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員三級
註冊日期:
2011/4/16 10:39
所屬群組:
已註冊使用者
等級: 9
HP : 0 / 223
MP : 39 / 5461
EXP: 94
離線
迷途小書僮 寫到:
以Ubuntu正體中文站站為例

如果你想問的是寫程式

1.
下載你的的頁面回來
以你的例子是下載
http://www.ubuntu-tw.org/modules/
成一個檔案

2.
針對HTML tag來找
例如找<a> ... </a>的範圍

這應該得到你想要的東西

2013/5/15 16:27
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員二級
註冊日期:
2012/6/27 20:43
所屬群組:
已註冊使用者
等級: 8
HP : 0 / 176
MP : 27 / 3697
EXP: 6
離線
有可能可以找到未放在HTML裡面的link嗎?

ex:

我的apache www資料夾底下有一個資料夾叫做modules

而我只有將tinyd0、news、newbb、planet放在HTML裡面當作link

但實際上我還有一個叫做"XXX"的頁面 只是沒有放在該HTML裡

這樣還有可能被人找出來嗎?

其實 會這樣問的原因是因為 昨天在上一門網路資訊系統的課程時

老師說 別人有辦法可以透過cgi程式找到我www底下的所有檔案

但是我查了一下cgi程式 幾乎都是要寫在自己的server底下 才能做事情

有可能 自己寫了一個cgi然後 可以抓到別人網頁裡的檔案嗎?

2013/5/15 19:56
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員一級
註冊日期:
2012/11/8 23:52
所屬群組:
已註冊使用者
等級: 3
HP : 0 / 65
MP : 8 / 1305
EXP: 62
離線
WebHTTrack 這個程式能做到,在ubuntu軟體中心安裝即可。

2013/5/15 22:26
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員五級
註冊日期:
2008/10/7 21:19
所屬群組:
已註冊使用者
等級: 36
HP : 0 / 896
MP : 661 / 28506
EXP: 85
離線
CGI可以抓取別人網頁的內容,但是方式就像透過瀏覽器看網頁一樣
但如果沒有任何訊息表示有某個檔案存在,那麼基本上不可能直接知道該檔案存在的網址,進而抓取該網頁內容

2013/5/15 22:28
I′m UGP
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員五級
註冊日期:
2010/2/9 18:20
所屬群組:
已註冊使用者
等級: 31
HP : 0 / 758
MP : 438 / 21146
EXP: 33
離線
.htaccess不是設定假的...

2013/5/15 22:35
在下有時候會回答的很簡略
請善用google搜尋回答中的關鍵字

應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員一級
註冊日期:
2013/4/16 22:47
所屬群組:
已註冊使用者
等級: 3
HP : 0 / 65
MP : 8 / 1221
EXP: 62
離線
是因為怕被外來者發現進入後臺管理頁面嗎?
不然可以將試著把檔案的權限等級提高,即使湊巧被意外猜中URL路徑。瀏覽器也只會傳回HTTP的錯誤403訊息。或者乾脆直接把隱蔽的檔案冠上密碼鎖上吧。

2013/5/16 1:39
yuka.idv.tw【風見幽香】#個人網站主頁
yuka.idv.tw/w3/index2.php【中土打鹿】#主蒐集各類同人作品版頁
yuka.idv.tw/w3/index.php【取材紀行】#東方系列同人作品版頁
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員五級
註冊日期:
2010/9/26 16:05
所屬群組:
已註冊使用者
等級: 27
HP : 0 / 660
MP : 317 / 17217
EXP: 43
離線
所以其實原PO想問的,應該不是擷取網頁中所有的連結
而是該網站目錄中所有的檔案吧。

這個基本上是沒辦法,但網站被駭除外

老師說 別人有辦法可以透過cgi程式找到我www底下的所有檔案
但是我查了一下cgi程式 幾乎都是要寫在自己的server底下 才能做事情
有可能 自己寫了一個cgi然後 可以抓到別人網頁裡的檔案嗎?

駭客寫的程式也是cgi,所以老師沒說錯
不過一般cgi的書不會教(作者都未必懂)

不過,apache中有個設定值,
可以設定是否可以顯示整個目錄結構
如果有設定,那麼可以出現如下例的結果
http://mirrors.tuna.tsinghua.edu.cn/centos/6.4/isos/x86_64/

2013/5/16 9:13
應用擴展 工具箱
回覆: 請問有辦法透過一個網站裡的連結取得其下所有的連結嗎?
會員二級
註冊日期:
2012/6/27 20:43
所屬群組:
已註冊使用者
等級: 8
HP : 0 / 176
MP : 27 / 3697
EXP: 6
離線
感謝各位大大~小弟大致上了解了

我在這邊做個總結好了~

大致上來說除非我有特地設定apache的顯示整個目錄結構的設定值外

否則一般人是沒辦法看到我的目錄結構

也可以透過設定.htaccess來保護apache的目錄

另外WebHTTrack應該只能下載該網頁有出現的其他連結

並不能下載沒有出現的目錄結構下的網頁

以上 如果有錯誤 還請大大幫忙修正~

再次感恩各位大大~<(_ _)>

2013/5/16 12:34
應用擴展 工具箱

(1) 2 »

 [無發表權] 請登錄或者註冊


可以查看帖子.
不可發帖.
不可回覆.
不可編輯自己的帖子.
不可刪除自己的帖子.
不可發起投票調查.
不可在投票調查中投票.
不可上傳附件.
不可不經審核直接發帖.