Request em cần tool lọc web site

[FakerVn]

còn loc có thể gôgle notepad chắc làm dc

 

[drautogon]

em đang cần 1 tool để lock website dạng như sau
www.domaina.com/xxx
www.domaina.com/bbbb
em có 1 list site số lượng lớn như vậy
nó giống domain nhau chỉ khác phần mở rộng đằng sau nên em cần tool nào nhận dạng được domain giống nhau thì tự động xoá hết chỉ giữ lại 1 cái đầu tiên thôi
ai làm đc cho em xin giá nhé
em cảm ơn ạ

dùng sublime thì sort rồi xài regex:

^(http://[^/]+/)(.*$\n?)((\1)(?2))+

 

[vietanh226622]

http://diamondfield.net/link-building-tools/
bác xem trong này có không