我需要创建一个站点地图/列表,但我也需要显示链接名称。
我的意思是,例如 www.google.com,我需要创建以下列表。
Google - www.google.com
Images - http://images.google.com/imghp?hl=en&tab=wi
...
My Account - http://images.google.com/imghp?hl=en&tab=wi
Personal Information Edit - https://www.google.com/accounts/EditUserInfo
...
My Products - https://www.google.com/accounts/EditServices
...
Privacy - http://www.google.com/intl/en/privacy.html
...
该列表需要绑定到域,例如 us.example.com。
我尝试使用 python 脚本进行深度优先搜索,并使用 Beautiful Soup 来解析链接。这是不成功的。
有人对他们将如何做有任何想法吗?