在Python中，爬虫可以通过以下方法获取网页上的真实链接：
1. 使用`urllib`和`BeautifulSoup`解析网页内容，提取超链接。
2. 对于HTTP 302跳转，可以从响应头中的`Location`字段获取原始URL。
3. 对于HTTP 200响应，可以通过正则表达式在页面内容中搜索URL。
4. 使用`lxml`库的XPath表达式可以更高效地获取超链接。
下面是一个简单的示例代码，展示了如何使用`requests`和`BeautifulSoup`获取真实链接：
```python
from bs4 import BeautifulSoup
import requests
def get_real_links（url）:
response = requests.get（url, allow_redirects=False） 不允许自动跳转
if response.history: 如果发生了跳转
real_url = response.history[-1].headers['Location']
else:
real_url = response.url 获取最终URL
return real_url
示例使用
example_url = 'http://example.com' 替换为要爬取的URL
real_link = get_real_links（example_url）
print（real_link）
请注意，爬取网站时应遵守网站的`robots.txt`文件规定，并尊重网站的版权和使用条款。此外，频繁的请求可能对网站服务器造成负担，请合理控制爬虫的访问频率