FOUND "腾讯" IN LINUX DO Channel

球儿 (@amrice) 在 大家怎么解决mcp因为robots.txt的原因无法fetch的问题的？ 中发帖
入体，很多网站不让爬。。。一些数据站不让爬就算了，腾讯云的文档也不让爬。。。真离谱，有什么办法吗？