回答情况：
提问时间：
问题标签：
近期发现大量网站采用相似的反爬技术，Heritrix提示412，网址http://www.xgrsks.cn/，还有湖北省编制网、检察院、政府网都采用这种，网上查不到相关办法
浏览 1110提问于2021-04-26
0回答
使用Python爬虫，怎么处理反爬机制？
python、爬虫、验证码、requests、数据
我用Python requests来请求数据，但经常出现bug，要没ip无效，要么需要验证码，怎么处理呢？
浏览 266提问于2025-07-19
0回答
如何在SCF内操作把图片上传到COS？
对象存储、api、云函数、serverless
我有平台给客户上载图片作为图库, 图片不大都1MB以下, 我用了云函数SCF接收客户端传上来base64格式对象,再在SCF上转为Buffer.尝试使用cos.putobject上传到对象储存cos,但反回的我爬了很多文实在搅不懂这块怎么运作. 我也看到直接在客户端用API及临时密键把图片上载到COS. 请问各位, SCF 是否不能这样操作? 还是有什么弄错了...
浏览 348提问于2020-01-02
0回答
为什么用xpath提取数据保存到数据库会带有<span class="title">xxxx</span>这样的html标签？
html、数据库、scrapy、python爬虫、title
我的本意是只想爬取xxxxx，为何标签也被爬取了呢
图片
浏览 200提问于2023-08-23
2回答
怎样在不使用API的前提下爬取Twitter数据？
数据挖掘、python、api、twitter、数据
由于现在Twitter API 数据爬取付费，所以我想在不使用Twitter API的情况下使用python爬取到特定关键词的Twitter数据或者Reddit数据，有什么好办法吗？
浏览 1055提问于2024-01-06
2回答
如何用python爬取数据并保存到excel？
python
利用python爬取豆瓣电影排行榜（https://movie.douban.com/chart)的数据并保存到excel中。用相同代码爬取网页豆瓣top250的数据可以爬取到excel中，但将网址及相关信息改为网页豆瓣电影排行榜中的信息时便无法爬取，也找不出问题所在。以下图片为完整代码。
浏览 592提问于2021-01-09
0回答
比如，用huginn爬网这个链接：
https://s.weibo.com/weibo?换了其他地方的机器，电脑和ip不同，huginn照样无法正常爬取。而在同一台机器上用 下载工具甚至简单的脚本下载这个链接的网页内容，却可以实现，不知道是什么情况。
浏览 247提问于2021-09-28
1回答
pandas怎么赋唯一id？
数据挖掘、python、深度学习、GPU 云服务器、数据工坊
图片.png
比如以上爬的数据，只有用户名没有id，有多个相同用户名出现
浏览 909提问于2019-04-08
0回答
能否用腾讯云函数更新小程序云数据库？
云函数、serverless、微信、小程序、小程序·云开发
小程序云函数不支持python，所以想用python写腾讯云函数爬取数据更新小程序云数据库
浏览 432提问于2020-09-10
1回答
编写一个爬取QQ音乐 的python代码？
python、存储、mp3
编写一个爬取QQ音乐指定风格歌曲的前5首，并以MP3格式存储在桌面指定文件夹中 的python代码
浏览 423提问于2023-04-22
0回答
crawlers/ddproperty-crawler.html
不知道国内有没有谁搞过这个 ，要爬取18年之前的历史数据
浏览 304提问于2022-05-10
1回答
怎样在不使用远程桌面的情况下就能查看储存在腾讯云服务器上面的文件（不是网盘）？
云服务器、、文件存储、访问管理、云数据库 MySQL
在服务器上部署了爬虫，想在不使用远程桌面的情况下直接就能查看服务器硬盘上爬虫爬取到的最新数据，想问一下该如何实现？
浏览 485提问于2020-04-16
5回答
微信小程序如何从MySQL获取数据显示到小程序上？
云数据库 SQL Server、eclipse、小程序·云开发
我是一个研究小程序3天的 新手，就是现在想做一个类似于网易新闻样式的小程序，前台从eclipse爬取数据到MySQL，然后小程序读取MySQL中的数据显示到小程序中。
浏览 7693提问于2018-05-07
回答已采纳
2回答
大神有没有研究过美团的_token生成方法？
python、爬虫、数据分析
如题，我最近在做一个数据分析，想要用到美团的美食信息，于是就想用python爬取美团的数据，但是在构造爬虫的时候发现美团有一个_token参数，百思不得其解，还请大神指教
浏览 2412提问于2018-09-12
1回答
如何设置python爬数据的时长？
python
您好，我想用python爬一个郑州机场出租车以及航班的24小时的数据，最好每隔一小时，我知道time.sleep(3600)应该就是每隔一小时抓一次，但是总时长不知道在哪里设置，想请教一下大佬！
浏览 399提问于2020-07-20
0回答
如何免root授权访问并编辑 android obb资料夹？
android、游戏、root
图片
有些修改版的游戏要套用obb，但卡在obb这个资料夹没办法授权访问，打开都空白...
浏览 444提问于2023-03-18
0回答
每日积分签到活动结束？新的积分活动呢？
防火墙、程序、推送、#Techo开发者嘉年华、WorkBuddy
有变动你要推送公告啊，我们的使用数据也是反向喂养AI的
3.workbuddy更新后，很多程序无法运作，比如payton爬取在我的w11电脑就报错，我的防火墙都关了
浏览 146提问于2026-05-12
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号