发帖

【优惠升级】华秋PCB首单最高立减100元，SMT免费贴片！！！

[文章]

labview的网络蜘蛛的实现（post请求，非python)

2019-6-24 11:13:20

3254

5

      python做网络蜘蛛非常火热，不用python也可以实现，本例为：假设发帖楼数几百楼，一页页的翻看太费劲，用蜘蛛来帮你整理信息，下面两幅图片展示了最基本的原理。
      具体要求：产生目标，分析网页结构，编写蜘蛛，运行，分析整理数据。
目标：获取某论坛某贴评论
分析网页结构：找关键词，发现规律，文本变为文本行
蜘蛛：分析网页走向，获取... ...
... ...
关键点：网页数据转为GBK，快速定位关键词位置，发现规律

备注：GBK转码vi  下载地址

QQ截图20190624171159.png (28.12 KB, 下载次数: )

QQ截图20190624171159.png

只看该作者 淘帖0 举报

相关推荐

5 条评论

只看该作者

a156789156782 2019-6-24 17:13:56

更新框架，简单的测试

1赞 3回复

a156789156782 2019-6-24 17:14
https://github.com/Dreamdoing/qlb_labview/blob/master/UTF-8toGBK.vi

赞回复举报
a156789156782 2019-6-26 18:08
抓取本网页的信息

赞回复举报
a156789156782 2019-6-27 22:38
虚拟仪器又能够进入的一个领域，网络蜘蛛，进行静态网页分析

赞回复举报

a156789156782 2019-6-27 22:34:26

可以参考Python的互联网请求，来做蜘蛛

赞回复

Tlove11 2019-7-31 20:52:11

GBK是您写的吗还是里面自带的？请提示

赞 1回复

a156789156782 2019-8-1 09:54
https://github.com/Dreamdoing/qlb_labview/raw/master/UTF-8toGBK.vi

赞回复举报

Tlove11 2019-8-1 21:34:54

如何使用它啊，是把网页的网址复制粘贴到格式字符串中吗

赞回复

Tlove11 2019-8-2 15:00:57

请问网络蜘蛛所捕捉到的信息能转换成汉字吗，我抓取回来的都是一些时间什么的，都是英文，还望指点一下，谢谢

赞 4回复

a156789156782 2019-8-2 16:42
什么网站，获取什么数据

赞回复举报
Tlove11 回复 a156789156782： 2019-8-2 20:44
如果要抓取本页的信息要怎么做，我抓取下来的都是英文

0赞回复举报
Tlove11 回复 a156789156782： 2019-8-2 20:46
我看翻译，说没找到相关网页

0赞回复举报
Tlove11 回复 a156789156782： 2019-8-2 20:48
我试了一下抓取小说的网址，也是英文的，所以有点苦恼...

0赞回复举报

评论

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容图片侵权或者其他问题，请联系本站作侵删。侵权投诉

精选推荐

NI USB-6008/6009双通道AO输出及AI输入显示

548 浏览 0 评论
labview2019安装时出现的问题

557 浏览 1 评论
工业自动化采用DeepSeek协助调试PLC通讯

922 浏览 1 评论
labview界面中英文切换问题

3201 浏览 2 评论
labview串口通信丢数问题（非终止符问题）

2233 浏览 5 评论

快速回复 返回顶部 返回列表

关注微信公众号

电子发烧友网

电子发烧友论坛

社区合作: 刘勇; 联系电话：15994832713; 邮箱地址：liuyong@huaqiu.com

社区管理: elecfans短短; 微信：elecfans_666; 邮箱：users@huaqiu.com

【优惠升级】华秋PCB首单最高立减100元，SMT免费贴片！！！

返回 LabVIEW论坛

回复

关闭

站长推荐 /6

快速回复 返回顶部 返回列表

- 威廉希尔官方网站社区: HarmonyOS威廉希尔官方网站社区

RISC-V MCU威廉希尔官方网站社区

FPGA开发者威廉希尔官方网站社区

张飞电子威廉希尔官方网站社区

- OpenHarmony开源社区: OpenHarmony开源社区

- 嵌入式论坛: ARM威廉希尔官方网站论坛

STM32/STM8威廉希尔官方网站论坛

嵌入式威廉希尔官方网站论坛

单片机/MCU论坛

RISC-V威廉希尔官方网站论坛

瑞芯微Rockchip开发者社区

FPGA|CPLD|ASIC论坛

DSP论坛

- 电路图及DIY: 电路设计论坛

DIY及创意

电子元器件论坛

专家问答

- 电源威廉希尔官方网站论坛: 电源威廉希尔官方网站论坛

无线充电威廉希尔官方网站

- 综合威廉希尔官方网站与应用: 机器人论坛

USB论坛

电机控制

模拟威廉希尔官方网站

音视频威廉希尔官方网站

综合威廉希尔官方网站交流

上位机软件（C/Python/Java等）

- 无线通信论坛: WIFI威廉希尔官方网站

蓝牙威廉希尔官方网站

天线|RF射频|微波|雷达威廉希尔官方网站

- EDA设计论坛: PCB设计论坛

DigiPCBA论坛

Protel|AD|DXP论坛

PADS威廉希尔官方网站论坛

Allegro论坛

multisim论坛

proteus论坛|仿真论坛

KiCad EDA 中文论坛

DFM|可制造性设计论坛

- 测试测量论坛: LabVIEW论坛

Matlab论坛

测试测量威廉希尔官方网站

传感威廉希尔官方网站

- 招聘/交友/外包/交易/杂谈: 项目外包

供需及二手交易

工程师杂谈|交友

招聘|求职|工程师职场

- 官方社区: 发烧友官方/活动

华秋商城

华秋电路

time

recommend

hot

post

—
—
—

版
块
导
航