发帖

[文章]

labview的网络蜘蛛的实现（post请求，非python)

2019-6-24 11:13:20

3152

5

      python做网络蜘蛛非常火热，不用python也可以实现，本例为：假设发帖楼数几百楼，一页页的翻看太费劲，用蜘蛛来帮你整理信息，下面两幅图片展示了最基本的原理。
      具体要求：产生目标，分析网页结构，编写蜘蛛，运行，分析整理数据。
目标：获取某论坛某贴评论
分析网页结构：找关键词，发现规律，文本变为文本行
蜘蛛：分析网页走向，获取... ...
... ...
关键点：网页数据转为GBK，快速定位关键词位置，发现规律

备注：GBK转码vi  下载地址

QQ截图20190624171159.png (28.12 KB, 下载次数: )

QQ截图20190624171159.png

只看该作者 淘帖0 举报

相关推荐

5 条评论

只看该作者

a156789156782 2019-6-24 17:13:56

更新框架，简单的测试

1赞 3回复

a156789156782 2019-6-24 17:14
https://github.com/Dreamdoing/qlb_labview/blob/master/UTF-8toGBK.vi

赞回复举报
a156789156782 2019-6-26 18:08
抓取本网页的信息

赞回复举报
a156789156782 2019-6-27 22:38
虚拟仪器又能够进入的一个领域，网络蜘蛛，进行静态网页分析

赞回复举报

a156789156782 2019-6-27 22:34:26

可以参考Python的互联网请求，来做蜘蛛

赞回复

Tlove11 2019-7-31 20:52:11

GBK是您写的吗还是里面自带的？请提示

赞 1回复

a156789156782 2019-8-1 09:54
https://github.com/Dreamdoing/qlb_labview/raw/master/UTF-8toGBK.vi

赞回复举报

Tlove11 2019-8-1 21:34:54

如何使用它啊，是把网页的网址复制粘贴到格式字符串中吗

赞回复

Tlove11 2019-8-2 15:00:57

请问网络蜘蛛所捕捉到的信息能转换成汉字吗，我抓取回来的都是一些时间什么的，都是英文，还望指点一下，谢谢

赞 4回复

a156789156782 2019-8-2 16:42
什么网站，获取什么数据

赞回复举报
Tlove11 回复 a156789156782： 2019-8-2 20:44
如果要抓取本页的信息要怎么做，我抓取下来的都是英文

0赞回复举报
Tlove11 回复 a156789156782： 2019-8-2 20:46
我看翻译，说没找到相关网页

0赞回复举报
Tlove11 回复 a156789156782： 2019-8-2 20:48
我试了一下抓取小说的网址，也是英文的，所以有点苦恼...

0赞回复举报

评论

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容图片侵权或者其他问题，请联系本站作侵删。侵权投诉

精选推荐

LabView怎么保存已经读取的数据方便下次接着用

957 浏览 2 评论
FPGA SPWM 音圈电机问题

1383 浏览 1 评论
研华采集卡采集声音数据文件保存？

1058 浏览 0 评论
新手求助，从示波器导出来csv类型的波形数据，怎么用labview读取csv文件还原波形，求助各位大佬，感谢感谢！！！

1550 浏览 2 评论
Labview 信号处理瞬态测量连线出现错误提示，请教各位前辈！麻烦请各位帮忙看一下？

6894 浏览 2 评论

快速回复 返回顶部 返回列表

关注微信公众号

电子发烧友网

电子发烧友论坛

社区合作: 刘勇; 联系电话：15994832713; 邮箱地址：liuyong@huaqiu.com

社区管理: elecfans短短; 微信：elecfans_666; 邮箱：users@huaqiu.com

返回 LabVIEW论坛

回复

关闭

站长推荐 /7

快速回复 返回顶部 返回列表

- 技术社区: HarmonyOS技术社区

RISC-V MCU技术社区

FPGA开发者技术社区

- OpenHarmony开源社区: OpenHarmony开源社区

- 嵌入式论坛: ARM技术论坛

STM32/STM8技术论坛

嵌入式技术论坛

单片机/MCU论坛

RISC-V技术论坛

瑞芯微Rockchip开发者社区

FPGA|CPLD|ASIC论坛

DSP论坛

- 电路图及DIY: 电路设计论坛

DIY及创意

电子元器件论坛

专家问答

- 电源技术论坛: 电源技术论坛

无线充电技术

- 综合技术与应用: 机器人论坛

USB论坛

电机控制

模拟技术

音视频技术

综合技术交流

上位机软件（C/Python/Java等）

- 无线通信论坛: WIFI技术

蓝牙技术

天线|RF射频|微波|雷达技术

- EDA设计论坛: PCB设计论坛

DigiPCBA论坛

Protel|AD|DXP论坛

PADS技术论坛

Allegro论坛

multisim论坛

proteus论坛|仿真论坛

KiCad EDA 中文论坛

DFM|可制造性设计论坛

- 测试测量论坛: LabVIEW论坛

Matlab论坛

测试测量技术

传感技术

- 招聘/交友/外包/交易/杂谈: 项目外包

供需及二手交易

工程师杂谈|交友

招聘|求职|工程师职场

- 官方社区: 发烧友官方/活动

华秋商城

华秋电路

time

recommend

hot

post

—
—
—

版
块
导
航