电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
程序开发背景
本程序来源于我们项目组最近正在开发的一个开源项目网页分块工具。其目的是作为一个底层的信息抽取模块，为后期分析提供尽可能详尽的分块线索，包括尽可能完整的HTML源代码和网页元素的位置、颜色、字体、背景色等信息。程序还要具有较好的适应性，能够支持多种网页，而事实上很多网页都是不标准的。从通用性考虑，程序应该能够支持多种应用，而不仅限于网页分块。
预期目标分析
程序应达到以下几点设计要求：
能够指定要处理的网页的URL能够为HTML源代码添加附件信息，如元素位置对于 Javascript等动态脚本具有良好的解析能力。通过命令行调用，提供良好的通用性通过 socket套接字返回HTML源代码。支持延时读取，保证抓取的成功率支持超时退出，保证程序不会因为加载不成功而卡死。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- FreeRTOS内核实现与应用开发实战指南 221次下载
- 借助局部实体特征的事件触发词抽取方法 2次下载
- 微内核与宏内核的比较与分析 11次下载
- 如何使用Linux内核实现USB驱动程序框架 19次下载
- FreeRTOS 内核实现与应用开发实战指南PDF电子书免费下载 1677次下载
- 使用51单片机内核实现CRC16校验的程序免费下载
- 节点属性的海量Web信息抽取方法 0次下载
- 基于XML特征的网页文本抽取方法 0次下载
- 基于WebHarvest的健康领域Web信息抽取方法 0次下载
- 嵌入式内核实践 0次下载
- 英特尔最小型内核实现边缘智能 0次下载
- 基于XML的WEB信息抽取模型设计
- Windows下网页信息实时监听程序的设计与实现
- 基于重复模式的自动Web信息抽取
- 基于子树广度的Web信息抽取
- 浏览器网页与T5L迪文屏串口深度扩展(Node-RED威廉希尔官方网站 ) 600次阅读
- 什么是网页应用程序测试？ 710次阅读
- Instruct-UIE：信息抽取统一大模型 1469次阅读
- 基于统一语义匹配的通用信息抽取框架USM 960次阅读
- 使用动态输出打印内核的DEBUG信息 729次阅读
- 如何统一各种信息抽取任务的输入和输出 1136次阅读
- Linux内核中Netfilter的设计与实现 1901次阅读
- 基于单片机和μC／0S-II内核实现串口通信模块的设计 1688次阅读
- 利用Python实现网页应用程序，可图片识别狗的类型（附源码） 2624次阅读
- 嵌入式Linux内核的驱动程序开发是怎样的 1415次阅读
- 基于嵌入式Linux内核的系统设备驱动程序开发设计 1113次阅读
- FPGA的FIR抽取滤波器设计详细教程 2131次阅读
- USB固件程序开发的实现 8323次阅读
- 数字下变频中抽取滤波器的设计及FPGA实现 5644次阅读
- 在测控系统中用IP核实现D/A转换 978次阅读
下载排行
本周
- 1TPS54202H降压转换器评估模块用户指南
- 1.02MB | 7次下载 | 免费
- 2华瑞昇CR215芯片数字万用表原理图
- 0.21 MB | 1次下载 | 3 积分
- 3SMD LED选型目录 灯珠手册
- 5.36 MB | 1次下载 | 免费
- 4Tiva C系列DK-TM4C129X入门指南
- 1.69MB | 1次下载 | 免费
- 5电涌保护器(SPD)的选择、安装以及装配
- 4.57 MB | 1次下载 | 免费
- 6时源芯微EMC前车灯案例
- 458.59 KB | 1次下载 | 免费
- 7bq25890、bq25892双级联充电器EVM(PWR692)用户指南
- 2.02MB | 1次下载 | 免费
- 8TPS54426降压转换器评估模块用户指南
- 847.7KB | 次下载 | 免费
本月
- 1ADI高性能电源管理解决方案
- 2.43 MB | 156次下载 | 免费
- 22024PMIC市场洞察
- 2.23 MB | 63次下载 | 免费
- 3开关电源设计原理手册
- 1.83 MB | 30次下载 | 免费
- 4智能门锁原理图
- 0.39 MB | 28次下载 | 免费
- 5OAH0428最新规格书（中文）
- 2.52 MB | 15次下载 | 7 积分
- 6ST7789V2单芯片控制器/驱动器英文手册
- 3.07 MB | 9次下载 | 1 积分
- 7LTH7充电电路和锂电池升压5V输出电路原理图
- 0.04 MB | 7次下载 | 免费
- 8TPS54202H降压转换器评估模块用户指南
- 1.02MB | 7次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935119次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420061次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233084次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191367次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183334次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81581次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73807次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65987次下载 | 10 积分
工商网监
评论