电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
程序开发背景
本程序来源于我们项目组最近正在开发的一个开源项目网页分块工具。其目的是作为一个底层的信息抽取模块，为后期分析提供尽可能详尽的分块线索，包括尽可能完整的HTML源代码和网页元素的位置、颜色、字体、背景色等信息。程序还要具有较好的适应性，能够支持多种网页，而事实上很多网页都是不标准的。从通用性考虑，程序应该能够支持多种应用，而不仅限于网页分块。
预期目标分析
程序应达到以下几点设计要求：
能够指定要处理的网页的URL能够为HTML源代码添加附件信息，如元素位置对于 Javascript等动态脚本具有良好的解析能力。通过命令行调用，提供良好的通用性通过 socket套接字返回HTML源代码。支持延时读取，保证抓取的成功率支持超时退出，保证程序不会因为加载不成功而卡死。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- FreeRTOS内核实现与应用开发实战指南 244次下载
- 借助局部实体特征的事件触发词抽取方法 2次下载
- 如何使用Linux内核实现USB驱动程序框架 20次下载
- FreeRTOS 内核实现与应用开发实战指南PDF电子书免费下载 1715次下载
- 使用51单片机内核实现CRC16校验的程序免费下载
- 节点属性的海量Web信息抽取方法 0次下载
- 基于XML特征的网页文本抽取方法 0次下载
- 基于WebHarvest的健康领域Web信息抽取方法 0次下载
- 嵌入式内核实践 0次下载
- 英特尔最小型内核实现边缘智能 0次下载
- 基于XML的WEB信息抽取模型设计
- Windows下网页信息实时监听程序的设计与实现
- 嵌入式Linux内核实时性研究及改进
- 基于重复模式的自动Web信息抽取
- 基于子树广度的Web信息抽取
- 开发第1个LVGL程序与实现按键操作 450次阅读
- 什么是网页应用程序测试？ 861次阅读
- Instruct-UIE：信息抽取统一大模型 1763次阅读
- 基于统一语义匹配的通用信息抽取框架USM 1143次阅读
- 使用动态输出打印内核的DEBUG信息 916次阅读
- 如何统一各种信息抽取任务的输入和输出 1316次阅读
- Linux内核中Netfilter的设计与实现 2059次阅读
- 基于单片机和μC／0S-II内核实现串口通信模块的设计 1811次阅读
- 利用Python实现网页应用程序，可图片识别狗的类型（附源码） 2755次阅读
- 嵌入式Linux内核的驱动程序开发是怎样的 1521次阅读
- 基于嵌入式Linux内核的系统设备驱动程序开发设计 1209次阅读
- FPGA的FIR抽取滤波器设计详细教程 2362次阅读
- USB固件程序开发的实现 8527次阅读
- 数字下变频中抽取滤波器的设计及FPGA实现 5850次阅读
- 在测控系统中用IP核实现D/A转换 1031次阅读
上传资料赚积分下载排行
本周
- 1TC358743XBG评估板参考手册
- 1.36 MB | 330次下载 | 免费
- 2开关电源基础知识
- 5.73 MB | 6次下载 | 免费
- 3100W短波放大电路图
- 0.05 MB | 4次下载 | 3 积分
- 4嵌入式linux-聊天程序设计
- 0.60 MB | 3次下载 | 免费
- 5基于FPGA的光纤通信系统的设计与实现
- 0.61 MB | 2次下载 | 免费
- 6基于FPGA的C8051F单片机开发板设计
- 0.70 MB | 2次下载 | 免费
- 751单片机窗帘控制器仿真程序
- 1.93 MB | 2次下载 | 免费
- 8基于51单片机的RGB调色灯程序仿真
- 0.86 MB | 2次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 2555集成电路应用800例(新编版)
- 0.00 MB | 33564次下载 | 免费
- 3接口电路图大全
- 未知 | 30323次下载 | 免费
- 4开关电源设计实例指南
- 未知 | 21548次下载 | 免费
- 5电气工程师手册免费下载(新编第二版pdf电子书)
- 0.00 MB | 15349次下载 | 免费
- 6数字电路基础pdf(下载)
- 未知 | 13750次下载 | 免费
- 7电子制作实例集锦 下载
- 未知 | 8113次下载 | 免费
- 8《LED驱动电路设计》 温德尔著
- 0.00 MB | 6653次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935054次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537796次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191185次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183278次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138040次下载 | 免费
工商网监
评论