基于Web数据挖掘主流CAD软件的对比分析.pdf

精密制造与 自动化 2 0 1 5 年第 1 期 基于 We b数据挖掘主流 C AD软件的对 比分析 赵华许超 天津机 电职业技术学院 产学研 中心天津 3 0 0 1 3 1 摘要C A D技术在制造业中发挥着越来越重要的作用 由于有四大主流 C AD软件 怎样选择适合本行业最优 的软件 成为企业和工程技术人员的难题 应用采集工具 火车采集器 对国内招聘网站 5 l j o b 发布的招聘信 息进行数据挖掘 通过对采集到的数据进行分析 结合四大主流 C AD软件各 自的特点 在行业及地区分布等多 个方面 对四大软件在国内的应用情况进行对 比分析 为广大学生 工程技术人员和企业选择合适的 C AD软件 提供依据 关键 词We b 数据挖 掘C AD对 比分析 1 引言 随着计算机计算能力的不断提高 C AD技术和 C AD 产业在工业需求的推动下 日益兴旺与繁荣 随着我国制造业的不断发展 C A D技术 已经被广泛 应用于航空航天 汽车制造 船舶制造 机械制造 电子 消费品等行业 当前 国内企业通 常采用 的大型 C A D 软件主要有 S o l i d Wo r k s UG NX P r o E n g i n e e r C A T I A 业 内很多人对 当前主流 的 C AD软件进行比较 网络上也充斥着关于几大软件 的争论 这些对比分析一般都是基于个人使用经验 或者 C AD软件公司的宣传 缺乏科学的数据支持 本文对网络数据进行挖掘 以市场 的实际应用情况 为依据 对四大主流软件进行对比分析 为广大学 生 工程技术人员和企业选择合适 的软件提供了可 靠 的依据 2 数据挖掘 2 1 采集工具 随着互联网技术的飞速发展 网络正影响着人 类社会生活的方方面面 互联网为人类提供 了海量 数据 已经成为人类信息资源的主要来源 We b包 含 了各种信息和资源 数据多样而复杂 数据量十 分庞大 有时 人们可 以直接登录某个网站 通过 网站程序提供的某些功能直接提取所需的信息 但 是也有些时候 现有的网站程序不能提取满足人们 需求 的数据 这时就需要借助 We b数据挖掘技术来 采集有价值的信息 We b数据挖掘是从 网络资源上 抽取信息 或知识 的过程 是对 We b资源 中蕴含 的 未知的 有潜在应用价值的模式的提取 We b 3 8 爬虫是 We b挖掘中重要技术之一 是爬取页面的重 要手段 通过爬虫的构建达到 We b信息搜索的目的 网络爬虫 又称网络蜘蛛或 We b信息采集器 是一 个 自动下载网页的计算机程序或 自动化脚本 目 前 国内应用较多的采集软件主要有以下几种 火 车采集器 网络旷工 有讯软件 狂人 三 人行 等 本文选择 火车采集器 作为采集工具 2 2 W e b 数据源 前程无忧 5 l j o b 是国内领先 的专业招聘 网站 网站拥有超过 8 2 0 0万个注册用户 通 过 5 l j o b 发布的招聘职位每天超过 3 2 0万个 涉及 信息技术 电子 金融 化工 物流 广告等 5 9 个行业 5 8 个职能大类 7 2 0个小类 职位遍布全 国近 5 0 0个大中小城市 5 l j o b 提供的海量人力资源 信息真实地反映了就业市场对某一类人才和技能的 需求 本文选取 5 l j o b 网站上的招聘信息作为作 为数据源 采集对四大主流 C AD 软件有技术要求 的招聘信息 进行数据分析 从中总结 出四大主流 C AD软件在市场上的应用情况 进而进行对 比分析 2 3 W e b 数据挖掘 因为招聘网页具有相 同的结构 可 以使用统一 的抽取规则 利用 火车采集器 L o c o y s p i d e r 对 地区 行业 职位等关键信息要素进行抓取 火车 采集器 是一款专业的网络数据采集 信息挖掘处理 软件 通过采集规则的定义 可以搜索所有网站 采集几乎任何