电子商务推荐系统课程研究

1、电子商务推荐系统课程研究电子商务论文电子商务推荐系统课程研究张春霁(天津财经大学，天津300222 )摘要:为更好地改进电子推荐系统课程教学z本文从影响电子商务推荐 质量与效率的三个主要问题：完整的基础评价数据、准确的推荐方法及适宜的计 算复杂度展开评述，对目前国内外参考文献进行梳理，阐述了针对这三个问题 的目前研究现状及对策，并进行了评析，同时指岀了电子商务推荐的进一步发展 方向,为该课程的教学提供了更好的支撑。关键词:电子商务推荐课程;基于内容推荐；协同过滤推荐;计算复杂度中图分类号:g642.0文献标志码：a文章编号：1674-9324 ( 2014 )11-0160-02电子商务推荐系

2、统课程教学中,推荐瓶颈问题是教学中的一个难点,为 此本文对推荐的瓶颈问题展开综述。在这个过程中基础评价数据是否完整将影响 到推荐系统是否能准确地获取用户购物偏好,推荐方法是否准确将会影响推荐质 量与精度，基础评价数据的分析处理及推荐方法的计算复杂度将会影响推荐系统 的推荐效率和系统的扩展性。基础评价数据的完整性研究现状推荐系统的基础评价数据可分为显性数据和隐性数据。显性数据主要包 括：用户注册信息、用户对产品的显性评分、用户历史交易记录、用户评论、产 品关键字属性等。隐性数据一般指通过web数据挖掘技术获得的数据,完整的基础数据可以使推荐系统更准确地获取用户购物偏好,从而提高推荐的准确性。为保

3、证数据完整性，国内外学者通常采用数据补值和数据预测两种处理方法。常 见的数据补值方法有：pazzani提出使用用户个人社会属性信息对基础数据进行 补值，但是这种方法有可能会侵犯到个人社会信息的隐私。k.w.cheung提出应 用web数据挖掘对服务器日志进行数据分析，并在此基础上提岀了一种基于隐 性评价数据的推荐方法，在此基础上，李晓旳等提出了一种隐性数据的分析处理 方法，详细阐述建立用户兴趣模型的过程。d.r.liu and y.y.shih提岀由rfm (最近购买时间，购买频率，购买金额)指标来度量的客户终身价值(clv )可以让商家发现更有价值的客户，进而提出一种基于客户终身价值的推荐方

4、法。常见的数据预测处理方法有:邓爱林等 提出根据产品之间的相似性来预测用户对未评价产品的评价值。陈逸、于洪进一 步提出了相同评分矩阵的概念。m kkavitha devi提岀对相似评分用户进行预聚类，基于聚类簇内用户的相似性对用户未评分数据进行预测。二、推荐方法硏究现状 在保证基础数据完整的同时”推荐系统推荐质量的关键在于是否采用了合理的推荐方法。推荐系统的主流推荐方法分为：基于内容的推荐、协同过滤推 荐、混合推荐算法、其他推荐算法等。1基于内容推荐系统的研究。基于内容的推荐通过分析并获取用户感兴趣产品的特征作为用户的购物偏好，通过用户特征偏好与产品特征的匹配程度，以实施推荐。孟宪福，陈莉提岀

5、采用贝叶斯理论对产品特征和用户兴趣特征进行 提取与表示，取得了较好的推荐效果。基于内容的推荐目前遇到的最大挑战有两 个：一是只能为用户发现与用户原有兴趣特征相匹配项目作推荐；二是如何对产 品与用户兴趣特征进行更准确的提取。基于内容的推荐需要准确的用户模板来描述用户的偏好，否则推荐可能与用户的兴趣根本不相关，所以资源特征的提取与 表示及用户偏好特征的提取与表示一直是其进一步发展的瓶颈。2. 基于协同过滤推荐系统的硏究。协同过滤推荐方法最早由goldberg提出，其基本思想我们往往会利用好朋友的推荐来进行一些选择。即在具有相似 购物偏好的用户之间进行交叉推荐。目前经典的协同过滤推荐算法有两种：一种

6、 为基于内存的协同过滤(memory-based collaborative filtering ),另一种为 基于模型的协同过滤(model-based collaborativefiltering )，其中神经网络技 术、潜在语义检索(latentsemantic indexing )和贝叶斯网络技术(bayesian networks )等是此类方法的典型代表，breese认为基于内存的协同推荐比基于模型的协同推荐具有更好的推荐精度但计算复杂度要差很多。针对此问题,sarwar教授于2001年又提岀了一种新的协同过滤推荐技术,我们称为基于项目的协同推荐(item-based collab

7、orative filtering algorithms ), sawar 教授 同时在论文中指出了该推荐算法相对基于内存推荐算法的优势。premm教授具 有不同的观点，指岀基于项目的协同过滤推荐算法准确度与采用的实验规模数据 有关，大多数情况下还是基于用户的协同过滤推荐好。协同过滤推荐会导致相似 用户的聚类效果不佳，从而产生稀疏性以及冷启动等问题。协同过滤虽然取得了 巨大成功，但受其原理所限,以下几个缺点是影响其进一步发展的瓶颈。(1)精确性(accuracy ):即提高推荐系统的推荐质量，用户如果对推荐系统不信任，推荐的项目经常不符合用户需求，导致用户乱投票的现象，评分不准确导致推荐 质量

8、进一步下降，形成恶性循环。(2 )稀疏性(sparstiy ):随着购物网站产品与用户数量的增长，用户参与评分的项目通常是有限的，而且有些用户因为各种 原因不愿意留下评分数据。有些购物网站的评分记录甚至只占需要评分项目的 1%2% ,从而导致评分数据的稀疏性问题，评分值的稀疏会导致最近邻居相似 性聚类的不准确，从而导致推荐质量降低。(3 )冷启动(coldstart):也称为初 始评价问题，又分为新项目(newitem )问题和新用户(newuser)问题。如 果新产品刚刚上架,没有任何用户对其进行评价，即使它有很好的质量，也不可 能获得推荐。同样，如果一个新用户刚刚注册，还没有开始对任何产品

9、进行评价, 推荐系统也不可能获得他的购物兴趣，也就无法对该用户进行推荐。这种现象在 协同过滤推荐技术中尤其明显。(4 )扩展性(scalabality ):随着用户和产品数量的大幅度增加，数据的处理和计算也会成倍增长,对于如此巨大的计算量，算 法将遭遇到严重的扩展性问题，导致推荐的效率也大幅度降低。3. 混合推荐算法的硏究。很多学者设想将这两种推荐策略组合起来z取长补短，这也就是混合推荐算法的思想。依据不同的组合思路我们将研究人员提岀的混合算法大致分为以下几 类:(1)混合集成：把来自不同推荐技术的推荐结果一起推荐给用户,这种集成 技术没什么新意,目前采用的比较少。(2 )加权集成:把不同推荐

10、技术预测的推 荐产品的分值按照不同推荐技术特点赋予不同的权重，然后再对待推荐产品的预 测分值进行加权求和”依据加权后的预测分值排序并实施推荐。(3 )转换集成: 按照不同的推荐环境，选择不同的推荐技术实施推荐，归根结底还是使用其中的 某一种推荐技术。(4 )瀑布型集成:应用一种推荐技术对另一种推荐技术的推荐 结果实施优化。这种方法可以过滤掉前一种推荐技术中不太好的推荐结果。可以 是基于内容对协同过滤进行优化也可以协同过滤对基于内容推荐进行优化。(5 )特征组合集成:把不同推荐技术的推荐结果混合后，使用一种推荐技术来处理,同瀑布型集成类似，该方法也是基于采用某种推荐技术对混合推荐结果进行过滤 的

11、思想。(6 )特征增值集成：把其中一种推荐技术的推荐输出结果作为另一种推荐技术的输入。pazzanim ,billsusd等提岀将几种推荐方法的各自推荐结果进行合并。soboroff i, good n z melville p等提岀可以以一种推荐方法主要推荐技术，同时以另一种推荐技术为辅，并与主要推荐技术进行融合。ansari a 提出直接将两种推荐方法进行有机集成如将基于内容和协同过滤的方法整合到 个统一的框架下，使其作为一种推荐算法实施推荐。以上不同的混合集成方法 中，无论采用哪种混合集成策略,混合推荐的关键是如何发挥不同推荐技术的优 点，并有机融合在一个完整的推荐框架内。虽然混合推荐技

12、术的初衷是进行优势 互补，但实际应用中却有很大困难。同时有实验表明，混合推荐并不一定比单独 的某个推荐技术更好。同时，由于混合了多种推荐技术，增加了计算复杂度，在 推荐效率上会有一走程度的降低。4. 其他推荐算法的研究。以上三种方法是推荐方法研究最热点的领域，但在不同的应用场景下也有一些其他的推荐算法取得了不错的成绩。burke r提出利用饭店的菜式方面的规则知识进行基于知识的推荐。基于关联规则的推荐, 以产品间关联规则为基础，把已购商品作为规则头，推荐对象作为规则体。通过 数据挖掘发现项目之间潜在的联系以实施连带推荐。三、计算复杂度研究现状随着产品数量和用户数量的扩大z需要处理的基础数据会成

13、倍增加，基础数据的处理会使推荐系统的计算复杂度成指数级增长，成为推荐系统推荐效率 的瓶颈。为此国内夕卜学者也提出了很多方法以降低计算复杂度，推荐系统计算复 杂性的降低可以分为:评价数据降维法、产品分类降维法、离线计算与在线推荐 相结合法。综上所述，国内外学者为保证电子商务推荐质量和推荐效率从电子商务 推荐的三个不同角度提出了很多经典的推荐方法，每种方法在特定的领域和应用 环境下都取得了较好的效果，同时我们也可以看到没有一种通用的推荐方法，在 电子商务推荐系统教学中我们将会依据前期研究重点展开,更好地提高该课程的 教学效果。参考文献：余力，刘鲁，罗掌华我国电子商务推荐策略的比较分析j系统工程 理

14、论与实践，2004 z 8 ( 8 ): 96-99.2 许海玲，吴潇，李晓东互联网推荐系统比较硏究j软件学报,2009 , 20 ( 2 ): 350-362.3 李聪.电子商务推荐系统中协同过滤瓶颈问题研究叨合月巴：合肥工业 大学，2009.4 pazzani.a framework for collaborative z content-based , and demographicfiltering j.artificial intelligenee review z 1999 , 13 ( 5-6 ): 393-408.5 k.w. cheung，丄 t. k. , m.h. law

15、. ining customer product ratingsfor personalized marketing j.decision support systems , 2003 z (35 ): 231-243.6 李晓钧z阳小华z余颖.基于隐性反馈分析的个性化推荐硏究j.计算机工程与设计，2009 ,30 ( 16 ): 3794-3796.7 d.r. liu , yy.s.hybrid approaches to product recomme ndati on based on customer lifetime value and purchase pref ere ncesj.jour nalof systems and software , 2005 z 77 ( 2 ): 181-191.8 d.r.liu , y.y.s.integrating ahp and data mining for productrecomme ndati on based on customer lifetime valuej.information management, 2005 , ( 42 ): 387-400.9邓爱林.电子商务推荐系统关键技术研究d.上海：复旦大学，2003.lojxue g , l.c , yang q z xi w.scala