广东工业大学学报 ›› 2014, Vol. 31 ›› Issue (3): 27-31.doi: 10.3969/j.issn.1007-7162.2014.03.005

• 综合研究 • 上一篇    下一篇

大数据环境下竞争情报系统的研究与实现

王勇，许钟涛，王瑛   

  1. 广东工业大学 计算机学院，广东 广州 510006
  • 收稿日期:2014-04-16 出版日期:2014-09-30 发布日期:2014-09-30
  • 作者简介:王勇（1968-），男，副教授，博士，主要研究方向为应急监控和知识管理.
  • 基金资助:

    广东省教育部产学研结合项目(2012B040500005);广东省教育部产学研结合项目(2012B091100071)

Research and Implementation on Competitive Intelligence System Based on Big Data

Wang Yong, Xu Zhong-tao, Wang Ying   

  1. School  of Computers,Guangdong University of Technology，Guangzhou 510006,China
  • Received:2014-04-16 Online:2014-09-30 Published:2014-09-30

HTML

PDF (PC)

2939

摘要： 为让企业在大数据的环境下及时获得准确和可靠的竞争情报，提出了基于大数据的企业竞争情报系统的构建.通过B/S（浏览器/服务器）架构，运用聚焦爬虫工作原理的网络爬虫进行情报信息的采集，并用基于Hadoop的KNN算法进行情报信息的处理和分类，克服了大数据下KNN分类算法时间复杂度高等问题，同时系统支持用户个性化定制.

关键词: 竞争情报系统, 大数据, Hadoop, K近邻算法

Abstract: To help enterprises to obtain timely, accurate and reliable intelligence information under the environment of big data, it proposed how to build an enterprise competitive intelligence system, based on big data. It used web crawlers of focused crawler works to collect intelligence information, and employed the Hadoop-based KNN algorithm to process and classify the intelligence information via the B/S (Browser/Server) framework, which can solve the problem of high time complexity of the KNN classification algorithm in a big data environment and other issues. The system also allows users some customization, making it more individualized.

Key words: competitive intelligence system, big data, Hadoop, KNN

[1] 刘洪伟, 梁周扬, 左妹华, 陆丹, 范梦婷, 何锐超. 利用消费者浏览行为识别品牌竞争关系研究[J]. 广东工业大学学报, 2019, 36(05): 1-6,13.
[2] 黄健文, 朱雪梅, 徐莹, 熊璐, 张伟国. 基于多源大数据的岭南地区老旧小区空间形态量化研究[J]. 广东工业大学学报, 2019, 36(04): 70-79.
[3] 白颉, 姚家进, 张茂军, 李桥兴. 金融大数据中条件非相关波动模型的单纯形搜索算法[J]. 广东工业大学学报, 2018, 35(05): 26-30.
[4] 孙为军, 谢胜利, 汪谷银, 刁俊武, 阮航. 智能工厂工业大数据云平台的设计与实现[J]. 广东工业大学学报, 2018, 35(03): 67-71.
[5] 李卫华, 李志猛. 基于大数据运输集团生产运营决策系统的构建及应用[J]. 广东工业大学学报, 2018, 35(03): 113-118.
[6] 饶东宁, 王军星, 魏来, 王雅丽. 并行最小割算法及其在金融社交网络中的应用[J]. 广东工业大学学报, 2018, 35(02): 46-50.
[7] 谢振东, 吴金成, 李之明, 伍冠桦. 企业大数据能力的构建与培育研究[J]. 广东工业大学学报, 2017, 34(03): 110-114.
[8] 饶东宁, 温远丽, 魏来, 王雅丽. 基于Spark平台的社交网络在不同文化环境中的中心度加权算法[J]. 广东工业大学学报, 2017, 34(03): 15-20.
[9] 刘冬宁, 卢明俊, 黄宝莹, 梁路. 先序约束下的群组角色指派及其优化[J]. 广东工业大学学报, 2017, 34(03): 21-29.
[10] 毛莉娜, 李卫华. 用信息流和知网构建大数据语义共享通道研究[J]. 广东工业大学学报, 2017, 34(03): 30-35.
[11] 刘祥佳, 程良伦. IFAMR:一种基于MapReduce的高效频繁项挖掘算法[J]. 广东工业大学学报, 2017, 34(02): 86-91.
[12] 黄斌杰，刘怡俊. 基于Hadoop云平台的无线门铃系统的设计与实现[J]. 广东工业大学学报, 2016, 33(03): 55-59.
[13] 杜汉昌, 丁磊, 冯永晋. 面向零售业的大数据商业智能系统研究[J]. 广东工业大学学报, 2014, 31(4): 41-45.
[14] 李桥兴, 强保华, 杨春燕. 大数据基元的HBase数据库存储模型与实现[J]. 广东工业大学学报, 2014, 31(3): 8-13.
[15] 刘洪伟, 刘智慧, 朱慧, 陆涛. 大数据环境下跨组织间协同优化决策的隐私保护算法[J]. 广东工业大学学报, 2014, 31(3): 21-26.
Viewed
Full text


Abstract

Cited
  Shared   
  Discussed   
No Suggested Reading articles found!
版权所有 © 2017 《广东工业大学学报》编辑部
地址：广州市东风东路729号广东工业大学 邮编：510090
电话：020-37626653,020-37626139,020-37626396
邮箱：xbzrb@gdut.edu.cn
本系统由北京玛格泰克科技发展有限公司设计开发