【产学研】没有文字属性,机器怎么识别区分图像?用算法技术!

发布时间:2016-12-23 阅读量:4339 来源: 发布人:

本文中我爱方案网将给大家介绍基于视觉信息的图像重排序技术方案。
如需开发相关项目,快包可提供技术团队对接服务。

当前网络上的图像搜索引擎(百度、谷歌、必应等)几乎完全依赖于图像周围的文字信息,而不考虑图像内容本身的视觉信息,其结果是搜索结果不鲁棒,容易出错。一个重要的解决方案是对搜索结果重新排序。以往的基于视觉信息的图像重排算法有两个缺陷:1)需要对文字搜索的结果离线训练。这样就限制了系统的反应速度,无法适应实时网络图像搜索;2)不能处理由于文字的模糊语义产生的搜索结果。

为了克服以上的两个困难,技术团队提出了基于用户意图的,交互式的图像查询、重排序的解决方案。首先,用户可以从基于文字搜索的结果中选中检索图像,通过与检索图像的相似性比较,技术团队对所有搜索结果重新进行排序。通过技术团队的观察发现,当图像属于某一大类的时候,使用对该大类最具区分性的图像特征往往能够达到比较好的效果。不同的图像的大的语义上的类别,例如风景、人物肖像、一般物体(静物)、人物活动等,技术团队称之为“意图类别”。对于属于不同的“意图类别” 中的图像,技术团队采用不同的视觉特征的组合来刻画图像的相似性度量。从而能够实时有效的提高图像检索结果,而大幅度提高用户体验。

另外,技术团队还提出一种新的实时性非交互式重排序算法--主导数据选择算法,发掘图片集的群集信息。此算法从搜索引擎的搜索结果数据分布入手对图像进行重排序。首先,对于搜索引擎检索的图片集,技术团队提取视觉特征建立谱图,并将离散的图节点当作噪声图像除去。然后,技术团队从被搜索引擎排在前面的图片中,提取主导群集的图节点对应的图像作为正样本进行半监督学习。此算法具有实时性和无需用户交互的特性。在公开的数据库上的实验证明技术团队的算法性能超过其他先进的图像重新排序方法。


方案优势:

“意图识别”重排序算法与微软必应搜索引擎的结果对比:


图1搜索结果与微软必应搜索引擎的结果对比

图2在数据库2中搜索结果与微软必应搜索引擎的结果对比

技术团队采用oxford建筑数据集(http://www.robots.ox.ac.uk/~vgg/data/oxbuildings/index.html)测试基于单词区分性的加权方法,使用传统tf-idf加权时检索精度为61.4%。技术团队的方法可以将检索精度提高到68.0%,如果进一步采用查询扩充(query expansion)方法,精度可以提高到80.0%。
“主导数据选择”算法与谷歌搜索引擎的结果对比

为了更好地在多样化环境中评价技术团队的“主导数据选择”算法,技术团队使用含有多达353类和71478张图片的INRIA数据库。初始排序前100的图像用作所有基于谱图算法的带噪查询集。技术团队也列出逻辑回归分类器[4](文本特征、视觉特征、文本与视觉混合特征)的比较实验。实验结果以平均排序精度的均值(MAP)作衡量。


图3:INRIA数据库:353类图像的查询集的平均精度。(从左至右:谷歌搜索引擎、标签诊断算法[11]、谱过滤器[7]、“主导数据选择”算法)。

本研究团队的研究成果转化的产品可应用在专业搜索引擎网站的图像搜索功能上,能为其用户提供基于“用户意图”与“主导数据选择”的图像检索服务,能给与用户更好的检索体验,提供与其检索意图更为精准匹配的检索结果,提高其检索效率。

同时,该技术亦可用于专业的图像检索领域,如网络购物领域的图像检索,通过用户上传其欲购买的商品图像检索相关产品的供应信息,使用户能迅速找到其欲购买的产品,提高检索效率,提升用户的购物体验,促进消费。


关于快包与“产学研”

产学研即产业、学校、科研机构等相互配合,发挥各自优势,形成强大的研究、开发、生产一体化的先进系统并在运行过程中体现出综合优势。 产学研合作是指企业、科研院所和高等学校之间的合作,通常指以企业为技术需求方,与以科研院所或高等学校为技术供给方之间的合作,其实质是促进技术创新所需各种生产要素的有效组合。

快包一直致力推动智能产业的发展,通过构建外包平台的形式促进智能产品方案供需双方的合作。如今快包携手“产学研”旨在让科研走进市场。近期快包整理了一系列来自研究机构以及高校的科研团队资料,推出大型产学研系列专题文章。通过展示他们的项目案例促进智能产业界对他们更深层次的了解。这些团队能够提供攻坚技术和前沿核心技术,精准解决一些较大企业的技术实现难题。

欲对接产学研项目,请联系:kb@52solution.com 400-085-2125



相关资讯
贸泽电子发布智能家居开发平台,集成Arduino/NXP/Qorvo创新方案

为加速智能家居的普及与创新,全球知名电子元器件分销商贸泽电子重磅推出全新的 “智能家居资源中心”。该中心汇聚海量精选技术资料,为工程师打造下一代自动化与互联解决方案提供强力支持。随着智能恒温器、冰箱等物联网设备深入家庭生活,用户对个性化体验、能源效率与安心安全的需求激增。工程师们正面临着融合如三频通讯、Matter协议等前沿技术以构建无缝智能生态系统的挑战。贸泽的资源中心正是为此而生,致力于简化设计流程,将未来互联家庭的愿景变为现实。

思特威突破车载视觉"卡脖子"难题:首颗全流程国产3MP CIS量产

在全球汽车产业加速迈向智能化、网联化的浪潮中,高可靠、高性能的车载图像感知系统扮演着至关重要的角色。环视摄像头作为感知车辆周边环境的“眼睛”,其性能直接关系到驾驶安全与辅助驾驶功能的体验。2025年7月,思特威(上海)电子科技股份有限公司(股票代码:688213)正式发布Automotive Sensor (AT) Series系列的重要成员——SC326AT。这不仅是一款3MP(300万像素)高性能车规级CMOS图像传感器新品,更是思特威车载系列中首款实现设计、制造到量产全流程国产化的里程碑式产品。它基于思特威自研的CarSens®-XR工艺平台打造,在核心成像性能、环境适应性及系统集成度上均实现显著突破,直指高端环视应用的痛点,为提升智能汽车感知系统的韧性与竞争力提供了强有力的国产化支撑。

苹果芯片版图再扩张!7款自研芯片曝光,深化垂直整合战略

根据近期知名开发者社区曝光的最新信息显示,苹果正在加速其芯片自研进程,计划推出至少7款尚未对外公开的全新芯片设计。这一雄心勃勃的计划涵盖了其核心终端产品线,包括应用于未来iPhone的A19系列、下一代Mac的M5系列、新款Apple Watch处理器、第二代5G调制解调器C2,以及一款具备突破性集成设计的通信芯片Proxima。多项证据表明,苹果正加速推进全产品线核心处理器代际更新,深化垂直整合优势。

轴向电阻SMD化!Vishay AC03-CS WSZ系列降本增效解决方案详解

在现代电子制造业,提升自动化装配效率与降低生产成本是企业持续追求的目标。通孔元件(THT)在贴装环节往往需要额外的插件工序,相较表面贴装元件(SMD)效率较低。针对这一行业痛点,全球领先的电子元件制造商威世科技(Vishay Intertechnology, Inc., NYSE: VSH)宣布其广受欢迎的AC03-CS系列轴向绕线安全电阻推出创新的WSZ引线版本选件。这一设计革新使得原本需要插件工艺的轴向电阻能够无缝融入标准的SMT(表面贴装技术)生产线,显著缩短装配周期并有效控制整体制造成本。本次升级为汽车电子、工业驱动及智能能源等领域的关键安全电路设计提供了兼具性能与成本效益的全新解决方案。

Meta豪掷2亿美元争抢AI顶尖人才,超级智能团队组建引发行业震动​

全球人工智能人才争夺战已进入白热化阶段。Meta公司近期以突破行业纪录的薪酬方案招募前苹果公司AI模型研发负责人庞如明(Ruoming Pang),据悉该方案总价值逾2亿美元,包含现金奖励与长期股权激励。此举标志着科技巨头对顶尖AI人才的投入达到前所未有的量级。