Mira将NLP与计算机视觉结合在一起，以创建丰富的搜索引擎购物体验

 
在AI技术的支持下，Mira希望创建一个更加丰富的购买体验，将数百万个消费产品评论，并排比较和点击购买合并到一个统一的界面中。目前，Mira专注于购买美容产品-为用户提供一种从其他具有相似皮肤类型，肤色和审美偏好的消费者那里征求建议的方式。
但是美容行业不是故事。引人注目的是流程和其下的技术，这些在其他市场和垂直领域具有更广泛的应用。 Mira首席执行官兼联合创始人杰伊·哈克(Jay Hack)在接受电子邮件采访时对VentureBeat表示：“尽管我们如今专注于为美容社区服务，但我们的技术显然已经远远超出了。” “我们可以为消费者提供便利，通过最新和最出色的AI来推动他们的发现和研究，这确实适用于所有类别，在这些类别中，购买过程比一键式购买按钮更为复杂。”
他将美容市场描述为Mira的“滩头堡”，称其为“高度分散和服务不足，产品复杂且个人身份和特质在发现您喜欢的事物中起着重要作用的行业”。
这个怎么运作
该过程的第一步是创建信息知识库，并以一种简单的方式使用它。 Mira团队利用其大数据和AI碎片从Web的各个角落抓取评论，这些评论来自大型出版物和小型网站收集的公开文章，博客和视频。它甚至可以获取关键信息，例如成分表。然后，使用自然语言处理来创建摘要，它将所有数据集中到一个易于消化且理想地经过简化的位置：一个具有简单用户界面的搜索引擎，看起来像Google搜索页面。
Mira还涉及社区。如果有足够的用户，理想情况下平台上的人们所寻找的内容将会有很大的重叠。其中包括审美偏好，还包括一些因素，例如试图为某种肤色或对敏感皮肤友好的产品找到合适的基础。 Mira设想让用户互相询问建议和产品推荐。
有了足够的重要信息和可用的用户社区，购买者就会将自己插入流程。使用Mira网站或应用程序，您可以搜索产品和评论，但是在启动过程中，Mira会要求您进行自拍照。它充当您帐户的个人资料照片，但更重要的是，Mira使用该图像作为基础，使用计算机视觉为您建立内容推荐，并将您间接与可能正在寻找相似产品的其他人联系起来。
米拉美女搜索引擎评论
Mira不会从头开始构建整个模型，而是使用转移学习来微调已经在公共数据集上建立和训练的模型。 “我们使用开源工具进行所有内部开发，并从现有用户和内部数据收集工具中获取了各种专有数据集，” Hack说。 Mira收集的用户上传的图像是该微调过程的一部分。
NLP和计算机视觉相结合的神奇之处在于可以产生丰富的购物体验，从而最大程度地减少流程的正常摩擦。 “尽管我们使用自然语言处理来构建强大的文本评论摘要，但计算机视觉使我们能够自动检测在线视频中的产品，提供基于肤色的过滤机制，甚至是表面高品质的图像，将产品涂在皮肤上，” Hack说。
解决人脸和计算机视觉的问题
将人的脸部和计算机视觉结合在一起固有地存在问题。而且，当您进入肤色和类型等细微差别时，还存在遇到一些公认的问题的危险，例如许多面部识别技术对肤色较深的人的效果较差。 Mira的方法还涉及一定程度的人脸图像存储，这引起了隐私方面的关注。哈克似乎很清楚上述所有情况。
“ Mira完全按照选择加入的方式收集用户数据，并根据保护消费者数据的行业最佳实践，将所有个人识别信息保密”，Hack保证。您必须手动拍摄并上传自己的自拍照。他说：“合法地说，您拥有自己的所有内容，并向我们提供了在我们的社区中使用它的许可证。”
他进一步解释说，Mira保证用户可以请求清理其数据，并且个人身份信息“除非明确选择加入，否则绝不会与外部实体共享”。
哈克还承认计算机视觉在某些人群中的表现令人不快。他说：“这一点很重要，尤其是对于像我们这样的平台，要正面认识并应对。”
尽管他没有详细说明，但哈克表示，米拉正在利用不断发展的工作量，“证明如何识别和缓解”导致“不同影响”的算法-这个术语描述了无意识的歧视，将其词源追溯到1971年最高法院审理此案。 “这包括采取措施以确保在算法的基础数据集中正确表示，对测试性能进行压力测试，甚至最终甚至直接与用户交谈以主动解决他们对应用内体验可能存在的任何担忧-所有这些都是核心米拉的工程文化宗旨”，哈克说。
市场和垂直市场并没有真正的限制，Mira可以将其技术移植到其中，只要涉及尝试购买商品的消费者，可以从共享其特定需求的其他购物者中受益，并在NLP推动的评论和评估中找到价值即可。产品信息。
可以肯定，这是一个宏伟的愿景。目前的任务-在美容行业中做到正确-目前是一个足够大的挑战。目前尚不清楚Mira的确切位置;用户应该使用Mira应用，但目前仅适用于iOS。 (您也可以直接从AskMira网站上搜索。)尽管该公司表示已从多种渠道筹集资金，包括“ Unilever Ventures，e.ventures，Founders Fund，14W，Great Oaks Venture Capital等”，但它却被拒绝分享金额。 (更新，10/15/19，8:11 pm PT：Mira现在分享了它筹集了453万美元的消息。)