审计众包竞争提交制造技术

公开了审计众包竞争提交。此处描述了在在线众包竞争中进行审计以测量参与以及防止欺诈的提交审计系统。可审计能力增加了对群众努力的验收。个人贡献者和竞争组织者也想要个人贡献者因为其时间投入而从项目赞助方、其雇主、和/或政府或其它实体处得到信用。雇主可以鼓励员工自愿花时间参与各慈善组织，并且可以使用本系统以监控参与和基于参与颁发奖励。提交审计系统通过为测量对众包项目的参与提供工作流，作为该测量的一部分检测欺诈，并且为个人和第三方传递提供对参与的跟踪的收据，以解决在众包情形中的审计参与的问题。

【技术实现步骤摘要】

本申请涉及在在线众包竞争中审计以度量参与以及防止欺诈的提交审计系统和方法。
技术介绍
机构经常有大量工作需要执行，有时比其员工基础所能处理的工作量还要大。通常的解决方法是雇佣临时工以临时地按比例增加处理特定任务的能力。任务可以涵盖很宽的范围的活动。例如，接收照片的网站可能想要就有害内容来审阅照片。接收论文提交的机构可能想要初步质量检查以确定提交遵守指定的格式。这些任务可以集中于产生短暂繁忙时期的事件，例如假日购物季。长期扩大规模以满足短期需求对于机构来说通常是没有效率的。众包指通常在在线环境中充分利用有空闲时间或可用时间来执行任务的群众。云和群众的会聚向机构提供了使显著数量的人来帮助解决困难问题的机会。一种这样的方法是机构发起竞争。通过竞争，机构要求人们执行任务并且提供与任务有关的提交。例如，有新的应用编程接口(API)的机构可以征募开发者来基于其API和/或数据创建应用。开发者创建执行向机构提供显著价值的任务或任务集的应用。虽然众包保证相对临时地向机构提供巨大的能力和灵活性，但是组织参与者和评价提交被证明是本质上令人畏惧的任务。目前，没有可用于处理这些类型的竞争的需求的软件基础结构代码，并且软件是由主办竞争的每个机构新创建的。机构通常从无到有地开发网站，以及计分系统、内容提交工作流、与参与者的通信(例如电子邮件或其它通知)等等。由于大多数机构本身并不具有这类开发的专门技术，并且几乎不存在外包这类工作的第三方开发者，因此机构通常以没有尽可能频繁地或有效地使用众包而告终。此外，确定提交何时是有效的以及参与者是否具有完整的分配任务是困难的。参与者和组织者通常想要接收某种参与证明，这限制了用类似的在线众包版本来代替许多物理竞争。
技术实现思路
此处描述了在在线众包竞争中审计以度量参与以及防止欺诈的提交审计系统。该系统提供了不像其它志愿努力那样主观的一致的、程序的/过程驱动的系统(以及作为过程的一部分检测欺诈)。审计能力增加了群众努力的验收。个人贡献者和竞争组织者也想要使个人贡献者因为其时间投入而从项目资助方、其雇主、和/或政府或其它实体处得到信用。雇主甚至可以在员工或组之间举办竞争以鼓励更高层次的参与。雇主可以鼓励员工自愿花时间参与各种慈善组织，并且可以使用该系统以监控参与和基于参与颁发奖励。提交审计系统通过为测量对众包项目的参与提供工作流，作为该测量的一部分检测欺诈，并且为个人和第三方传递提供对参与的跟踪的收据，来解决在众包场景中审计参与的问题。 因此，该系统释放了众包竞争的导致可审计的且公平的真实结果的潜能。提供本
技术实现思路
以便用一种简化的形式介绍将在以下具体实施方式中进一步描述的一些概念。本
技术实现思路
不旨在标识所要求保护的主题的关键或必要特征，也不旨在用于限制所要求保护的主题的范围。附图说明图1是示出在一个实施例中提交审计系统的组件的框图。图2是示出在一个实施例中提交审计系统接收提交和检测欺诈的处理的流程图。图3是示出在一个实施例中提交审计系统为一提交提供可跟踪的收据的处理的流程图。图4是示出在一个实施例中提交审计系统生成审计报告的处理的流程图。 具体实施例方式此处描述了在在线众包竞争中审计以度量参与以及防止欺诈的提交审计系统。目前，没有被设计来为众包中的参与提供审计能力的机制或方法。该系统提供了不像其它自愿努力那样主观的一致的、程序的/过程驱动的系统(以及作为过程的一部分检测欺诈)。 审计能力增加了群众努力的验收。个人贡献者和竞争组织者也想要使个人贡献者因为其时间投入而从项目资助方、其雇主、和/或政府或其它实体处得到信用。例如，雇主可以制定要求有贡献的员工执行一系列健康相关的任务的健康程序。在这一示例中，员工想要报告该员工的贡献，而雇主可能想要监控该贡献并对其评分以增加参与。雇主甚至可以在员工或组之间举办竞争以鼓励更高层次的参与。作为另一个示例，雇主可以鼓励员工自愿花时间参与各种慈善组织，并且可以使用该系统以监控参与和基于参与颁发奖励。提交审计系统通过为测量对众包系统/项目的参与提供工作流，作为该测量的一部分检测欺诈，并且为个人和第三方(即政府和雇主)传递提供对参与的跟踪的收据，来解决在众包场景中审计参与的问题。因此，该系统释放了众包竞争的导致可审计的且公平的真实结果的潜能。提交审计系统向审计众包竞争提供一般的可定制的方法，包含身份、管理、监控使用、报告、欺诈检测、审计报告/收据等等。此处进一步描述这些工具中的每一个。参与者具有在系统中使用的身份。身份或者是由第三方(例如政府或雇主)直接签发的，或者包含允许其与第三方身份(例如govID、LivelD、OpenID、GoogleID等)联合或相关联的信息。提交一条目提供了提交该登记项的个体/团队的身份、提交的内容、以及任何附加元数据(例如云主控的应用程序的URL)。对于管理，提交审计系统提供允许机构定义活动(例如审阅图像、翻译文本、给视频添加字幕等)的web服务框架。在定义活动的过程中，机构定义管理志愿贡献的验收的一系列度量和规则。度量可以包括贡献的最高可用分数或值、在其它贡献的范数之外的值的容差、任务或任务集的可接受完成时间、平均完成时间等。组织者使用管理接口来设计和设置竞争，然后允许系统开始主持该竞争。在竞争期间，系统向组织者提供有关使用和其它报告的信息。众包应用使用来自提交审计系统的web服务以提供在众包应用和众包参与者之间的各个参与片段上的输入。 这包括审计贡献的身份和开始/结束时间的计时功能，以及到众包志愿贡献的输出(图像反馈、翻译的文本、字幕内容等)的链接。在审计阶段结束时，系统对照定义的度量来审阅参与者的贡献以及评价上下文(例如完成时间、值)以为完成的志愿工作分配信用。系统可以在向竞争组织者以及每个参与者的报告中提供这一信息。提交审计系统还监控和检测可能欺诈性的提交。系统将落在度量定义中指定的可接受标准之外的项目放置在队列中，其中项目可以被审阅或丢弃。如果志愿者有大量的贡献，并且少数贡献落在标准之外，则它们可以被放在一优先队列中供审阅。如果志愿者没有优先贡献，则这些贡献可以被放在一单独的较慢的队列中供审阅。如果志愿者有不成比例数量的落在标准之外的贡献，则这些贡献可以被放在另一个队列中。每个参与者接收与参与者该段时间的贡献的状态有关的通信，任选地包括对为什么内容被拒绝的反馈。在一些实施例中，提交审计系统提供审计报告。一些人将出于帮助机构的无形利益而参与众包项目，并且审计报告为其提供关于他们的参与层次的好感受。更多的群众出于报酬、税款目的和/或贡献的第三方“匹配”而想要使其贡献得到认可。在这些情况中， 系统提供允许第三方访问不同时段的审计报告的服务。参与者授权机构来查看对其贡献的审计，并且该解决方案既提供了为想要将该功能集成到其内部系统中的第三方机构(例如公司或政府)提供这一功能的网络服务，也提供了对中小型企业更友好的基于web的用户接口。相同的接口对于参与者是可用的，并且可以被用来供参与者直接检索信息或在小部件/小工具/软件中消费。这些接口可以用于独立的软件供应商(ISV)以包含在相关软件中(例如可以在准备退税时使用审计信息的个人金融或税务软件)。除了为个人审计之外，系统还向机构提供见解。随着系统为每个贡献者记录每个贡献的参与时间本文档来自技高网...

【技术保护点】
１．一种用于为在线众包竞争中的提交提供可跟踪的收据的计算机可实现的方法，所述方法包括：接收（３１０）对接收到的提交的评价；确定（３２０）接收到的评价是否指示接受该提交；在确定该提交被接受后，确定（３４０）与提供该提交的参与者相关联的用户身份；创建（３５０）与该提交相关联的标识符；将该提交与创建的标识符相关联地存储（３６０）在数据存储中；以及向所述参与者发送（３７０）提交确认收据以指示对接收到的提交的接受，其中，上述各步骤由至少一个处理器执行。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：M·E·墨求里，T·E·哈里斯，
申请(专利权)人：微软公司，
类型：发明
国别省市：US