根据科技网站Venturebeat的报道,Google今天推出了神经结构化学习(NeuralStructuredLearning,以下简称NSL)。据悉,这是一个开源框架,它使用神经图它使用神经图学习方法,来训练带有图(Graph)和结构化数据的神经网络,带来强大的模型。
NSL与TensorFlow机器学习平台需要配合使用,新手和高级开发人员都可以使用它来训练具有结构化信号的神经网络,适用于机器学习技术的入门开发者和有一些经验的从业者。NSL可以为计算机视觉制作模型,执行其框架,使开发人员能够使用图表训练神经网络。图表可以来自多个来源,例如知识图、医疗记录、基因组数据或多模式关系(例如,图像-文本)。NSL还可以运用到对抗性学习算法中。而在医疗领域中,NSL可以从医疗记录或知识图等图形数据集运行预测。
简单来说,TensorFlow中的NSL框架为开发人员提供了以下易于使用的API和工具,用于训练具有结构化信号的模型:
KerasAPI支持使用图形(显式结构)和对抗性扰动(隐式结构)进行训练。TF操作和功能,以便在使用较低级别的TensorFlowAPI时启用结构培训用于构建图形和构建用于培训的图形输入的工具
“在培训期间利用结构化信号可以让开发人员获得更高的模型精度,特别是当标记数据量相对较小时。”TensorFlow工程师Da-ChengJuan和SujithRavi在博客中表示,“结构化信号训练也可以带来更强大的模型。这些技术已广泛用于Google产品,以提高模型性能,例如Graph-RegularizedImageSemanticEmbedding(Graph-RISE)图形规范化图像语义嵌入技术等。”
关于NSL是如何工作的,TensorFlow工程师进行了详细的解释。在NSL中,利用结构化信号,无论是明确定义为图形还是隐式学习为对抗性实例,只要可以让开发者获得更高的模型精度,而在用于规范神经网络的训练上受益即可。在执行上,下图中进行了很好的解释,通过示例功能中的选取,转化成结构化信号,用于规范神经网络的训练,进行准确的模型学习预测,与此同时,NSL也会保持来自同一结构的输入之间的相似性。该技术是通用的,可以应用于任意神经架构,例如前馈NN,卷积NN和循环NN中。
使用NSL,利用结构化信号来构建模型变得简单而直接。给定图形(作为显式结构)和训练样本,NSL提供了一个工具来处理这些,以下是相关的代码示例截图:
然而,如果显式结构(例如图形)不可用或未作为输入给出,该怎么办?所以,NSL为开发人员提供了从原始数据构建图形的工具;或NSL提供API以“诱导”对抗性示例作为隐式结构化信号。构造对抗样本示例,以此作为隐形信号。
NSL可以通过监督、半监督或无监督学习,来训练使用图形信号进行正规化的模型,在某些情况下,使用少于五行代码,就可以获得了一个神经模型。
新框架还包括帮助开发人员构建数据和API的工具,用于创建具有少量代码的对抗性训练示例。
今年4月,GoogleCloud(谷歌云)在BigQuery和AutoMLTables中为结构化数据引入了其他解决方案。而在上周,谷歌人工智能团队,也就是GoogleResearch团队,发布了开源的SM3,一个用于优化大规模语言理解模型,如Google的BERT和OpenAI的GPT2。
关于这项技术的详细内容,已经发表在GoogleTensorFlow
转载请注明:http://www.0431gb208.com/sjszlfa/4709.html