DensePhrases-近实时Wikipedia开放域问答
DensePhrases是高丽大学的Jinjinuk Lee创建的一种开放域问答技术，已发表为题为“大规模学习短语的密集表示”的论文。这是该论文的链接：提出问题时，近600亿个Wikipedia段落中最合适的段落…
自然语言和语音识别框架的整合趋势
以其集成的自然语言处理程序包而闻名的HuggingFace增加了语音识别。以下是相关链接：具体来说，添加了由Facebook开发的Wav2Vec 2.0，Wav2Vec 2.0首先使用大量未标记的数据来进行无监督学习，并且非常…
PapersWithCode的韩国数据集
Paperswithcode提供有关AI，链接的开源和SOTA领域的各种论文的信息，并提供了3,000多个有用数据集的链接。其中，有851个文本数据集，仅限于韩语...
KakaoBrain集成的自然语言框架的Pororo
在Kakao Brain中，Pororo是一个能够响应各种自然语言任务的集成自然语言框架，已作为开源发布。 Pororo代表自然语言处理的神经模型平台，您可以将其视为与HuggingFace相似的目的。 Pororo ...
大型模型的内存优化技术
随着深度学习模型的参数数量显着增加，训练所需的内存也随之增加。 OpenAI的GPT-2由1.5B参数组成，而Google的mT5也具有13B参数。另外，OpenAI的GPT-3的参数数量...
AI研究中要考虑的五种大脑功能
诚然，人工智能领域已经取得了很大进步，但与人类相比仍然存在许多缺点。如果AI的最终目标是模仿人脑执行的所有功能，那么人脑可以执行……
OpenAI DALL-E：从文本创建图像
OpenAI发行的DALL-E是一种可以从自然语言文本生成图像的技术。以前，存在用于相同目的的技术，例如StackGAN和OP-GAN，但DALL-E的优势在于最终结果的质量非常出色，因为它是基于GPT-3（一种超大规模语言模型）制成的。
DeBERTa：在SuperGLUE中超越人类表现
SuperGLUE是一项挑战，需要针对各种自然语言理解任务评估AI技术的性能。与现有的GLUE相比，它具有较高的难度，并且微软最近宣布的DeBERTa模型实现了SOTA（最先进）并进行了评估。
开放域聊天机器人“ Luda”育儿日记：从出生到内测的记录
最近发布的官方版本的Scatterlab的“ Luda”（https://scatterlab.co.kr/）是一个基于数十亿KakaoTalk对话数据学习的开放域聊天机器人，任何人都可以通过Facebook Messenger进行聊天。被开发为ScatterLab首席执行官Jongyoon Kim在DEVIEW 2020上发布的视频是...
