<html><head><meta http-equiv="content-type" content="text/html; charset=us-ascii"><style>body { line-height: 1.5; }body { font-size: 14px; font-family: 'Microsoft YaHei UI'; color: rgb(0, 0, 0); line-height: 1.5; }</style></head><body>
<div><span></span><div style="font-family: Arial; line-height: 23.8px; margin: 0px;">Hi Adapters,</div><div style="font-family: Arial; line-height: 23.8px; margin: 0px;"><br></div><div style="font-family: Arial; line-height: 23.8px; margin: 0px;">The NLP community has been revolutionized in the past few years by the two stage sequential transfer learning paradigm. There is no doubt that pretrained language models(PLMs) have encoded considerable amount of knowledge, but what type of and how much of knowledge is learned by PLMs still remains an open research topic. In this talk, I will focus on relational knowledge(factual world knowledge and commonsense knowledge etc.) within PLMs by first introducing two pioneers paper and then talking about my ongoing work on this.</div><div style="font-family: Arial; line-height: 23.8px; margin: 0px;"><br></div><div style="font-family: Arial; line-height: 23.8px; margin: 0px;"><span style="font-family: 'lucida Grande', arial, sans-serif;">Time: Wed 4:00pm</span><br style="font-family: 'lucida Grande', arial, sans-serif;"><span style="font-family: 'lucida Grande', arial, sans-serif;">Venue: SEIEE 3-414</span><br style="font-family: 'lucida Grande', arial, sans-serif;"><br style="font-family: 'lucida Grande', arial, sans-serif;"><span style="font-family: 'lucida Grande', arial, sans-serif;">See you there!</span><br style="font-family: 'lucida Grande', arial, sans-serif;"><span style="font-family: 'lucida Grande', arial, sans-serif;">Best Regards,</span><br style="font-family: 'lucida Grande', arial, sans-serif;"><font face="lucida Grande, arial, sans-serif">Roy</font></div></div><div><font face="lucida Grande, arial, sans-serif"><br></font></div>
<div><br></div><hr style="width: 210px; height: 1px;" color="#b5c4df" size="1" align="left">
<div><span><div style="MARGIN: 10px; FONT-FAMILY: verdana; FONT-SIZE: 10pt"><div>rsy0702@163.com</div></div></span></div>
</body></html>