小说屋

手机浏览器扫描二维码访问

第296章 昏迷(第2页)

Google的研究者提出了Word2Vec算法,该算法将词语表示为高维向量空间中的点,通过计算点之

间的距离来衡量词语之间的相似度。Word2Vec算法在文本相似度计算领域具有广泛的影响。斯坦

福大学等机构的研究者提出了BERT模型,该模型通过大量的无监督学习来捕捉文本的上下文信

息,可以实现高精度的文本相似度计算。BERT模型在多项自然语言处理任务中均取得了优异的表

现。

2.5本章小结

本章主要介绍了本项目中使用的四种关键技术与模型。这些技术主要基于大型语言模型,并且

这章没有结束,请点击下一页继续阅读!

依赖于RAG技术的原理。介绍了知识抽取技术,它利用先进的自然语言处理技术从文本中提取有意

义的信息和知识,随后讨论了文本处理中所使用的RAG技术,该技术可以显着提高大型语言模型在

专业领域的性能,增强信息检索的准确性和效率。最后探讨了在文本比对过程中所需的相似度计算

方法,这对于评估文本之间的相似程度至关重要。

了解清楚数据获取来源后,进行数据采集,数据采集的方法包括自动化和手动两种方式:

自动化采集:利用编写的Python脚本通过API接口自动从上述数据库和期刊中下载文献和元

数据,部分代码如图3.2所示。这种方法的优点是效率高,可以大量快速地收集数据。使用

BeautifulSoup和Requests库从开放获取的期刊网站爬取数据。

手动采集:通过访问图书馆、研究机构以及联系文章作者等方式获取不易自动下载的资源。虽

然此方法更费时,但有助于获取更全面的数据集,特别是一些最新或尚未公开的研究成果。

将两种方法采集到的文献数据进行汇总,最大范围的将有关电力LCA领域的英文文献进行汇

总,共获得507篇。

最后是将各个途径获取到的文献数据和元数据汇总,进行数据预处理。

采集到的数据需经过清洗和预处理,才能用于后续的分析。

数据预处理的步骤包括:

数据清洗:删除重复的记录,校正错误的数据格式,填补缺失值。

数据整合:将来自不同来源的数据整合到一个统一的格式和数据库中,如表3.1所示,以便进

行进一步的分析。

为了使后续知识库生成更加准确与完善,对文献具体内容进行筛选。例如部分文献中并未提到

所用数据,而是指出所用数据库链接,如图3.3所示,在对该篇文献进行解析后,数据部分就是欠

缺的,最终构建的知识库就不完整,在调用大模型回答相关问题时,极大概率产生幻觉。因此为了

构建更为准确的专业模型,对爬取下来的507篇文献进行筛选,选择包括流程图(system

boundaries)、各单元过程或生产环节的投入(input),产出(output),数据(lifecycle

inventory),以及数据的时间、地点、获取方法、技术细节的文献作为最后应用的数据。核对内容

后的文献数据集共98篇英文文献。

喜欢离语请大家收藏:()离语

全家惨死?嫡女重生后冠绝京城  厨神:我就炒个菜,咋就飞升了?  出逃五年,她带两个萌宝杀回来了  梦境,我与轩辕  被贬后,我自立为王  全能学霸的养成系女友  娇妻的谎言  道之初境  山野小仙尊  我在冷宫忙种田  八零:真千金回归后,宠冠京城!  女神拼命保护我,却不知道我最强  从忍界开始的游戏商人  满级传球,从皇马解约成全能球王  大A爆涨,抄底娶回女明星  快穿:逍遥路人甲  萝莉控的万界之旅  航天首席重生1978  旧世废土  你一男兵,混进女兵连当教官?  

热门小说推荐
我是谁?郭其麟他师爷!

我是谁?郭其麟他师爷!

林白重生90年代,成为余谦师叔郭德刚生日当天,德云内乱眼看德云社内部乌烟瘴气,林白摇扇出现宣布成立白日阁头场演出后,网友们相当兴奋林白这是要给郭德刚架空啊!抢儿子,抢地盘,抢搭档,乐死我了,头一次见敢这么跟郭德刚对着干的人。只能说小伙子很有勇气!你们懂个屁,论辈分林白比郭德刚大,郭德刚还得管他叫大爷!...

代号刀锋

代号刀锋

爆,其实是一件很简单的事情,比喝水难一点。爆,其实是一件很简单的事情,大家都明白的。爆,其实是一件很简单的事情,就是爆菊花嘛!...

都市传奇之风云再起

都市传奇之风云再起

关于都市传奇之风云再起讲述了小镇少年叶尘的传奇人生。叶尘出生于宁静的小镇,自幼对中医满怀热忱,跟随老中医学习医术,还痴迷武侠暗自习武。然而,叶家因遭人陷害而没落。一次意外,叶尘获得神秘古籍,从中发现家族没落背后与一个神秘组织相关,复仇的种子就此种下。为了家族复兴和探寻真相,叶尘毅然前往大都市。初来乍到,他历经挫折,却凭借精湛的中医医术在一家大型医疗机构崭露头角,还结识了一群挚友。期间,他偶然救下富家千金林晓萱,两人情愫渐生。叶尘在都市中不断打脸权贵,还参与盗墓探险,获取了与神秘组织有关的重要线索。在追寻真相的过程中,他遭遇家族联姻的困境,同时也逐渐揭开当年家族被陷害的巨大阴谋。面对神秘组织的疯狂报复,叶尘在朋友和林晓萱的帮助下绝地反击。成功复仇后,叶尘让家族重振声威,与林晓萱修成正果。他开办中医学院传承医术,成为江湖传奇。但平静不久,新的恶势力崛起,叶尘再次挺身而出,最终成功守护都市和平。这部小说融合了盗墓中医武侠复仇打脸等元素,展现了叶尘从小城镇到大都市的跌宕起伏的人生历程,以及他在爱情家族正义之间的抉择与坚守,是一部充满热血与温情的精彩之作...

我的末日愿望清单

我的末日愿望清单

末日降临,丧尸遍地。郑循意外发现只有自己能免疫丧尸攻击。于是决定好好享受这份无期限末日假期,去完成属于自己的愿望清单。1买一个生日蛋糕。(顺便让恶女同学做棍选√)2秉持科学精神钻研丧尸奥秘。(需要身躯完好的丧尸可供探索,如果加上漂亮这一点就再好不过了√)3谈一场你情我愿的甜甜恋爱。(如果表白不接受,就算变成漂亮女丧尸什么的也绝对不能放过√)4亲自动手尝试做美味佳肴。(中餐的话肯定不能少了白面馒头,西餐绝对不能少了松软面包。√)5拥有八块腹肌人鱼线。(尽情开始自律,挥洒汗水吧。√)6戴着头盔骑着心爱的小摩托逛大街。(随机找小姐姐,开展社恐训练。√)本书又名末日枭雄丧版给她爱半岛贴合消逝的圣光僵男style...

真千金她又美又飒

真千金她又美又飒

前世的沈晞一心渴望得到亲情,却被假千金鸠占鹊巢,害她断了双腿,坏了双手,容貌尽毁,身患绝症,饮恨而终。重生回来的沈晞,一纸合约买断亲情,与苏家断绝关系,所有人都等着看她笑话。不久之后。假千金云七编剧的新剧,我一定要当女主!豪门母亲把这个叫采尼的设计师给我挖过来,做我的席造型师!豪门大哥找到这个L,不管用什么办法,都要让她为我所用!豪门二哥三顾茅庐,一定要夕夕老师答应为我写歌!豪门三哥这个综艺我非去不可,找他们的制作人!沈晞笑实不相瞒,以上都是我,求而不得的感觉很棒吧!所有人都以为沈晞是个被豪门抛弃的小可怜,直到有一天,华夏第一豪门傅家历经千辛万苦,终于认回了他们走失的亲妹妹。国际巨星a云七这是我妹。医届巨擎a采尼妹妹,亲的!全球顶级制作人a夕夕这是家妹,多多指教。沈晞泪流满面,活了两辈子,才找到真正的家人,你们这么牛逼,上辈子干嘛去了?世界富a沈晞正式介绍一下,这是吃瓜群众震惊体这是你妹!世界富滚,这是我老婆!...

综漫:一身懒癌的魔王大人

综漫:一身懒癌的魔王大人

关于综漫一身懒癌的魔王大人我是叶萧,正如你所想的一样,我穿越了,一睁眼就在一个一片碧蓝的地方,然后就有一个自称的女神说什么送自己到综漫世界,让自己成为魔王什么的。我本来还想拒绝的,魔王什么的,听起来就很麻烦,好在基础的穿越者福利能让自己能够快乐地宅下去。然后我就真香了。不对,这不是个日常世界吗?谁能告诉我那些个从书里跑出来还有那种身上冒着数据流的怪物是什么啊!!!为了让自己能够持续自己的阿宅生活,叶萧决定用那所谓的魔王的力量去解决一下,毕竟麻烦是一回事,但是有的麻烦事是必须要去做的抱歉啊各位,你们打扰了王的休息,请安静一下吧...

每日热搜小说推荐