手机浏览器扫描二维码访问
Google的研究者提出了Word2Vec算法,该算法将词语表示为高维向量空间中的点,通过计算点之
间的距离来衡量词语之间的相似度。Word2Vec算法在文本相似度计算领域具有广泛的影响。斯坦
福大学等机构的研究者提出了BERT模型,该模型通过大量的无监督学习来捕捉文本的上下文信
息,可以实现高精度的文本相似度计算。BERT模型在多项自然语言处理任务中均取得了优异的表
现。
2.5本章小结
本章主要介绍了本项目中使用的四种关键技术与模型。这些技术主要基于大型语言模型,并且
本小章还未完,请点击下一页继续阅读后面精彩内容!
依赖于RAG技术的原理。介绍了知识抽取技术,它利用先进的自然语言处理技术从文本中提取有意
义的信息和知识,随后讨论了文本处理中所使用的RAG技术,该技术可以显着提高大型语言模型在
专业领域的性能,增强信息检索的准确性和效率。最后探讨了在文本比对过程中所需的相似度计算
方法,这对于评估文本之间的相似程度至关重要。
了解清楚数据获取来源后,进行数据采集,数据采集的方法包括自动化和手动两种方式:
自动化采集:利用编写的Python脚本通过API接口自动从上述数据库和期刊中下载文献和元
数据,部分代码如图3.2所示。这种方法的优点是效率高,可以大量快速地收集数据。使用
BeautifulSoup和Requests库从开放获取的期刊网站爬取数据。
手动采集:通过访问图书馆、研究机构以及联系文章作者等方式获取不易自动下载的资源。虽
然此方法更费时,但有助于获取更全面的数据集,特别是一些最新或尚未公开的研究成果。
将两种方法采集到的文献数据进行汇总,最大范围的将有关电力LCA领域的英文文献进行汇
总,共获得507篇。
最后是将各个途径获取到的文献数据和元数据汇总,进行数据预处理。
采集到的数据需经过清洗和预处理,才能用于后续的分析。
数据预处理的步骤包括:
数据清洗:删除重复的记录,校正错误的数据格式,填补缺失值。
数据整合:将来自不同来源的数据整合到一个统一的格式和数据库中,如表3.1所示,以便进
行进一步的分析。
为了使后续知识库生成更加准确与完善,对文献具体内容进行筛选。例如部分文献中并未提到
所用数据,而是指出所用数据库链接,如图3.3所示,在对该篇文献进行解析后,数据部分就是欠
缺的,最终构建的知识库就不完整,在调用大模型回答相关问题时,极大概率产生幻觉。因此为了
构建更为准确的专业模型,对爬取下来的507篇文献进行筛选,选择包括流程图(system
boundaries)、各单元过程或生产环节的投入(input),产出(output),数据(lifecycle
inventory),以及数据的时间、地点、获取方法、技术细节的文献作为最后应用的数据。核对内容
后的文献数据集共98篇英文文献。
喜欢离语请大家收藏:()离语
全能学霸的养成系女友 航天首席重生1978 道之初境 全家惨死?嫡女重生后冠绝京城 梦境,我与轩辕 萝莉控的万界之旅 旧世废土 出逃五年,她带两个萌宝杀回来了 我在冷宫忙种田 娇妻的谎言 从忍界开始的游戏商人 八零:真千金回归后,宠冠京城! 你一男兵,混进女兵连当教官? 大A爆涨,抄底娶回女明星 女神拼命保护我,却不知道我最强 被贬后,我自立为王 满级传球,从皇马解约成全能球王 厨神:我就炒个菜,咋就飞升了? 山野小仙尊 快穿:逍遥路人甲
大龄剩女周荣,开着房车自驾游时,意外穿书到了50年代。前夫要离婚?离!钱到位就行!有人说她离婚后肯定日子艰难,姐向你们证明,姐有钱有车有房,日子好着呢!系统报价,第一套钱币价值400万,第二套钱币里的大黑十30万,囤起来,全部囤起来!姐要长命百岁,靠囤的这些钱安享晚年。谁敢阻碍她实现愿望,或欺负她的家人,就去套麻袋...
洛白带着卡店穿越到以打牌魔卡为尊的异世,那些清仓按斤卖的纸牌摇身一变,来店里的顾客说话也变得奇奇怪怪的,诸如什么…吸血鬼(不死族)我就嘬一口!六花(植物族)请滋润我吧!救祓少女(魔法师)补魔时间!…伊蓝(龙族)嗷呜洛白6...
黎明降临是一款爆红的末日求生游戏,玩家在里面激情战斗切磋与丧尸怪物搏斗制造装备与武器。简星意被朋友拉去玩,手残的他打竞技被玩家拳打,打副本被丧尸脚踢。简星意只得在这个战斗游戏里当个种田经营玩家。别人在和怪物搏命,他在解锁食谱掌握厨艺。别人在屠杀丧尸城,他在建造房子。别人在争地盘抢基地,他在荒地种稻米。直到有一天,所有人都穿进去这个游戏了。穿进去后,大部分玩家看着自家破烂的房子,空荡荡的厨房,捂着肚子沉默了。简星意?所以说,在这个游戏里种田的只有他吗?不多时,一个传奇诞生了。他是游戏最低战力记录保持者,却是新世界最富裕的商人,更是救世主。战力值只有个位数的他,让满战力的高手榜大佬们在路过他的房子和公会时,都要小心翼翼放缓脚步。xxx惊!全服第一高手山海忽然离开了所在的基地,离开了这个争霸赛屡屡夺冠的强悍基地,难道还有比这个更好的地方吗?战地记者激情追问采访,请问大佬去了一个小破基地,是想体验亲手开辟疆土的快感吗?山海那边的饭香?记者?做饭的厨子更香。疯批大佬面瘫攻x社恐菜鸡温柔受每晚九点更新,短评收藏即可评我的接档我靠绯闻在人界苟活人类与妖族休战的第三年,小兔妖闻兮被调任为和平大使前往人界了。小兔妖战战兢兢,小心翼翼,努力在人界立足。然后一不小心和人类特警队长骆绛意外滚了床单。骆绛的工作就是杀作恶不守法的妖怪,本人还特讨厌妖怪,能手撕妖怪。闻兮我完了v隔天闻兮只觉自己小命休矣,匆匆跑路,骆绛也被紧急调任外地平乱,离开了首都,据说没个十年二十年回不来。闻兮我又好了v后来记者采访闻兮对骆绛去处理暴动这事怎么看。闻兮觉得,他和骆绛交配都已经交配了,四舍五入怎么就不算配偶呢?反正人家十年二十年回不来为了在人界立足,闻兮兔心豹子胆,决定抱大腿!他靠着精湛的演技一秒红了眼眶真不知道远处的暴动什么时候结束,想我的未婚夫了。记者?!记者原来二位竟是这样的关系!从此之后,闻兮以骆绛未婚夫身份在首都行动与工作,走哪儿都要忧郁感怀,出席活动都要一袭黑衣,未亡人设定草得飞起。网友义愤填膺,嗑生嗑死。闻兮和骆绛的爱情太美好了!这才是妖族和人类和平共处的方式!支持妖族和人族和平!一年后,骆绛居然提早回来了。 闻兮再次跑路。门一开,眉眼冷峻的军装男人语气森然,跑什么?我的未婚夫,我还没听够呢。谢邀,在外打仗一年听了一年故事,骆绛都要恍惚以为自己真的有个爱自己爱得要死要活的未婚夫了。闻兮看着那把抵着自己喉结的漆黑枪口,发着抖问想听什么。男人笑眯眯的,来和我说说我们那感人肺腑,海枯石烂的一段情啊!闻兮这下是真的完了v大冤种人类特警x又皮又怂的兔妖魔蝎小说...
关于好爽!抢渣男遗产,当渣男舅妈沈禾爱了穆霆蕴四年,直到被剖心惨死,才知道她是男友小青梅的最佳供体!为调查长姐之死,替她伸冤,沈家四个弟弟也都惨遭毒手。大堂弟被活埋,封尸水泥坑天才二堂弟被构陷入狱,毒成痴傻重活一世,沈禾化身为腹黑绿茶。斗渣男,让他血债血偿!护兄弟,带领沈家成为名门!断情绝爱的沈禾,只想找个基因优良的男人,去父留子。她盯上了禁欲大佬,商界巨擘宋敬呈。哪知,对方竟也是重生的,还早早就做了接扎手术!梦想泡了汤,赶紧跑!男人却将她堵在墙角穆霆蕴辜负你太多,身为长辈是我管教不严,我应该给你一些补偿。沈禾给多少?有钱不要是傻子。男人将一份遗产公证拍到沈禾怀里这辈子,我都给你做牛做马。沈禾,你愿意做我的遗产继承人吗?后来。遗产继承人是她,孩子的妈妈是她,宋家主母也是她。...
...
身死之后,夏木来到了死后的世界。睁开眼睛,便是一片茫茫沙漠,惨白的月亮悬挂在天穹之上。其后,又有一只通体白色的怪物向着自己动攻击。就在夏木以为自己要死了的时候,一名穿着黑衣,手持长刀的身影出现,解决了怪物。一切,都在向着好的方向展。结果没有想到,一个更大的怪物出现,还没有等到他问清楚救了自己的男子姓名,对方就死了。为了活下去,夏木只能够拾起男子留下的长刀,选择战斗。他不知道,当他握上这柄刀的时候,他就已经成为了死神!从虚圈到尸魂界,从远征军到护廷十三队。这是属于夏木的死神生涯!(注虚圈只是刚开始的出生点,不会持续太久,很快就会进入尸魂界。)(注2主角只看过动画,所以只知道动画之中出现过的剧情,以及那些原创TV的剧情,并不知道官方小说之类的剧情)...