morein2008

摘要： 思路：設置切塊允許的最大文本長度，先按照允許的最大文本長度切出一個chunk，然后檢查chunk內部是否存在逗號、句號、感嘆號、問號、空格等自然的語義分割符，若存在，在把該chunk繼續(xù)切分，否則，該切塊就是最終的切塊。 def cut_text(full_text, max_chunk_size= 閱讀全文

摘要： 好奇fastapi到底有多fast，今天用jmeter實測了一下，不過如此，也就比Flask快點吧，跟sanic是沒法比的： 1. jmeter調用本地sanic服務（2個進程），服務器配置：win11，8GB內存，8核，客戶端200個線程，100次循環(huán)： 平均耗時=32ms，P95=58ms，TP 閱讀全文

摘要： 通過csv批量導入neo4j1. 修改配置文件sudo vi /etc/neo4j/neo4j.conf注釋掉這一行:server.directories.import=/var/lib/neo4j/import使得neo4j的load csv命令可以從文件系統(tǒng)的任何目錄導入數(shù)據(jù),而不必先將csv文 閱讀全文

摘要： TextToSpeech,TTS相關資源： 代碼：https://github.com/coqui-ai/TTS 在線文本轉語音：https://text2audio.cc/ 音頻文件格式轉換：https://app.xunjieshipin.com/mp3-to-wav/ 閱讀全文

摘要： 需要node.js運行環(huán)境，創(chuàng)建2個文件：user.js，server.js user.js： let users = {}; module.exports = users; server.js： const http = require('http'); // 導入user模塊 let users 閱讀全文

摘要： 數(shù)據(jù)來源：https://www.flashexpress.co.th/en/zip-code 數(shù)據(jù)預覽： 下載鏈接：博客園(把后綴改為.csv即可使用) 閱讀全文

摘要： 我在離線的服務器上通過conda activate gpt進入gpt環(huán)境后，想更新gpt中的transformers包(v4.26.1升級到4.29.1),于是手動去清華源(https://pypi.tuna.tsinghua.edu.cn/simple/) 下載好transformers4.29. 閱讀全文

摘要： 一、可迭代對象：可以用for遍歷的對象，包括list、set、dict等。 二、迭代器：能夠記錄當前迭代位置的可迭代對象，就是迭代器。 1）把list、set、dict等簡單的可迭代對象用iter()函數(shù)包裝一下，就成了迭代器。 例如 x=iter([1,2,3]) # type(x) 輸出 lis 閱讀全文

摘要： https://tianchi.aliyun.com/forum/post/336310 由于標注數(shù)據(jù)通常是在word級別進行標注的，既然word還會被切分成subtokens，那么意味著我們還需要對標注數(shù)據(jù)進行subtokens的對齊。同時，由于預訓練模型輸入格式的要求，往往還需要加上一些特殊符號 閱讀全文

摘要： 在py代碼中利用middleware()方法修飾request/response即可，無需別的操作。 from sanic import Sanic, HTTPResponse, Requestapp=Sanic('Sanic_Server') @app.middleware("request") 閱讀全文