650 億參數大模型的預訓練方案,發布即開源。訓練速度較傳統方案提升 38%。這就是由 Colossal-AI 最新發布的類 LLaMA 基礎大模型預訓練方案。要知道,在 " 百模大戰 " 背景下,誰擁有自家大模型,往往被視爲核心競争力。在這個節點下,願意開源大模型的公司少之又少。但自己從頭訓練一個…
650 億參數大模型的預訓練方案,發布即開源。訓練速度較傳統方案提升 38%。這就是由 Colossal-AI 最新發布的類 LLaMA 基礎大模型預訓練方案。要知道,在 " 百模大戰 " 背景下,誰擁有自家大模型,往往被視爲核心競争力。在這個節點下,願意開源大模型的公司少之又少。但自己從頭訓練一個…
最近和大模型一起爆火的,還有大模型的微調方法。這類方法隻用很少的數據,就能讓大模型在原本表現沒那麽好的下遊任務中 " 脫穎而出 ",成爲這個任務的專家。而其中最火的大模型微調方法,又要屬LoRA。但包括 LoRA 在内,這類方法的核心原理究竟是什麽?它和大模型之間的關系又是什麽?我們具體來看。一、前…
7 月 11 日下午,在中關村科學城管理委員會指導下,由北京中關村創業大街科技服務有限公司、北京一心向上科技有限公司承辦的中關村科學城科創大賽賦能系列活動 - 股權設計專場《企業創始人 " 第一課 "》在中關村創業大街順利舉辦。【中關村科學城科創大賽賦能系列活動】是由中關村科學城科創大賽組委會爲廣大…
一紙公告," 大模型市場格局變了 "。Meta 與微軟聯手發布免費、可直接商用的 LLaMA2。而作爲首選合作夥伴,微軟 Windows 可本地運行這一版本。此外在 AWS、Hugging Face 上也可以獲取,高通也官宣成爲其合作夥伴。這種背刺 OpenAI 的操作,讓不少網友直呼刺激。還有人對…
最近 Claude 2 亮相、谷歌 Bard 支持中文、Open AI 推出 Code Interpreter(代碼解釋器)……大模型發布一波接着一波,但五花八門,沒有一個可解決所有問題。所以不同任務到底該用哪一個?别着急,這不來自賓夕法尼亞大學沃頓商學院的 Ethan Mollick 教授整理了一…
招最優秀的人才,打最硬的仗,出手即打破傳統。這就是華爲最新揭秘的大模型領域最新動作,劍指 AI 存儲,一口氣發布兩産品:OceanStor A310 深度學習數據湖存儲與 FusionCube A3000 訓 / 推超融合一體機,性能密度刷新業界紀錄。它們由華爲數據存儲團隊推出,華爲 " 天才少年…
我們昨天寫了野外出遊的時候要把果皮帶走(點擊這裏直達文章《震驚了,原來橘子皮蘋果核也不能扔在山裏!》),評論裏很多人都在問:那在野外想拉屎怎麽辦?也要帶走嗎?這個問題,我們确實也遇到了——不過屎意爆發的不是人,而是一起去山裏的金毛犬多多。來看看我們怎麽處理多多的狗屎一個大原則:什麽也别留下不管是人還…
以下文章來源于非凡油條 ,作者小籠包作者:小籠包編輯:養樂多重要通知一個好消息,我們在知識星球開辟了第二戰場【非凡油條】,有很多在公衆号不方便說的東西、一些相對私密的個人見解(涉及經濟、投資等)、一些财經方面的重要資料,我們都會發在知識星球的非凡油條專欄上,供大家學習交流。此外,我們也會在知識星球【…
( ⊙ _ ⊙ ) 每天一篇全球人文與地理微信公衆号:地球知識局NO.2496- 華北超級高溫文字:風雲夢遠 校稿:辜漢膺 / 編輯:闆栗寫在開頭地球知識局開辟了一個新陣地——知識星球!在這裏你将——①收到一些我們因種種原因沒有寫成推送,但有趣有用的選題;②跟經驗豐富的地理老師一起交流地理學習訣竅…
點擊音頻收聽内容也可閱讀下方文字獲取文章訊息總能聽到這樣的傳聞:" 男性不能喝可樂,否則會不孕不育。"實際上,除非把精子直接泡在可樂裏,否則很難達到殺死 " 小蝌蚪 " 的地步。最開始得出 " 可樂會影響精子活力 " 結論的實驗,就是研究人員把精子泡在了可樂中,放在室溫下 1 分鍾後,發現精子的活力…
在衆多水果當中,西梅是爲數不多的和 " 拉屎 " 能直接挂鈎的水果,名聲都打敗了香蕉,多吃幾顆可能就會面臨 " 一瀉千裏 " 的處境。這麽厲害的西梅隻能幫我們拉屎嗎?還有沒有其他用武之地?每天 1 個西梅,對身體會有怎樣的影響呢?西梅的營養價值西梅,别看名字裏帶有 " 梅 " 字,其實人家屬于李子的…
2023 年 7 月 5 日,科普中國 · 星空講壇以 " 科技賦能,讓文物 ' 活 ' 起來 " 爲主題,邀請 5 位來自不同領域的文博、曆史專家,從文物的發掘、修複、展示、保護、交流等方面,講述科技如何賦能文物保護,讓文化遺産曆久彌新。中國社會科學院考古研究所漢唐考古研究室研究員劉瑞帶來演講:《…
沒有人會否認,過去四十多年來,中國經濟的騰飛,在全球發展史中寫下了濃墨重彩的一筆。其中,産業園區有着不可替代的作用。有人說,園區的四十年,也是一部中國經濟的演進史。作爲距離企業業務最近的網絡層級,園區網絡承擔着 " 要想富,先修路 " 的作用,是園區經濟和産業活動長期運行和創新發展,必不可少的基礎設…
© Corey Hendrickson / Gallery Stock利維坦按:所謂直升機父母(helicopter parent),最早出現在兒童心理學家海姆 · 吉諾特(Haim Ginott)的《父母和青少年》(Between Parent & Teenager)一書中,可謂十分形象了。孩子…
毫無疑問,生成式 AI 憑借各大能力驚豔全世界的背後——是超大算力的加持。以搜索功能爲例,有業内人士估計,ChatGPT 單次搜索比傳統搜索引擎需要至少 4-5 倍額外的算力開銷。這也讓算力成爲了今年最稀缺、最緊俏的 " 新資源 "。就在最近,IDC、浪潮信息和清華大學全球産業研究院聯合發布了《20…
2023 年 3 月,國家癌症中心、中國醫學科學院腫瘤醫院在《中華腫瘤雜志》上曾發表了一篇文章《2016 年中國惡性腫瘤流行情況分析》,公布了 2016 年我國總體發病率前 10 位的惡性腫瘤爲:肺癌、結直腸癌、胃癌、肝癌、乳腺癌、食管癌、甲狀腺癌、子宮頸癌、腦腫瘤、胰腺癌。科普中國此前報道過(戳此…
剛剛,第五屆 " 科學探索獎 " 名單出爐。本次共有 48 位青年科學家獲獎,其中包括清華唐傑、上海交大盧策吾,北大數院丁劍等科學家在列。值得一提的是,數學物理學領域獲獎者何頌,曾被熱議是電視劇版《三體》中 " 丁儀 " 形象原型。(不過後來被他本人否認)此次還首次出現了外籍非華裔獲獎人香港大學副教…
想不到,有了 AI 加持,我也有在我司鲨瘋的一天!同事的壓箱底黑照,被我 3 秒鍾就翻了出來,光速做成表情包先發制人。喏,隻需要在網盤的搜索框裏輸入 " 大笑的男人 ",立馬就能檢索到相關圖像。然後選中想要 " 攻擊 " 的對象、點擊編輯,就能一鍵加文字變表情包。整個過程相當絲滑,我圖都做完了,同事…
Meta 用頭顯整新活了!這不,就在最新被 SIGGRAPH 2023 頂會收錄的研究裏,研究人員展示:僅憑 Quest 傳感器和周圍物體環境的交互,就可以捕捉一個人的全身運動!即使是和複雜環境進行交互也不在話下。輸入的時候還是這樣嬸兒的,隻有三個坐标架(沒有攝像頭):加上虛拟角色後,胳膊腿的動作都…
Science 正刊發表對 ChatGPT 的調查報告,《生成式人工智能對生産力影響的實驗證據》對于一些文書任務,ChatGPT 不僅能在節省 40% 時間的同時提高 18% 的績效,還降低了不同人之間的績效差異。MIT 官方也對這一研究成果進行了報道。對照組也會偷用這場實驗一共邀請了 453 名受…
點擊音頻收聽内容也可閱讀下方文字獲取文章訊息你好,這裏是科普中國。現在手機的功能越來越強大,咱們也越來越離不開它,但你平時有沒有注意過自己插充電器的順序呢?是先把插頭接入電源,再用數據線連接到手機,還是先把數據線連接到手機,再把插頭接入電源?咱們今天就來聊聊,這兩種充電方式有什麽區别,又會有什麽樣的…
2023 年 7 月 5 日,科普中國 · 星空講壇以 " 科技賦能,讓文物 ' 活 ' 起來 " 爲主題,邀請 5 位來自不同領域的文博、曆史專家,從文物的發掘、修複、展示、保護、交流等方面,講述科技如何賦能文物保護,讓文化遺産曆久彌新。陝西師範大學曆史文化學院教授于赓哲帶來演講:《從天竺到中土,…
玩擴圖,Midjourney 是認真的。現在隻要幾個指令,就能輕松創造超長畫卷。我們先來看一張圖,這張是原來的圖:這是經過自定義擴充後的效果,是醬嬸兒:這就是 Midjourney 今早更新的平移(pan)功能。效果一出,引發不少網友驚歎:一個字絕。驚訝之餘,也有網友已經迫不及待瘋狂上手調教起來。M…