Từ Triệu chí xa gia ra tới khi, sắc trời đã sát đen.
Lâm thần cưỡi xe, chậm rãi hướng gia đuổi.
Hắn hiện tại trong đầu chuyển rất nhiều chuyện.
Có luận văn, độc quyền, còn có lâm sàng thí nghiệm, AI trợ thủ từ từ.
Này không đến một tháng liền phải khai giảng.
Hắn bỗng nhiên phát hiện, chính mình này hai tháng tới liều mạng địa học, học một bụng đồ vật, nhưng giống như trước nay không nghiêm túc nghĩ tới, đi đại học lúc sau, hắn muốn làm gì?
Tiếp tục thăng cấp học tập cơ? Đây là đương nhiên.
Đem luận văn đã phát? Cần thiết.
Nhưng sau đó đâu?
Hắn tổng không thể cả đời oa ở gác mái tạo máy móc đi.
Lâm thần ở đê thượng dừng lại, đem xe chi ở một bên, ngồi ở bờ sông thềm đá thượng, nhìn trên mặt sông vỡ thành một mảnh ánh đèn.
Hắn nghĩ tới Triệu chí xa lời nói, “Ta muốn nhìn xem, ngươi rốt cuộc có thể đi đến nào một bước.”
Chính hắn cũng không biết.
Nhưng hắn biết một sự kiện.
Hắn không nghĩ cô phụ những người này.
Không nghĩ cô phụ lão ba 3200 đồng tiền, không nghĩ cô phụ Triệu chí xa luận văn cùng USB, không nghĩ cô phụ lão mẹ mỗi ngày biến đổi đa dạng làm đồ ăn, không nghĩ cô phụ trương dì cả ngày không thấy được hắn lại vì hắn an toàn lo lắng.
Hắn càng không nghĩ cô phụ cái kia buổi tối, trong trời đêm kia viên dị thường lập loè ngôi sao.
Thiên Đạo tìm tòi khí, đại thiên chi đạo, tác vạn vật chi lý.
Vậy làm điểm đại.
“Được rồi, đừng làm kiêu.”
Lâm thần đứng lên, vỗ vỗ trên mông thổ.
Đi về trước đem cái kia AI trợ thủ làm ra tới lại nói, về sau lộ, còn trường đâu.
Lâm thần rốt cuộc an ổn nghỉ ngơi mấy ngày, hôm nay sáng sớm, lâm thần chiếu chiếu gương.
Ân, thực hảo, quầng thâm mắt đã không có.
Nhìn trong gương tiểu tử, lâm thần không khỏi trêu chọc một tiếng: “U, tiểu hỏa, ngươi còn rất soái sao!”
Lâm thần một lần nữa phân phối mỗi ngày học tập kế hoạch biểu.
Ban ngày buổi sáng chạy bộ rèn luyện, buổi sáng giúp lão ba tu đồ điện, buổi chiều tiếp tục tiêu hóa tri thức, buổi tối dùng đời thứ ba nguyên hình tưới bằng máy AI chương trình học.
Này trung gian bớt thời giờ còn làm lão ba sử dụng một lần học tập cơ.
Kia học tập hiệu quả vừa ra tới, đem lâm kiến quốc cả kinh sửng sốt sửng sốt.
“Trách không được tiểu tử ngươi những ngày ấy học tập như vậy mãnh, này đều cùng khai quải dường như, có điểm nghiện nha!” Lâm kiến quốc có chút cao hứng, tiểu tử này, giống như phát minh một kiện khó lường đồ vật ra tới.
Không hổ là con của hắn.
“Này nhưng còn không phải là khai quải sao!” Lâm thần ở trong lòng mãnh trợn trắng mắt.
“Ba, thứ này ngươi hiện tại nhưng đừng hướng ra phía ngoài mặt nói bậy nha, nơi này đề cập tới rồi rất nhiều kỹ thuật cùng độc quyền, còn không hảo hướng ra phía ngoài công bố!” Lâm thần trịnh trọng dặn dò nói.
“Này còn dùng ngươi nói!” Lâm kiến quốc cảm khái: “Được rồi, ngươi phát minh thứ này đích xác không tồi, bất quá ta đã lớn tuổi như vậy rồi, cũng không dùng được, ngươi phải hảo hảo dùng đi, chú ý điểm thân thể là được!”
“Ba, ta trong lòng hiểu rõ!”
Đời thứ ba 15kbps tốc độ xác thật mãnh, một quyển 《 chiều sâu học tập 》 hoa cả đêm đi học xong rồi hơn phân nửa.
Nhưng vấn đề cũng tới.
AI thứ này quang hiểu lý luận vô dụng, được với tay chạy số hiệu.
Hắn kia đài kiểu cũ GTX 1060, chạy cái ResNet-50 huấn luyện, một cái epoch muốn hơn bốn mươi phút.
Chạy đến cái thứ hai epoch, hiện tạp độ ấm trực tiếp tiêu đến 85 độ, quạt xoay chuyển cùng phi cơ trực thăng dường như, lâm thần ở bên cạnh tiểu tâm mà đề phòng, liền sợ nó đột nhiên cháy.
“Dựa! Này không được a.”
Lâm thần nằm liệt trên ghế, nhìn chằm chằm trên màn hình chậm như lão ngưu huấn luyện tiến độ điều.
Hắn lục soát một chút hiện tạp giá cả, RTX 4090, lấy hiện tại giá thị trường, yêu cầu một vạn 3000 nguyên.
Hắn toàn bộ thân gia thêm lên, còn không đến 800 khối.
“Đến, lại là một cái yêu cầu dùng ái phát điện hạng mục.”
Lâm thần thở dài, bắt đầu cân nhắc thay thế phương án.
Thiên Đạo tìm tòi khí nhưng thật ra lục soát ra không ít vân GPU thuê phương án ——AutoDL, hằng nguyên vân, Google Colab, nhưng là, kia đều đến đòi tiền, chính hắn, nghèo bức một cái.
Này căn bản là không phải một cái người nghèo nên chơi đồ vật.
Hơn nữa hắn cũng không nghĩ đem số hiệu cùng số liệu đặt ở người khác server thượng.
Thứ này hiện tại tuy rằng chỉ là cái học tập hạng mục, nhưng vạn nhất về sau......
“Tính, trước tiên ở tiểu mô hình thượng chạy đi.”
Hắn đem mô hình từ ResNet-50 đổi thành MobileNet-v3, tham số lượng từ 2500 vạn hàng tới rồi 500 vạn. GTX 1060 miễn cưỡng có thể chạy, một cái epoch mười lăm phút.
Trước chắp vá dùng đi.
Nhưng lâm thần trong lòng rõ ràng, này không phải kế lâu dài.
Thật muốn làm AI, tính lực chính là vòng bất quá đi khảm.
“Như vậy đi xuống không được, xem ra đến tưởng cái kiếm tiền biện pháp, không có tiền, một bước khó đi nha!”
Hắn nhắm mắt, khởi động Thiên Đạo tìm tòi khí.
“Cá nhân khai phá giả, vốn nhỏ thu hoạch GPU tính lực, được không phương án.”
Tìm tòi khí quay trở về một đống kết quả.
Đại bộ phận đều là vân thuê phương án, nhưng có một cái khiến cho hắn chú ý ——
“Phân bố thức tính lực cùng chung internet: Đem để đó không dùng cá nhân GPU thông qua P2P internet cùng chung cấp có tính lực nhu cầu người dùng, ấn sử dụng khi trường kế phí.”
Này còn không phải là tính lực bản cùng chung kinh tế sao?
Hắn tiếp tục đi xuống phiên.
Sau đó hắn thấy được một cái càng làm cho hắn hưng phấn đồ vật.
“Mô hình chưng cất cùng lượng hóa áp súc: Thông qua tri thức chưng cất đem đại mô hình năng lực di chuyển đến tiểu mô hình, kết hợp INT8 lượng hóa, nhưng ở tiêu phí cấp GPU thượng thực hiện tiếp cận đại mô hình trinh thám hiệu quả.”
Cái này hảo!
Hắn hiện giai đoạn cũng không cần chính mình huấn luyện đại mô hình, liền tính tưởng, hắn cũng không cái kia tính lực, không cái kia số liệu.
Hắn có thể dùng khai nguyên dự huấn luyện đại mô hình làm giáo viên mô hình, chưng cất ra một cái nhẹ lượng cấp trợ thủ mô hình, chạy ở chính mình máy móc thượng.
Hơn nữa, hắn có Thiên Đạo tìm tòi khí.
Người khác làm chưng cất yêu cầu lặp lại thực nghiệm, hắn có thể trực tiếp lục soát ra tối ưu chưng cất sách lược cùng siêu tham số phối trí.
“Kế hoạch thông! Ngươi thật là cái thiên tài!”
Lâm thần lập tức bắt đầu lục soát cụ thể chưng cất phương án.
Kế tiếp ba ngày, lâm thần đắm chìm ở mô hình chưng cất trong thế giới.
Hắn tuyển một cái khai nguyên tiếng Trung đại mô hình ——ChatGLM3-6B—— làm giáo viên mô hình, mục tiêu là dùng nó chưng cất ra một cái tham số lượng không đến năm ngàn vạn tiểu mô hình, có thể ở GTX 1060 thượng lưu sướng vận hành.
Chưng cất quá trình so tưởng tượng phức tạp.
Hắn đem Thiên Đạo tìm tòi khí lục soát các loại vấn đề, toán học, vật lý, biên trình, điện tử công trình nhất nhất sửa sang lại thành hỏi đáp, sau đó dùng giáo viên mô hình sinh thành tham khảo đáp án.
Này một bước đi không cần bản địa tính lực, hắn dùng Colab miễn phí GPU chạy cả đêm.
Sau đó là huấn luyện học sinh mô hình, học sinh mô hình dùng chính là một cái loại nhỏ Transformer giá cấu, sáu tầng mã hóa khí, bốn đầu lực chú ý, che giấu duy độ 512.
Hắn ở GTX 1060 thượng chạy, batch size chỉ có thể thiết đến 4, lại đại hiện tồn liền bạo.
“Bốn batch size...... “Lâm thần nhìn chằm chằm huấn luyện nhật ký, “Này đến huấn tới khi nào đi.”
Lần đầu tiên huấn luyện chạy sáu tiếng đồng hồ, loss nhưng thật ra hàng, nhưng trắc một chút hiệu quả, lạn đến một đám.
Hỏi nó “Cái gì là Ôm định luật”, nó đáp “Ôm định luật là mạch điện phân tích cơ sở, từ Ôm đưa ra”, cái này còn hành.
Hỏi nó “Giúp ta phân tích cái này sơ đồ mạch điện”, nó trực tiếp phát ra một chuỗi loạn mã.
“Không được, chưng cất sách lược không đúng.”
Lâm thần nhắm mắt, khởi động Thiên Đạo tìm tòi khí.
“Tri thức chưng cất, tiểu mô hình năng lực tổn thất nhỏ nhất hóa, số liệu tăng cường sách lược, nhiệm vụ riêng chưng cất phương án.”
Tìm tòi khí quay trở về mười mấy thiên luận văn.
Hắn suy tư luận văn trung nội dung, càng xem càng cảm thấy chính mình phía trước phương hướng có vấn đề.
Hắn phía trước làm chính là thông dụng chưng cất, đem sở hữu loại hình số liệu quậy với nhau huấn luyện, hy vọng học sinh mô hình có thể học được giáo viên mô hình sở hữu năng lực. Nhưng tiểu mô hình tham số lượng bãi tại nơi đó, cái gì đều học tương đương cái gì đều học không tinh.
Chính xác cách làm là nhiệm vụ riêng chưng cất, trước xác định học sinh mô hình muốn làm gì, sau đó chỉ chưng cất nhiệm vụ này tương quan năng lực.
Lâm thần nghĩ nghĩ, hắn yêu cầu cái này AI trợ thủ làm gì?
Giúp hắn sửa sang lại học tập bút ký? Quá cấp thấp, chính mình là có thể làm.
Giúp hắn viết code? Về sau khả năng sẽ dùng đến, nhưng hiện tại cũng không phải mới vừa cần.
Giúp hắn ở Thiên Đạo tìm tòi khí phản hồi rộng lượng tin tức làm sàng chọn cùng dự xử lý?
Lâm thần ngây ngẩn cả người, cái này có thể.
Thiên Đạo tìm tòi khí phản hồi lượng tin tức quá lớn, mỗi lần tìm tòi, hắn đều phải hoa đại lượng thời gian ở sàng chọn cùng sửa sang lại thượng, nếu có một cái AI trợ thủ có thể giúp hắn làm bước đầu sàng chọn, đi trọng, phân loại, trích yếu —— thậm chí giúp hắn đem tìm thấy được kỹ thuật phương án tự động sinh thành nhưng chấp hành bước đi.
Kia hiệu suất tăng lên, không phải một chút.
“Đúng vậy, chính là cái này phương hướng!”
Bất quá này liền đề cập tới rồi một cái khác vấn đề, Thiên Đạo tìm tòi khí phản hồi tìm tòi kết quả đều ở chính mình trong đầu, chính mình còn muốn đem chúng nó ghi vào máy tính, mới có thể sử dụng AI kiểm tra, có kia công phu, chính mình tất cả đều xem xong rồi.
Vấn đề này kỳ thật cũng hảo giải quyết.
Siêu cấp học tập cơ là đem tri thức từ máy tính đưa vào người não, ta trái lại, đem người trong đầu tri thức đưa vào máy tính, có phải hay không cũng đồng dạng được không?
Đáp án tự nhiên là được không, có Thiên Đạo tìm tòi khí ở, loại người này cơ hỗ động tự nhiên là không thành vấn đề.
Vấn đề này hảo giải quyết, đến từng bước một tới.
Hắn một lần nữa thiết kế chưng cất phương án, huấn luyện số liệu toàn bộ đổi thành tin tức kiểm tra cùng văn bản trích yếu loại nhiệm vụ, trường văn bản trích yếu, từ ngữ mấu chốt lấy ra, kỹ thuật hồ sơ kết cấu hóa, nhiều hồ sơ đi trọng cùng xác nhập.
Lần thứ hai huấn luyện, phương hướng đúng rồi, hiệu quả dựng sào thấy bóng.
Huấn mười hai tiếng đồng hồ sau, học sinh mô hình đã có thể đối kỹ thuật hồ sơ làm ra dáng ra hình trích yếu. Tuy rằng ngẫu nhiên sẽ rơi rớt mấu chốt chi tiết, nhưng đại dàn giáo là chuẩn.
“Hấp dẫn!”
Lâm thần nhìn thí nghiệm kết quả, hưng phấn đến ở trên ghế dạo qua một vòng.
Ngày thứ tư buổi tối, lâm thần chính điều mô hình siêu tham số, dưới lầu truyền đến tiếng đập cửa.
Đặng đặng đặng chạy xuống đi, cửa đứng Triệu chí xa.
“Triệu lão sư? Ngài như thế nào tới?”
“Đi ngang qua, thuận tiện nhìn xem ngươi ở vội chút gì.” Triệu chí xa trong tay xách theo cái bao nilon, “Ngươi lần trước không phải nói chính mình phải làm một cái AI trí năng trợ thủ sao, làm được thế nào?”
“Ngài như thế nào biết ta ở làm AI trợ thủ?”
“Ngươi lần trước ở ta chỗ đó nói một miệng, oán giận vô pháp tùy thời ký lục ngươi linh cảm, ngươi đã quên?” Triệu chí xa vào cửa, đánh giá phòng khách, “Nhà ngươi còn rất sạch sẽ.”
“Có chuyện này sao? Ta đều cấp quên mất!” Lâm thần tiếp nhận bao nilon, nhìn thoáng qua, bên trong là một khối hiện tạp, “Đây là......?”
“GTX 1080 Ti. Ta trước kia làm hình ảnh xử lý dùng, 11G hiện tồn, chạy cái trí năng trợ thủ hẳn là không thành vấn đề. “Triệu chí xa nói được nhẹ nhàng bâng quơ, “Dù sao phóng cũng là phóng, ngươi cầm đi dùng.”
Lâm thần há miệng thở dốc.
“Triệu lão sư, này......”
“Đừng vô nghĩa, mang ta đi nhìn xem, ngươi khai phá đến nào một bước.”
Lâm thần lãnh hắn thượng gác mái.
Triệu chí xa ở gác mái dạo qua một vòng, nhìn nhìn kia đài đời thứ ba nguyên hình cơ, lại nhìn nhìn trên màn hình còn ở chạy huấn luyện số hiệu.
“Ngươi cái này học sinh mô hình, tham số lượng nhiều ít?”
“4800 vạn.”
“Giáo viên mô hình đâu?”
“ChatGLM3-6B, 6 tỷ.”
Triệu chí xa nhướng nhướng chân mày: “Áp súc so vượt qua một trăm lần, năng lực bảo lưu lại nhiều ít?”
“Văn bản trích yếu nhiệm vụ thượng, ROUGE-L đại khái bảo lưu lại 73%. Tin tức lấy ra nhiệm vụ thượng, F1 bảo lưu lại 68%.” Lâm thần dừng một chút, “Ta còn ở ưu hoá, hẳn là có thể nhắc lại mấy cái điểm.”
Triệu chí xa trầm mặc.
Hắn đi đến bên cửa sổ, nhìn bên ngoài đen như mực bầu trời đêm, một hồi lâu không nói chuyện.
“Tiểu lâm.”
“Ân?”
“Ngươi làm mấy thứ này, ngươi biết này đó kỹ thuật điểm giống nhau là cái gì sao?”
Lâm thần nghĩ nghĩ, mở miệng nói: “Đều thực tỉnh tiền?”
Triệu chí xa thiếu chút nữa bị sặc đến.
“Không phải tiết kiệm tiền.” Hắn xoay người, biểu tình nghiêm túc nói: “Là hiệu suất. Ngươi làm mỗi sự kiện đều ở theo đuổi hiệu suất cực hạn. 700 bps đến mười lăm kbps, 6 tỷ tham số đến năm ngàn vạn, ngươi này không phải ở tỉnh tiền, ngươi là ở làm người khác làm không được hiệu suất ưu hoá.”
Lâm thần bị hắn nói được có điểm ngượng ngùng.
“Cũng không như vậy lợi hại...... “
“Có. “Triệu chí xa đánh gãy hắn, “Ta đã thấy quá nhiều người, trong tay có tốt nhất thiết bị, nhiều nhất kinh phí, mạnh nhất đoàn đội, nhưng làm được đồ vật chính là bình thường.”
Hắn nhìn lâm thần.
“Ngươi đi đại học, khả năng sẽ có rất nhiều dụ hoặc, công ty lớn offer, đầu tư người tiền, truyền thông chú ý. Ngươi nhớ kỹ ta hôm nay lời nói, đừng bị vài thứ kia nắm đi. Làm ngươi muốn làm, làm ngươi am hiểu. Ngươi thiên phú không ở truy đầu gió, ngươi có thể sáng tạo đầu gió.”
Lâm thần trịnh trọng gật gật đầu.
“Ta đã biết, Triệu lão sư.”
“Hảo.” Triệu chí xa vỗ vỗ bờ vai của hắn, “Hiện tạp chính mình trang thượng thử xem. Ta đi rồi.”
“Ta đưa ngài.”
“Không cần, ngươi vội ngươi.”
Triệu chí đi xa đến cửa thang lầu, bỗng nhiên dừng lại.
“Đúng rồi, ngươi cái kia AI trợ thủ, đặt tên sao?”
“Còn không có.”
“Khởi một cái đi.”
Lâm thần cười: “Hành, ta ngẫm lại.”
Triệu chí đi xa sau, lâm thần đem kia khối GTX 1080 Ti cất vào máy tính.
11G hiện tồn, 3584 cái CUDA trung tâm, so với hắn nguyên lai kia khối 1060 cường không phải nhỏ tí tẹo.
Đồng dạng batch size, huấn luyện tốc độ nhanh gần gấp ba.
“Triệu lão sư, ngài thật là ta quý nhân.”
Lâm thần đối với màn hình nhắc mãi một câu, sau đó một lần nữa khởi động huấn luyện.
Đã đổi mới hiện tạp, hắn dứt khoát đem batch size từ 4 nhắc tới 16, lại bỏ thêm hai tầng mã hóa khí, mô hình tham số lượng khoách tới rồi 7200 vạn.
Huấn luyện chạy suốt cả đêm.
Ngày hôm sau buổi sáng, lâm thần xoa đôi mắt bò dậy, chuyện thứ nhất chính là xem huấn luyện kết quả.
ROUGE-L—— 79%.
F1—— 74%.
So với phía trước đề ra gần sáu phần trăm.
“Úc gia, thành!”
Lâm thần một giọng nói đem dưới lầu đang ở nấu cơm chu tú lan hoảng sợ.
“Lâm thần ngươi gào cái gì gào!”
“Không có việc gì mẹ, ta cao hứng!”
Lâm thần hưng phấn mà ở gác mái đi tới đi lui.
Hắn mở ra đầu cuối, gõ một hàng mệnh lệnh, khởi động trợ thủ mô hình.
Trên màn hình bắn ra một cái ngắn gọn khung thoại.
Hắn nghĩ nghĩ, đưa vào đệ nhất hành tự:
“Ngươi hảo, giúp ta sửa sang lại một chút hôm nay phải làm nhiệm vụ. “
Mô hình trầm mặc hai giây, sau đó phát ra hồi phục.
Lâm thần nhìn trên màn hình hồi phục, bỗng nhiên cảm thấy, này hai tháng điên cuồng học tập, giống như rốt cuộc bắt đầu mọc ra trái cây.
Hắn tựa lưng vào ghế ngồi, nhìn khung thoại cái kia còn ở lập loè con trỏ.
“Tên gọi là gì hảo đâu......”
Thiên Đạo tìm tòi khí, đại thiên chi đạo, tác vạn vật chi lý.
Cái này trợ thủ, là chính hắn dùng tri thức chưng cất làm được, từ 6 tỷ tham số đại mô hình, từng điểm từng điểm đem tinh hoa chưng ra tới, ngưng tụ thành này 7000 vạn tham số tiểu mô hình.
Giống luyện kim giống nhau.
“Liền kêu ngươi tiểu luyện đi.”
Lâm thần đối với màn hình nói.
Khung thoại, con trỏ lóe hai hạ.
Sau đó bắn ra một hàng tự:
“Tốt, ta kêu tiểu luyện. Có cái gì có thể giúp ngươi?”
Lâm thần cười.