author avatar

Liang

机器学习 - 揭开神经网络的神秘面纱

「纸上得来终觉浅,绝知此事要躬行」 近期拜读了吴恩达在 Coursea 的机器学习经典三剑客前两部分: 有监督的机器学习:回归与分类 高级学习算法

职场路 - 认识创业公司

本文为笔者速览《极客时间-职场求生攻略专栏-职业规划 :程序员加入创业公司,这些事情你想清楚了吗?》章节的摘录总结 一、区分 1.1 做项目变现的公司“不是”创业公司 做项目的公司类似软件作坊,包括但是不限于一些小的外包和外派公司。对于这些公司来说,公司的核心竞争力主要是利用自己的人脉和关系拉项目。

社会学 - 996 内卷 & 资本主义的联系分析

本文为学习 学院派Academia - 【硬核社会学】996、内卷、打工人:马克思为什么是对的(上) 的一些摘录整理与分析,用于了解现代资本主义社会的一些现况 & 马克思主义角度分析当下存在的问题 @data 2024 / 05 / 20 一、当今现况 现在是 “全球化的资本主义世界” 在全球范围看

工程经验 - 大模型基本原理

Ilya Sutskever:“神经网络学到的是生成文本的过程中的某种表示,这些模型的生成文本实际上是真实世界的投影……(语言模型)对下一个单词的预测越准确,(对于世界知识)保真度就越高,在这个过程中获得的分辨度就越高……” 本文为我阅读开源书籍 大语言模型 - 赵鑫 李军毅 周昆 唐天一 文继荣

工程经验 - 数据鉴权设计与实践

[TOC] 在我们的业务工程中,涉及到两部分鉴权的管控,这里简单做个总结分享 RBAC 和 ACL 模型在我们的工程中的实践 一、概念 1.1 鉴权 权限系统设计的核心目标是限制系统使用者的操作在一个合法的范围内,防止越权访问行为,包括水平越权和垂直越权两种。 水平越权:用户访问了不应该访问的数据。

工程经验 - 开源项目的 docker 部署优化实践

一、前言 前两天在调研开源工具,看到个不错的项目,国人开发,感觉做的不错,但是没有 docker 部署支持。于是 fork 下来,花了点时间给这个项目做了下相关的支持 做这个过程调研学习了 docker 相关的知识: 构建上下文 镜像体积优化 本文代码:jalr4ever/buitar 二、项目分析

工程经验 - 大模型 Agent 入门指南

ChatGPT 3.5 的发布恍若 IPhone 4。我们可以选择去相信,犹如移动互联一样,LLM 将开启一个新的时代本文是个大杂烩,但这些大杂烩对于成为一名大模型 Agent 开发者将是有助于 or 必要的本文主要讨论:什么是大模型 Agent?如何开发一个大模型 Agent?大模型 Agent

工程经验 - 服务间认证方案

一、背景我们的产品是一个基于浏览器的 web 应用,提供综合用户、数据管理和虚拟编码环境的 AI 训练平台。用户可以方便地访问数据,直接使用 jupyter notebook 进行 AI 训练,并通过提交审批流程获取训练模型。因此,该产品涉及一系列与数据和 AI 训练相关的业务。所有功能由三个团队负

工程经验 - 小组管理初级指南

如何将管理工作做好,也算工程经验把?毕竟一个人的力量是有限的,在有限的时间节点下,必须协作多人来完成工作前言我的 time-line 如下:2020/7:毕业。我负责业务后端研发工作,ToB & ToG 产品2022/2 ~ 至今:直属组长离职。由我接手组长的工作,带领业务后端组相关研发工作

工程经验 - 异步计算削峰方案 & 实战

一、背景我们的产品曾服务于科研行业厂商,为其提供 AI 训练和数据计算功能。其中一个重要功能是【指标计算】:用户提交指标文件后端读取文件并进行分数计算用户可以在提交列表中查看提交记录,其中包括计算指标和各项分数二、问题根据需求,我们使用算法工程师提供的 SDK 对计算性能进行边界测试。然而,我们发现

工程经验 - 服务日志打印方案

问题排查 - HTTP 流式上传失败

一、背景我们的业务系统中有使用 OkHttp3 做大文件流式上传,即 Content-Type 为 application/octet-stream 的请求,但是在传大约 10G 左右的文件时出现了上传失败现象客户端在 OkHttp3 的上传代码类似如下:RequestBody requestBod

摘录 - 《沙之书》

📚:前有巴别图书馆,后有阿莱夫,现有沙之书。讲的更多是偏悲与邪恶的故事。依然觉得,从中激发出来的影视作品或者歌剧作品会很不错! 最后看到沙之书,终于遇到了看这本小书,一张非常合适的一张专:《an empty beyond this world》 - The Caretaker另一个人🤖:强调了现

菜鸟宝典系列 - 程序员:从校园到职场

我在 2020 年 7 月毕业并成为一名后端研发工程师,工作已快三年。本篇文章分享我从校园跨入职场以来,关于能力提升与工作效率的内容。如果觉得有用,欢迎在文章尾部 SUPPORT 给予我支持!一、何为工作能力 & 效率二、思维转换2.1 做好负面情绪管理思维内核个人经验2.2 工作方向很重要