LLM들의 가중치의 초기값을 랜덤으로 설정할 때, 완벽한 랜덤성을 딱히 요구하지는 않기 때문에 GPU의 특성에 맞는 적당한 난수생성기를 쓰게 되는데, 이게 최종적으로 학습된 가중치 값에도 지문처럼 남기 때문에 학습 시작을 뭘로 했는지 알 수 있다는 연구결과
해당 연구에 따르면, 중국 모델들은 빠짐없이 26년 2분기-3분기를 기점으로, 이전에는 NVIDIA Hopper 를 사용하다 Blackwell 로 교체함.
https://x.com/nrehiew_/status/2120999116172099745