DeepSeek AI zaprezentował DeepSeek-V4 z nowymi mechanizmami Compressed Sparse Attention i Heavily Compressed Attention, umożliwiającymi przetwarzanie kontekstów do miliona tokenów.