<rss xmlns:atom="http://www.w3.org/2005/Atom" version="2.0"><channel><title>基础模型 - Tag - 堂堂一跑堂</title><link>https://spacetop.win/tags/%E5%9F%BA%E7%A1%80%E6%A8%A1%E5%9E%8B/</link><description>基础模型 - Tag - 堂堂一跑堂</description><generator>Hugo -- gohugo.io</generator><language>zh-CN</language><managingEditor>kingcopper@whu.edu.cn (WangTong)</managingEditor><webMaster>kingcopper@whu.edu.cn (WangTong)</webMaster><lastBuildDate>Mon, 01 Jun 2026 12:00:00 +0800</lastBuildDate><atom:link href="https://spacetop.win/tags/%E5%9F%BA%E7%A1%80%E6%A8%A1%E5%9E%8B/" rel="self" type="application/rss+xml"/><item><title>RSRefSeg：用CLIP+SAM双剑合璧，让遥感图像\"听懂\"自然语言描述</title><link>https://spacetop.win/2026/06/20260601_235500_rsrefseg_foundation_model/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_235500_rsrefseg_foundation_model/</guid><description><![CDATA[<h1 id="rsrefseg用clipsam双剑合璧让遥感图像听懂自然语言描述" class="headerLink">
    <a href="#rsrefseg%e7%94%a8clipsam%e5%8f%8c%e5%89%91%e5%90%88%e7%92%a7%e8%ae%a9%e9%81%a5%e6%84%9f%e5%9b%be%e5%83%8f%e5%90%ac%e6%87%82%e8%87%aa%e7%84%b6%e8%af%ad%e8%a8%80%e6%8f%8f%e8%bf%b0" class="header-mark"></a>RSRefSeg：用CLIP+SAM双剑合璧，让遥感图像&quot;听懂&quot;自然语言描述</h1><blockquote>
  <p><strong>论文解读</strong> | arXiv 2025 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>RSRefSeg: Referring Remote Sensing Image Segmentation with Foundation Models</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Keyan Chen, Jiafan Zhang, Chenyang Liu, Zhengxia Zou, Zhenwei Shi</td>
      </tr>
      <tr>
          <td><strong>机构</strong></td>
          <td>未明确标注（从作者信息推断为国内高校）</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>arXiv 2025</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2501.06809" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2501.06809</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/KyanChen/RSRefSeg" target="_blank" rel="noopener noreferrer">https://github.com/KyanChen/RSRefSeg</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>引用式分割、遥感图像、CLIP、SAM、基础模型、多模态对齐</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>在遥感图像分析中，我们经常需要根据自然语言描述来定位和分割特定的物体或区域。例如，给定一句话&quot;图像左上角的红色建筑物&quot;，系统需要自动找到并分割出对应的建筑物。这种任务被称为<strong>引用式遥感图像分割（Referring Remote Sensing Image Segmentation, RRSIS）</strong>。</p>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><p>当前主流方法通常采用以下流程：</p>
<ol>
<li>使用预训练语言模型（如BERT）编码文本描述</li>
<li>使用视觉编码器（如ResNet）提取图像特征</li>
<li>通过简单的拼接或注意力机制进行多模态融合</li>
<li>使用分割头生成最终掩膜</li>
</ol>
<p><strong>核心问题</strong>：这些方法在<strong>细粒度语义对齐</strong>上存在严重缺陷：</p>
<ul>
<li>文本编码器和视觉编码器是<strong>独立训练</strong>的，缺乏内在的跨模态关联</li>
<li>简单的特征拼接难以捕捉<strong>细粒度语义概念</strong>（如颜色、形状、位置等）</li>
<li>导致文本和视觉信息之间的<strong>表示不一致</strong>，影响分割精度</li>
</ul>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何利用现有的视觉-语言基础模型（CLIP）和图像分割基础模型（SAM），构建一个能够精确理解自然语言描述并进行细粒度分割的遥感图像分析系统？</strong></p>
<h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1基于clip的语义编码与对齐" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91%e5%9f%ba%e4%ba%8eclip%e7%9a%84%e8%af%ad%e4%b9%89%e7%bc%96%e7%a0%81%e4%b8%8e%e5%af%b9%e9%bd%90" class="header-mark"></a>核心创新点1：基于CLIP的语义编码与对齐</h3><p><strong>设计动机</strong>：CLIP是一个经过大规模图文对比学习训练的视觉-语言模型，天然具备强大的跨模态对齐能力。与其从头训练一个跨模态融合模块，不如直接利用CLIP的语义空间。</p>
<p><strong>具体实现</strong>：</p>
<div class="code-block highlight is-closed show-line-numbers  tw-group tw-my-2">
  <div class="
    
    tw-flex 
    tw-flex-row
    tw-flex-1 
    tw-justify-between 
    tw-w-full tw-bg-bgColor-secondary
    ">      
    <button 
      class="
        code-block-button
        tw-mx-2 
        tw-flex
        tw-flex-row
        tw-flex-1"
      aria-hidden="true">
          <div class="group-[.is-open]:tw-rotate-90 tw-transition-[transform] tw-duration-500 tw-ease-in-out print:!tw-hidden tw-w-min tw-h-min tw-my-1 tw-mx-1"><svg class="icon"
    xmlns="http://www.w3.org/2000/svg" viewBox="0 0 320 512"><!-- Font Awesome Free 5.15.4 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) --><path d="M285.476 272.971L91.132 467.314c-9.373 9.373-24.569 9.373-33.941 0l-22.667-22.667c-9.357-9.357-9.375-24.522-.04-33.901L188.505 256 34.484 101.255c-9.335-9.379-9.317-24.544.04-33.901l22.667-22.667c9.373-9.373 24.569-9.373 33.941 0L285.475 239.03c9.373 9.372 9.373 24.568.001 33.941z"/></svg></div>
          <p class="tw-select-none !tw-my-1">text</p>]]></description></item><item><title>TESSERA：用Barlow Twins从时序卫星影像中学习全球10米分辨率表示</title><link>https://spacetop.win/2026/06/20260601_120000_tessera_temporal_foundation_model/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_120000_tessera_temporal_foundation_model/</guid><description><![CDATA[<h1 id="tessera用barlow-twins从时序卫星影像中学习全球10米分辨率表示" class="headerLink">
    <a href="#tessera%e7%94%a8barlow-twins%e4%bb%8e%e6%97%b6%e5%ba%8f%e5%8d%ab%e6%98%9f%e5%bd%b1%e5%83%8f%e4%b8%ad%e5%ad%a6%e4%b9%a0%e5%85%a8%e7%90%8310%e7%b1%b3%e5%88%86%e8%be%a8%e7%8e%87%e8%a1%a8%e7%a4%ba" class="header-mark"></a>TESSERA：用Barlow Twins从时序卫星影像中学习全球10米分辨率表示</h1><blockquote>
  <p><strong>论文解读</strong> | CVPR 2026 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>TESSERA: Temporal Embeddings of Surface Spectra for Earth Representation and Analysis</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Z. Feng, C. Atzberger, S. Jaffer, J. Knezevic, S. Sormunen, R. Young, M.C. Lisaius, M. Immitzer, T. Jackson, J. Ball, D.A. Coomes, A. Madhavapeddy, A. Blake, S. Keshav</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>CVPR 2026</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2506.20380" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2506.20380</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/ucam-eo/tessera" target="_blank" rel="noopener noreferrer">https://github.com/ucam-eo/tessera</a> (594 stars)</td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>时序遥感、自监督学习、Barlow Twins、基础模型、像素级表示</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>卫星遥感是监测地球表面变化的重要工具，广泛应用于栖息地制图、碳核算、农业监测等领域。然而，卫星时序数据面临两大挑战：</p>
<ol>
<li><strong>数据量巨大</strong>：全球范围的卫星时序数据达到PB级别，处理和存储成本极高</li>
<li><strong>云遮挡严重</strong>：光学卫星影像经常被云层遮挡，导致时序数据不完整</li>
</ol>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><ul>
<li><strong>传统方法</strong>：通常对时序数据取平均或选择无云影像，丢失了重要的时序信息</li>
<li><strong>现有基础模型</strong>：大多基于单时相影像训练，无法捕捉时序变化模式</li>
<li><strong>像素级方法</strong>：计算成本高，难以扩展到全球范围</li>
</ul>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何从云遮挡严重的卫星时序数据中，高效学习保留时序物候信号的像素级表示？</strong></p>]]></description></item><item><title>全球首个十亿级高光谱基础模型：HyperSIGMA如何统一高层与底层视觉任务？</title><link>https://spacetop.win/2026/06/20260601_210000_hypersigma_hyperspectral/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_210000_hypersigma_hyperspectral/</guid><description><![CDATA[<h1 id="全球首个十亿级高光谱基础模型hypersigma如何统一高层与底层视觉任务" class="headerLink">
    <a href="#%e5%85%a8%e7%90%83%e9%a6%96%e4%b8%aa%e5%8d%81%e4%ba%bf%e7%ba%a7%e9%ab%98%e5%85%89%e8%b0%b1%e5%9f%ba%e7%a1%80%e6%a8%a1%e5%9e%8bhypersigma%e5%a6%82%e4%bd%95%e7%bb%9f%e4%b8%80%e9%ab%98%e5%b1%82%e4%b8%8e%e5%ba%95%e5%b1%82%e8%a7%86%e8%a7%89%e4%bb%bb%e5%8a%a1" class="header-mark"></a>全球首个十亿级高光谱基础模型：HyperSIGMA如何统一高层与底层视觉任务？</h1><blockquote>
  <p><strong>论文解读</strong> | IEEE TPAMI 2025 (IF=20.8) | ESI高被引论文</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>HyperSIGMA: Hyperspectral Intelligence Comprehension Foundation Model</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Di Wang*, Meiqi Hu*, Yao Jin*, Yuchun Miao*, Jiaqi Yang*, Yichu Xu* 等（武汉大学、重庆大学、东京大学、南洋理工大学）</td>
      </tr>
      <tr>
          <td><strong>会议/期刊</strong></td>
          <td>IEEE Transactions on Pattern Analysis and Machine Intelligence (TPAMI), 2025</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2406.11519" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2406.11519</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/WHU-Sigma/HyperSIGMA" target="_blank" rel="noopener noreferrer">https://github.com/WHU-Sigma/HyperSIGMA</a> (⭐366)</td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>高光谱图像、基础模型、Vision Transformer、稀疏采样注意力、自监督预训练</td>
      </tr>
  </tbody>
</table>
<h2 id="-论文定位" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e5%ae%9a%e4%bd%8d" class="header-mark"></a>📊 论文定位</h2><ul>
<li><strong>论文类型</strong>：理论突破型</li>
<li><strong>创新性评分</strong>：⭐⭐⭐⭐ (4分)</li>
<li><strong>判断依据</strong>：
<ol>
<li><strong>首创性</strong>：全球首个专门为高光谱图像设计的十亿级基础模型，填补了该领域的空白</li>
<li><strong>技术贡献</strong>：提出稀疏采样注意力（SSA）机制，针对性解决高光谱数据的冗余问题</li>
<li><strong>数据贡献</strong>：构建全球最大高光谱预训练数据集HyperGlobal-450K（2000万+图像）</li>
<li><strong>荣誉认可</strong>：入选ESI Hot Paper和Highly Cited Paper，证明学术影响力</li>
</ol>
</li>
</ul>
<h2 id="-解决的核心问题第一层表象层" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e7%ac%ac%e4%b8%80%e5%b1%82%e8%a1%a8%e8%b1%a1%e5%b1%82" class="header-mark"></a>🎯 解决的核心问题（第一层：表象层）</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>高光谱图像（Hyperspectral Image, HSI）是遥感领域的重要数据类型，能够捕获数百个连续光谱波段的信息，在矿物勘探、农业监测、环境评估等领域有广泛应用。然而，与普通RGB图像相比，高光谱图像面临独特的挑战：</p>]]></description></item><item><title>HyperFree: 通道自适应免微调高光谱遥感基础模型</title><link>https://spacetop.win/2026/05/20260531_173955_hyperfree_hyperspectral/</link><pubDate>Sun, 31 May 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/05/20260531_173955_hyperfree_hyperspectral/</guid><description><![CDATA[<h1 id="hyperfree-通道自适应免微调高光谱遥感基础模型" class="headerLink">
    <a href="#hyperfree-%e9%80%9a%e9%81%93%e8%87%aa%e9%80%82%e5%ba%94%e5%85%8d%e5%be%ae%e8%b0%83%e9%ab%98%e5%85%89%e8%b0%b1%e9%81%a5%e6%84%9f%e5%9f%ba%e7%a1%80%e6%a8%a1%e5%9e%8b" class="header-mark"></a>HyperFree: 通道自适应免微调高光谱遥感基础模型</h1><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📌 论文信息</h2><ul>
<li><strong>标题</strong>: HyperFree: A Channel-adaptive and Tuning-free Foundation Model for Hyperspectral Remote Sensing Imagery</li>
<li><strong>作者</strong>: Jingtao Li, Xinyu Wang, Liang-Jian Deng, Jiang He</li>
<li><strong>机构</strong>: 武汉大学</li>
<li><strong>会议</strong>: CVPR 2025</li>
<li><strong>arXiv</strong>: <a href="https://arxiv.org/abs/2503.00467" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2503.00467</a></li>
<li><strong>GitHub</strong>: <a href="https://github.com/Jingtao-Li-CVer/HyperFree" target="_blank" rel="noopener noreferrer">https://github.com/Jingtao-Li-CVer/HyperFree</a></li>
<li><strong>关键词</strong>: 高光谱遥感、基础模型、通道自适应、免微调、多任务处理</li>
</ul>
<h2 id="-研究定位" class="headerLink">
    <a href="#-%e7%a0%94%e7%a9%b6%e5%ae%9a%e4%bd%8d" class="header-mark"></a>🗺️ 研究定位</h2><ul>
<li><strong>大领域</strong>: 高光谱遥感图像智能处理</li>
<li><strong>小领域</strong>: 高光谱基础模型设计</li>
<li><strong>技术路线</strong>: 通道自适应嵌入与提示迁移</li>
</ul>
<h2 id="-研究问题" class="headerLink">
    <a href="#-%e7%a0%94%e7%a9%b6%e9%97%ae%e9%a2%98" class="header-mark"></a>❓ 研究问题</h2><h3 id="问题来源" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e6%9d%a5%e6%ba%90" class="header-mark"></a>问题来源</h3><p>高光谱遥感图像包含数十至数百个连续光谱波段，蕴含丰富的地物光谱信息。然而，现有基础模型面临以下挑战：</p>
<ol>
<li><strong>波段异构性</strong>: 不同传感器采集的高光谱数据具有不同的波段数量和光谱范围</li>
<li><strong>微调成本高</strong>: 现有模型需要针对每个新数据集进行微调，计算成本高昂</li>
<li><strong>任务特异性</strong>: 不同下游任务（分类、分割、目标检测）需要不同的模型架构</li>
</ol>
<h3 id="核心问题" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>核心问题</h3><p><strong>如何设计一个能够处理任意波段输入、无需微调即可直接应用于多种下游任务的高光谱遥感基础模型？</strong></p>
<h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心方法hyperfree框架" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e6%96%b9%e6%b3%95hyperfree%e6%a1%86%e6%9e%b6" class="header-mark"></a>核心方法：HyperFree框架</h3><p>HyperFree（<strong>Hyper</strong>spectral <strong>Free</strong>-tuning model）是一个创新的高光谱遥感基础模型，具有通道自适应和免微调两大核心特性。</p>
<h3 id="创新设计细节聚焦" class="headerLink">
    <a href="#%e5%88%9b%e6%96%b0%e8%ae%be%e8%ae%a1%e7%bb%86%e8%8a%82%e8%81%9a%e7%84%a6" class="header-mark"></a>创新设计（细节聚焦）</h3><h4 id="1-通道自适应嵌入层channel-adaptive-embedding" class="headerLink">
    <a href="#1-%e9%80%9a%e9%81%93%e8%87%aa%e9%80%82%e5%ba%94%e5%b5%8c%e5%85%a5%e5%b1%82channel-adaptive-embedding" class="header-mark"></a>1. 通道自适应嵌入层（Channel-Adaptive Embedding）</h4><p><strong>问题本质</strong>: 传统模型要求固定波段输入，无法处理不同传感器采集的异构高光谱数据。</p>
<p><strong>具体实现</strong>:</p>
<ul>
<li><strong>可学习权重字典</strong>: 存储不同波长对应的嵌入权重</li>
<li><strong>动态嵌入生成</strong>: 根据输入波长动态生成嵌入层参数</li>
<li><strong>波长感知编码</strong>: 将物理波长信息融入特征表示</li>
</ul>
<p><strong>技术细节</strong>:</p>
<div class="code-block highlight is-open show-line-numbers  tw-group tw-my-2">
  <div class="
    
    tw-flex 
    tw-flex-row
    tw-flex-1 
    tw-justify-between 
    tw-w-full tw-bg-bgColor-secondary
    ">      
    <button 
      class="
        code-block-button
        tw-mx-2 
        tw-flex
        tw-flex-row
        tw-flex-1"
      aria-hidden="true">
          <div class="group-[.is-open]:tw-rotate-90 tw-transition-[transform] tw-duration-500 tw-ease-in-out print:!tw-hidden tw-w-min tw-h-min tw-my-1 tw-mx-1"><svg class="icon"
    xmlns="http://www.w3.org/2000/svg" viewBox="0 0 320 512"><!-- Font Awesome Free 5.15.4 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) --><path d="M285.476 272.971L91.132 467.314c-9.373 9.373-24.569 9.373-33.941 0l-22.667-22.667c-9.357-9.357-9.375-24.522-.04-33.901L188.505 256 34.484 101.255c-9.335-9.379-9.317-24.544.04-33.901l22.667-22.667c9.373-9.373 24.569-9.373 33.941 0L285.475 239.03c9.373 9.372 9.373 24.568.001 33.941z"/></svg></div>
          <p class="tw-select-none !tw-my-1">text</p>]]></description></item><item><title>SMARTIES: 面向遥感的频谱感知多传感器自编码器</title><link>https://spacetop.win/2026/05/20260531_170526_smarties_multi_sensor/</link><pubDate>Sun, 31 May 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/05/20260531_170526_smarties_multi_sensor/</guid><description><![CDATA[<h1 id="smarties-面向遥感的频谱感知多传感器自编码器" class="headerLink">
    <a href="#smarties-%e9%9d%a2%e5%90%91%e9%81%a5%e6%84%9f%e7%9a%84%e9%a2%91%e8%b0%b1%e6%84%9f%e7%9f%a5%e5%a4%9a%e4%bc%a0%e6%84%9f%e5%99%a8%e8%87%aa%e7%bc%96%e7%a0%81%e5%99%a8" class="header-mark"></a>SMARTIES: 面向遥感的频谱感知多传感器自编码器</h1><blockquote>
  <p><strong>论文解读</strong> | ICCV 2025 | 2026-05-31</p>
</blockquote><hr>
<h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>SMARTIES: Spectrum-Aware Multi-Sensor Auto-Encoder for Remote Sensing Images</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Gencer Sumbul, Chang Xu, Emanuele Dalsasso, Devis Tuia</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>ICCV 2025</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2506.19585" target="_blank" rel="noopener noreferrer">2506.19585</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/gsumbul/SMARTIES" target="_blank" rel="noopener noreferrer">gsumbul/SMARTIES</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>多传感器融合, 频谱感知空间, 跨传感器Token Mixup, 传感器无关表示, 基础模型</td>
      </tr>
  </tbody>
</table>
<hr>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景传感器碎片化的困境" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af%e4%bc%a0%e6%84%9f%e5%99%a8%e7%a2%8e%e7%89%87%e5%8c%96%e7%9a%84%e5%9b%b0%e5%a2%83" class="header-mark"></a>问题背景：传感器碎片化的困境</h3><p>遥感领域存在一个长期被忽视但极为关键的问题：<strong>传感器碎片化</strong>。</p>
<p>从光学传感器（Sentinel-2、Landsat）到微波雷达（Sentinel-1 SAR），每种传感器都有其独特的：</p>
<ul>
<li><strong>波段配置</strong>：不同数量、不同波长范围的光谱通道</li>
<li><strong>空间分辨率</strong>：从10米到数百米不等</li>
<li><strong>数据模态</strong>：光学反射率、后向散射系数、热辐射等</li>
</ul>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><p>当前的深度学习模型（无论是任务特定的还是基础模型）通常面临以下困境：</p>
<div class="code-block highlight is-open show-line-numbers  tw-group tw-my-2">
  <div class="
    
    tw-flex 
    tw-flex-row
    tw-flex-1 
    tw-justify-between 
    tw-w-full tw-bg-bgColor-secondary
    ">      
    <button 
      class="
        code-block-button
        tw-mx-2 
        tw-flex
        tw-flex-row
        tw-flex-1"
      aria-hidden="true">
          <div class="group-[.is-open]:tw-rotate-90 tw-transition-[transform] tw-duration-500 tw-ease-in-out print:!tw-hidden tw-w-min tw-h-min tw-my-1 tw-mx-1"><svg class="icon"
    xmlns="http://www.w3.org/2000/svg" viewBox="0 0 320 512"><!-- Font Awesome Free 5.15.4 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) --><path d="M285.476 272.971L91.132 467.314c-9.373 9.373-24.569 9.373-33.941 0l-22.667-22.667c-9.357-9.357-9.375-24.522-.04-33.901L188.505 256 34.484 101.255c-9.335-9.379-9.317-24.544.04-33.901l22.667-22.667c9.373-9.373 24.569-9.373 33.941 0L285.475 239.03c9.373 9.372 9.373 24.568.001 33.941z"/></svg></div>
          <p class="tw-select-none !tw-my-1">text</p>]]></description></item></channel></rss>