<rss xmlns:atom="http://www.w3.org/2005/Atom" version="2.0"><channel><title>堂堂一跑堂</title><link>https://spacetop.win/</link><description>珍惜眼前始为真</description><generator>Hugo -- gohugo.io</generator><language>zh-CN</language><managingEditor>kingcopper@whu.edu.cn (WangTong)</managingEditor><webMaster>kingcopper@whu.edu.cn (WangTong)</webMaster><lastBuildDate>Tue, 02 Jun 2026 12:00:00 +0800</lastBuildDate><atom:link href="https://spacetop.win/index.xml" rel="self" type="application/rss+xml"/><item><title>VHM：让遥感视觉语言模型既\"能干\"又\"诚实\"的AAAI 2025力作</title><link>https://spacetop.win/2026/06/20260602_120000_vhm_vision_language_model/</link><pubDate>Tue, 02 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260602_120000_vhm_vision_language_model/</guid><description><![CDATA[<h1 id="vhm让遥感视觉语言模型既能干又诚实的aaai-2025力作" class="headerLink">
    <a href="#vhm%e8%ae%a9%e9%81%a5%e6%84%9f%e8%a7%86%e8%a7%89%e8%af%ad%e8%a8%80%e6%a8%a1%e5%9e%8b%e6%97%a2%e8%83%bd%e5%b9%b2%e5%8f%88%e8%af%9a%e5%ae%9e%e7%9a%84aaai-2025%e5%8a%9b%e4%bd%9c" class="header-mark"></a>VHM：让遥感视觉语言模型既&quot;能干&quot;又&quot;诚实&quot;的AAAI 2025力作</h1><blockquote>
  <p><strong>论文解读</strong> | AAAI 2025 | 2026-06-02</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>VHM: Versatile and Honest Vision Language Model for Remote Sensing Image Analysis</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Chao Pang, Xingxing Weng, Jiang Wu, Jiayu Li, Yi Liu, Jiaxing Sun, Weijia Li, Shuai Wang, Litong Feng, Gui-Song Xia, Conghui He</td>
      </tr>
      <tr>
          <td><strong>机构</strong></td>
          <td>武汉大学、上海人工智能实验室、中山大学、商汤科技</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>AAAI 2025</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2403.20213" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2403.20213</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/opendatalab/VHM" target="_blank" rel="noopener noreferrer">https://github.com/opendatalab/VHM</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>遥感视觉语言模型、多功能性、诚实性、大规模数据集、指令微调</td>
      </tr>
  </tbody>
</table>
<h2 id="-论文定位" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e5%ae%9a%e4%bd%8d" class="header-mark"></a>📊 论文定位</h2><ul>
<li><strong>论文类型</strong>：实验验证型</li>
<li><strong>创新性评分</strong>：⭐⭐⭐⭐ (4分)</li>
<li><strong>判断依据</strong>：本文不仅提出了一个新的遥感视觉语言模型，更重要的是构建了大规模高质量数据集VersaD（140万图像-文本对）和创新性的&quot;诚实性&quot;训练范式。在数据稀缺的遥感VLM领域，这种&quot;数据+方法&quot;的双重贡献具有显著价值。</li>
</ul>
<h2 id="-解决的核心问题第一层表象层" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e7%ac%ac%e4%b8%80%e5%b1%82%e8%a1%a8%e8%b1%a1%e5%b1%82" class="header-mark"></a>🎯 解决的核心问题（第一层：表象层）</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感图像分析正从传统的&quot;看图识物&quot;向&quot;理解对话&quot;转变。想象一下，你对着一张卫星图像问：&ldquo;这个区域有多少栋建筑？它们的用途是什么？周围有哪些配套设施？&quot;——这就是遥感视觉语言模型（RS-VLM）要做的事。</p>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><p>然而，现有的遥感VLM面临两个致命问题：</p>]]></description></item><item><title>AnySat：一个模型搞定所有分辨率、尺度和模态的遥感数据</title><link>https://spacetop.win/2026/06/20260601_220000_anysat_multi_resolution/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_220000_anysat_multi_resolution/</guid><description><![CDATA[<h1 id="anysat一个模型搞定所有分辨率尺度和模态的遥感数据" class="headerLink">
    <a href="#anysat%e4%b8%80%e4%b8%aa%e6%a8%a1%e5%9e%8b%e6%90%9e%e5%ae%9a%e6%89%80%e6%9c%89%e5%88%86%e8%be%a8%e7%8e%87%e5%b0%ba%e5%ba%a6%e5%92%8c%e6%a8%a1%e6%80%81%e7%9a%84%e9%81%a5%e6%84%9f%e6%95%b0%e6%8d%ae" class="header-mark"></a>AnySat：一个模型搞定所有分辨率、尺度和模态的遥感数据</h1><blockquote>
  <p><strong>论文解读</strong> | CVPR 2025 Highlight | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>AnySat: One Earth Observation Model for Many Resolutions, Scales, and Modalities</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Guillaume Astruc, Nicolas Gonthier, Clement Mallet, Loic Landrieu</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>CVPR 2025 (Highlight)</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2412.14123" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2412.14123</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/gastruc/AnySat" target="_blank" rel="noopener noreferrer">https://github.com/gastruc/AnySat</a> (190 stars)</td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>遥感基础模型、多模态、多分辨率、JEPA架构、自监督学习</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感数据天然具有<strong>多源异构</strong>的特点：</p>
<ul>
<li><strong>分辨率差异</strong>：从0.3米的无人机影像到30米的Sentinel-2，跨越100倍</li>
<li><strong>通道数量不同</strong>：RGB（3通道）、多光谱（4-13通道）、SAR（2通道）</li>
<li><strong>覆盖范围多样</strong>：小区域精细观测 vs 大范围宏观监测</li>
<li><strong>传感器类型繁多</strong>：光学、SAR、高光谱等11种以上传感器</li>
</ul>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><ol>
<li><strong>单模型单数据</strong>：每个数据集需要单独训练模型，无法共享知识</li>
<li><strong>分辨率不兼容</strong>：不同分辨率的数据需要不同的网络架构</li>
<li><strong>模态隔离</strong>：光学和SAR数据通常分开处理</li>
<li><strong>扩展性差</strong>：新增传感器需要重新设计模型</li>
</ol>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何用一个统一的模型处理任意分辨率、任意尺度、任意模态组合的遥感数据？</strong></p>
<h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1scale-adaptive-jepa架构" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91scale-adaptive-jepa%e6%9e%b6%e6%9e%84" class="header-mark"></a>核心创新点1：Scale-Adaptive JEPA架构</h3><p><strong>设计动机</strong>：传统MAE需要固定输入尺寸，无法处理不同分辨率的图像。</p>
<p><strong>具体实现</strong>：</p>
<ul>
<li>采用<strong>Joint Embedding Predictive Architecture (JEPA)</strong>，不依赖像素级重建</li>
<li>引入<strong>尺度自适应</strong>机制，根据输入数据的GSD自动调整</li>
<li>使用<strong>分块嵌入</strong>策略，将不同分辨率的图像映射到统一的特征空间</li>
</ul>
<p><strong>关键细节</strong>：</p>]]></description></item><item><title>ConInfer：无需训练，用上下文推理实现遥感开放词汇分割</title><link>https://spacetop.win/2026/06/20260601_034035_coninfer_open_vocabulary/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_034035_coninfer_open_vocabulary/</guid><description><![CDATA[<h1 id="coninfer无需训练用上下文推理实现遥感开放词汇分割" class="headerLink">
    <a href="#coninfer%e6%97%a0%e9%9c%80%e8%ae%ad%e7%bb%83%e7%94%a8%e4%b8%8a%e4%b8%8b%e6%96%87%e6%8e%a8%e7%90%86%e5%ae%9e%e7%8e%b0%e9%81%a5%e6%84%9f%e5%bc%80%e6%94%be%e8%af%8d%e6%b1%87%e5%88%86%e5%89%b2" class="header-mark"></a>ConInfer：无需训练，用上下文推理实现遥感开放词汇分割</h1><blockquote>
  <p><strong>论文解读</strong> | CVPR 2026 Findings | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>ConInfer: Context-Aware Inference for Training-Free Open-Vocabulary Remote Sensing Segmentation</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>详见论文</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>CVPR 2026 Findings</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td>暂未公开</td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/Dog-Yang/ConInfer" target="_blank" rel="noopener noreferrer">https://github.com/Dog-Yang/ConInfer</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>开放词汇分割、遥感图像、免训练、上下文推理、CLIP、DINOv3</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感图像分割是地球观测领域的核心任务，广泛应用于城市规划、环境监测、灾害评估等场景。传统的语义分割方法依赖于<strong>封闭词汇表</strong>——模型只能识别训练时见过的固定类别（如建筑、道路、水体等）。然而，真实世界的遥感应用场景远比固定类别复杂：</p>
<ul>
<li>灾害响应中需要识别&quot;被洪水淹没的农田&quot;</li>
<li>城市规划中需要识别&quot;临时搭建的工棚&quot;</li>
<li>环境监测中需要识别&quot;入侵物种覆盖区域&quot;</li>
</ul>
<p>这些类别在标准训练数据集中几乎不存在，传统模型对此无能为力。</p>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><p>当前的开放词汇分割方法主要面临两个挑战：</p>
<ol>
<li><strong>训练成本高昂</strong>：大多数方法需要在大规模标注数据上进行微调，遥感图像的标注成本极高（需要专业知识，且图像尺度巨大）</li>
<li><strong>领域迁移困难</strong>：CLIP等视觉-语言模型在自然图像上预训练，直接应用于遥感场景时存在严重的<strong>领域鸿沟</strong>——遥感图像的俯视视角、多光谱特性、尺度多样性等都与自然图像截然不同</li>
</ol>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><blockquote>
  <p><strong>能否在不进行任何训练的情况下，直接利用预训练视觉-语言模型实现高质量的遥感开放词汇分割？</strong></p>
</blockquote><h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1上下文感知推理context-aware-inference" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91%e4%b8%8a%e4%b8%8b%e6%96%87%e6%84%9f%e7%9f%a5%e6%8e%a8%e7%90%86context-aware-inference" class="header-mark"></a>核心创新点1：上下文感知推理（Context-Aware Inference）</h3><p><strong>设计动机</strong>：CLIP模型在图像级别进行预训练，其特征缺乏像素级的空间细节。直接将CLIP特征用于分割会导致边界模糊、类别混淆。</p>
<p><strong>具体实现</strong>：ConInfer提出了一种<strong>上下文感知的推理机制</strong>，通过以下步骤增强CLIP的像素级理解能力：</p>
<ol>
<li><strong>多尺度特征提取</strong>：利用DINOv3和SimFeatUp获取高分辨率的细粒度视觉特征</li>
<li><strong>上下文建模</strong>：通过高斯混合模型（GMM）对特征空间进行聚类，自动发现图像中的语义区域</li>
<li><strong>上下文引导分类</strong>：利用发现的上下文信息来校准CLIP的分类结果，消除领域偏差</li>
</ol>
<h3 id="核心创新点2免训练框架training-free-framework" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b92%e5%85%8d%e8%ae%ad%e7%bb%83%e6%a1%86%e6%9e%b6training-free-framework" class="header-mark"></a>核心创新点2：免训练框架（Training-Free Framework）</h3><p><strong>设计动机</strong>：避免昂贵的微调过程，直接利用预训练模型的能力。</p>
<p><strong>具体实现</strong>：</p>
<ul>
<li>使用BLIP生成图像描述，提供文本级别的上下文</li>
<li>利用OpenCLIP的文本编码器计算开放词汇相似度</li>
<li>通过自适应的提示工程（Prompt Engineering）弥合领域差距</li>
</ul>
<h3 id="整体架构" class="headerLink">
    <a href="#%e6%95%b4%e4%bd%93%e6%9e%b6%e6%9e%84" class="header-mark"></a>整体架构</h3><div class="code-block highlight is-closed show-line-numbers  tw-group tw-my-2">
  <div class="
    
    tw-flex 
    tw-flex-row
    tw-flex-1 
    tw-justify-between 
    tw-w-full tw-bg-bgColor-secondary
    ">      
    <button 
      class="
        code-block-button
        tw-mx-2 
        tw-flex
        tw-flex-row
        tw-flex-1"
      aria-hidden="true">
          <div class="group-[.is-open]:tw-rotate-90 tw-transition-[transform] tw-duration-500 tw-ease-in-out print:!tw-hidden tw-w-min tw-h-min tw-my-1 tw-mx-1"><svg class="icon"
    xmlns="http://www.w3.org/2000/svg" viewBox="0 0 320 512"><!-- Font Awesome Free 5.15.4 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) --><path d="M285.476 272.971L91.132 467.314c-9.373 9.373-24.569 9.373-33.941 0l-22.667-22.667c-9.357-9.357-9.375-24.522-.04-33.901L188.505 256 34.484 101.255c-9.335-9.379-9.317-24.544.04-33.901l22.667-22.667c9.373-9.373 24.569-9.373 33.941 0L285.475 239.03c9.373 9.372 9.373 24.568.001 33.941z"/></svg></div>
          <p class="tw-select-none !tw-my-1">text</p>]]></description></item><item><title>Falcon：首个支持14个任务的遥感视觉语言基础模型</title><link>https://spacetop.win/2026/06/20260601_210000_falcon_vlm/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_210000_falcon_vlm/</guid><description><![CDATA[<h1 id="falcon首个支持14个任务的遥感视觉语言基础模型" class="headerLink">
    <a href="#falcon%e9%a6%96%e4%b8%aa%e6%94%af%e6%8c%8114%e4%b8%aa%e4%bb%bb%e5%8a%a1%e7%9a%84%e9%81%a5%e6%84%9f%e8%a7%86%e8%a7%89%e8%af%ad%e8%a8%80%e5%9f%ba%e7%a1%80%e6%a8%a1%e5%9e%8b" class="header-mark"></a>Falcon：首个支持14个任务的遥感视觉语言基础模型</h1><blockquote>
  <p><strong>论文解读</strong> | arXiv 2025 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>Falcon: A Remote Sensing Vision-Language Foundation Model (Technical Report)</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Kelu Yao, Nuo Xu, Rong Yang, Yingying Xu, Zhuoyan Gao, Titinunt Kitrungrotsakul, Yi Ren, Pu Zhang, Jin Wang, Ning Wei, Chao Li</td>
      </tr>
      <tr>
          <td><strong>单位</strong></td>
          <td>ZhejiangLab（之江实验室）</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>arXiv 2025</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2503.11070" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2503.11070</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/TianHuiLab/Falcon" target="_blank" rel="noopener noreferrer">https://github.com/TianHuiLab/Falcon</a> (⭐372)</td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>遥感基础模型、视觉语言模型、多任务学习、指令调优、统一表示</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感图像解译是地球观测的核心任务，涵盖场景分类、目标检测、语义分割、变化检测等多个领域。近年来，大型视觉语言模型（LVLMs）在自然图像领域取得了巨大成功，但在遥感领域却面临严峻挑战：</p>
<ol>
<li><strong>领域鸿沟</strong>：自然图像与遥感图像之间存在显著的领域差异，包括视角、尺度、语义等方面</li>
<li><strong>任务碎片化</strong>：现有遥感VLMs通常只擅长特定任务，缺乏统一的多任务处理能力</li>
<li><strong>数据集不足</strong>：缺乏大规模、高质量、多任务的遥感指令调优数据集</li>
</ol>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><table>
  <thead>
      <tr>
          <th>模型</th>
          <th>参数量</th>
          <th>支持任务数</th>
          <th>主要局限</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td>GeoChat</td>
          <td>7B</td>
          <td>7</td>
          <td>不支持像素级任务（分割、变化检测）</td>
      </tr>
      <tr>
          <td>LHRS-Bot</td>
          <td>7B</td>
          <td>6</td>
          <td>缺乏区域级和像素级理解能力</td>
      </tr>
      <tr>
          <td>EarthGPT</td>
          <td>7B</td>
          <td>9</td>
          <td>参数量大，推理效率低</td>
      </tr>
      <tr>
          <td>RSGPT</td>
          <td>7B</td>
          <td>5</td>
          <td>任务覆盖范围有限</td>
      </tr>
  </tbody>
</table>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何构建一个轻量级、统一的遥感视觉语言模型，同时支持图像级、区域级和像素级的14个任务？</strong></p>]]></description></item><item><title>Galileo：一个模型搞定遥感多模态多尺度，ICML 2025 通用基础模型新突破</title><link>https://spacetop.win/2026/06/20260601_120000_galileo_global_local_features/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_120000_galileo_global_local_features/</guid><description><![CDATA[<h1 id="galileo一个模型搞定遥感多模态多尺度icml-2025-通用基础模型新突破" class="headerLink">
    <a href="#galileo%e4%b8%80%e4%b8%aa%e6%a8%a1%e5%9e%8b%e6%90%9e%e5%ae%9a%e9%81%a5%e6%84%9f%e5%a4%9a%e6%a8%a1%e6%80%81%e5%a4%9a%e5%b0%ba%e5%ba%a6icml-2025-%e9%80%9a%e7%94%a8%e5%9f%ba%e7%a1%80%e6%a8%a1%e5%9e%8b%e6%96%b0%e7%aa%81%e7%a0%b4" class="header-mark"></a>Galileo：一个模型搞定遥感多模态多尺度，ICML 2025 通用基础模型新突破</h1><blockquote>
  <p><strong>论文解读</strong> | ICML 2025 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>Galileo: Learning Global &amp; Local Features of Many Remote Sensing Modalities</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Gabriel Tseng, Anthony Fuller, Marlena Reil, Henry Herzog, Patrick Beukema, Favyen Bastani, James R. Green, Evan Shelhamer, Hannah Kerner, David Rolnick</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>ICML 2025 (Proceedings of the 42nd International Conference on Machine Learning)</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2502.09356" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2502.09356</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/nasaharvest/galileo" target="_blank" rel="noopener noreferrer">https://github.com/nasaharvest/galileo</a> (⭐ 177)</td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>遥感基础模型, 多模态融合, 自监督学习, 多尺度特征, 掩码建模, 通用模型</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感数据具有两大独特挑战，使得直接套用计算机视觉方法变得困难：</p>]]></description></item><item><title>GeoChat：首个遥感领域Grounded视觉语言大模型，让卫星图像对话更智能</title><link>https://spacetop.win/2026/06/20260601_120000_geochat_vlm/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_120000_geochat_vlm/</guid><description><![CDATA[<h1 id="geochat首个遥感领域grounded视觉语言大模型让卫星图像对话更智能" class="headerLink">
    <a href="#geochat%e9%a6%96%e4%b8%aa%e9%81%a5%e6%84%9f%e9%a2%86%e5%9f%9fgrounded%e8%a7%86%e8%a7%89%e8%af%ad%e8%a8%80%e5%a4%a7%e6%a8%a1%e5%9e%8b%e8%ae%a9%e5%8d%ab%e6%98%9f%e5%9b%be%e5%83%8f%e5%af%b9%e8%af%9d%e6%9b%b4%e6%99%ba%e8%83%bd" class="header-mark"></a>GeoChat：首个遥感领域Grounded视觉语言大模型，让卫星图像对话更智能</h1><blockquote>
  <p><strong>论文解读</strong> | CVPR 2024 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>GeoChat: Grounded Large Vision-Language Model for Remote Sensing</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Kartik Kuckreja, Muhammad Sohail Danish, Muzammal Naseer, Abduljabbar Al-Khateri, Shoaib Jameel, Lars Petersson, Salman Khan, Fahad Shahbaz Khan</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>CVPR 2024</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2311.15826" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2311.15826</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/mbzuai-oryx/GeoChat" target="_blank" rel="noopener noreferrer">https://github.com/mbzuai-oryx/GeoChat</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>遥感、视觉语言模型、Grounding、多任务学习、区域级推理</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感图像分析是地球观测的核心任务，传统方法通常针对单一任务（如分类、检测、分割）设计专用模型。随着大型视觉语言模型（VLM）在通用领域的成功，研究者开始探索将其应用于遥感领域。</p>
<p>然而，现有方法面临三个关键挑战：</p>
<ol>
<li><strong>领域适配问题</strong>：通用VLM（如GPT-4V）在遥感场景下表现不佳，容易产生不准确或虚构的信息</li>
<li><strong>缺乏区域级推理</strong>：现有遥感VLM主要支持图像级任务，无法对特定区域进行细粒度分析</li>
<li><strong>多任务统一困难</strong>：不同遥感任务（分类、检测、描述等）通常需要独立模型，缺乏统一框架</li>
</ol>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><table>
  <thead>
      <tr>
          <th>方法</th>
          <th>局限性</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td>通用VLM（GPT-4V等）</td>
          <td>缺乏遥感领域知识，对卫星图像理解能力有限</td>
      </tr>
      <tr>
          <td>遥感专用模型</td>
          <td>仅支持单一任务，无法进行多轮对话</td>
      </tr>
      <tr>
          <td>现有遥感VLM</td>
          <td>仅支持图像级推理，缺乏区域级grounding能力</td>
      </tr>
  </tbody>
</table>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何构建一个既能理解遥感图像全局语义，又能对特定区域进行细粒度推理的统一视觉语言模型？</strong></p>
<h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1多模态遥感指令数据集构建" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91%e5%a4%9a%e6%a8%a1%e6%80%81%e9%81%a5%e6%84%9f%e6%8c%87%e4%bb%a4%e6%95%b0%e6%8d%ae%e9%9b%86%e6%9e%84%e5%bb%ba" class="header-mark"></a>核心创新点1：多模态遥感指令数据集构建</h3><p><strong>设计动机</strong>：遥感领域缺乏大规模多模态指令调优数据集，直接使用通用数据集会导致领域偏移。</p>
<p><strong>具体实现</strong>：</p>
<ul>
<li>整合多个现有遥感数据集（LRBEN、NWPU-RESISC-45、SAMRS等）</li>
<li>利用Vicuna-v1.5和自动化管道生成318k指令数据</li>
<li>设计统一的图像-文本对格式，支持多种任务类型</li>
</ul>
<p><strong>关键细节</strong>：</p>]]></description></item><item><title>GeoGround：统一遥感视觉Grounding的大型视觉语言模型</title><link>https://spacetop.win/2026/06/20260601_210000_geoground_unified_grounding/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_210000_geoground_unified_grounding/</guid><description><![CDATA[<h1 id="geoground统一遥感视觉grounding的大型视觉语言模型" class="headerLink">
    <a href="#geoground%e7%bb%9f%e4%b8%80%e9%81%a5%e6%84%9f%e8%a7%86%e8%a7%89grounding%e7%9a%84%e5%a4%a7%e5%9e%8b%e8%a7%86%e8%a7%89%e8%af%ad%e8%a8%80%e6%a8%a1%e5%9e%8b" class="header-mark"></a>GeoGround：统一遥感视觉Grounding的大型视觉语言模型</h1><blockquote>
  <p><strong>论文解读</strong> | arXiv 2024 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>GeoGround: A Unified Large Vision-Language Model for Remote Sensing Visual Grounding</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Yue Zhou et al.</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>arXiv 2024 (v3: May 2025)</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2411.11904" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2411.11904</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/nicehuster/GeoGround" target="_blank" rel="noopener noreferrer">https://github.com/nicehuster/GeoGround</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>视觉Grounding、遥感大模型、多任务统一、Text-Mask技术、像素级定位</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>在遥感图像解译中，<strong>视觉Grounding</strong>（视觉定位）是一项关键任务：给定一句自然语言描述，模型需要在遥感图像中找到对应的目标物体。这项任务对于人机交互式遥感解译系统至关重要。</p>
<p>然而，遥感领域的视觉Grounding面临一个尴尬的现状：<strong>不同类型的目标需要不同的定位输出形式</strong>。</p>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><ol>
<li><strong>水平边界框（HBB）</strong>：只能定位物体的位置，无法描述其朝向和形状</li>
<li><strong>旋转边界框（OBB）</strong>：能描述物体的朝向，但无法刻画精确轮廓</li>
<li><strong>分割掩码（Mask）</strong>：能精确描述物体形状，但计算复杂度高</li>
</ol>
<p><strong>现有方法的困境</strong>：</p>
<ul>
<li><strong>专用方法</strong>：针对单一任务设计，无法泛化到其他Grounding类型</li>
<li><strong>大型视觉语言模型（VLM）</strong>：具有强大的多任务学习能力，但难以处理像素级密集预测任务（如分割）</li>
</ul>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何在一个统一的框架中同时支持HBB、OBB和Mask三种遥感视觉Grounding任务，并允许用户灵活选择输出类型？</strong></p>
<h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1统一的多任务grounding框架" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91%e7%bb%9f%e4%b8%80%e7%9a%84%e5%a4%9a%e4%bb%bb%e5%8a%a1grounding%e6%a1%86%e6%9e%b6" class="header-mark"></a>核心创新点1：统一的多任务Grounding框架</h3><p><strong>设计动机</strong>：
传统方法为每种Grounding类型设计专门的模型，这不仅增加了系统复杂度，也限制了模型的泛化能力。GeoGround的目标是用一个模型支持所有Grounding类型。</p>
<p><strong>具体实现</strong>：
GeoGround采用标准的VLM架构（视觉编码器 + 语言解码器），但不修改VLM的核心架构。关键创新在于引入<strong>Text-Mask技术</strong>，使VLM能够优雅地支持像素级Grounding输出。</p>
<p><strong>关键细节</strong>：</p>
<div class="code-block highlight is-open show-line-numbers  tw-group tw-my-2">
  <div class="
    
    tw-flex 
    tw-flex-row
    tw-flex-1 
    tw-justify-between 
    tw-w-full tw-bg-bgColor-secondary
    ">      
    <button 
      class="
        code-block-button
        tw-mx-2 
        tw-flex
        tw-flex-row
        tw-flex-1"
      aria-hidden="true">
          <div class="group-[.is-open]:tw-rotate-90 tw-transition-[transform] tw-duration-500 tw-ease-in-out print:!tw-hidden tw-w-min tw-h-min tw-my-1 tw-mx-1"><svg class="icon"
    xmlns="http://www.w3.org/2000/svg" viewBox="0 0 320 512"><!-- Font Awesome Free 5.15.4 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) --><path d="M285.476 272.971L91.132 467.314c-9.373 9.373-24.569 9.373-33.941 0l-22.667-22.667c-9.357-9.357-9.375-24.522-.04-33.901L188.505 256 34.484 101.255c-9.335-9.379-9.317-24.544.04-33.901l22.667-22.667c9.373-9.373 24.569-9.373 33.941 0L285.475 239.03c9.373 9.372 9.373 24.568.001 33.941z"/></svg></div>
          <p class="tw-select-none !tw-my-1">text</p>]]></description></item><item><title>LSKNet：遥感场景下的大型选择性核网络，动态感受野助力小目标检测</title><link>https://spacetop.win/2026/06/20260601_223000_lsknet_selective_kernel/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_223000_lsknet_selective_kernel/</guid><description><![CDATA[<h1 id="lsknet遥感场景下的大型选择性核网络动态感受野助力小目标检测" class="headerLink">
    <a href="#lsknet%e9%81%a5%e6%84%9f%e5%9c%ba%e6%99%af%e4%b8%8b%e7%9a%84%e5%a4%a7%e5%9e%8b%e9%80%89%e6%8b%a9%e6%80%a7%e6%a0%b8%e7%bd%91%e7%bb%9c%e5%8a%a8%e6%80%81%e6%84%9f%e5%8f%97%e9%87%8e%e5%8a%a9%e5%8a%9b%e5%b0%8f%e7%9b%ae%e6%a0%87%e6%a3%80%e6%b5%8b" class="header-mark"></a>LSKNet：遥感场景下的大型选择性核网络，动态感受野助力小目标检测</h1><blockquote>
  <p><strong>论文解读</strong> | ICCV 2023 / IJCV 2024 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>LSKNet: A Foundation Lightweight Backbone for Remote Sensing</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Yuxuan Li, Xiang Li, Yimian Dai, Qibin Hou, Li Liu, Yongxiang Liu, Ming-Ming Cheng, Jian Yang</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>ICCV 2023 (会议版本) / IJCV 2024 (期刊扩展版)</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2303.14239" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2303.14239</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/zcablii/large-selective-kernel-network" target="_blank" rel="noopener noreferrer">https://github.com/zcablii/large-selective-kernel-network</a> (⭐678)</td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>遥感目标检测、选择性核、动态感受野、轻量级骨干网络</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感图像具有独特的特点：目标尺度变化大、小目标密集分布、背景复杂多样。传统的卷积神经网络使用固定大小的卷积核，其感受野是固定的，这在处理遥感图像时面临两个关键挑战：</p>
<ol>
<li>
<p><strong>小目标检测困难</strong>：遥感图像中的目标（如车辆、船只）往往只有几个像素大小，固定感受野可能无法捕获足够的上下文信息来准确识别这些小目标。</p>
</li>
<li>
<p><strong>不同目标需要不同感受野</strong>：建筑物需要大范围上下文来理解其结构，而车辆则需要局部细节信息。固定感受野无法适应这种多样性。</p>
</li>
</ol>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><ul>
<li><strong>CNN方法</strong>：受限于固定感受野，难以捕获长距离依赖</li>
<li><strong>Transformer方法</strong>：虽然具有全局建模能力，但计算复杂度高，不适合实时应用</li>
<li><strong>多尺度方法</strong>：如FPN，通过多尺度特征融合来缓解问题，但仍然是固定感受野</li>
</ul>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何设计一个轻量级的骨干网络，能够根据遥感图像中不同目标的特点，动态调整其空间感受野？</strong></p>
<h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1大型选择性核机制-large-selective-kernel" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91%e5%a4%a7%e5%9e%8b%e9%80%89%e6%8b%a9%e6%80%a7%e6%a0%b8%e6%9c%ba%e5%88%b6-large-selective-kernel" class="header-mark"></a>核心创新点1：大型选择性核机制 (Large Selective Kernel)</h3><p><strong>设计动机</strong>：
遥感图像中的目标具有高度多样性。例如，一条河流可能跨越数千像素，而一辆汽车可能只有几个像素。传统的固定大小卷积核无法适应这种变化。LSKNet的核心思想是：<strong>让网络能够根据输入内容，动态选择最合适的感受野大小</strong>。</p>]]></description></item><item><title>M-CD：基于Mamba的孪生网络实现高效遥感变化检测</title><link>https://spacetop.win/2026/06/20260601_063249_mamba_change_detection/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_063249_mamba_change_detection/</guid><description><![CDATA[<h1 id="m-cd基于mamba的孪生网络实现高效遥感变化检测" class="headerLink">
    <a href="#m-cd%e5%9f%ba%e4%ba%8emamba%e7%9a%84%e5%ad%aa%e7%94%9f%e7%bd%91%e7%bb%9c%e5%ae%9e%e7%8e%b0%e9%ab%98%e6%95%88%e9%81%a5%e6%84%9f%e5%8f%98%e5%8c%96%e6%a3%80%e6%b5%8b" class="header-mark"></a>M-CD：基于Mamba的孪生网络实现高效遥感变化检测</h1><blockquote>
  <p><strong>论文解读</strong> | arXiv 2024 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>A Mamba-based Siamese Network for Remote Sensing Change Detection</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Jay N. Paranjape, Celso de Melo, Vishal M. Patel</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>arXiv 2024 (arXiv:2407.06839)</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td><a href="https://arxiv.org/abs/2407.06839" target="_blank" rel="noopener noreferrer">https://arxiv.org/abs/2407.06839</a></td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/JayParanjape/M-CD" target="_blank" rel="noopener noreferrer">https://github.com/JayParanjape/M-CD</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>遥感变化检测, Mamba架构, 孪生网络, 状态空间模型, 高效特征提取</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感变化检测是分析同一区域不同时相图像差异的关键技术，广泛应用于环境监测、城市规划、灾害评估等领域。传统方法依赖人工特征提取，深度学习方法（CNN、Transformer）虽取得显著进展，但存在固有局限：</p>
<ol>
<li><strong>CNN的局限性</strong>：感受野有限，难以捕捉长距离依赖关系</li>
<li><strong>Transformer的瓶颈</strong>：自注意力机制计算复杂度为O(n²)，处理高分辨率遥感图像时计算开销巨大</li>
<li><strong>实时性需求</strong>：实际应用中需要快速、准确的变化检测能力</li>
</ol>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><ul>
<li><strong>基于CNN的方法</strong>（如SNUNet-CD）：局部特征提取能力强，但全局上下文建模不足</li>
<li><strong>基于Transformer的方法</strong>（如ChangeFormer）：全局建模能力强，但计算复杂度高，推理速度慢</li>
<li><strong>混合方法</strong>：结合CNN和Transformer，但架构复杂，难以平衡效率与性能</li>
</ul>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><p><strong>如何设计一个既能保持全局建模能力，又具有线性计算复杂度的高效变化检测架构？</strong></p>
<h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1mamba架构引入遥感变化检测" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91mamba%e6%9e%b6%e6%9e%84%e5%bc%95%e5%85%a5%e9%81%a5%e6%84%9f%e5%8f%98%e5%8c%96%e6%a3%80%e6%b5%8b" class="header-mark"></a>核心创新点1：Mamba架构引入遥感变化检测</h3><p><strong>设计动机</strong>：
Mamba是状态空间模型（SSM）的最新进展，具有以下优势：</p>
<ul>
<li>线性时间复杂度O(n)，远优于Transformer的O(n²)</li>
<li>通过选择性机制实现动态特征筛选</li>
<li>硬件感知设计，实际运行效率高</li>
</ul>
<p><strong>具体实现</strong>：</p>
<div class="code-block highlight is-open show-line-numbers  tw-group tw-my-2">
  <div class="
    
    tw-flex 
    tw-flex-row
    tw-flex-1 
    tw-justify-between 
    tw-w-full tw-bg-bgColor-secondary
    ">      
    <button 
      class="
        code-block-button
        tw-mx-2 
        tw-flex
        tw-flex-row
        tw-flex-1"
      aria-hidden="true">
          <div class="group-[.is-open]:tw-rotate-90 tw-transition-[transform] tw-duration-500 tw-ease-in-out print:!tw-hidden tw-w-min tw-h-min tw-my-1 tw-mx-1"><svg class="icon"
    xmlns="http://www.w3.org/2000/svg" viewBox="0 0 320 512"><!-- Font Awesome Free 5.15.4 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) --><path d="M285.476 272.971L91.132 467.314c-9.373 9.373-24.569 9.373-33.941 0l-22.667-22.667c-9.357-9.357-9.375-24.522-.04-33.901L188.505 256 34.484 101.255c-9.335-9.379-9.317-24.544.04-33.901l22.667-22.667c9.373-9.373 24.569-9.373 33.941 0L285.475 239.03c9.373 9.372 9.373 24.568.001 33.941z"/></svg></div>
          <p class="tw-select-none !tw-my-1">text</p>]]></description></item><item><title>MA3E：让遥感预训练\"看见\"角度——基于掩码角度感知自编码器的旋转不变表示学习</title><link>https://spacetop.win/2026/06/20260601_223000_ma3e_angle_aware/</link><pubDate>Mon, 01 Jun 2026 12:00:00 +0800</pubDate><author><name>WangTong</name></author><guid>https://spacetop.win/2026/06/20260601_223000_ma3e_angle_aware/</guid><description><![CDATA[<h1 id="ma3e让遥感预训练看见角度基于掩码角度感知自编码器的旋转不变表示学习" class="headerLink">
    <a href="#ma3e%e8%ae%a9%e9%81%a5%e6%84%9f%e9%a2%84%e8%ae%ad%e7%bb%83%e7%9c%8b%e8%a7%81%e8%a7%92%e5%ba%a6%e5%9f%ba%e4%ba%8e%e6%8e%a9%e7%a0%81%e8%a7%92%e5%ba%a6%e6%84%9f%e7%9f%a5%e8%87%aa%e7%bc%96%e7%a0%81%e5%99%a8%e7%9a%84%e6%97%8b%e8%bd%ac%e4%b8%8d%e5%8f%98%e8%a1%a8%e7%a4%ba%e5%ad%a6%e4%b9%a0" class="header-mark"></a>MA3E：让遥感预训练&quot;看见&quot;角度——基于掩码角度感知自编码器的旋转不变表示学习</h1><blockquote>
  <p><strong>论文解读</strong> | ECCV 2024 | 2026-06-01</p>
</blockquote><h2 id="-论文信息" class="headerLink">
    <a href="#-%e8%ae%ba%e6%96%87%e4%bf%a1%e6%81%af" class="header-mark"></a>📄 论文信息</h2><table>
  <thead>
      <tr>
          <th>项目</th>
          <th>内容</th>
      </tr>
  </thead>
  <tbody>
      <tr>
          <td><strong>标题</strong></td>
          <td>Masked Angle-Aware Autoencoder for Remote Sensing Images</td>
      </tr>
      <tr>
          <td><strong>作者</strong></td>
          <td>Benesaki Takam, et al.</td>
      </tr>
      <tr>
          <td><strong>会议</strong></td>
          <td>ECCV 2024</td>
      </tr>
      <tr>
          <td><strong>arXiv</strong></td>
          <td>-</td>
      </tr>
      <tr>
          <td><strong>GitHub</strong></td>
          <td><a href="https://github.com/benesakitam/MA3E" target="_blank" rel="noopener noreferrer">https://github.com/benesakitam/MA3E</a></td>
      </tr>
      <tr>
          <td><strong>关键词</strong></td>
          <td>自监督预训练、掩码自编码器、角度感知、旋转不变性、遥感图像</td>
      </tr>
  </tbody>
</table>
<h2 id="-解决的核心问题" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e7%9a%84%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98" class="header-mark"></a>🎯 解决的核心问题</h2><h3 id="问题背景" class="headerLink">
    <a href="#%e9%97%ae%e9%a2%98%e8%83%8c%e6%99%af" class="header-mark"></a>问题背景</h3><p>遥感图像与自然图像存在本质差异：<strong>同一地物在不同拍摄角度下会呈现完全不同的视觉外观</strong>。例如，一栋建筑物从东南方向和西北方向拍摄，其外观可能截然不同。这种<strong>旋转变化</strong>是遥感图像的固有特性。</p>
<h3 id="现有方法的局限" class="headerLink">
    <a href="#%e7%8e%b0%e6%9c%89%e6%96%b9%e6%b3%95%e7%9a%84%e5%b1%80%e9%99%90" class="header-mark"></a>现有方法的局限</h3><p>现有的自监督预训练方法（如MAE、SatMAE等）主要借鉴自然图像的预训练策略，<strong>忽略了遥感图像中普遍存在的角度变化问题</strong>：</p>
<ol>
<li><strong>MAE系列</strong>：直接重建被掩码的图像块，未考虑旋转带来的外观变化</li>
<li><strong>对比学习方法</strong>：依赖数据增强，但未显式建模角度信息</li>
<li><strong>现有遥感预训练</strong>：大多直接迁移自然图像方法，未针对遥感特性设计</li>
</ol>
<h3 id="核心问题提炼" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e9%97%ae%e9%a2%98%e6%8f%90%e7%82%bc" class="header-mark"></a>核心问题提炼</h3><blockquote>
  <p><strong>如何在自监督预训练中显式地感知和学习遥感图像中的角度信息，从而获得旋转不变的特征表示？</strong></p>
</blockquote><h2 id="-解决方案" class="headerLink">
    <a href="#-%e8%a7%a3%e5%86%b3%e6%96%b9%e6%a1%88" class="header-mark"></a>💡 解决方案</h2><h3 id="核心创新点1scaling-center-crop缩放中心裁剪" class="headerLink">
    <a href="#%e6%a0%b8%e5%bf%83%e5%88%9b%e6%96%b0%e7%82%b91scaling-center-crop%e7%bc%a9%e6%94%be%e4%b8%ad%e5%bf%83%e8%a3%81%e5%89%aa" class="header-mark"></a>核心创新点1：Scaling Center Crop（缩放中心裁剪）</h3><p><strong>设计动机</strong>：遥感图像中的地物可能以任意角度出现，需要模型能够感知并适应这种角度变化。</p>
<p><strong>具体实现</strong>：</p>
<div class="code-block highlight is-closed show-line-numbers  tw-group tw-my-2">
  <div class="
    
    tw-flex 
    tw-flex-row
    tw-flex-1 
    tw-justify-between 
    tw-w-full tw-bg-bgColor-secondary
    ">      
    <button 
      class="
        code-block-button
        tw-mx-2 
        tw-flex
        tw-flex-row
        tw-flex-1"
      aria-hidden="true">
          <div class="group-[.is-open]:tw-rotate-90 tw-transition-[transform] tw-duration-500 tw-ease-in-out print:!tw-hidden tw-w-min tw-h-min tw-my-1 tw-mx-1"><svg class="icon"
    xmlns="http://www.w3.org/2000/svg" viewBox="0 0 320 512"><!-- Font Awesome Free 5.15.4 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) --><path d="M285.476 272.971L91.132 467.314c-9.373 9.373-24.569 9.373-33.941 0l-22.667-22.667c-9.357-9.357-9.375-24.522-.04-33.901L188.505 256 34.484 101.255c-9.335-9.379-9.317-24.544.04-33.901l22.667-22.667c9.373-9.373 24.569-9.373 33.941 0L285.475 239.03c9.373 9.372 9.373 24.568.001 33.941z"/></svg></div>
          <p class="tw-select-none !tw-my-1">text</p>]]></description></item></channel></rss>