Spring Integration RSS Feed - 403 Ошибка

Question

Я пытаюсь использовать Spring Integration для опроса RSS-каналов, и я использую URL-адрес URL-адреса SO в качестве примера. Однако при запуске приложения я получаю следующее сообщение об ошибке:

Disconnected from the target VM, address: '127.0.0.1:58603', transport: 'socket' 
2016-03-04 19:34:36.252 ERROR 2345 --- [ask-scheduler-4] o.s.integration.handler.LoggingHandler : org.springframework.messaging.MessagingException: Failed to retrieve feed at url 'http://stackoverflow.com/feeds/user/813852'; nested exception is com.rometools.fetcher.FetcherException: Authentication required for that resource. HTTP Response code was:403 
    at org.springframework.integration.feed.inbound.FeedEntryMessageSource.getFeed(FeedEntryMessageSource.java:216) 
    at org.springframework.integration.feed.inbound.FeedEntryMessageSource.populateEntryList(FeedEntryMessageSource.java:182) 
    at org.springframework.integration.feed.inbound.FeedEntryMessageSource.doReceive(FeedEntryMessageSource.java:157) 
    at org.springframework.integration.feed.inbound.FeedEntryMessageSource.receive(FeedEntryMessageSource.java:122) 
    at org.springframework.integration.endpoint.SourcePollingChannelAdapter.receiveMessage(SourcePollingChannelAdapter.java:175) 
    at org.springframework.integration.endpoint.AbstractPollingEndpoint.doPoll(AbstractPollingEndpoint.java:224) 
    at org.springframework.integration.endpoint.AbstractPollingEndpoint.access$000(AbstractPollingEndpoint.java:57) 
    at org.springframework.integration.endpoint.AbstractPollingEndpoint$1.call(AbstractPollingEndpoint.java:176) 
    at org.springframework.integration.endpoint.AbstractPollingEndpoint$1.call(AbstractPollingEndpoint.java:173) 
    at org.springframework.integration.endpoint.AbstractPollingEndpoint$Poller$1.run(AbstractPollingEndpoint.java:330) 
    at org.springframework.integration.util.ErrorHandlingTaskExecutor$1.run(ErrorHandlingTaskExecutor.java:55) 
    at org.springframework.core.task.SyncTaskExecutor.execute(SyncTaskExecutor.java:50) 
    at org.springframework.integration.util.ErrorHandlingTaskExecutor.execute(ErrorHandlingTaskExecutor.java:51) 
    at org.springframework.integration.endpoint.AbstractPollingEndpoint$Poller.run(AbstractPollingEndpoint.java:324) 
    at org.springframework.scheduling.support.DelegatingErrorHandlingRunnable.run(DelegatingErrorHandlingRunnable.java:54) 
    at org.springframework.scheduling.concurrent.ReschedulingRunnable.run(ReschedulingRunnable.java:81) 
    at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511) 
    at java.util.concurrent.FutureTask.run(FutureTask.java:266) 
    at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.access$201(ScheduledThreadPoolExecutor.java:180) 
    at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:293) 
    at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142) 
    at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617) 
    at java.lang.Thread.run(Thread.java:745) 
Caused by: com.rometools.fetcher.FetcherException: Authentication required for that resource. HTTP Response code was:403 
    at com.rometools.fetcher.impl.AbstractFeedFetcher.throwAuthenticationError(AbstractFeedFetcher.java:183) 
    at com.rometools.fetcher.impl.AbstractFeedFetcher.handleErrorCodes(AbstractFeedFetcher.java:170) 
    at com.rometools.fetcher.impl.HttpURLFeedFetcher.retrieveAndCacheFeed(HttpURLFeedFetcher.java:186) 
    at com.rometools.fetcher.impl.HttpURLFeedFetcher.retrieveFeed(HttpURLFeedFetcher.java:140) 
    at com.rometools.fetcher.impl.HttpURLFeedFetcher.retrieveFeed(HttpURLFeedFetcher.java:99) 
    at org.springframework.integration.feed.inbound.FeedEntryMessageSource.getFeed(FeedEntryMessageSource.java:204) 
    ... 22 more 

URL-адресов загружает штраф через браузер (даже в режиме инкогнито, поэтому сообщение об ошибке, вероятно, вводит в заблуждение). Я загрузил RSS-ридер, и фид работал нормально.

Это, как я настроил подачу:

<int-feed:inbound-channel-adapter id="stackOverflow" 
             channel="log" 
             url="http://stackoverflow.com/feeds/user/813852"> 
     <int:poller fixed-rate="10000" max-messages-per-poll="100" /> 
</int-feed:inbound-channel-adapter> 
<int:logging-channel-adapter id="log" level="DEBUG" /> 

Я также попробовал другой RSS-канал URL, и она работала. Любые идеи, что может быть неправильным?

Answer 1

Я просто побежал Wireshark след, и это выглядит как StackOverflow не нравится Java агент пользователя:

User-Agent: Java/1.8.0_66\r\n 

... 

<p>The owner of this website (stackoverflow.com) has banned your access based 
on your browser's signature (27e797571e1923de-ua21).</p>\n 

Установка агента пользователя пользовательского огибает это ограничение:

public class CustomFeedFetcher extends HttpURLFeedFetcher { 
    @Override 
    public void setUserAgent(String s) { 
     super.setUserAgent("AgentName"); 
    } 
}